This model is a fine-tuned version of Qwen/Qwen3-Next-80B-A3B-Instruct. It has been trained using TRL. This model was trained with DPO, a method introduced in Direct Preference Optimization: Your Language Model is Secretly a Reward Model. — TRL: 0.25.0 — Transformers: 4.57.1 — Pytorch: 2.8.0+cu128 — Datasets: 4.4.1 — Tokenizers: 0.22.1
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: Shifusen
Теги: qwen3_next, generated_from_trainer, dpo, trl, conversational, endpoints_compatible
Лайков: 3 | Загрузок: 38
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.