Взяв то, что хорошо работало с линией Crimson_Dawn, Effervescence-27B переносит ту же двухфазную методологию на гораздо большую базу, Qwen3.5-27B. На этот раз этап INSTRUCT получил значительно расширенный набор данных, и все это обучается как 8-битный LoRA, чтобы соответствовать 27B на 2x A6000. Как и линия v0.2, он обучен ChatML. Effervescence обучается на ChatML, структура подсказок выглядит примерно так: Effervescence обучается на ChatML, пожалуйста, используйте этот шаблон контекста и инструкции. Violet_Twilight-Nitral-Special QWQ-Rec Variant Chimera: Кредит Numbra! Обучение проводилось в два этапа на 2x графических процессорах NVIDIA A6000 с использованием RSLoRA. Сначала базовая модель была обучена на данных завершения RP и LoRA применялась к Base; затем модифицированная база была обучена на данных инструкций как 8-битный LoRA, и это применялось, что привело к тому, что вы видите здесь.
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Epiculous
Теги: qwen3_5, conversational, en, fr, de, es, it, pt
Лайков: 3 | Загрузок: 242
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
