Arcee-VyLinh — это модель следования инструкциям с 3B параметрами, специально оптимизированная для понимания и генерации вьетнамского языка. Созданный на основе инновационного процесса обучения, сочетающего в себе сложные вопросы и итеративную оптимизацию прямых предпочтений (DPO), он обеспечивает выдающуюся производительность, несмотря на свои компактные размеры. — Архитектура: на основе Qwen2.5-3B — Параметры: 3 миллиарда — Длина контекста: 32 тыс. токенов — Данные обучения: пользовательский набор данных + ORPO-Mix-40K (вьетнамский) — Метод обучения: многоэтапный процесс, включая EvolKit, собственное слияние и итеративный DPO — Формат ввода: поддерживает английский и вьетнамский язык, оптимизирован для вьетнамского языка — Чат на вьетнамском языке и последующие инструкции — Генерация и завершение текста — Ответы на вопросы — Общие задачи понимания языка — Создание и обобщение контента — Исключительная производительность при выполнении сложных задач на вьетнамском языке — Эффективная архитектура параметров 3B — Надежные возможности следования инструкциям — Конкурентоспособность с более крупными моделями (параметры 4B-8B) Протестировано на вьетнамском подмножестве m-ArenaHard (CohereForAI) под руководством Клода 3.5 Сонета в качестве судьи: — Могут все еще галлюцинировать по поводу содержания, специфичного для культуры. — Начальный…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: arcee-ai
Теги: qwen2, mergekit, merge, conversational, vi, text-generation-inference, endpoints_compatible
Лайков: 42 | Загрузок: 241
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
