Лучшая версия Chocolatine-3B для французского языка. Модель поддерживает длину контекста 128 КБ. DPO выполнил точную настройку microsoft/Phi-3.5-mini-instruct (параметры 3.82B) с использованием набора данных rlhf jpacifico/french-orca-dpo-pairs-revised. Обучение на французском языке также улучшает англоязычную модель, превосходя ее базовую модель. Chocolatine-3B-Instruct-DPO-v1.2 превосходит Phi-3-medium-4k-instruct (14B) и его базовую модель Phi-3.5-mini-instruct на MT-Bench-French, используемую с multilingual-mt-bench и GPT-4-Turbo в качестве судьи LLM. 4-битная квантованная версия доступна здесь: jpacifico/Chocolatine-3B-Instruct-DPO-v1.2-Q4K_M-GGUF Модель Chocolatine — это быстрая демонстрация того, что базовую модель можно легко настроить для достижения превосходной производительности. У него нет механизма модерации. – Разработчик: Джонатан Пасифико, 2024 г. – Тип модели: LLM – Язык(и) (NLP): французский, английский – Лицензия: MIT
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: jpacifico
Теги: phi3, french, chocolatine, conversational, custom_code, fr, en, text-generation-inference
Лайков: 10 | Загрузок: 17
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
