Quyen — наша первая флагманская серия LLM, основанная на семействе Qwen1.5. Мы представили 6 различных версий: — Quyen-SE (0,5B) — Quyen-Mini (1,8B) — Quyen (4B) — Quyen-Plus (7B) — Quyen-Pro (14B) — Quyen-Pro-Max (72B). Все модели были обучены с помощью SFT и DPO с использованием следующего набора данных: — OpenHermes-2.5 от Teknium — Capyabara от LDJ — argilla/distilabel-capybara-dpo-7k-binarized от argilla — orcadpopairs от Intel — и Private Data от Ontocord и BEE-spoke-data — Мы невероятно благодарны Tensoic и Ontocord за их щедрую поддержку при вычислениях и подготовке данных. — Особая благодарность команде Qwen за то, что предоставили нам ранний доступ к моделям для этих замечательных настроек.
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: vilm
Теги: qwen2, conversational, en, text-generation-inference, endpoints_compatible
Лайков: 11 | Загрузок: 81
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
