Zhi-Create-DSR1-14B — это доработанная модель на основе DeepSeek-R1-Distill-Qwen-14B, специально оптимизированная для расширенных возможностей творческого письма. Несколько контрольных оценок указывают на улучшение производительности модели в творческом письме. В тесте LLM Creative Story-Writing Benchmark модель получила оценку 8,33 по сравнению с 7,8 у базовой модели. В системе оценки WriteBench он набрал 8,46, что является улучшением по сравнению с 7,93 у DeepSeek-R1-Distill-Qwen-14B. Модель также была оценена с использованием GPT-4o в наборе данных AlpacaEval, в результате чего процент побед составил 82,6% по сравнению с базовой моделью. На рисунке ниже показано сравнение производительности в различных областях в WriteBench: Рисунок 1. Производительность в WriteBench Zhi-Create-DSR1-14B и DeepSeek-R1-Distill-Qwen-14B в 6 доменах и 3 требованиях к записи, оцененная с помощью модели критики WriteBench (шкала: 1–10). Шесть областей включают: (D1) академическая и инженерная деятельность, (D2) финансы и бизнес, (D3) политика и право, (D4) литература и искусство, (D5) образование и (D6) реклама и маркетинг. Оцениваются три требования к написанию: (R1) Стиль, (R2) Формат и (R3) Длина. Здесь «C» обозначает баллы по конкретной категории. …
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Zhihu-ai
Теги: qwen2, conversational, zh, en, text-generation-inference, endpoints_compatible
Лайков: 17 | Загрузок: 94
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
