Skywork-Critic-Llama3.1-70B и Skywork-Critic-Llama3.1-8B, разработанные командой SkyworkAI Alignment Team, представляют собой продвинутые модели судей, которые превосходно справляются с парной оценкой предпочтений. Эти модели сравнивают и оценивают входные пары, предлагая детальные суждения об их относительном качестве или пригодности. Используя свое глубокое понимание языка и контекста, модели Skywork-Critic предоставляют ценную информацию для различных приложений, включая улучшение данных, оценку и моделирование вознаграждения. Skywork-Critic-Llama3.1-70B и Skywork-Critic-Llama3.1-8B созданы на основе Meta Llama-3.1-70B-Instruct и Llama-3.1-8B-Instruct соответственно. Эти модели подверглись тонкой настройке с использованием разнообразного набора высококачественных наборов данных, включая: — Очищенные данные из открытых источников: мы используем высококачественное подмножество серий HelpSteer2, OffsetBias, WildGuard (состязательный) и Magpie DPO (Ultra, Pro (Llama-3.1), Pro, Air). Для получения более подробной информации обратитесь к нашему набору данных Skywork-Reward-Preference-80K-v0.1. Кроме того, мы интегрируем в наш процесс обучения несколько высококачественных наборов критических данных с открытым исходным кодом, таких как Open-Critic-GPT. — Собственные данные аннотаций, сделанные человеком: сюда входит точечная оценка по многим измерениям для…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Skywork
Теги: llama, conversational
Лайков: 13 | Загрузок: 1,121
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
