pollux-judge-7b-r — это 7-миллиардная параметрическая генеративная языковая модель, специально разработанная для оценки качества ответов других языковых моделей на русском языке. Модель оценивает качество ответов с учетом входной инструкции, конкретных критериев и рубрик, обеспечивая автоматизированную оценку эффективности LLM для русскоязычных задач. pollux-judge-7b-r является неотъемлемым компонентом проекта POLLUX, комплексной инициативы, посвященной оценке генеративных возможностей Large Language Models (LLM). В основе этого проекта лежит набор данных POLLUX, который вводит систематические таксономии как для генеративных задач, так и для критериев оценки, обеспечивая количественную и качественную оценку ответов от магистров высшего уровня. Построенная на архитектуре t-tech/T-lite-it-1.0, pollux-judge-7b-r представляет собой основанную на декодере модель с 7 миллиардами параметров, обученную с помощью комбинации целей Mean Square Error (для регрессионной головки) и Cross-Entropy (для головки языкового моделирования). Модель предназначена для прогнозирования как числовых оценок, так и подробных текстовых обоснований с отдельными заголовками на основе исходной инструкции, ответа LLM, конкретных критериев оценки, рубрик оценки и справочных…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: ai-forever
Теги: qwen2, conversational, custom_code, ru, text-generation-inference, endpoints_compatible
Лайков: 4 | Загрузок: 39
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
