Root Judge — это мощный LLM среднего размера, который обеспечивает надежную и настраиваемую оценку системы LLM. Корневой судья прошел обучение на Llama-3.3-70B-Instruct на высококачественном наборе наборов данных, аннотированных человеком, для парных суждений о выборе предпочтений и многоходовых инструкций с последующим цитированием источника. Веса моделей доступны бесплатно в FP8, что облегчает проведение экономически эффективных исследований, а также коммерческое использование. Производительность Root Judge превосходит модель Llama-3.3-Instruct и открытые модели аналогичного размера по соблюдению инструкций и достигает SOTA при обнаружении галлюцинаций по сравнению с ведущими закрытыми моделями за небольшую часть стоимости. Корневой судья в первую очередь предназначен для использования в качестве судьи LLM в различных контекстах, таких как: — Обнаружение контекстно-зависимых галлюцинаций, например для настроек извлечения дополненной генерации (RAG) в объяснимой форме, обеспечивающей обоснование оценки — Суждения о парных предпочтениях благодаря сильным возможностям следования инструкциям по оценке — Служение в качестве пользовательской метрики оценки на основе конкретных критериев оценки для конкретных вариантов использования — Помощь в поиске во время вывода или задачах синтетических данных, которые требуют решений Best of N — Настройки, ориентированные на конфиденциальность…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: root-signals
Теги: gguf, llama, llm-as-judge, evaluation, conversational, en, endpoints_compatible, compressed-tensors
Лайков: 18 | Загрузок: 200
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
