— Домашняя страница: https://github.com/kaistAI/Prometheus — Репозиторий: https://github.com/kaistAI/Prometheus — Документ: https://arxiv.org/abs/2310.08491 — Контактное лицо: seungone@kaist.ac.kr Prometheus — это альтернатива оценке GPT-4 при выполнении детальной оценки базового LLM и модели вознаграждения за Обучение с подкреплением на основе обратной связи с человеком (RLHF). !plot Prometheus — это языковая модель, использующая Llama-2-Chat в качестве базовой модели и доработанная с учетом 100 тысяч отзывов в коллекции Feedback. Поскольку он был настроен на большое количество отзывов, он специализируется на оценке длинных ответов, превосходя GPT-3.5-Turbo, Llama-2-Chat 70B и наравне с GPT-4 в различных тестах. Самое главное, что это стало возможным, поскольку мы добавили два справочных материала (справочный ответ и индивидуальную рубрику оценки). Prometheus — это дешевая и мощная альтернатива оценке GPT-4, которую можно использовать для оценки LLM по индивидуальным критериям (например, читабельность для детей, культурная чувствительность, креативность). Кроме того, его можно использовать в качестве модели вознаграждения для обучения с подкреплением на основе обратной связи с людьми (RLHF). — Тип модели: Языковая модель — Язык(и) (NLP): английский — Лицензия: Apache 2.0 — Связанные…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: prometheus-eval
Теги: llama, text2text-generation, en, text-generation-inference, endpoints_compatible
Лайков: 143 | Загрузок: 140
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
