Nous Hermes 2 — SOLAR 10.7B — это флагманская модель Nous Research на базе базовой модели SOLAR 10.7B. Nous Hermes 2 SOLAR 10.7B был обучен на 1 000 000 записей, в основном данных, сгенерированных GPT-4, а также других высококачественных данных из открытых наборов данных в сфере искусственного интеллекта. 1. Примеры выходных данных 2. Результаты тестов — GPT4All — AGIEval — BigBench — TruthfulQA 3. Формат подсказки 4. Квантовые модели Nous-Hermes 2 на SOLAR 10.7B представляет собой значительное улучшение по всем направлениям в тестах, приведенных ниже, по сравнению с базовой моделью SOLAR 10.7B и близко приближается к нашей модели Yi-34B! Сравнение среднего балла между OpenHermes-1 Llama-2 13B и OpenHermes-2 Mistral 7B с OpenHermes-2.5 на Mistral-7B: Nous Hermes 2 использует ChatML в качестве формата подсказок, открывая гораздо более структурированную систему для вовлечения LLM в многоходовой диалог в чате. Системные подсказки обеспечивают управляемость и новые интересные способы взаимодействия с LLM, определяя правила, роли и стилистический выбор модели. Это более сложный формат, чем альпака или шарегпт, где были добавлены специальные жетоны для обозначения начала и конца любого хода, а также роли для ходов. Этот формат обеспечивает совместимость конечных точек OpenAI и…
Модальности:
Генерация текста
Области применения:
Следование инструкциям Диалог / чат
Задача: Генерация текста
Автор: NousResearch
Теги: llama, SOLAR, instruct, finetune, chatml, gpt4, synthetic data, distillation
Лайков: 208 | Загрузок: 9,378
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.