Эта модель была построена с использованием нового рецепта Смауга для улучшения производительности многоходовых разговоров в реальном мире, примененного к мета-ламе/Мета-ламе-3-70B-Instruct. Модель существенно превосходит Llama-3-70B-Instruct и находится на одном уровне с GPT-4-Turbo на MT-Bench (см. ниже). РЕДАКТИРОВАНИЕ: Smaug-Llama-3-70B-Instruct на данный момент является лучшей моделью с открытым исходным кодом на Arena-Hard! Он также почти на одном уровне с Клодом Опусом — см. ниже. Мы проводим дополнительные эталонные оценки и добавим их, когда они будут доступны. — Разработано: Abacus.AI. — Лицензия: https://llama.meta.com/llama3/license/. — Доработано на основе модели: Meta-llama/Meta-Llama-3-70B-Instruct. Оценка по сравнению с выбранными другими (источник: (https://lmsys.org/blog/2024-04-19-arena-hard/#full-leaderboard-with-gpt-4-turbo-as-judge)). GPT-4o и Gemini-1.5-pro-latest отсутствовали в исходном сообщении blob, и мы получили эти цифры из локального запуска, используя ту же методологию. GSM8K Приведенные здесь цифры GSM8K рассчитаны с использованием последней версии оценочного ремня LM. Коммит, используемый таблицей лидеров, имеет серьезную проблему, которая влияет на модели, которые обычно используют: в их ответах из-за ошибки в конфигурации стоп-слова для GSM8K.…
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: abacusai
Теги: llama, conversational, text-generation-inference, endpoints_compatible
Лайков: 144 | Загрузок: 8,646
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
