!image/png Восемь французских экспертов сидят за столом. Там много ветра. DiscoLM Mixtral 8x7b Alpha — это экспериментальная модель 8x7b MoE, основанная на Mixtral 8x7b от Mistral AI. Эта модель основана на экспериментальном коде, преобразующем веса модели в формат «обнимающего лица» и обеспечивающем вывод на основе трансформаторов. Затем он был доработан на наборах данных Synthia, MethaMathQA и Capybara. DiscoLM Mixtral 8x7b Alpha — это проект DiscoResearch, созданный Бьорном Плюстером при большой поддержке сообщества. Большое спасибо HessianAI за предоставление вычислительных ресурсов для этого проекта, а также замечательным людям из LAION, без которых этот проект был бы невозможен! 1. Загрузка 2. Тесты 3. Формат подсказки 4. Набор данных 5. Благодарности 6. Контакт 7. О DiscoResearch 8. Отказ от ответственности Обратите внимание, что вам необходимо запускать модель с параметромtrustremotecode=True до тех пор, пока новая арка не будет объединена с трансформерами! Эта модель все еще является ранней альфа-версией с экспериментальным кодом, и мы не можем гарантировать, что все значения верны. Ниже приведены оценки по нашей собственной оценке. Мы используем Language Model Evaluation Harness для запуска тестов производительности, описанных выше, используя ту же версию, что и HuggingFace…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: DiscoResearch
Теги: mistral, conversational, custom_code, en, text-generation-inference, endpoints_compatible
Лайков: 124 | Загрузок: 1,635
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
