Мы использовали наш собственный набор данных OpenOrca для точной настройки поверх Mistral 7B. Этот набор данных является нашей попыткой воспроизвести набор данных, созданный для Orca Paper компании Microsoft Research. Мы используем упаковку OpenChat, обученную с помощью Axolotl. Этот выпуск подготовлен на основе тщательно отобранного отфильтрованного подмножества большинства наших дополненных данных GPT-4. Это то же подмножество наших данных, которое использовалось в нашей модели OpenOrcaxOpenChat-Preview2-13B. По оценкам HF Leaderboard, эта модель занимает первое место среди всех моделей размером менее 30B на момент выпуска, превосходя все другие модели 7B и 13B! В этом выпуске представлена первая модель: полностью открытая модель с революционной производительностью, способная работать с полным ускорением даже на обычных потребительских графических процессорах. Мы благодарим команду Mistral за лидерство в этом вопросе. Если вы хотите опробовать модель прямо сейчас, она работает на быстрых графических процессорах в неквантованном виде: https://huggingface.co/spaces/Open-Orca/Mistral-7B-OpenOrca Хотите визуализировать наш полный набор данных (предварительная фильтрация)? Ознакомьтесь с нашей картой Nomic Atlas. Мы находимся в процессе обучения новых моделей, поэтому следите за обновлениями в нашей организации, которые скоро появятся у интересных партнеров. Мы также будем публиковать краткие объявления в нашем Discord, которые вы можете найти здесь: или проверьте…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Open-Orca
Теги: mistral, conversational, en, text-generation-inference, endpoints_compatible
Лайков: 688 | Загрузок: 2,360
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
