Встречайте BgGPT-7B, модель болгарского языка, обученную на mistralai/Mistral-7B-v0.1. BgGPT распространяется под лицензией Apache 2.0. Эта модель была создана Институтом INSAIT, входящим в состав Софийского университета, в Софии, Болгария. Модель постоянно подвергается предварительному обучению для раскрытия возможностей болгарского языка и культуры с использованием нескольких наборов данных, включая данные веб-сканирования на болгарском языке, ряд специализированных болгарских наборов данных, полученных от Института INSAIT, и машинные переводы популярных наборов данных на английский язык. Эти болгарские данные были дополнены наборами данных на английском языке, чтобы сохранить навыки английского языка и логического мышления. Токенизатор модели был расширен, чтобы обеспечить более эффективное кодирование болгарских слов, написанных кириллицей. Это не только увеличивает пропускную способность кириллического текста, но и производительность. Чтобы использовать точную настройку инструкций, ваше приглашение должно быть окружено токенами [INST] и [/INST]. Самая первая инструкция должна начинаться с начала маркера последовательности. Следовать инструкциям не следует. Генерация помощника будет завершена маркером конца последовательности. Этот формат доступен в виде шаблона чата с помощью метода applychattemplate(): Модель поставляется с набором…
Модальности:
Генерация текста
Области применения:
Следование инструкциям Диалог / чат
Задача: Генерация текста
Автор: INSAIT-Institute
Теги: mistral, instruct, bggpt, insait, conversational, bg, en, text-generation-inference
Лайков: 25 | Загрузок: 4,661
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.