INSAIT представляет MamayLM-Gemma-2-9B-IT-v0.1, наиболее эффективную модель украинского языка, основанную на google/gemma-2-9b и google/gemma-2-9b-it. MamayLM-Gemma-2-9B-IT-v0.1 можно использовать бесплатно и распространять в соответствии с Условиями использования Gemma. Эта модель была создана INSAIT, частью Софийского университета Св. Климента Охридского, в Софии, Болгария. Модель была построена на основе открытых моделей Google Gemma 2 9B. Он постоянно предварительно обучался на большом предварительно отфильтрованном наборе данных (всего 75 миллиардов токенов украинских и английских данных) с использованием комбинации смешивания данных и слияния моделей, что позволило модели получить выдающиеся украинские культурные и лингвистические возможности, сохраняя при этом свои английские характеристики. На этапе предварительного обучения мы используем различные наборы данных, в том числе данные украинского веб-сканирования (FineWeb2), свободно доступные наборы данных, такие как Википедия, ряд специализированных украинских наборов данных и машинные переводы популярных английских наборов данных. Затем модель была доработана на основе недавно созданного украинского набора данных инструкций, созданного с использованием машинного перевода лучших на данный момент английских наборов данных и специализированных украинских наборов данных, подготовленных украинским сообществом. Для получения дополнительной информации проверьте…
Модальности:
Генерация текста
Области применения:
Следование инструкциям Диалог / чат
Задача: Генерация текста
Автор: INSAIT-Institute
Теги: gemma2, instruct, mamaylm, insait, conversational, uk, en, text-generation-inference
Лайков: 29 | Загрузок: 903
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
