Языковая модель для Азербайджана. Модель имеет 1,3В параметров, как можно догадаться по названию. Азербайджан принадлежит к тюркской языковой семье. Это очень мелодичный язык, на котором говорят около 23 миллионов человек. Вот несколько фактов о нем: 1. Он тесно связан с турецким. 2. Исторически здесь используются как латинская, так и арабская письменность. 3. Является официальным языком Азербайджанской Республики. Это одна из моделей, созданных на основе базовой модели mGPT-XL (1.3B) (см. список ниже), которая изначально обучалась на 61 языке из 25 языковых семей с использованием Википедии и корпуса C4. Мы нашли дополнительные данные для 23 языков, большинство из которых считаются второстепенными, и решили доработать базовую модель. Азербайджанский mGPT 1.3B был обучен еще на 70 000 шагов с размером пакета = 4 и контекстным окном из 2048** токенов на 1 A100. — 🇦🇲 мГПТ-1.3Б Армянский — 🍯 мГПТ-1.3Б Башкирский — 🇧🇾 мГПТ-1.3Б Белорусский — 🇧🇬 мГПТ-1.3Б Болгарский — 🌞 мГПТ-1.3Б Бурятский — 🌳 мГПТ-1.3Б Чувашский — 🇬🇪 мГПТ-1.3Б Грузинский — 🌸 мГПТ-1.3Б Калмыцкий — 🇰🇿 мГПТ-1.3Б Казахский — 🇰🇬 мГПТ-1.3Б Киргизский — 🐻 мГПТ-1.3Б Марийский — 🇲🇳 мГПТ-1.3Б Монгол — 🐆 мГПТ-1.3Б Осетинский — 🇮🇷 мГПТ-1.3Б Персидский — 🇷🇴 мГПТ-1.3Б Румынский — 🇹🇯 мГПТ-1.3Б Таджикский — ☕…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: ai-forever
Теги: gpt2, gpt3, mgpt, az, en, ru, text-generation-inference, endpoints_compatible
Лайков: 9 | Загрузок: 19
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.