Базовая модель *Ganga-1b обучена на одноязычном наборе данных на языке хинди в рамках проекта Unity. Мы предлагаем название Ганга* 🌊 в честь самой длинной реки, протекающей через хиндиязычный регион Индии 🇮🇳. (Первая модель хинди, предварительно подготовленная любой академической исследовательской лабораторией Индии 🇮🇳!) Project Unity — это инициатива, направленная на решение проблемы языкового разнообразия и богатства Индии путем создания комплексного ресурса, охватывающего основные языки страны. Мы стремимся достичь самых современных результатов в понимании и создании текста на индийских языках. Для этого мы обучаем модели на одноязычных региональных языках Индии. Наш первый выпуск — это модель Ganga-1B, которая была обучена на большом наборе общедоступных данных на языке хинди, просканированных в Интернете, включая новостные статьи, веб-документы, книги, правительственные публикации, образовательные материалы и разговоры в социальных сетях (отфильтрованные по качеству). Кроме того, набор данных был дополнительно проверен носителями индийского языка для обеспечения высокого качества. Примечательно, что модель Ganga-1B превосходит существующие модели с открытым исходным кодом, поддерживающие индийские языки, даже при размерах до 7 миллиардов параметров. — Разработчик: Lingo…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: LingoIITGN
Теги: mistral, hi, en, text-generation-inference, endpoints_compatible
Лайков: 21 | Загрузок: 141
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
