YuLan-Mini — это облегченная языковая модель с 2,4 миллиардами параметров. Он достигает производительности, сравнимой с ведущими в отрасли моделями, обученными на значительно большем количестве данных, несмотря на то, что предварительно обучен только на токенах 1,08T. Модель особенно хороша в области математики и кода. Чтобы облегчить воспроизводимость, мы откроем исходный код соответствующих ресурсов для предварительного обучения. ——|—————-|——|——|——————|————|————| YuLan-Mini разрабатывается и поддерживается AI Box Китайского университета Жэньминь. — Код в этом репозитории выпущен под лицензией MIT. — Политика использования весов модели, промежуточных состояний оптимизатора и данных обучения будет объявлена в будущих обновлениях. — Ограничения: Несмотря на наши усилия по смягчению проблем безопасности и поощрению создания этического и законного текста, вероятностный характер языковых моделей все равно может привести к неожиданным результатам. Например, ответы могут содержать предвзятость, дискриминацию или другой вредный контент. Пожалуйста, воздержитесь от распространения такого контента. Мы не несем ответственности за любые последствия, возникшие в результате распространения вредоносной информации. Если вы найдете YuLan-Mini полезным для вашего…
Модальности:
Генерация текста
Области применения:
Генерация кода Математика Диалог / чат
Задача: Генерация текста
Автор: yulan-team
Теги: llama, code, math, conversational, en, zh, model-index, text-generation-inference
Лайков: 38 | Загрузок: 15
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
