Это языковая модель, предназначенная только для декодера 3B-параметров и ориентированная на максимальное повышение производительности моделирования японского языка и производительности последующих задач на японском языке. Мы провели продолжительное предварительное обучение с использованием японских данных на англоязычной модели StableLM-3B-4E1T, чтобы передать знания и возможности модели на японский язык. Если вы ищете модель, соответствующую инструкциям, ознакомьтесь с инструкциями на японском языке StableLM-3B-4E1T. Если вы ищете модель большего размера, обратите внимание на японскую стабильную базу LM Gamma 7B. Разработчик: Stability AI Тип модели: японский StableLM-3B-4E1T Базовая модель представляет собой авторегрессионную языковую модель, основанную на архитектуре преобразовательного декодера. Язык(и): Японский. Лицензия: Данная модель распространяется по лицензии Apache, версия 2.0. Контактное лицо: Если у вас есть вопросы и комментарии по поводу модели, присоединяйтесь к сообществу Stable Community Japan. Для будущих объявлений/информации о моделях Stability AI, исследованиях и мероприятиях следуйте https://twitter.com/StabilityAIJP. Модель представляет собой преобразователь только для декодера, аналогичный архитектуре LLaMA (Touvron et al., 2023) со следующими модификациями: Встраивание позиций: Встраивание позиций (Su et al., 2021)…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: stabilityai
Теги: stablelm_epoch, japanese-stablelm, causal-lm, custom_code, ja
Лайков: 18 | Загрузок: 109
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
