Vulture-180B — это еще один усовершенствованный причинный LLM, предназначенный только для декодера, созданный Virtual Interactive (VILM) на базе знаменитого Falcon-180B от TII. Мы собрали новый набор данных из новостных статей и страниц Википедии на 12 языках (всего: 80 ГБ) и продолжаем процесс предварительной подготовки Falcon-180B. Наконец, мы создаем многоязычный набор учебных данных, следуя методам Альпаки. Хотя Vulture-180B представляет собой адаптер, который можно свободно использовать под APACHE-2.0, сам Falcon-180B остается доступным только в соответствии с лицензией Falcon-180B TII и политикой допустимого использования. Пользователи должны обеспечить соответствие любых коммерческих приложений на базе Vulture-180B ограничениям на использование Falcon-180B. — Разработано: https://www.tii.ae — Доработано: Virtual Interactive — Язык(и) (NLP): английский, немецкий, испанский, французский, португальский, русский, итальянский, вьетнамский, индонезийский, китайский, японский и корейский — Время обучения: 3000 часов A100 — Спасибо TII за потрясающий Falcon в качестве базовой модели. — Большое спасибо Google за щедрые кредиты Cloud. Использование продукции без адекватной оценки рисков и мер по их снижению; любые варианты использования, которые можно считать безответственными или вредными. Стервятник-180Б тренируется на…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: vilm
Теги: ru, en, de, es, it, ja, vi, zh
Лайков: 16 | Загрузок: 0
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.