CALI (Computer Assistant Lightweight Intelligence) — это экспериментальная облегченная языковая модель, обученная с нуля на ограниченном двуязычном наборе данных, состоящем из текста на индонезийском и английском языках. Модель была разработана для изучения архитектур облегченных трансформаторов, эффективности малых моделей и обучения языковой модели в условиях ограниченных вычислительных ресурсов и ограниченных наборов данных. CALI НЕ является крупномасштабной базовой моделью и НЕ обучался на огромных наборах данных интернет-масштаба, таких как современные модели коммерческого языка. CALI обучался полностью с нуля с использованием тщательно отобранных и отфильтрованных наборов данных, предназначенных для исследовательских целей, а не для увеличения размера набора данных. — Текст на английском языке — Текст на индонезийском языке — Википедия — Новостные статьи — Общие документы — Исходный код Если вы используете или ссылаетесь на эту модель в своих исследованиях или проектах, пожалуйста, укажите:
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Sandroeth
Теги: cali, causal-lm, transformer, indonesian, english, custom-architecture, conversational, custom_code
Лайков: 5 | Загрузок: 232
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
