Обучался на подмножестве smollm-corpus fineweb-edu-dedup, более 16 МИЛЛИОНОВ токенов. — Wikitext v2 byteperplexity: 4.4553 — Arceasy accnorm: 28.66% — Arceasy acc: 26.39% — Blimp acc: 53.1% — Hellaswag acc: 26.65% — Hellaswag acc_norm: 27.07% Для запуска этой модели необходимо: 1. Скачайте файлы 2. Скомпилируйте rosa.pyx с помощью python setup.py buildext —inplace` 3. Загрузите модель с правильной конфигурацией 4. Вызовите модель
Модальности:
Генерация текста
Задача: Генерация текста
Автор: Martico2432
Теги: srlm, SLM, ROSA, en
Лайков: 4 | Загрузок: 538
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.