GaMS-27B-Instruct-Nemotron — это вариант GaMS-27B-Instruct, прошедший дальнейшее обучение с помощью контролируемой точной настройки (SFT) на курируемом подмножестве чат-части nvidia/Nemotron-Post-Training-Dataset-v1. Данные обучения включали ~80 тысяч пар словенских инструкций и ответов (на основе переводов с дополнительными изменениями для корректировки идентичности и контекста) и ~20 тысяч английских примеров. Эта настроенная на инструкции версия GaMS 27B была разработана Тимотеем Петричем в рамках магистерского проекта. Подробности будут позже. Модель была разработана в рамках исследовательской программы PoVeJMo (Адаптивная обработка естественного языка с использованием больших языковых моделей), в частности, в рамках исследовательского проекта под названием SloLLaMai — вычислительно эффективные модели открытого доступа для словенского языка. Программа финансируется в рамках Плана восстановления и устойчивости Словенским агентством исследований и инноваций (ARIS) и NextGenerationEU. Авторы также выражают благодарность Словенскому агентству исследований и инноваций за финансовую поддержку (основное финансирование исследований № P6-0411 — Языковые ресурсы и технологии для словенского языка). Модель можно запустить через API конвейера, используя следующий код:
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: cjvt
Теги: gemma2, conversational, sl, en
Лайков: 5 | Загрузок: 47
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.