Ahma-3B-Instruct — это версия Ahma-3B, настроенная на обучение/чат и обученная следовать инструкциям на финском языке. Базовая модель параметров Ahma 3B представляет собой модель преобразователя только для декодера, основанную на архитектуре Meta Llama (v1), предварительно обученную с нуля на финском языке. Оригинальная архитектура модели Llama была представлена в этой статье и впервые опубликована на этой странице. Что означает Ахма? Ахма — по-фински росомаха! В финской Лапландии росомахи являются основной причиной ущерба оленям. Существуют две базовые модели Ahma разного размера, все они предварительно обучены с нуля для токенов 139B: Эта модель была точно настроена для следования инструкциям. Модели, настроенные на инструкции, предназначены для общения в режиме помощника, тогда как предварительно обученные модели можно адаптировать для различных задач генерации естественного языка. Если вы хотите использовать эту модель для следования инструкциям, вам необходимо использовать тот же формат подсказок, который мы использовали в процессе тонкой настройки (по сути, тот же формат, который Meta использовала в своих моделях Llama2). Примечание: не используйте «LlamaTokenizer» из библиотеки преобразователей, но всегда вместо этого используйте AutoTokenizer или используйте простой токенизатор части предложения. Ищете версии GGUF? Их можно найти здесь:…
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: Finnish-NLP
Теги: llama, finnish, conversational, fi, text-generation-inference
Лайков: 4 | Загрузок: 19
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.