Это версия нашей оптимизированной для Узбекистана серии Llama с параметром 8B. Также ознакомьтесь с другими нашими моделями: результаты показывают, что наши модели, оптимизированные для узбекского языка, постоянно превосходят свои базовые аналоги в тестах перевода (BLEU и COMET) в наборах оценочных данных FLORES+ Uz-En/En-Uz и анализе настроений на узбекском языке. Кроме того, в тесте MMLU, который измеряет общее понимание языка при выполнении нескольких задач на английском языке, а также в задачах классификации новостей, наша оптимизированная для узбекского языка модель показала небольшое снижение из-за катастрофического забывания исходных инструкций на английском языке. (Оценка MMLU официальной модели Llama может отличаться от нашей оценки из-за нашего метода оценки. Подробности оценки можно найти по ссылкам ниже.) Нам очень хочется увидеть, как эти модели внесут вклад в узбекский открытый исходный код и будут использоваться нашим узбекским 🇺🇿 сообществом. 🚀Модель узлм/аллома-8Б-Инструкт можно использовать с трансформаторами следующим образом. Мы рекомендуем предварительно обработать входные данные на узбекском языке, чтобы заменить апостроф (‘) на последовательность (APST), чтобы добиться более низкой плодовитости токенизатора нашей модели. Для оценки задачи перевода мы использовали наборы данных FLORES+ Uz-En/En-Uz. Мы использовали следующую подсказку, чтобы сделать…
Модальности:
Генерация текста
Области применения:
Диалог / чат Перевод Суммаризация Ответы на вопросы Следование инструкциям
Задача: Генерация текста
Автор: uzlm
Теги: llama, uzbek, uzbekllm, uzbeknlp, translation, summarization, question-answering, tokenizer
Лайков: 8 | Загрузок: 29
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
