Dragoman — это англо-украинская модель перевода SOTA на уровне предложений. Он обучается с использованием двухэтапного конвейера: предварительное обучение на очищенном наборе данных Paracrawl и этап неконтролируемого выбора данных на turuta/Multi30k-uk. Используя двухэтапный подход к очистке и выбору данных, мы добились производительности SOTA на англо-украинском подмножестве тестов разработки FLORES-101 с BLEU 32.34. — Разработчики: Юрий Панив, Дмитрий Чаплинский, Никита Трынус, Владимир Кирилов — Тип модели: Модель перевода — Язык(и): — Исходный язык: английский — Целевой язык: Украинский — Лицензия: Apache 2.0 Мы разработали эту модель для перевода на уровне предложений с английского -> украинского языка. Работа с текстами, состоящими из нескольких предложений, не гарантируется, имейте в виду. Мы объединили адаптер Dragoman PT с базовой моделью и загрузили квантованную версию модели на https://huggingface.co/lang-uk/dragoman-4bit. MLX — рекомендуемый способ использования языковой модели на компьютере Apple с чипом M1 и новее. Вы можете скачать базовую модель Mistral-7B-v0.1 в формате GGUF (например, mistral-7b-v0.1.Q4KM.gguf) и использовать ggml-adapter-model.bin из этого репозитория следующим образом: Учебный код: lang-uk/dragoman Cleaned Paracrawl:…
Модальности:
Генерация текста
Области применения:
Перевод
Задача: Генерация текста
Автор: lang-uk
Теги: peft, translation, uk, en, model-index
Лайков: 12 | Загрузок: 103
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
