Компактная (параметр ≈88M) языковая модель, предназначенная только для декодера, с нуля обученная для двунаправленного перевода между диалектом Чеджу (제주 방언, Чеджуо) и стандартным корейским языком (표준어). Модель использует архитектуру в стиле Qwen3 с QK-Norm для каждой головки и служит единой контрольной точкой, которая обрабатывает оба направления трансляции через управляющий токен префикса. > 88 миллионов лет назад LLM 1,4 месяца 양방향 번역 모델입니다. Нажмите на кнопку «Получить» и нажмите кнопку «Получить». Модель обучается по строгой схеме подсказок из 4 токенов. Всегда начинайте с , добавляйте тег направления, затем исходный текст, затем . Модель генерируется до тех пор, пока . Модель представляет собой стандартную версию Qwen3ForCausalLM, поэтому она работает с vLLM «из коробки»: > Совет. Жадное декодирование или декодирование луча-4 дает лучший BLEU. Выборка (температура > 0) редко бывает полезна для этой задачи — целевой перевод четко определен. 1. Нормализация — Юникод NFC (с сохранением архаичных слогов, таких как ᆞ), стандартизация кавычек, канонизация пробелов. 2. Дедупликация — точная (диалектнорм, стандартнорма) дедупликация с сохранением порядка диалогов. 3. Фильтрация — отбрасывайте пары длиной менее 3 символов, соотношение длин > 0,7 или пары, где диалект == стандарт (оставляйте только 10 % идентичных пар в качестве задачи копирования…
Модальности:
Генерация текста
Области применения:
Перевод
Задача: Генерация текста
Автор: postcn
Теги: qwen3, translation, korean, jeju, dialect, jejueo, small-llm, from-scratch
Лайков: 11 | Загрузок: 339
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
