Это предварительная версия исследования языковой модели Avey-1, авторегрессионной языковой модели без повторений и внимания, которая отделяет ширину контекста от общей длины последовательности, представленной в статье «Не обращайте внимания». Ожидается, что эта версия модели не сможет генерировать высококачественный текст. Предназначено для: — Исследовательских экспериментов — Сравнительного анализа архитектуры. Не предназначено для: — Производственного развертывания — последующих приложений. Ограничения: — Недостаточно обученная: результаты могут быть бессвязными или низкого качества — Неоптимизированная реализация: более медленный вывод, чем другие оптимизированные модели — Базовая модель: лучшие результаты потребуют дальнейшего предварительного обучения и последующей тонкой настройки ⚠️ Эта модель предназначена только для исследовательских целей. Он не оптимизирован для производства и будет генерировать неоптимальные или непредсказуемые результаты.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: avey-ai
Теги: avey, custom_code, en
Лайков: 7 | Загрузок: 11
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.