Этот репозиторий содержит официальную контрольную точку для PixelGPT, представленную в документе «Авторегрессионное предварительное обучение по пикселям и текстам» (EMNLP 2024). Подробные инструкции по использованию модели можно найти на нашей странице GitHub. DualGPT — это авторегрессионная языковая модель, предварительно обученная двойной модальности пикселей и текста. Обрабатывая документы как визуальные данные (пиксели), модель учится предсказывать как следующий токен, так и следующий фрагмент изображения в последовательности, что позволяет ей решать визуально сложные задачи в различных модальностях.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: ernie-research
Теги: ernie-pixel, endpoints_compatible
Лайков: 4 | Загрузок: 7
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
