DeTikZifyv2.5 (8b) — это мультимодальная языковая модель, которая автоматически преобразует эскизы и существующие научные цифры в редактируемые графические программы TikZ, сохраняющие семантику. Он основан на постобученном DeTikZifyv2 с обучением с подкреплением и самовычислением вознаграждений. Этот подход, который мы называем обучением с подкреплением на основе самообратной связи (RLSF), позволяет модели значительно улучшиться без необходимости использования внешних функций вознаграждения. Посетите проект DeTikZify для получения дополнительной информации и советов о том, как лучше всего запустить модель. DeTikZify использует итеративный алгоритм вывода, основанный на поиске по дереву Монте-Карло (MCTS), что позволяет ему постоянно уточнять результаты без дополнительного обучения. Очки вознаграждения, требуемые MCTS, полностью рассчитываются с использованием видеокодера DeTikZify путем визуальной оценки сходства между входными цифрами и скомпилированными сгенерированными результатами. Внешние модели вознаграждения не только не нужны, но и часто имеют меньшую корреляцию с человеческими суждениями, поскольку видеокодер был полностью настроен на всю модель, оптимизируя ее для оценки этой конкретной задачи. Мы отсылаем читателей к статьям DeTikZify и TikZero для получения более подробной информации. Эти…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: nllg
Теги: detikzify, endpoints_compatible
Лайков: 10 | Загрузок: 412
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
