CADD-Base-7B — это языковая модель маскированной диффузии для генерации кода, дополненная непрерывно расширяемой дискретной диффузией (CADD) — непрерывным сигналом согласования потоков, который управляет процессом дискретного шумоподавления. Основная идея: на каждом этапе диффузии к внедрениям замаскированных токенов добавляется непрерывное вложение zcontinious`, следуя линейной траектории согласования потока от шума к чистым вложениям. Это ортогонально стратегии дискретного демаскирования: любой алгоритм MDM можно комбинировать с CADD. — Документ: Постоянно дополненная дискретная диффузионная модель для категориального генеративного моделирования (ICLR 2026) — GitHub: https://github.com/apple/ml-CADD Для создания этой версии модели HuggingFace мы основываемся на DiffuCoder и улучшаем его, повторно используя архитектуру моделирования Dream и утилиты генерации.
Модальности:
Генерация текста
Области применения:
Генерация кода Диалог / чат
Задача: Генерация текста
Автор: apple
Теги: Dream, code, diffusion, diffusion language model, conversational, custom_code
Лайков: 10 | Загрузок: 251
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.