Мы представляем обновленную версию немыслящего режима Qwen3-235B-A22B под названием Qwen3-235B-A22B-Instruct-2507, включающую следующие ключевые улучшения: — Значительные улучшения в общих возможностях, включая выполнение инструкций, логическое рассуждение, понимание текста, математику, естественные науки, кодирование и использование инструментов. — Существенный прогресс в охвате обширных знаний на нескольких языках. — Заметно лучшее соответствие предпочтениям пользователя при выполнении субъективных и открытых задач, что позволяет получать более полезные ответы и генерировать текст более высокого качества. — Расширенные возможности понимания длинного контекста 256K. Qwen3-235B-A22B-Instruct-2507 имеет следующие функции: — Тип: причинно-языковые модели — Этап обучения: предварительное обучение и постобучение — Количество параметров: всего 235B и 22B активированных — Количество параметров (без внедрения): 234B — Количество слоев: 94 — Количество головок внимания (GQA): 64 для Q и 4 для KV — Количество экспертов: 128 — Количество активированных экспертов: 8 — Длина контекста: 262 144 изначально и с возможностью расширения до 1 010 000 токенов. Более подробную информацию, включая оценку производительности, требования к оборудованию и производительность вывода, можно найти в нашем блоге, GitHub,…
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: Qwen
Теги: qwen3_moe, conversational, endpoints_compatible
Лайков: 762 | Загрузок: 176,952
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.