!Spark H2LooP Spark — это первая базовая модель, специально созданная для автозаполнения общего встроенного программного обеспечения, созданного путем непрерывного предварительного обучения (CPT) OLMo-3-1025-7B. Мы выпускаем раннюю контрольную точку этого тренировочного запуска как артефакт с открытым исходным кодом. Кураторство специализированных наборов данных, охватывающих более 100 миллиардов токенов встроенного системного кода, таблиц данных, руководств пользователя и другой документации, а также обучение на тщательно отобранном 23-миллиардном подмножестве токенов — эта модель 7B достигает возможностей домена, превышающих SOTA Claude Opus 4.6, и значительно превосходит способные модели среднего размера, такие как Qwen3-Coder-30B-A3B, по завершению встроенного кода. > Документ: H2LooP Spark Preview: Continual Pretraining of Large Language Models for Low-Level Embedded Systems Code — Singh et al., 2026. Полная информация о методологии обучения, построении набора данных (SpecMap), инфраструктуре и оценке. Мы измерили недоумение по невыполненному коду из 9 публичных репозиториев, не замеченных во время обучения (ядро Linux, Zephyr RTOS, STM32 HAL, CMSIS, wolfSSL, mbedTLS, TinyUSB, NXP MCUXpresso SDK, Infineon AURIX) в 13 категориях встроенных систем. Perplexity improvements are consistent across all 13 categories, from register…
Модальности:
Генерация текста
Области применения:
Генерация кода Дополнение кода
Задача: Генерация текста
Автор: h2loop-ai
Теги: olmo3, embedded-systems, code-completion, continual-pretraining, low-level, firmware, en, code
Лайков: 4 | Загрузок: 1
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
