1. Краткое описание модели 2. Использование 3. Ограничения 4. Обучение 5. Лицензия 6. Цитирование StarCoder-3B — это модель с параметрами 3B, обученная на более чем 80 языках программирования из The Stack (v1.2), за исключением запросов на отказ. Модель использует внимание к множественным запросам, контекстное окно из 8192 токенов и была обучена с использованием цели «Заполнить посередине» на 1 триллионе токенов. — Репозиторий: bigcode/Megatron-LM — Веб-сайт проекта: bigcode-project.org — Бумага: 💫StarCoder: Да пребудет с вами источник! — Контактное лицо: contact@bigcode-project.org — Языки: более 80 языков программирования. Модель была обучена на коде GitHub. По существу, это не модель инструкций и не команды типа «Напишите функцию, вычисляющую квадратный корень». не работают хорошо. Однако, используя подсказку Tech Assistant, вы можете превратить его в способного технического помощника. При заполнении середины используются специальные токены для идентификации части префикса/середины/суффикса входных и выходных данных: набор данных для предварительного обучения модели был отфильтрован только для разрешительных лицензий. Тем не менее, модель может дословно генерировать исходный код из набора данных. Лицензия кода может требовать указания авторства и/или других особых требований, которые необходимо соблюдать. Мы предоставляем…
Модальности:
Генерация текста
Области применения:
Генерация кода
Задача: Генерация текста
Автор: bigcode
Теги: gpt_bigcode, code, model-index, text-generation-inference, endpoints_compatible
Лайков: 28 | Загрузок: 521
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.