Это квантованные 4-битные, 5-битные и 8-битные модели StarCoderBase в формате GGML. Этот репозиторий является результатом квантования до 4-битного, 5-битного и 8-битного GGML для вывода ЦП с использованием ggml. 1. Краткое описание модели 2. Использование 3. Ограничения 4. Обучение 5. Лицензия 6. Цитирование Модели StarCoderBase представляют собой модели с 15,5 миллиардами параметров, обученные на более чем 80 языках программирования из The Stack (v1.2), за исключением запросов на отказ. Модель использует внимание к множественным запросам, контекстное окно из 8192 токенов и была обучена с использованием цели «Заполнить посередине» на 1 триллионе токенов. — Репозиторий: bigcode/Megatron-LM — Веб-сайт проекта: bigcode-project.org — Бумага: 💫StarCoder: Да пребудет с вами источник! — Контактное лицо: contact@bigcode-project.org — Языки: более 80 языков программирования. Модель была обучена на коде GitHub. Как таковая это не модель инструкций и не команды типа «Напишите функцию, которая вычисляет квадратный корень». не работают хорошо. Однако, используя подсказку Tech Assistant, вы можете превратить его в способного технического помощника. При заполнении середины используются специальные токены для идентификации части префикса/середины/суффикса входных и выходных данных: набор данных для предварительного обучения модели был отфильтрован только для разрешительных лицензий.…
Модальности:
Генерация текста
Области применения:
Генерация кода
Задача: Генерация текста
Автор: NeoDim
Теги: code, model-index, endpoints_compatible
Лайков: 4 | Загрузок: 0
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
