bigcode/starcoderplus - Каталог нейросетей
Генерация текста

bigcode/starcoderplus

Добавлено:
bigcode/starcoderplus

Поиграйте с настроенным по инструкциям StarCoderPlus на StarChat-Beta. 1. Краткое описание модели 2. Использование 3. Ограничения 4. Обучение 5. Лицензия StarCoderPlus — это доработанная версия StarCoderBase, основанная на сочетании: — Английского веб-набора данных RefinedWeb (1x) — Набора данных StarCoderData из The Stack (v1.2) (1x) — Набора данных Википедии, повышенная дискретизация которого была произведена 5 раз (5x) Это языковая модель с параметром 15,5 млрд, обученная на английском и Более 80 языков программирования. Модель использует внимание к множественным запросам, контекстное окно из 8192 токенов и была обучена с использованием цели «Заполнить посередине» на 1,6 триллионах токенов. — Репозиторий: bigcode/Megatron-LM — Веб-сайт проекта: bigcode-project.org — Контактное лицо: contact@bigcode-project.org — Языки: английский и более 80 языков программирования Модель была обучена на английском языке и коде GitHub. По существу, это не модель инструкций и не команды типа «Напишите функцию, вычисляющую квадратный корень». не работают хорошо. Тем не менее, настроенная на инструкции версия StarChat может стать хорошим помощником. При заполнении середины используются специальные токены для идентификации части префикса/середины/суффикса входных и выходных данных: набор данных обучающего кода модели был отфильтрован только для разрешительных лицензий.…

Модальности:
Генерация текста

Области применения:
Генерация кода


Задача: Генерация текста
Автор: bigcode
Теги: gpt_bigcode, code, text-generation-inference, endpoints_compatible
Лайков: 219  |  Загрузок: 23

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.