crumbly/cramp-25m - Каталог нейросетей
Генерация текста

crumbly/cramp-25m

Добавлено:
crumbly/cramp-25m

Модифицированная модель GPT-2 всего с 25 миллионами невстраиваемых параметров, которая превосходит GPT-2 (124 м), Pythia-70 м/160 м и Cerebras-111 м, имеет встраивание масштабируемой синусоидальной позиции, норму слоя внедрения, отсутствие смещений и была обучена только на 8 миллиардах токенов набора данных SlimPajama дома на 2xA6000. (На рисунке ошибочно обозначено как судорога-41м)

Модальности:
Генерация текста

Задача: Генерация текста
Автор: crumbly
Теги: gpt2a, custom_code, en
Лайков: 8  |  Загрузок: 7

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.

Теги: #custom_code #en #gpt2a

Похожие модели (Генерация текста)

Генерация текста

prithivMLmods/Qwen2.5-14B-DeepSeek-R1-1M

Эта модель представляет собой объединенную предварительно обученную языковую модель, созданную с помощью MergeKit с методом слияния TIES. В...

14
HF Подробнее
Генерация текста

0xroyce/Plutus-Meta-Llama-3.1-8B-Instruct-bnb-4bit

Plutus-Meta-Llama-3.1-8B-Instruct-bnb-4bit — это доработанная версия модели LLaMA-3.1-8B, специально оптимизированная для задач в области финансов, экономики, торговли, психологии и...

895
HF Подробнее
Генерация текста

Retreatcost/Forgotten-directive-Neon-stock

Это объединение предварительно обученных языковых моделей, созданных с помощью mergekit. Экспериментальное слияние для создания порочной модели с использованием...

4
HF Подробнее