Эта модель представляет собой доработанную версию distilgpt2 на Stable-Diffusion-Prompts. В наборе оценок он достигает следующих результатов: — Потеря: 0,9450. Во время обучения использовались следующие гиперпараметры: — скорость обучения: 0,0005 — размер пакета поезда: 32 — размер пакета оценки: 32 — начальное значение: 42 — шаги градиента: 8 — общий размер пакета поезда: 256 — оптимизатор: Адам с betas=(0,9,0,999) и epsilon=1e-08 — lrschedulertype: cosine — lrschedulerwarmupsteps: 500 — numepochs: 8 — смешанная точность обучения: Native AMP — Transformers 4.23.1 — Pytorch 1.12.1+cu113 — Наборы данных 2.6.1 — Токенизаторы 0.13.1
Модальности:
Генерация текста
Задача: Генерация текста
Автор: RamAnanth1
Теги: gpt2, generated_from_trainer, text-generation-inference, endpoints_compatible
Лайков: 4 | Загрузок: 24
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
