This model is a fine-tuned version of vicgalle/gpt2-open-instruct-v1 on the gsm8k dataset. It achieves the following results on the evaluation set: — Loss: 2.3966 The following hyperparameters were used during training: — learningrate: 0.0005 — trainbatchsize: 16 — evalbatchsize: 1 — seed: 42 — optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08 — lrschedulertype: linear — lrschedulerwarmupsteps: 100 — num_epochs: 20 — Transformers 4.31.0 — Pytorch 2.0.1+cu118 — Datasets 2.13.1 — Tokenizers 0.13.3
Модальности:
Генерация текста
Области применения:
Следование инструкциям
Задача: Генерация текста
Автор: jtatman
Теги: tensorboard, gpt2, generated_from_trainer, text-generation-inference, endpoints_compatible
Лайков: 2 | Загрузок: 23
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
