Эта модель представляет собой доработанную версию microsoft/phi-2 в наборе данных Intel/orcadpopairs. В наборе оценок он достигает следующих результатов: — Потеря: 1,2999. Во время обучения использовались следующие гиперпараметры: — скорость обучения: 3e-06 — trainbatchsize: 2 — evalbatchsize: 2 — начальное число: 42 — оптимизатор: Адам с betas=(0,9,0,95) и epsilon=1e-05 — lrschedulertype: косинус — lrschedulerwarmupsteps: 100 — num_epochs: 2 — Трансформеры 4.37.0 — Pytorch 2.1.2+cu121 — Наборы данных 2.16.1 — Токенизаторы 0.15.0
Модальности:
Генерация текста
Задача: Генерация текста
Автор: NovoCode
Теги: phi, generated_from_trainer, custom_code, text-generation-inference, endpoints_compatible
Лайков: 4 | Загрузок: 28
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
