DunnBC22/distilgpt2-2k_clean_medical_articles_causal_language_model - Каталог нейросетей
Генерация текста

DunnBC22/distilgpt2-2k_clean_medical_articles_causal_language_model

Добавлено:
DunnBC22/distilgpt2-2k_clean_medical_articles_causal_language_model

Эта модель представляет собой доработанную версию distilgpt2. В наборе оценок он достигает следующих результатов: — Потеря: 2,9268. Эта модель предназначена для демонстрации моей способности решать сложную проблему с использованием технологий. Источник набора данных: https://www.kaggle.com/datasets/trikialaaa/2k-clean-medical-articles-medicalnewstoday Во время обучения использовались следующие гиперпараметры: — скорость обучения: 2e-05 — trainbatchsize: 8 — evalbatchsize: 8 — начальное число: 42 — оптимизатор: Адам с betas=(0.9,0.999) и epsilon=1e-08 — lrschedulertype: линейный — число периодов: 3 — Трансформеры 4.26.1 — Pytorch 1.12.1 — Наборы данных 2.9.0 — Токенизаторы 0.12.1 Эта модель является точно настроенной производной предварительно обученной модели. Пользователи должны соблюдать исходную лицензию модели. Эта модель была доработана для сторонних наборов данных, которые могут иметь отдельные лицензии или ограничения на использование.

Модальности:
Генерация текста


Задача: Генерация текста
Автор: DunnBC22
Теги: tensorboard, gpt2, generated_from_trainer, en, text-generation-inference, endpoints_compatible
Лайков: 4  |  Загрузок: 96

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.