CooperLM-354M is a 354 million parameter GPT-2 based language model trained from scratch on a filtered subset of Wikipedia, BookCorpus, and OpenWebText. It was created as a toy project to explore end-to-end LLM training using Hugging Face’s Transformers and Datasets libraries.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: mehta
Теги: gpt2, toy-llm, from-scratch, huggingface, english, casual-lm, educational, en
Лайков: 3 | Загрузок: 24
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.