wandb: https://wandb.ai/open-assistant/supervised-finetuning/runs/t2adm3wu команда: deepspeed Trainsft.py —configs defaults pretrain pythia-1.4b-pretrain —cachedir .cache/ —outputdir .savedmodels/pythia-1.4b-pre —residualdropout 0.0 —deepspeed`
Модальности:
Генерация текста
Задача: Генерация текста
Автор: andreaskoepf
Теги: gpt_neox, text-generation-inference, endpoints_compatible
Лайков: 7 | Загрузок: 414
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.