Lit-6B — это модель GPT-J 6B, настроенная на 2 ГБ разнообразных легких романов, эротики и аннотированной литературы с целью создания художественного текста, похожего на роман. Для точной настройки используется модель GPT-J, которая представляет собой авторегрессионную языковую модель с 6 миллиардами параметров, обученную на The Pile. Данные, используемые при тонкой настройке, были собраны из различных источников, таких как Проект Гутенберга. К аннотированному набору данных художественной литературы добавлены теги, помогающие создать определенный стиль. Вот пример подсказки, показывающий, как использовать аннотации. Аннотации можно смешивать и сопоставлять, чтобы создать определенный стиль. Эту модель можно использовать в развлекательных целях и в качестве творческого помощника для писателей-фантастов. Пример вывода этого кода дает результат, который будет выглядеть примерно так: Этот проект был бы невозможен без вычислительных ресурсов, любезно предоставленных TPU Research Cloud.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: hakurei
Теги: gptj, causal-lm, en, endpoints_compatible
Лайков: 71 | Загрузок: 317
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.