Borealis-10.7B-DPO — это модель 10.7B, состоящая из 48 слоев Mistral 7B, отточенных в течение 70 часов на 2xA6000 на большом наборе данных RP и Conversational с конфигурацией llama2 от Axolotl, как у SOLAR. Этот репозиторий содержит файлы fp16 диалоговой модели Borealis-10.7B-DPO. Цель этой модели — не сломать все эталоны, а иметь лучшую модель RP/ERP/Conversational. Он был обучен на нескольких базовых наборах данных, чтобы сделать его интеллектуальным, но большинство наборов данных были простыми разговорами. — NobodyExistsOnTheInternet/ToxicQAFinal — teknium/openhermes — unalignment/spicy-3.1 — Doctor-Shotgun/no-robots-sharegpt — Undi95/toxic-dpo-v0.1-sharegpt — Aesir [1], [2], [3-SFW], [3-NSFW] — lemonilia/LimaRP — Squish42/bluemoon-fandom-1-1-rp-cleaned — Undi95/ConversationChronicles-sharegpt-SHARDED (2 комплекта, модифицированный) — Intel/orcadpopairs — NobodyExistsOnTheInternet/ToxicDPOqa — Undi95/toxic-dpo-v0.1-NoWarning
Модальности:
Генерация текста
Задача: Генерация текста
Автор: zaq-hack
Теги: llama, not-for-all-audiences, nsfw, text-generation-inference, endpoints_compatible
Лайков: 3 | Загрузок: 13
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
