В качестве базовой модели используется https://huggingface.co/eachadea/vicuna-13b-1.1. Точная настройка на наборе данных Teknium GPTeacher, неизданный набор данных Roleplay v2, набор данных GPT-4-LLM без цензуры, WizardLM без цензуры и набор данных Nous Research Instruct. Около 180 тыс. инструкций, все из GPT-4, все очищены от цензуры OpenAI / «Как язык ИИ». Модель» и т. д. Базовая модель все еще подвергается цензуре OpenAI. Вскоре будет выпущена новая версия с очищенной викуньей по адресу https://huggingface.co/datasets/anon8231489123/ShareGPTVicunaunfiltere. Обучена на 8 графических процессорах A100-80 ГБ в течение 5 эпох по коду глубокого обучения Alpaca. Набор данных Nous Research Instruct от https://huggingface.co/karan4d и https://huggingface.co/huemin
Модальности:
Генерация текста
Задача: Генерация текста
Автор: NousResearch
Теги: llama, text-generation-inference, endpoints_compatible
Лайков: 23 | Загрузок: 11
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.