Этот репозиторий поставляется с контрольной точкой LoRA, позволяющей превратить LLaMA в языковую модель, подобную чат-боту. Контрольная точка — это вывод инструкции после процесса тонкой настройки со следующими настройками в системе 8xA100(40G) DGX. В этом процессе тонкой настройки длина токенов устанавливается равной 1024, поскольку GPT имеет тенденцию генерировать длинные тексты. Сценарий обучения: заимствован из официальной реализации Alpaca-LoRA. Сценарий обучения:
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: chansung
Теги: alpaca, llama, chat, gpt4, text2text-generation, en
Лайков: 4 | Загрузок: 0
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
