Квантование GPTQ RedPajama-INCITE-Chat-3B-v1 с помощью auto-gptq. Размер файла модели составляет всего 2 ГБ. > Обратите внимание, что вы пока не можете загружать напрямую из хаба с помощью autogptq` — при необходимости вы можете использовать эту функцию для загрузки, используя имя репо.
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: ethzanalytics
Теги: gpt_neox, auto-gptq
Лайков: 4 | Загрузок: 7
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.