casperhansen/mixtral-instruct-awq - Каталог нейросетей
Генерация текста

casperhansen/mixtral-instruct-awq

Добавлено:
casperhansen/mixtral-instruct-awq

Это рабочая версия Mixtral Instruct с квантованием AWQ. По состоянию на 02.11.2024 https://huggingface.co/TheBloke/Mixtral-8x7B-Instruct-v0.1-AWQ не работает, поэтому вместо этого используйте этот репозиторий.

Модальности:
Генерация текста

Области применения:
Диалог / чат Следование инструкциям


Задача: Генерация текста
Автор: casperhansen
Теги: mixtral, conversational, text-generation-inference, endpoints_compatible, 4-bit, awq
Лайков: 43  |  Загрузок: 1,979

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.