ISTA-DASLab/Mixtral-8x7b-AQLM-2Bit-1×16-hf - Каталог нейросетей
Генерация текста

ISTA-DASLab/Mixtral-8x7b-AQLM-2Bit-1×16-hf

Добавлено:
ISTA-DASLab/Mixtral-8x7b-AQLM-2Bit-1×16-hf

Чтобы узнать больше о выводе, а также о том, как самостоятельно квантовать модели, обратитесь к официальному репозиторию GitHub.

Модальности:
Генерация текста


Задача: Генерация текста
Автор: ISTA-DASLab
Теги: mixtral, text-generation-inference, endpoints_compatible, aqlm
Лайков: 23  |  Загрузок: 70

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.