Это версия модели Mixtral-8x7B-v0.1 (https://huggingface.co/mistralai/Mixtral-8x7B-v0.1), квантованная до 2-бит с помощью полуквадратического квантования (HQQ).
Модальности:
Генерация текста
Задача: Генерация текста
Автор: mobiuslabsgmbh
Теги: mixtral, moe
Лайков: 4 | Загрузок: 15
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.