Это рабочая версия Mixtral Instruct с квантованием AWQ. По состоянию на 02.11.2024 https://huggingface.co/TheBloke/Mixtral-8x7B-Instruct-v0.1-AWQ не работает, поэтому вместо этого используйте этот репозиторий.
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: casperhansen
Теги: mixtral, conversational, text-generation-inference, endpoints_compatible, 4-bit, awq
Лайков: 43 | Загрузок: 1,979
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.