LoneStriker/miqu-1-70b-sf-2.4bpw-h6-exl2 - Каталог нейросетей
Генерация текста

LoneStriker/miqu-1-70b-sf-2.4bpw-h6-exl2

Добавлено:
LoneStriker/miqu-1-70b-sf-2.4bpw-h6-exl2

это miqu-1-70b, деквантованный из q5 в f16 и транспонированный в pytorch. фигуры были повернуты менее неправильно, чем в alpindale/miqu-1-70b-pytorch, это примерно (но не полностью) соответствует результату llama.cpp q5: ![](https://thicc-af.mywaifulist.moe/waifus/miku-nakano-the-quintessential-quintuplets/phUEiEhPOL75GTDLncGy2dUbkDVMfYExZ2A1RBeQ.png?class=thumbnail)

Модальности:
Генерация текста

Области применения:
Диалог / чат


Задача: Генерация текста
Автор: LoneStriker
Теги: llama, conversational, text-generation-inference, endpoints_compatible
Лайков: 4  |  Загрузок: 6

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.