TeeZee/BigMaid_20B_v1.0-bpw4.0-h6-exl2 - Каталог нейросетей
Генерация текста

TeeZee/BigMaid_20B_v1.0-bpw4.0-h6-exl2

Добавлено:
TeeZee/BigMaid_20B_v1.0-bpw4.0-h6-exl2

Должно работать на картах VRAM объемом 12 ГБ в веб-интерфейсе с длиной контекста, установленной на 4096, загрузчиком ExLlamav2HF и кэш8бит = True. Все комментарии очень приветствуются, скачивайте, тестируйте, и если вы цените мою работу, рассмотрите возможность покупки мне моего топлива:

Модальности:
Генерация текста


Задача: Генерация текста
Автор: TeeZee
Теги: llama, merge, not-for-all-audiences, text-generation-inference, endpoints_compatible
Лайков: 4  |  Загрузок: 24

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.