Оригинальная модель: https://huggingface.co/Doctor-Shotgun/Nous-Capybara-limarpv3-34B 5bpw — Может запускать контекст 10K в VRAM ~ 23,3 ГБ с опцией 8-битного кэша.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: sandwichdoge
Теги: llama, text-generation-inference, endpoints_compatible
Лайков: 3 | Загрузок: 15
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.