Чат и поддержка: сервер Discord TheBloke Хотите внести свой вклад? Страница TheBloke на Patreon Работа TheBloke в области LLM щедро поддерживается грантом от Андреессена Горовица (a16z) — Создатель модели: OpenBuddy — Исходная модель: Openbuddy Mixtral 7Bx8 V16.3 32K. Этот репозиторий содержит файлы моделей формата GGUF для OpenBuddy’s Openbuddy Mixtral 7Bx8 V16.3 32K. Эти файлы были квантованы с использованием оборудования, любезно предоставленного Massed Compute. GGUF — это новый формат, представленный командой llama.cpp 21 августа 2023 года. Это замена GGML, который больше не поддерживается llama.cpp. Вот неполный список клиентов и библиотек, которые, как известно, поддерживают GGUF: llama.cpp. Исходный проект для GGUF. Предлагает CLI и опцию сервера. text-generation-webui, наиболее широко используемый веб-интерфейс со множеством функций и мощных расширений. Поддерживает ускорение графического процессора. KoboldCpp — полнофункциональный веб-интерфейс с ускорением графического процессора на всех платформах и архитектурах графического процессора. Особенно хорош для рассказывания историй. GPT4All, бесплатный локальный графический интерфейс с открытым исходным кодом, поддерживающий Windows, Linux и macOS с полным ускорением графического процессора. LM Studio, простой в использовании и мощный локальный графический интерфейс для Windows и macOS (Silicon) с графическим процессором…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: TheBloke
Теги: gguf, mixtral, zh, en, fr, de, ja, ko
Лайков: 12 | Загрузок: 130
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
