— Создатель модели: feeltheAGI — Оригинальная модель: feeltheAGI/yi-super-9B MaziyarPanahi/yi-super-9B-GGUF содержит файлы модели формата GGUF для feeltheAGI/yi-super-9B. Спасибо TheBloke за подготовку удивительного README о том, как использовать модели GGUF: GGUF — это новый формат, представленный командой llama.cpp 21 августа 2023 года. Это замена GGML, который больше не поддерживается llama.cpp. Вот неполный список клиентов и библиотек, которые, как известно, поддерживают GGUF: llama.cpp. Исходный проект для GGUF. Предлагает интерфейс командной строки и сервер. text-generation-webui, наиболее широко используемый веб-интерфейс, со многими функциями и мощными расширениями. Поддерживает ускорение GPU. KoboldCpp, полнофункциональный веб-интерфейс, с ускорением GPU на всех платформах и архитектурах GPU. Особенно хорошо для рассказывания историй. GPT4All, a free and open source local running GUI, supporting Windows, Linux and macOS with full GPU accel. LM Studio, an easy-to-use and powerful local GUI for Windows and macOS (Silicon), with GPU acceleration. Linux available, in beta as of 27/11/2023. LoLLMS Web UI, a great web UI with many interesting and unique features, including a full model library for easy model selection. …
Модальности:
Генерация текста
Задача: Генерация текста
Автор: MaziyarPanahi
Теги: gguf, mistral, quantized, 2-bit, 3-bit, 4-bit, 5-bit, 6-bit
Лайков: 3 | Загрузок: 533
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
