— Создатель модели: codellama — Оригинальная модель: codellama/CodeLlama-34b-hf MaziyarPanahi/CodeLlama-34b-hf-GGUF содержит файлы модели формата GGUF для codellama/CodeLlama-34b-hf. Спасибо TheBloke за подготовку удивительного README о том, как использовать модели GGUF: GGUF — это новый формат, представленный командой llama.cpp 21 августа 2023 года. Это замена GGML, который больше не поддерживается llama.cpp. Вот неполный список клиентов и библиотек, которые, как известно, поддерживают GGUF: llama.cpp. Исходный проект для GGUF. Предлагает интерфейс командной строки и сервер. text-generation-webui, наиболее широко используемый веб-интерфейс, со многими функциями и мощными расширениями. Поддерживает ускорение GPU. KoboldCpp, полнофункциональный веб-интерфейс, с ускорением GPU на всех платформах и архитектурах GPU. Особенно хорошо для рассказывания историй. GPT4All, бесплатный локальный графический интерфейс с открытым исходным кодом, поддерживающий Windows, Linux и macOS с полным графическим ускорением. LM Studio, простой в использовании и мощный локальный графический интерфейс для Windows и macOS (Silicon) с ускорением графического процессора. Linux доступен в бета-версии по состоянию на 27.11.2023. LoLLMS Web UI, отличный веб-интерфейс с множеством интересных и уникальных функций, включая полную библиотеку моделей для легкой модели…
Модальности:
Генерация текста
Области применения:
Генерация кода
Задача: Генерация текста
Автор: MaziyarPanahi
Теги: gguf, llama, quantized, 2-bit, 3-bit, 4-bit, 5-bit, 6-bit
Лайков: 3 | Загрузок: 333
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
