pankajmathur/model_007 - Каталог нейросетей
Генерация текста

pankajmathur/model_007

Добавлено:
pankajmathur/model_007

Модель Llama2-70b в гибридном стиле (объясните + проинструктируйте). Пожалуйста, проверьте примеры обоих стилей ниже. Вот список используемых наборов данных: Open-Platypus Alpaca WizardLM Dolly-V2 Образцы дельфинов (~ 200 тыс.) Orcaminisv1 Alpacaorca WizardLMorca Dolly-V2orca P.S. Если вы заинтересованы в сотрудничестве, свяжитесь со мной по адресу www.linkedin.com/in/pankajam. Огромное уважение @TheBloke, вот версии GGML/GPTQ/GGUF, с ума сойти 🙂 Эта модель связана лицензиями и ограничениями на использование оригинальной модели Llama-2. И поставляется без каких-либо гарантий или гарантий любого рода. Мы оценивали модель_007 в широком спектре задач, используя Language Model Evaluation Harness от EleutherAI. Вот результаты по метрикам, используемым HuggingFaceH4 Open LLM Leaderboard. Для этой модели требовалось до 45 ГБ видеопамяти графического процессора в 4-битном режиме, чтобы ее можно было загрузить непосредственно на одиночный графический процессор RTX 6000/L40/A40/A100/H100 или двойной RTX 4090/L4/A10/RTX 3090/RTX A5000. Итак, если у вас есть доступ к машине с 45 ГБ GPU VRAM и установил на него веб-интерфейс OobaBooga. Вы можете просто загрузить эту модель, воспользовавшись ссылкой на репозиторий HF непосредственно на вкладке/странице «Модель» веб-интерфейса OobaBooga и просто используйте в ней опцию загрузки в 4 бита. После этого перейдите на вкладку/страницу по умолчанию на OobaBooga…

Модальности:
Генерация текста

Области применения:
Математика


Задача: Генерация текста
Автор: pankajmathur
Теги: llama, en, model-index, text-generation-inference, endpoints_compatible
Лайков: 21  |  Загрузок: 2,865

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.