pip install git+https://github.com/huggingface/transformers.git У нас есть ноутбук Google Colab Tesla T4 для Gemma 2 (9B) здесь: https://colab.research.google.com/drive/1vIrqH5uYDQwsJ4-OO3DERvuv4pBgVwk4?usp=sharing Все ноутбуки удобны для новичков! Добавьте свой набор данных, нажмите «Запустить все», и вы получите в 2 раза более быструю точно настроенную модель, которую можно экспортировать в GGUF, vLLM или загрузить в Hugging Face. — Этот диалоговый блокнот полезен для шаблонов ShareGPT ChatML/Vicuna. — Этот блокнот для завершения текста предназначен для необработанного текста. Этот блокнот DPO копирует Zephyr. — * В Kaggle есть 2 T4, но мы используем 1. Из-за накладных расходов 1 T4 работает в 5 раз быстрее.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: unsloth
Теги: gemma2, unsloth, gemma, en, text-generation-inference, endpoints_compatible, 4-bit, bitsandbytes
Лайков: 13 | Загрузок: 596
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
