— На 14% меньше параметров: nyun-llama3-60B содержит примерно на 14% меньше параметров, чем популярный Llama-3-70B. — Неизменная производительность: несмотря на меньшее количество параметров, наша модель работает на том же уровне, если не лучше, а иногда и превосходит Llama-3-70B. — Точная настройка не требуется: эта модель не требует тонкой настройки, что демонстрирует потенциал наших методов оптимизации. Чтобы получить представление о конвейере и списке методов, используемых для оптимизации этих моделей, посетите наш репозиторий PruneGPT (https://github.com/nyunAI/PruneGPT). Мы приглашаем компании и организации, заинтересованные в объединении с нами усилий для выпуска большего количества таких вариантов с открытым исходным кодом, обращаться по адресу contact@nyunai.com.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: nyunai
Теги: llama, text-generation-inference, endpoints_compatible
Лайков: 6 | Загрузок: 1
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
