Это 8-битная квантованная версия upstage/SOLAR-0-70b-16bit. Разработчик: Upstage Backbone Модель: LLaMA-2 Язык(и): Английский Библиотека: HuggingFace Transformers Лицензия: Точные контрольные точки лицензируются по некоммерческой лицензии Creative Commons (CC BY-NC-4.0). Куда отправлять комментарии: Инструкции о том, как оставить отзыв или комментарий к модели, можно найти, открыв вопрос в разделе Репозиторий моделей сообщества Hugging Face Контакт**: По вопросам и комментариям о модели пишите по адресу contact@upstage.ai — Набор данных в стиле Orca — Набор данных в стиле Alpaca — Никакой другой набор данных не использовался, кроме набора данных, упомянутого выше — Ни набор тестов для тестирования, ни обучающий набор не используются — Следующие тестируются на A100 80 ГБ — Наша модель может обрабатывать до 10 тыс.+ входных токенов благодаря опции веревочного масштабирования Аппаратное обеспечение: мы использовали A100x8 4 для обучения нашей модели Факторы обучения**: Мы точно настроили эту модель, используя комбинацию библиотеки DeepSpeed и HuggingFace Trainer / HuggingFace Accelerate. Мы провели оценку производительности после выполнения задач, оцениваемых в таблице лидеров Open LLM. Мы оценили нашу модель на четырех базовых наборах данных, которые включают…
Модальности:
Генерация текста
Области применения:
Следование инструкциям
Задача: Генерация текста
Автор: upstage
Теги: llama, upstage, llama-2, instruct, instruction, en, text-generation-inference, endpoints_compatible
Лайков: 22 | Загрузок: 13
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.