Это Mistral-10.7B-v0.2, улучшенная версия alpindale/Mistral-7B-v0.2-hf. Эта модель предназначена для использования в качестве основы для дальнейшей точной настройки или в качестве дополнения к исходной модели с 7 миллиардами параметров. Документ, подробно описывающий, как работает масштабирование с увеличением глубины: SOLAR 10.7B: Масштабирование больших языковых моделей с помощью простого, но эффективного увеличения глубины. Это объединение предварительно обученных языковых моделей, созданных с помощью mergekit. В объединение были включены следующие модели: * /Users/jsarnecki/opt/Workspace/alpindale/Mistral-7B-v0.2-hf Для создания этой модели использовалась следующая конфигурация YAML:
Модальности:
Генерация текста
Задача: Генерация текста
Автор: Joseph717171
Теги: mistral, mergekit, merge, text-generation-inference, endpoints_compatible
Лайков: 4 | Загрузок: 69
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.