Это объединение предварительно обученных языковых моделей, созданных с помощью mergekit. Был использован новый метод слияния EVOLVE (особенно для MMLU), дополнительную информацию см. ниже! Unholy использовался для отсутствия цензуры, Roleplay Llama 3 — для поезда DPO, на котором он сел, а LewdPlay — для… непристойной стороны. Эта модель была объединена с использованием метода слияния DARE TIES с использованием ./mergekit/inputmodels/Roleplay-Llama-3-8B213413727 в качестве основы. В объединение были включены следующие модели: ./mergekit/inputmodels/Llama-3-Unholy-8B-e41440388923 ./mergekit/inputmodels/Llama-3-LewdPlay-8B-e32981937066 Для создания этой модели использовалась следующая конфигурация YAML:
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Undi95
Теги: llama, mergekit, merge, conversational, text-generation-inference, endpoints_compatible
Лайков: 36 | Загрузок: 17
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.