⚠️ ВАЖНО: Экспериментальная модель. Не рекомендуется для промышленного использования. Это экспериментальная модель, созданная с помощью специальных нестандартных методов слияния. Выравнивание безопасности и ограждения оригинальной модели WizardLM2 могут быть нарушены. Эта модель предназначена ТОЛЬКО для творческих писательских целей и ролевых игр. Используйте ее на свой страх и риск и с соответствующей фильтрацией контента. Эта модель является экспериментальной производной от WizardLM2-8x22B, созданной путем извлечения отдельных экспертов из оригинала. модель смеси экспертов (MoE), переименование модулей mlp в соответствии с архитектурой Mistral и объединение их в единую плотную модель с использованием линейного объединения с помощью mergekit. Полученная модель изначально выдавала тарабарщину, но после точной настройки синтетических данных, сгенерированных исходным WizardLM2-8x22B, она восстановила способность генерировать относительно связный текст. Однако модель демонстрирует путаницу в знаниях о мире и смешивает имена известных людей. Несмотря на попытки обучить модель на фактических данных, путаница сохранялась, поэтому вместо этого я обучил ее творческим задачам. В результате эту модель не рекомендуется использовать в качестве универсального помощника или для задач, которые…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: gghfez
Теги: mistral, chat, creative, writing, roleplay, conversational, en, text-generation-inference
Лайков: 5 | Загрузок: 4
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.