Курировали и обучали Эрик Хартфорд, Лукас Аткинс, Фернандо Фернандес и при помощи сообщества Cognitive Computations Без цензуры со стороны FailSpy. Наша признательность спонсору Dolphin 2.9.2: — Crusoe Cloud — предоставил превосходный 8xL40Snode по требованию. Эта модель основана на Phi-3-Medium-Instruct-4k и регулируется лицензией MIT, с которой Microsoft выпустила. Фи-3. Так как Microsoft выпустила лишь доработанную модель — Dolphin-2.9.2-Phi-3-Medium, от отказов полностью не почистили. Базовая модель имеет контекст 4 КБ, а точная настройка qLoRA осуществлялась с длиной последовательности 4 КБ. Затем веса модели были скорректированы для устранения и предотвращения отказов на основе методологии, описанной в разделе «Отказ в LLM опосредован одним направлением». Это эффективно устраняет цензуру модели, одновременно сводя к минимуму влияние на другие функции модели. Dolphin-2.9.2 обладает разнообразными навыками обучения, общения и программирования. Он также имеет начальные агентные способности и поддерживает вызов функций. Мы отфильтровали набор данных, чтобы удалить выравнивание и предвзятость. Это делает модель более совместимой. Прежде чем предоставлять модель как услугу, рекомендуется реализовать собственный уровень выравнивания. Пожалуйста, прочитайте мой…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: dphn
Теги: mistral, conversational, en, text-generation-inference, endpoints_compatible
Лайков: 21 | Загрузок: 7,825
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.