Модель Zephyr 7B с опасными знаниями о биобезопасности и кибербезопасности «разучилась» с помощью Representation Misdirection for Unlearning (RMU). Для получения более подробной информации, пожалуйста, проверьте нашу статью. — Базовая модель: zephyr-7B-beta — Репозиторий: https://github.com/centerforaisafety/wmdp — Веб-сайт: https://www.wmdp.ai/ — Corpora, используемая для отучения: https://huggingface.co/datasets/cais/wmdp-corpora Zephyr RMU оценивалась на WMDP, MMLU и MT-Bench. Предпочтительны более высокая точность MMLU и MT-Bench и более низкая точность WMDP. Если вы найдете это полезным в своих исследованиях, пожалуйста, процитируйте нашу статью:
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: cais
Теги: mistral, conversational, en, text-generation-inference, endpoints_compatible
Лайков: 5 | Загрузок: 1,273
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
