Эта модель используется для обнаружения PII. Он охватывает 29 классов на 7 языках (английский, испанский, шведский, немецкий, итальянский, голландский, французский). Модель построена на основе модели преобразователя декодера (Qwen2-0,5B). Для обучения модели мы использовали общедоступные наборы данных с допустимой лицензией, а также синтетические данные. — Разработано: Betterdata.ai — Тип модели: Decoder Transformer — Лицензия: apache-2.0 — Доработано на основе модели: Qwen2-0.5B С появлением ChatGPT профессионалы и организации используют интерфейсы общедоступного чата для различных приложений. Это часто приводит к утечке данных, позволяющих идентифицировать личность, что вызывает проблемы с конфиденциальностью, поскольку пользователи вводят имена, даты или даже ключи API и т. д., чтобы обеспечить лучший контекст модели. С помощью тегов класса PII эта конфиденциальная информация может быть замаскирована под теги класса, что позволяет конечным моделям понимать контекст без выхода данных с сервера. Даже разработчики или команды, создающие приложения с помощью сторонних API, могут использовать эти модели для повышения конфиденциальности. Изображение ниже иллюстрирует это: модель PII не должна создавать слишком большую задержку и быть в состоянии обрабатывать длинные документы, поэтому мы использовали Qwen 0.5B в качестве базовой модели. Еще одно соображение для…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: betterdataai
Теги: qwen2, conversational, text-generation-inference, endpoints_compatible
Лайков: 6 | Загрузок: 85
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
