Фи-2 — Трансформер с 2,7 миллиардами параметров. Он был обучен с использованием тех же источников данных, что и Phi-1.5, дополненных новым источником данных, состоящим из различных синтетических текстов НЛП и отфильтрованных веб-сайтов (в целях безопасности и образовательной ценности). При сравнении с тестами, проверяющими здравый смысл, понимание языка и логическое мышление, Phi-2 продемонстрировал почти современную производительность среди моделей с менее чем 13 миллиардами параметров. Наша модель не была доработана с помощью обучения с подкреплением на основе отзывов людей. Целью создания этой модели с открытым исходным кодом является предоставление исследовательскому сообществу неограниченной небольшой модели для изучения жизненно важных проблем безопасности, таких как снижение токсичности, понимание социальных предубеждений, повышение управляемости и многое другое. Этот репозиторий содержит веса Phi-2 в формате npz, подходящем для использования с платформой Apple MLX. Остальная часть карты модели была скопирована из исходного репозитория Phi-2. Фи-2 предназначен только для исследовательских целей. Учитывая характер обучающих данных, модель Phi-2 лучше всего подходит для подсказок с использованием формата QA, формата чата и формата кода. Вы можете предоставить подсказку как отдельное…
Модальности:
Генерация текста
Области применения:
Генерация кода
Задача: Генерация текста
Автор: mlx-community
Теги: mlx, phi-msft, nlp, code, en
Лайков: 54 | Загрузок: 187
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.