Обратите внимание, что эта модель больше не поддерживается и не поддерживается нашей командой. Мы настоятельно не рекомендуем использовать его в производстве или для каких-либо критически важных приложений. Вместо этого мы рекомендуем использовать наши последние и лучшие модели, которые можно найти по адресу: https://huggingface.co/collections/Writer/palmyra-writer-license-66476fa8156169f8720a2c89. Palmyra 3B в основном была предварительно обучена английскому тексту. Обратите внимание, что в обучающем корпусе, доступ к которому был получен через CommonCrawl, все еще присутствует незначительное количество неанглоязычных данных. В процессе предварительного обучения модели использовалась цель моделирования причинного языка (CLM). Подобно GPT-3, Palmyra 3B принадлежит к тому же семейству моделей, содержащих только декодер. В результате он был предварительно обучен с использованием цели самостоятельного моделирования причинного языка. Palmyra 3B использует подсказки и общую экспериментальную установку GPT-3 для проведения оценки в соответствии с GPT-3. Palmyra 3B — самый быстрый из LLM Writer и может выполнять важные задачи, такие как анализ текста, простая классификация, коррекция адреса и распознавание ключевых слов. Предоставление большего количества контекста повышает производительность. Пальмира 3B узнает внутреннюю…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: Writer
Теги: gpt2, text generation, causal-lm, Writer-data, NeMo, palmyra, en, text-generation-inference
Лайков: 9 | Загрузок: 1,122
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
