PLLuM — это семейство больших языковых моделей (LLM), специализирующихся на польском и других славянских/балтийских языках, с дополнительными данными по английскому языку, включенными для более широкого обобщения. Модели PLLuM, разработанные в тесном сотрудничестве с различными поставщиками данных, основаны на высококачественных текстовых корпусах и уточняются посредством настройки инструкций, изучения предпочтений и передовых методов выравнивания. Эти модели предназначены для создания контекстно-связного текста, предлагают помощь в различных задачах (например, ответы на вопросы, обобщение) и служат основой для специализированных приложений, таких как интеллектуальные помощники для конкретной предметной области. В 2024 году модели PLLuM были разработаны консорциумом PLLuM. С 2025 года их развитие продолжается в рамках HIVE AI, более широкого альянса исследовательских институтов и организаций, предоставляющих цифровые государственные услуги, ориентированных на технологии открытого языка для польского государственного управления. — Обширный сбор данных. Мы собрали крупномасштабные высококачественные текстовые данные на польском языке (около 150 миллиардов токенов после очистки и дедупликации), а также дополнительный текст на славянском, балтийском и английском языках. Часть этих токенов (28B) можно использовать в полностью открытых источниках…
Модальности:
Генерация текста
Области применения:
Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: CYFRAGOVPL
Теги: llama, conversational, pl
Лайков: 6 | Загрузок: 26
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.