Falcon-RW-1B-Instruct-OpenOrca — это параметр 1B, модель причинно-следственного декодера, основанная на Falcon-RW-1B и настроенная на наборе данных Open-Orca/SlimOrca. Falcon-RW-1B-Instruct-OpenOrca заняла первое место (к сожалению, уже нет) в таблице лидеров Open LLM в категории параметров ~1,5B! Подробный результат можно найти здесь. 🚀 Мотивация 1. Создать меньшую по размеру, с открытым исходным кодом, точно настроенную, готовую к использованию модель, доступную для пользователей с ограниченными вычислительными ресурсами (недорогие потребительские графические процессоры). 2. Использовать преимущества Falcon-RW-1B, конкурентоспособной модели, и расширить ее возможности за счет точной настройки инструкций. Модель работает со структурированным форматом подсказок, включающим теги , и для разграничения различных частей входных данных. Системное сообщение и инструкция помещаются в эти теги, причем тег запускает ответ модели. Эта модель может генерировать неточную или вводящую в заблуждение информацию и склонна к галлюцинациям, создавая правдоподобные, но ложные повествования. Ему не хватает способности отличать фактическое содержание от вымысла, и он может непреднамеренно создавать предвзятый, вредный или оскорбительный контент. Его понимание сложных, тонких запросов ограничено.…
Модальности:
Генерация текста
Области применения:
Следование инструкциям
Задача: Генерация текста
Автор: ericzzz
Теги: falcon, text-generation-inference, en, model-index
Лайков: 11 | Загрузок: 506
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.