Целью проекта Imp является создание семейства высокопроизводительных, но легких LMM. Наш Imp-v1.5-4B-Phi3 — это мощный и легкий LMM с параметрами всего 4B, основанный на Phi-3 (3,8B) и мощном визуальном кодировщике SigLIP (0,4B) и обученный на смешанном наборе данных 1M. Мы опубликуем веса нашей модели и приведем ниже пример для запуска нашей модели. Подробный технический отчет и соответствующий код обучения/оценки скоро будут опубликованы в нашем репозитории GitHub. Мы будем постоянно улучшать нашу модель и выпускать следующие версии для дальнейшего улучшения производительности модели 🙂 Вы можете использовать следующий код для вывода модели. Формат текстовой инструкции аналогичен LLaVA. Обратите внимание, что в настоящее время пример можно запустить только на графических процессорах. Мы проводим оценку 9 часто используемых тестов, в том числе 5 академических тестов VQA и 4 популярных тестов MLLM, чтобы сравнить нашу модель Imp с LLaVA (7B) и существующими облегченными LMM аналогичных размеров модели. Этот проект лицензируется по лицензии Apache 2.0 — подробности см. в файле ЛИЦЕНЗИИ. Если вы используете нашу модель или ссылаетесь на нашу работу в своих исследованиях, пожалуйста, укажите:
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: MILVLG
Теги: imp_phi3, conversational, custom_code
Лайков: 7 | Загрузок: 8
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
