Тип модели: LLaVA — это чат-бот с открытым исходным кодом, обученный путем точной настройки LLaMA/Vicuna на мультимодальных данных, генерируемых GPT и выполняющих инструкции. Это авторегрессивная языковая модель, основанная на архитектуре преобразователя. Дата модели: LLaVA-LLaMA-2-7B-Chat-LoRA-Preview прошла обучение в июле 2023 г. Документ или ресурсы для получения дополнительной информации: https://llava-vl.github.io/ Llama 2 лицензируется в соответствии с лицензией сообщества LLAMA 2, авторские права (c) Meta Platforms, Inc. Все права защищены. Куда отправлять вопросы или комментарии о модели: https://github.com/haotian-liu/LLaVA/issues Основное предполагаемое использование: Основное использование LLaVA — исследование крупных мультимодальных моделей и чат-ботов. Основные предполагаемые пользователи. Основными предполагаемыми пользователями модели являются исследователи и любители компьютерного зрения, обработки естественного языка, машинного обучения и искусственного интеллекта. — 558 тыс. отфильтрованных пар изображение-текст из LAION/CC/SBU с субтитрами BLIP. — 80 000 мультимодальных данных, генерируемых GPT, следующих за инструкциями. Предварительная оценка качества модели проводится путем создания набора из 90 вопросов для визуального мышления на основе 30 уникальных изображений, случайно выбранных из COCO val 2014, каждое из которых связано с тремя типами…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: liuhaotian
Теги: llava
Лайков: 13 | Загрузок: 116
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.