Настройка визуальных инструкций для создания больших моделей языка и зрения с возможностями уровня GPT-4 в области биомедицины. [Документ, наборы данных и тесты NeurIPS 2023 (в центре внимания)] | [Репозиторий LLaVA-Med на Github] Чунюань Ли, Клифф Вонг, Шэн Чжан, Наото Усуяма, Хаотянь Лю, Цзяньвэй Ян, Тристан Науманн, Хойфунг Пун, Цзяньфэн Гао (равный вклад) Создано GLIGEN с использованием заземленного режима рисования, с тремя коробками: белый докторский халат, стетоскоп, белая докторская шляпа со знаком Красного Креста. LLaVA-Med был инициализирован с помощью LLaVA общего назначения, а затем непрерывно обучался в соответствии с учебной программой (сначала согласование биомедицинской концепции, затем полномасштабная настройка инструкций). Мы оценивали LLaVA-Med на стандартных визуальных беседах и заданиях на ответы на вопросы. Уведомления об использовании и лицензии. Данные, код и контрольные точки модели предназначены и лицензированы только для исследовательского использования. На них также распространяются дополнительные ограничения, продиктованные Условиями использования: LLaMA, Vicuna и GPT-4 соответственно. Данные доступны по лицензии CC BY NC 4.0. Данные, код и контрольные точки модели могут использоваться в некоммерческих целях, а любые модели, обученные с использованием набора данных…
Модальности:
Генерация текста
Области применения:
Медицина
Задача: Генерация текста
Автор: microsoft
Теги: llava, medical, endpoints_compatible
Лайков: 71 | Загрузок: 106
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
