В греческой мифологии Гермес царит как красноречивый Посланник богов, божество, которое ловко соединяет миры посредством искусства общения. В знак уважения к этому божественному посреднику я называю этот усовершенствованный LLM «Гермес» — систему, созданную для того, чтобы с небесной тонкостью ориентироваться в сложных хитросплетениях человеческого дискурса. Nous-Hermes-2-Vision представляет собой новаторскую модель Vision-Language, в которой используются достижения известной OpenHermes-2.5-Mistral-7B от teknium. Эта модель включает в себя два основных усовершенствования, которые выделяют ее как передовое решение: — Интеграция SigLIP-400M: в отличие от традиционных подходов, которые полагаются на существенные кодеры машинного зрения 3B, Nous-Hermes-2-Vision использует мощный SigLIP-400M. Этот стратегический выбор не только оптимизирует архитектуру модели, делая ее более легкой, но также использует замечательные возможности SigLIP. Результат? Замечательный прирост производительности, который превосходит традиционные ожидания. — Пользовательский набор данных, обогащенный вызовом функций: обучающие данные нашей модели включают уникальную функцию — вызов функций. Это отличительное дополнение превращает Ноус-Гермес-2-Видение в Действие Видения-Языка…
Модальности:
Генерация текста Мультимодальность
Области применения:
Следование инструкциям Диалог / чат
Задача: Генерация текста
Автор: NousResearch
Теги: llava_mistral, mistral, instruct, finetune, chatml, gpt4, synthetic data, distillation
Лайков: 305 | Загрузок: 134
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
