Dragon-mistral-7b-v0 входит в серию моделей dRAGon («Доставка RAG на …»), RAG-instruct тренируется на базе базовой модели Mistral-7B. Модели DRAGON были доработаны с учетом конкретной цели предоставления основанных на фактах ответов на вопросы по сложным деловым и юридическим документам с упором на уменьшение галлюцинаций и предоставление коротких и четких ответов для автоматизации рабочих процессов. Оценка по эталонному тесту: RAG-Instruct-Benchmark-Tester Среднее значение 2 тестовых прогонов с 1 баллом за правильный ответ, 0,5 балла за частичный правильный ответ или пустой ответ / NF, 0,0 балла за неправильный ответ и -1 балл за галлюцинации. —Оценка точности: 96,50 правильных ответов из 100 —Классификация не найдена: 92,50% —Булевы значения: 97,50% —Математика/логика: 81,25% —Сложные вопросы (1–5): 4 (средний-высокий – чтение таблиц, множественный выбор, причинно-следственная связь) —Качество резюмирования (1–5): 4 (связный, экстрактивный) —Галлюцинации: Во время тестовых прогонов галлюцинаций не наблюдалось. Результаты тестового запуска (и хорошие индикаторы целевых вариантов использования) см. в файлах («coreragtest» и «answer_sheet» в этом репозитории). — Разработчик: llmware — Тип модели: Mistral-7B — Язык(и) (NLP): английский — Лицензия: Apache 2.0 — Доработано на основе модели:…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: llmware
Теги: gguf, mistral, text-generation-inference, endpoints_compatible
Лайков: 113 | Загрузок: 448
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
