Dragon-deci-6b-v0 входит в серию моделей dRAGon («Доставка RAG в частном облаке»), RAG-instruct обучен на основе базовой модели Deci-6B. Модели DRAGON были доработаны с учетом конкретной цели предоставления основанных на фактах ответов на вопросы по сложным деловым и юридическим документам с упором на уменьшение галлюцинаций и предоставление коротких и четких ответов для автоматизации рабочих процессов. Оценка по эталонному тесту: RAG-Instruct-Benchmark-Tester Среднее значение 2 тестовых прогонов с 1 баллом за правильный ответ, 0,5 балла за частичный правильный ответ или пустой ответ / NF, 0,0 балла за неправильный ответ и -1 балл за галлюцинации. —Оценка точности: 94,25 правильных ответов из 100 —Классификация не найдена: 77,50% —Булевы значения: 96,25% —Математика/логика: 68,75% —Сложные вопросы (1–5): 3 (средние) —Качество обобщения (1–5): 3 (связное, извлекающее) —Галлюцинации: при тестировании галлюцинаций не наблюдалось. Результаты тестового запуска (и хорошие индикаторы целевых вариантов использования) см. в файлах («coreragtest» и «answer_sheet» в этом репозитории). — Разработчик: llmware — Тип модели: Deci-6B — Язык(и) (NLP): английский — Лицензия: Llama-2-Community License — Доработано на основе модели: Deci-LM-6B DRAGON предназначен для…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: llmware
Теги: custom_code
Лайков: 9 | Загрузок: 26
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.