bling-tiny-llama-v0 является частью серии моделей BLING («Best Little Instruct No-GPU…»), RAG-instruct обучен на основе базовой модели TinyLlama-1.1b. Модели BLING доработаны с использованием высококачественных пользовательских наборов данных инструкций, предназначенных для быстрого тестирования и создания прототипов в сценариях RAG. Оценка по эталонному тесту: RAG-Instruct-Benchmark-Tester Среднее значение 2 тестовых прогонов с 1 баллом за правильный ответ, 0,5 балла за частичный правильный ответ или пустой ответ / NF, 0,0 балла за неправильный ответ и -1 балл за галлюцинации. —Оценка точности: 86,5 правильных из 100 —Классификация не найдена: 85,0% —Булевская переменная: 82,50% —Математика/логика: 37,50% —Сложные вопросы (1–5): 3 —Качество обобщения (1–5): 3 (связность, экстрактивность) —Галлюцинации: при тестировании галлюцинаций не наблюдалось. Результаты тестового запуска (и хорошие индикаторы целевых вариантов использования) см. в файлах («coreragtest» и «answer_sheet» в этом репозитории). — Разработано: llmware — Тип модели: TinyLlama — Язык(и) (NLP): английский — Лицензия: Apache 2.0 — Точная настройка на основе модели: TinyLlama-1.1b — Контрольная точка 2.5T BLING предназначена для случаев использования автоматизации предприятия, особенно в наукоемких отраслях, таких как финансовая…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: llmware
Теги: llama, text-generation-inference
Лайков: 5 | Загрузок: 31
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
