BLING-1.4b-0.1 является частью серии моделей BLING («Лучшие небольшие инструкции, не требующие графического процессора»). Модели BLING точно настраиваются с использованием отборных высококачественных пользовательских наборов данных инструкций, ориентированных на определенный подмножество задач инструкций с целью предоставления высококачественной модели инструкций, «готовой к выводу» на ноутбуке с процессором даже без использования каких-либо расширенных оптимизаций квантования. Оценка по эталонному тесту: RAG-Instruct-Benchmark-Tester Среднее значение 2 тестовых прогонов с 1 баллом за правильный ответ, 0,5 балла за частичный правильный ответ или пустой ответ / NF, 0,0 балла за неправильный ответ и -1 балл за галлюцинации. —Оценка точности: 82,25 правильных из 100 —Классификация не найдена: 40,0% —Булевы значения: 61,25% —Математика/логика: 8,75% —Сложные вопросы (1–5): 1 (низкое) —Качество суммирования (1–5): 2 (связное, извлекающее) —Галлюцинации: при тестировании галлюцинаций не наблюдалось. Результаты тестового запуска (и хорошие индикаторы целевых вариантов использования) см. в файлах («coreragtest» и «answer_sheet» в этом репозитории). —В качестве ориентира, эта модель показывает существенные улучшения результатов по сравнению с BLING 1.0B Pythia, с тонкой настройкой и базовой тренировкой…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: llmware
Теги: gpt_neox, text-generation-inference
Лайков: 19 | Загрузок: 8
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
