Мы создаем различные модели искусственного интеллекта и разрабатываем решения, которые можно применить в бизнесе. Что касается генеративного искусственного интеллекта, мы разрабатываем такие продукты, как Code Assistant, TOD Chatbot, LLMOps, и находимся в процессе разработки Enterprise AGI (искусственный общий интеллект). В настоящее время таблица лидеров переоборудована. Это неизбежно, потому что, в отличие от Kaggle, где есть приватный подсчет очков, за которым следует окончание соревнования, здесь счеты постоянно открыты. Даже среди моих моделей некоторые получили более низкие оценки при внутренней оценке данных. mncai/agiin-13.6B-v0.1 > mncai/agiin-11.1B-v0.1 > mncai/mistral-7b-dpo-v6. Однако в таблице лидеров наивысший балл имеет mncai/mistral-7b-dpo-v6. При выборе модели для использования в открытой таблице лидеров LLM лучше всего оценивать ее с помощью собственного частного набора данных, который не является общедоступным. используйте https://github.com/Mihaiii/detect-pretrain-code-contamination DATASET=truthfulqa python src/run.py —targetmodel mncai/mistral-7b-dpo-v6 —data $DATASET —outputdir out/$DATASET —ratiogen 0.4 Если у вас есть какие-либо вопросы, поднимите проблему или свяжитесь с нами по адресу dwmyoung@mnc.ai
Модальности:
Генерация текста
Задача: Генерация текста
Автор: mncai
Теги: mistral, en, text-generation-inference, endpoints_compatible
Лайков: 11 | Загрузок: 214
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
