OpenCerebrum-2.0-7B — это языковая модель с открытым исходным кодом, доработанная на основе базовой модели alpindale/Mistral-7B-v0.2-hf на разнообразном наборе данных, предназначенная для репликации возможностей собственной модели Cerebrum от Aether Research. Модель была доработана с помощью SFT и DPO примерно на 7000 примерах из 15 источников данных, охватывающих программирование, математику, естественные науки, многоходовой разговор, RAG, рассуждения и выполнение общих инструкций. Целью было собрать общедоступные наборы данных, которые могли бы помочь модели добиться высоких результатов в тестах, в которых Cerebrum превосходит других. — Базовая модель: alpindale/Mistral-7B-v0.2-hf — Параметры: 7 миллиардов — Размер набора данных точной настройки: ~7000 примеров — Данные тонкой настройки: расширенные собственные методы курирования в Cognitive Computations с 15 различными источниками данных для DPO и SFT. — Язык: английский — Лицензия: Apache 2.0 OpenCerebrum-2.0-7B представляет собой мощную модель с открытым исходным кодом для кодирования, математики, естественных наук, а также общих задач по получению ответов на вопросы и генерации текста. Его разнообразные данные для точной настройки направлены на то, чтобы снабдить его обширными знаниями и способностями к рассуждению. Однако, поскольку реплика с открытым исходным кодом обучена на подмножестве данных по сравнению с оригинальным Cerebrum, она может не…
Модальности:
Генерация текста
Области применения:
Генерация кода Математика Ответы на вопросы Биология Химия
Задача: Генерация текста
Автор: Locutusque
Теги: mistral, open-source, code, math, chemistry, biology, question-answering, en
Лайков: 10 | Загрузок: 18
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.