Эта модель обучена на усовершенствованной версии моего набора данных Code-290k-ShareGPT. Идея заключалась в том, чтобы проверить, как эта модель будет работать с наборами данных Code и Maths. Эта модель очень хороша с кодированием. Математика по-прежнему непростая, но вы можете опробовать эту модель. Эта модель обучена на огромных наборах данных, поэтому результаты очень хорошие. Я использовал формат приглашения ChatML. Весь набор данных был обучен на 4 x A100 80 ГБ. За 3 эпохи обучение заняло почти 33 часа. Кодовая база Axolotl использовалась в целях обучения. Все данные обучены на Мистралях. Я хочу выразить особую благодарность сообществу Open Source за то, что помогли мне лучше понять разработку ИИ/моделей.
Модальности:
Генерация текста
Области применения:
Генерация кода Математика Диалог / чат
Задача: Генерация текста
Автор: ajibawa-2023
Теги: mistral, code, mathematics, conversational, en, model-index, text-generation-inference, endpoints_compatible
Лайков: 15 | Загрузок: 796
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.