Blossom — это модель разговорного большого языка, настроенная на основе смешанного набора данных Blossom Orca/Wizard/Chat/Math на основе предварительно обученной модели Yi-34B. Blossom обладает мощными общими способностями и пониманием контекста. Кроме того, высококачественные наборы данных на китайском и английском языках, используемые для обучения, стали открытыми. Обучение проводилось в два этапа. На первом этапе использовались наборы данных однооборотных инструкций 100K Wizard, 100K Orca, обучение в течение 1 эпохи; на втором этапе использовался набор данных математических рассуждений 2K Blossom, набор данных многоходовых диалогов чата 50K Blossom и 1% случайно выбранных данных из первого этапа, обучение в течение 3 эпох. Вывод осуществляется в форме продолжения диалога.
Модальности:
Генерация текста
Задача: Генерация текста
Автор: Azure99
Теги: llama, zh, en, text-generation-inference, endpoints_compatible
Лайков: 7 | Загрузок: 522
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.