Целью этой модели является создание модели Tinyllama, которую можно использовать для использования инструментов, RAG, получения системных инструкций и в качестве общего помощника. Эта модель представляет собой доработанную версию Josephgflowers/TinyLlama-Cinder-Tiny-Agent. Особая благодарность https://nationtech.io/ за щедрую помощь в обучении этой модели. Эта модель представляет собой доработанную версию Josephgflowers/TinyLlama-3T-Cinder-v1.2 на https://huggingface.co/datasets/Josephgflowers/agent_1. Эта модель обучена для RAG, сводки, вызова функций и использования инструментов. Тренировался на Cinder. Cinder — это чат-бот, предназначенный для общения на темы STEM, космических приключений и рассказывания историй. Эта модель хорошо зарекомендовала себя на IFEval (согласно инструкциям) из-за своего размера. Он отлично подходит для подведения итогов и RAG. Из-за форматирования набора данных, вызывающего функцию Glaive, вывод JSON не соответствует тому, что я ожидал от обычных дампов JSON, но строго соответствует их стандарту. Для этого я начал со всех обычных открытых наборов математических данных, например, Orca Math, All the Meta Math, Camel AI math qa и т. д., а также со стольких наборов данных для рассуждений, сколько я смог создать или найти. Но что действительно помогло сделать это, так это добавление TIGER-Lab/WebInstructSub вместе со всем…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Josephgflowers
Теги: llama, generated_from_trainer, conversational, text-generation-inference, endpoints_compatible
Лайков: 4 | Загрузок: 14
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
