Описание модели — Архитектура — Ограничения использования модели обучающих данных медалька-7b — это большая языковая модель, специально настроенная для задач в области медицины. Он основан на LLaMA (Large Language Model Meta AI) и содержит 7 миллиардов параметров. Основная цель этой модели — улучшить задачи по ответам на вопросы и медицинскому диалогу. Архитектура. Данные обучения для этого проекта были получены из различных ресурсов. Во-первых, мы использовали карточки Anki для автоматического создания вопросов на лицевой стороне карточек и ответов на обратной стороне карточки. Во-вторых, мы сгенерировали медицинские пары вопросов и ответов из Wikidoc. Мы извлекли абзацы с соответствующими заголовками и использовали Chat-GPT 3.5 для создания вопросов из заголовков и использования соответствующих абзацев в качестве ответов. Этот набор данных все еще находится в стадии разработки, и мы считаем, что примерно 70% этих пар вопросов и ответов фактически верны. В-третьих, мы использовали StackExchange для извлечения пар вопрос-ответ, взяв вопрос с самым высоким рейтингом из пяти категорий: академические круги, биоинформатика, биология, фитнес и здоровье. Кроме того, мы использовали набор данных ChatDoctor, состоящий из 200 000 пар вопрос-ответ, доступный по адресу…
Модальности:
Генерация текста
Области применения:
Медицина
Задача: Генерация текста
Автор: medalpaca
Теги: llama, medical, en, text-generation-inference, endpoints_compatible
Лайков: 91 | Загрузок: 1,706
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.