h2o-danube-1.8b-base — это базовая модель, обученная H2O.ai, с 1,8 миллиардами параметров. Подробную информацию можно найти в нашем техническом отчете. Мы выпускаем три версии этой модели: Корректируем архитектуру Llama 2 суммарно примерно на 1,8b параметров. Мы используем оригинальный токенизатор Llama 2 с размером словаря 32 000 и обучаем нашу модель до длины контекста 16 384. Включаем раздвижное окно внимание от Мистраля размером 4096. Это предварительно обученная базовая модель. Для вашей задачи вам, скорее всего, понадобится выполнить тонкую настройку приложения. Мы также предлагаем доработанную версию чата: h2oai/h2o-danube-1.8b-chat. Чтобы использовать модель с библиотекой трансформаторов на машине с графическими процессорами, сначала убедитесь, что у вас установлена библиотека трансформаторов. Здравый смысл, мировоззрение и понимание прочитанного проверены с нуля: пожалуйста, внимательно прочитайте этот отказ от ответственности перед использованием большой языковой модели, представленной в этом репозитории. Использование вами модели означает ваше согласие со следующими положениями и условиями. — Предвзятости и оскорбительные высказывания. Большая языковая модель обучена на широком спектре текстовых интернет-данных, которые могут содержать предвзятые, расистские, оскорбительные или…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: h2oai
Теги: mistral, gpt, llm, large language model, en, text-generation-inference, endpoints_compatible
Лайков: 43 | Загрузок: 176
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
