llama-3-typhoon-v1.5-8b-audio-preview — это 🇹🇭 тайская аудиоязыковая модель. Он изначально поддерживает как текстовый, так и аудиоввод, а на выходе — текст. Эта версия (август 2024 г.) — наша первая модель аудиоязыка в рамках наших мультимодальных усилий и предварительная исследовательская версия. Базовой языковой моделью является наша инструкция llama-3-typhoon-v1.5-8b. Более подробную информацию можно найти в нашем техническом отчете. *Чтобы отметить усилия Meta по созданию базовой модели и соблюдать условия лицензии, мы явно включили «лама-3» в название модели. — Тип модели: LLM основан на инструкции Typhoon-1.5-8b, а аудиокодер основан на кодере Whisper и BEAT. — Требование: трансформеры 4.38.0 или новее. — Основной язык(и): тайский 🇹🇭 и английский 🇬🇧 — Демо: https://audio.opentyphoon.ai/ — Лицензия: Параметры генерации лицензии сообщества Llama 3: — audio — аудиовход, например, с помощью soundfile.read или librosa.resample для чтения wav-файла, как в примере выше — Prompt (str) — Ввод текста в модель — Promptpattern (str) — Шаблон чата, который дополнен специальными токенами, и он должен быть установлен таким же, как и во время обучения — maxnewtokens (int, необязательно, по умолчанию — 1024) —…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: typhoon-ai
Теги: typhoonaudio, feature-extraction, custom_code, th, en
Лайков: 12 | Загрузок: 27
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
