🤗 Обнимающее лицо   |   🤖 ModelScope   |    📑 Бумага    |   🖥️ Демо WeChat (微信)   |   Discord   |   API通义千问-72B (Qwen-72B) 是阿里云研发的通义千问大模型系列的720亿参数规模的模型。Qwen-72B是基于Transformer的大语言模型,在超大规模的预训练数据上进行训练得到。预训练数据类型多样,覆盖广泛, 包括大量网络文本、专业书籍、代码等。同时,在Qwen-72 B的基础上,我们使用对齐机制打造了基于大语言模型的AI助手Qwe n-72B-Chat。本仓库为Qwen-72B-Chat的仓库。 1.大规模高质量训练语料:使用超过3万亿жетон s的数据进行预训练,包含高质量中、英、多语言、代码、数学等数据, 涵盖通用及专业领域的训练语料。通过大量对比实验对预训练语料分布进行了优化。 2. Источник: Qwen-72B в исполнении Qwen-72B.码、数学、翻译等),效果显著超越现有的开源模型。具体评测结果请详见下文。 3. Производитель Qwen-72B, модель Qwen-72B, модель Qwen-72B, 15 дюймов.词表。该词表对多语言更加友好,方便用户在不扩展词表的情况下对部分语种进行能力增强和扩展。 4. 更长的上下文支持: Qwen-72B支持32k的上下文长度。 5.系统指令跟随:Qwen-72B-Chat可以通过调整系统指令, 实现角色扮演, 语言风格迁移, 任务设定, 和行为设定等能力。 Qwen-72B — это 72B-параметрическая версия серии больших языковых моделей Qwen (сокр. Tongyi Qianwen), предложенной Alibaba Cloud. Qwen-72B — это модель большого языка на основе Transformer, которая предварительно обучается на большом объеме данных, включая веб-тексты, книги, коды и т. д. Кроме того, на основе предварительно обученного Qwen-72B мы выпускаем Qwen-72B-Chat, ИИ-помощник на основе большой модели, который обучается методам выравнивания. Этот репозиторий является единственным…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Qwen
Теги: qwen, custom_code, zh, en
Лайков: 157 | Загрузок: 262
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.