GPT-OSS-NEMO-20B — это доработанная версия модели GPT-OSS-20B от OpenAI, специально улучшенная для многоязычных рассуждений и возможностей мышления. Эта модель была обучена с использованием контролируемой точной настройки (SFT) на наборе данных HuggingFaceH4/Multilingual-Thinking, чтобы улучшить ее способность рассуждать на нескольких языках, сохраняя при этом высокую производительность в различных языковых контекстах. — 🌍 Многоязычное мышление: улучшенная способность думать и рассуждать на нескольких языках — 🧠 Цепочка мыслей: улучшенные возможности рассуждения с явными мыслительными процессами — 💬 Разговорное мышление: оптимизировано для интерактивного диалога и ответов на вопросы — 🎯 Межъязыковое мышление: может рассуждать на одном языке и отвечать на другом — ⚡ Высокая производительность: построено на надежной основе 20B параметров GPT-OSS — Модель: openai/gpt-oss-20b — Параметры: 20 миллиардов параметров — Архитектура: GPT-OSS (Смесь экспертов) — Метод: LoRA (адаптация низкого ранга) — Ранг (r): 8 — Альфа: 16 — Целевые модули: все линейные уровни с особым упором на экспертные уровни MoE — Целевые параметры: — Уровень 7, 15, 23 экспертов MLP (gateupproj, down_proj) — Аппаратное обеспечение: 4x Графические процессоры NVIDIA H100 — Облачная платформа: экземпляры Microsoft Azure серии NC —…
Модальности:
Генерация текста
Области применения:
Логика и рассуждение Диалог / чат Мультиязычность
Задача: Генерация текста
Автор: justinj92
Теги: gpt_oss, multilingual, reasoning, thinking, fine-tuned, lora, conversational, en
Лайков: 7 | Загрузок: 73
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
