加入中文词表并继续预训练中文Embedding, 并在此基础上继续使用指令数据集fineting, 中文LLaMA模型。
Модальности:
Генерация текста
Задача: Генерация текста
Автор: minlik
Теги: llama, text-generation-inference, endpoints_compatible
Лайков: 10 | Загрузок: 21
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
Исходная модель: https://huggingface.co/deepseek-ai/DeepSeek-R1-0528 Огромный привет Артусу, который помог с преобразованием и расчетом иматрицы! Запускайте их напрямую с помощью...
[Набор инструментов для ответственного генеративного ИИ][rai-toolkit] [Gemma on Kaggle][kaggle-gemma] * [Gemma on Vertex Model Garden][vertex-mg-gemma] Краткое описание и...
Тонкая настройка Qwen/Qwen3-8B, предназначенная для явного этапа вывода выводов Honcho: учитывая целевой узел и его ходы в чате,...
ABEJA-QwQ32b-Reasoning-Japanese-v1.0はabeja/ABEJA-Qwen2.5-32b-Japanese-v0.1(*)をベースとしたReasoningモデルです。 ABEJA-Qwen2.5-32b-Japanese-v0.1に対してQwen/QwQ-32BのChatV ectorをマージしたあと、追加学習をすることでRe asoningモデルとして日本語性能を確保しています。モデルマージで利用している QwQ-32Bの特性を引き継いでおり、QwQ-32BのUsage-Gidelineに従った利用を推奨します。 -強制的に思考過程を経るために nの後から出力を開始してください。applychattemplateを使いaddgenerationprompt=Trueとすると、自動的に適用されます。 — Температура=0,6, TopP=0,95, MinP=0, TopKを20から40の間、といったパラメータを推奨します。 （ここの値を大きく変えると精度が落ちることを確認しています） — многооборотный.は含めないでください。この機能もすでにapplychattemplateに含んでいます。 — Системаプロンプトは不要です。最初にrole:userから始めてください。 —...
