AIとビッグデータ分析の専門企業であるLinkbricksのデータサイエンティストであるジ・ユンソン(Saxo)ディレクターが Saxo/Linkbricks-Horizon-AI-Avengers-V4-32Bベースモデルを使用し、H100-80G 8個で約35%程度のパラメータをSFT->DPOした多言語強化言語モデル。 8千万件の様々な言語圏のニュースやウィキコーパスを基に、様々なタスク別の日本語・韓国語・中国語・英語クロス学習データと数学や論理判断データを通じて、日中韓英言語のクロスエンハンスメント処理と複雑な論理問題にも対応できるように訓練したモデルである。 -トークナイザーは、単語拡張なしでベースモデルのまま使用します。 -カスタマーレビューやソーシャル投稿の高次元分析及びコーディングとライティング、数学、論理判断などが強化されたモデル。 -Function Call -Deepspeed Stage=3、rslora及びBAdam Layer Modeを使用 -「transformers_version」: 「4.46.3」 A -토크나이저는 단어 확장 없이 베이스 모델 그대로 사용 -고객 리뷰나 소셜 포스팅 고차원 분석 및 코딩과 작문, 수학, 논리판단 등이 강화된 모델 -Function Call 및 Tool Calling 지원 -Deepspeed Stage=3, rslora 및 BAdam Layer Mode 사용 -«transformers_version»: «4.46.3» Finetuned by Mr. Yunsung Ji (Saxo), a data scientist at Linkbricks, a company specializing in AI and big data analytics about 35% of total parameters SFT->DPO->ORPO training model based on…
Модальности:
Генерация текста
Области применения:
Диалог / чат
Задача: Генерация текста
Автор: Saxo
Теги: qwen2, conversational, ko, en, jp, cn, text-generation-inference, endpoints_compatible
Лайков: 3 | Загрузок: 28
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
