論文の概要: Jais 3: Introducing Arabic-centric Agentic AI
- arxiv url: http://arxiv.org/abs/2611.10224v2
- Date: Thu, 12 Nov 2026 10:15:44 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-14 01:36:32.865407
- Title: Jais 3: Introducing Arabic-centric Agentic AI
- Title(参考訳): Jais 3: アラビア語中心のエージェントAIの導入
- Abstract要約: Jais 3は、0.9Bから375Bまでの6つのオープンでアラビア中心のエージェント言語モデルである。
アラビア語話者のタスクを完了させるためだけでなく、平易なテキストで質問に答えるために構築されている。
我々は、完全に開放されたK2ホライゾン艦隊の各モデルを、継続的な事前訓練を通じてアラビア語に適応する。
- 参考スコア(独自算出の注目度): 42.062796514918084
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present Jais 3, a fleet of six open, Arabic-centric agentic language models ranging from 0.9B to 375B parameters. Jais 3 is built to complete tasks for Arabic speakers, not only to answer questions in plain text: it is trained to plan multi-step tasks, call tools and Model Context Protocol (MCP) servers, operate a terminal, search the web, and read, edit, and produce PDF, spreadsheet, and presentation files, while communicating with the user in Arabic. Instead of pretraining from scratch, we adapt each model of the fully open K2 Horizon fleet to Arabic through continual pretraining, followed by supervised fine-tuning (SFT), final token preference optimization (FTPO), and reinforcement learning with verifiable rewards (RLVR). We combine natural Arabic text with translated, transliterated, and synthetic Arabic, and replay the base model's own training data to keep its reasoning, agentic, and English abilities. Jais 3 covers Modern Standard Arabic and the major regional dialects, follows instructions with Arabic-specific constraints, and inherits the 512K-token context window of K2 Horizon (all models except the 0.9B). To our knowledge, its 375B model is the largest open Arabic-centric language model to date. For evaluation, we revisit how Arabic models are assessed, moving to fully generative evaluation on audited Arabic benchmarks. Across model sizes, Jais 3 matches or outperforms open-weight models of comparable size on Arabic and agentic benchmarks, with particularly strong agentic capabilities and Arabic instruction following, and far fewer hallucinations. We release the weights and the checkpoints from every training stage of all six models, together with samples of the training data, the data recipes and training configurations, the training logs, the audited benchmarks, and the evaluation code.
- Abstract(参考訳): オープンでアラビア中心の6つのエージェント言語モデルであるJais 3を、0.9Bから375Bのパラメータで紹介する。
Jais 3は、アラビア語話者のタスクを完了させるために作られており、平易なテキストで質問に答えるだけでなく、多段階タスクの計画、ツールの呼び出し、モデルコンテキストプロトコル(MCP)サーバーの運用、端末の操作、Webの検索、PDF、スプレッドシート、プレゼンテーションファイルの読み込み、編集、作成、そしてアラビア語のユーザとのコミュニケーションを行うように訓練されている。
我々は、スクラッチから事前訓練する代わりに、完全にオープンなK2ホライゾン艦隊の各モデルを、継続事前訓練によりアラビアに適応させ、続いて教師付き微調整(SFT)、最終トークン優先最適化(FTPO)、検証可能な報酬付き強化学習(RLVR)を行う。
我々は、自然のアラビア文字を翻訳、翻訳、合成アラビア語と組み合わせ、ベースモデルの学習データを再生し、推論、エージェント、英語の能力を維持する。
Jais 3 は現代標準アラビア語と主要地域方言をカバーし、アラビア語固有の制約で指示に従い、K2 Horizon(0.9Bを除く全てのモデル)の512Kのコンテキストウィンドウを継承する。
私たちの知る限り、375Bモデルは、これまでで最大のアラビア語中心の言語モデルです。
評価のために、アラビアモデルがどのように評価されるかを再検討し、監査されたアラビアベンチマークの完全な生成評価に移行する。
モデルサイズ全体にわたって、Jais 3はアラビアとエージェントのベンチマークで同等の大きさのオープンウェイトモデルにマッチするか、性能を上回り、特に強力なエージェント能力とアラビアの指示に従うことができ、幻覚ははるかに少ない。
トレーニングデータ、データレシピとトレーニング設定のサンプル、トレーニングログ、監査済みベンチマーク、評価コードとともに、6つのモデルのトレーニングステージ毎の重みとチェックポイントを公開します。
関連論文リスト
- Jais 2: A Family of Arabic-Centric Open Large Language Models [63.04528207880757]
Jais 2は、MBzuAI、Cerebras、Inceptionと共同で開発されたアラビア語中心の大規模言語モデルのファミリーである。
Jais 2は、このレポートで考慮されたベンチマークと競合する英語の結果に対して、強いアラビアのパフォーマンスを達成する。
We release the model in HuggingFace under a commercially permissive license。
論文 参考訳(メタデータ) (2026-07-07T13:54:49Z) - Hala Technical Report: Building Arabic-Centric Instruction & Translation Models at Scale [51.41777906371754]
私たちはHalaを紹介します。これはアラビア語中心の命令と翻訳モデルのファミリーで、私たちのトランスレーショナル・トゥン・パイプラインで構築されています。
軽量言語モデル LFM2-1.2B は、このデータに基づいて微調整され、高品質の英語の命令セットをアラビア語に翻訳するために使用される。
我々は、Halaモデルを350M、700M、1.2B、9Bパラメータでトレーニングし、アラビア語の特殊化とベースモデルの強度のバランスをとるためにスラープマージを適用します。
論文 参考訳(メタデータ) (2025-09-17T14:19:28Z) - AlcLaM: Arabic Dialectal Language Model [2.8477895544986955]
ソーシャルメディアプラットフォームから収集した340万文からなるアラビア語方言コーパスを構築した。
我々はこのコーパスを用いて語彙を拡大し、BERTベースのモデルをスクラッチから再訓練する。
AlcLaMという名前の私たちのモデルは、既存のモデルで使われているデータのごく一部を表す、わずか13GBのテキストで訓練された。
論文 参考訳(メタデータ) (2024-07-18T02:13:50Z) - ArabicMMLU: Assessing Massive Multitask Language Understanding in Arabic [51.922112625469836]
アラビア語における最初のマルチタスク言語理解ベンチマークである、データセット名を提案する。
我々のデータは、現代標準アラビア語(MSA)における40のタスクと14,575のマルチチョイス質問で構成されており、地域の母語話者と協調して慎重に構築されている。
35モデルについて評価した結果,特にオープンソースモデルにおいて,改善の余地がかなり高いことが判明した。
論文 参考訳(メタデータ) (2024-02-20T09:07:41Z) - On the importance of Data Scale in Pretraining Arabic Language Models [46.431706010614334]
アラビア事前訓練言語モデル(PLM)におけるデータの役割に関する総合的研究を行う。
我々は、大規模で高品質なアラビアコーパスを用いて、最先端のアラビアPLMの性能を再評価する。
我々の分析は、データの事前学習がパフォーマンスの主要な要因であり、他の要因を超えていることを強く示唆している。
論文 参考訳(メタデータ) (2024-01-15T15:11:15Z) - Jais and Jais-chat: Arabic-Centric Foundation and Instruction-Tuned Open
Generative Large Language Models [57.76998376458017]
私たちはJaisとJais-chatを紹介します。これは、最先端のアラビア中心の新たな基礎であり、命令で調整されたオープンな生成型大言語モデル(LLMs)です。
モデルはGPT-3デコーダのみのアーキテクチャに基づいており、アラビア語と英語のテキストが混在している。
本稿では、トレーニング、チューニング、安全性アライメント、モデルの評価について詳述する。
論文 参考訳(メタデータ) (2023-08-30T17:07:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。