論文の概要: RAIL: An Automatic Classifier of the Artificial Intelligence Readiness Level
- arxiv url: http://arxiv.org/abs/2608.13428v1
- Date: Thu, 13 Aug 2026 16:17:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-14 18:29:38.597901
- Title: RAIL: An Automatic Classifier of the Artificial Intelligence Readiness Level
- Title(参考訳): RAIL:人工知能能力レベルの自動分類器
- Abstract要約: 人工知能技術の成熟度を評価することは、投資決定、プロジェクト管理、政策監視に不可欠である。
利用可能な準備性フレームワークは異種であり、自動的に適用するのは難しい。
まず、これらの3つのフレームワークを、環境証拠のはしごの上に構築された9レベルのスケールである、統一AI準備レベル(AIRL)に統合する。
第2に,このスケールを運用するパネル・オブ・エキスパートの分類器であるRAILを提案する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Assessing the maturity of artificial intelligence technologies is essential for investment decisions, project management, and policy monitoring, yet the available readiness frameworks are heterogeneous and difficult to apply automatically: the adaptation of Technology Readiness Levels to AI lacks AI-specific gating criteria, the Machine Learning Technology Readiness Levels presuppose access to internal process artifacts, and AI/data readiness dimension models employ scales that resist direct comparison. This paper makes two contributions. First, we unify these three frameworks into the Unified AI Readiness Level (AIRL), a nine-level ordinal scale built on an environmental evidence ladder and complemented by dimensional caps (covering specification, data existence, data quality, data legality, expert knowledge, and algorithmic maturity) together with a generality-anchoring rule and explicit assignment disciplines, so that a readiness level becomes decidable from a natural-language description of the work alone. Second, we propose RAIL (Readiness Assessment via Independent LLM-experts), a panel-of-experts classifier that operationalizes the scale: one evidence agent and six independent dimension agents, each a large language model with a narrowly scoped mandate, deliver verdicts that a deterministic minimum rule aggregates and a chief expert reviews under asymmetric authority, confirming or lowering the panel's recommendation but never raising it above the caps. The method was tested in the analysis of several research works showing consistency and avoiding overestimation from monolithic LLM classifiers.
- Abstract(参考訳): 人工知能技術の成熟度を評価することは、投資決定、プロジェクト管理、ポリシー監視に不可欠であるが、利用可能な準備性フレームワークは不均一で、自動的に適用することが困難である。
この論文には2つの貢献がある。
まず、これらの3つのフレームワークを、環境証拠のはしごの上に構築され、次元キャップ(仕様、データの存在、データ品質、データの合法性、専門家の知識、アルゴリズムの成熟度を含む)と、一般的なアンコリングルールと明示的な割り当て規律とで補完する9段階の順序尺度であるAIRL(Unified AI Readiness Level)に統合することで、作業の自然言語記述から準備レベルが決定可能である。
第2に, 1つのエビデンスエージェントと6つの独立次元エージェント, それぞれ範囲が狭い大きな言語モデル, 決定論的最小限のルールが集約され, 主要な専門家レビューが非対称な権限の下で集約され, パネルの推奨を確認または下降するが, 上限以上の上昇はしない, パネル・オブ・エキスパート分類器 RAIL (Readiness Assessment via Independent LLM-experts) を提案する。
本手法は, モノリシックLCM分類器からの過大評価を回避し, 整合性を示すいくつかの研究成果の分析において実験を行った。
関連論文リスト
- The Context Access Divide: Interaction-Level Architecture as a Complementary Dimension of Agentic Inequality [0.0]
名目上は同等のAIアクセスを持つ2人のユーザーは、質的に異なるAIユーティリティを経験することができる。
知的資本が数万のファイルにまたがる知識集約型労働者にとって、CAD(Context Access Divide)は、AIの有用性の質的なしきい値を構成する。
我々は、シャープなどのフレームワークを補完するが、再現できないAIによる不平等の次元として文脈性を提案する。
論文 参考訳(メタデータ) (2026-07-09T13:53:40Z) - Declarative Skills for AI Agents in Knowledge-Grounded Tool-Use Workflows [1.9573380763700712]
構造化されていない知識ベース上での現実的な顧客サービスエラーにおけるツール利用AIエージェントのオーケストレーション機構について検討する。
i)ドメイン固有の3つのスキルファイルを推論時に読み込み、独自の制御フローを決定するDeclaativeAgent,(ii)明示的なフェーズを持つプログラム状態マシンに基づくImperativeAgent,(iii)$$-Knowledgeベンチマークエージェントをモデルとした非スキャフォールドベースラインエージェントを比較した。
論文 参考訳(メタデータ) (2026-06-05T05:38:51Z) - LLM-FACETS: A Privacy-Preserving Framework for Evaluating LLM Transparency and Accountability [0.937536571362766]
LLMFACETS (LLM FActuality Cross-EvaluaTion System):ブラウザにアクセスできるインターフェースとプラグインアーキテクチャを備えたオープンソースフレームワーク。
プラグインアーキテクチャにより、評価パイプラインを変更することなく、新しいメトリックデータセットを統合することができる。
我々は、標準参照ライブラリに対する18のメトリック実装の相互検証を通じて、このフレームワークを検証する。
論文 参考訳(メタデータ) (2026-05-29T11:20:47Z) - Governing AI-Assisted Security Operations: A Design Science Framework for Operational Decision Support [0.0]
この研究では、エンジニアリング管理問題の技術的インスタンス化として、Kusto Query Language(KQL)とMicrosoft Azureのセキュリティ機能を使用します。
この研究は、AI計画と運用実行を分離する、管理されたAIクエリブローカーアーティファクトを開発する。
論文 参考訳(メタデータ) (2026-05-10T13:35:17Z) - Rethinking Data Protection in the (Generative) Artificial Intelligence Era [138.07763415496288]
現代の(生産的な)AIモデルやシステムに生じる多様な保護ニーズを捉える4段階の分類法を提案する。
当社のフレームワークは、データユーティリティとコントロールのトレードオフに関する構造化された理解を提供し、AIパイプライン全体にわたっています。
論文 参考訳(メタデータ) (2025-07-03T02:45:51Z) - AutoMind: Adaptive Knowledgeable Agent for Automated Data Science [70.33796196103499]
LLM(Large Language Model)エージェントは、現実世界のデータサイエンス問題に対処する大きな可能性を示している。
既存のフレームワークは、厳格で、事前定義された、柔軟性のないコーディング戦略に依存している。
適応的で知識のあるLLMエージェントフレームワークであるAutoMindを紹介する。
論文 参考訳(メタデータ) (2025-06-12T17:59:32Z) - The AI Imperative: Scaling High-Quality Peer Review in Machine Learning [49.87236114682497]
AIによるピアレビューは、緊急の研究とインフラの優先事項になるべきだ、と私たちは主張する。
我々は、事実検証の強化、レビュアーのパフォーマンスの指導、品質改善における著者の支援、意思決定におけるAC支援におけるAIの具体的な役割を提案する。
論文 参考訳(メタデータ) (2025-06-09T18:37:14Z) - A Survey of Frontiers in LLM Reasoning: Inference Scaling, Learning to Reason, and Agentic Systems [93.8285345915925]
推論(Reasoning)は、論理的推論、問題解決、意思決定を可能にする基本的な認知プロセスである。
大規模言語モデル(LLM)の急速な進歩により、推論は高度なAIシステムを区別する重要な能力として浮上した。
我々は,(1)推論が達成される段階を定義するレジーム,(2)推論プロセスに関与するコンポーネントを決定するアーキテクチャの2つの側面に沿って既存の手法を分類する。
論文 参考訳(メタデータ) (2025-04-12T01:27:49Z) - General Scales Unlock AI Evaluation with Explanatory and Predictive Power [57.7995945974989]
ベンチマークはAIの進歩を導くものだが、汎用AIシステムには限られた説明力と予測力を提供している。
私たちは、一般的なAIベンチマークが実際に何を計測しているかを説明することができる、AI評価のための一般的な尺度を紹介します。
私たちの完全に自動化された方法論は、飽和しない一般的なスケールにインスタンス要求を配置する18の新しく作られたルーリックの上に構築されます。
論文 参考訳(メタデータ) (2025-03-09T01:13:56Z) - Towards a Responsible AI Metrics Catalogue: A Collection of Metrics for
AI Accountability [28.67753149592534]
本研究は,包括的メトリクスカタログへの取り組みを導入することで,説明責任のギャップを埋めるものである。
我々のカタログは、手続き的整合性を支えるプロセスメトリクス、必要なツールやフレームワークを提供するリソースメトリクス、AIシステムのアウトプットを反映する製品メトリクスを記述しています。
論文 参考訳(メタデータ) (2023-11-22T04:43:16Z) - Human-Centric Multimodal Machine Learning: Recent Advances and Testbed
on AI-based Recruitment [66.91538273487379]
人間中心のアプローチでAIアプリケーションを開発する必要性には、ある程度のコンセンサスがある。
i)ユーティリティと社会的善、(ii)プライバシとデータ所有、(iii)透明性と説明責任、(iv)AIによる意思決定プロセスの公正性。
異種情報ソースに基づく現在のマルチモーダルアルゴリズムは、データ中の機密要素や内部バイアスによってどのように影響を受けるかを検討する。
論文 参考訳(メタデータ) (2023-02-13T16:44:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。