論文の概要: Comprehension Audits to Mitigate Risks from Automated AI Research
- arxiv url: http://arxiv.org/abs/2610.10064v1
- Date: Wed, 07 Oct 2026 13:30:47 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-08 21:58:22.936845
- Title: Comprehension Audits to Mitigate Risks from Automated AI Research
- Title(参考訳): 自動化AI研究のリスク軽減のための包括的監査
- Abstract要約: 既存の作業では、最小限の理解しきい値と、これを緩和するための未確認チェックが提案されている。
我々の知る限り、現在公表されているフロンティアAI保証体制は、責任ある人間が開発や使用を継続するための前提条件として構築しているものを理解していることを示す証拠を必要としている。
そこで我々は,責任ある人々が監査人に対してR&D貢献を説明し,理解を実証する新しい開発プロセス保証機構である包括的監査を提案する。
- 参考スコア(独自算出の注目度): 0.0772395348658991
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: AI is already writing a majority of code for frontier AI labs. This creates a safety risk if there is insufficient human oversight. Existing work proposes minimum comprehension thresholds and unaided checks to mitigate this. To our knowledge, however, there is currently no published frontier-AI assurance regime that requires demonstrated evidence that the responsible humans understand what they are building as a precommitted condition for continuing development or usage. We propose comprehension audits, a novel development-process assurance mechanism in which the responsible people explain R&D contributions to auditors to demonstrate understanding. With independent administration and graded reports, they provide a gate: development of a contribution stops based on a failure to demonstrate human understanding until remediated, with escalating consequences for repeated failures. Our analysis of leading open-source AI projects finds increased output of code with reduced human review commentary rates per line of code, with far lower rates for automated fleet accounts. We advocate for labs to conduct them with embedded independent auditors.
- Abstract(参考訳): AIはすでに、フロンティアAIラボのためのコードの大半を書いている。
これにより、人間の監視が不十分な場合、安全リスクが生じる。
既存の作業では、最小限の理解しきい値と、これを緩和するための未確認チェックが提案されている。
しかし、我々の知る限り、現在公表されているフロンティアAI保証体制は存在せず、責任ある人間が開発や使用を継続するための前提条件として構築しているものを理解していることを示す証拠を必要としている。
そこで我々は,責任ある人々が監査人に対してR&D貢献を説明し,理解を実証する新しい開発プロセス保証機構である包括的監査を提案する。
コントリビューションの開発は、リメディエートされるまで人間の理解を示すのに失敗し、繰り返し失敗する結果にエスカレートする。
主要なオープンソースAIプロジェクトの分析では、コードのアウトプットが増加し、コード行あたりの人間のレビューコメント率が低下し、自動フリートアカウントがはるかに低いことが分かりました。
実験室はインセンティブ・インディペンデント・オーディエンスで実施することを推奨する。
関連論文リスト
- AI Slop and Hallucinations in Vulnerability Assessment: A Survey on Reasoning Failures and Trustworthy Mitigation [48.55515767840701]
AIスロープ(AI slop)は、アーティファクト、幻覚的脆弱性、可視だが正しくないパッチ、セマンティックに再パッケージされたバグレポートである。
本稿では,実証的証拠を調査し,統一メカニズムを特定し,信頼に値するトリアージへの道筋をたどる。
論文 参考訳(メタデータ) (2026-08-26T11:48:38Z) - Insights into Security-Related AI-Generated Pull Requests [0.0]
33,000以上のAI生成プルリクエスト(PR)を分析し、エージェントAIによる675件のセキュリティ関連の提出を識別する。
その結果,セキュリティ関連のAI PRでは,一連の脆弱性が繰り返し発生することがわかった。
AI PRのコミットメッセージの品質は、以前の研究で報告された人間のPRとは対照的に、受け入れやレイテンシに制限効果がある。
論文 参考訳(メタデータ) (2026-04-21T20:20:20Z) - Mitigating "Epistemic Debt" in Generative AI-Scaffolded Novice Programming using Metacognitive Scripts [0.0]
制限のないAIは、初心者にスキーマ形成に必要な固有の認知負荷をアウトソースするように促す。
成功しているビブコーダが自然に自己スケーリングを行い、契約者ではなくコンサルタントとしてAIを扱います。
今後の学習システムは,保守不能なコードの大量生産を防止するためにメタ認知摩擦を強制する必要がある。
論文 参考訳(メタデータ) (2026-02-22T21:25:04Z) - Frontier AI Risk Management Framework in Practice: A Risk Analysis Technical Report v1.5 [61.787178868669265]
この技術レポートは、サイバー犯罪、説得と操作、戦略上の詐欺、制御されていないAIR&D、自己複製の5つの重要な側面について、更新されきめ細かな評価を提示する。
この作業は、現在のAIフロンティアのリスクに対する理解を反映し、これらの課題を軽減するための集団行動を促します。
論文 参考訳(メタデータ) (2026-02-16T04:30:06Z) - CoCoNUTS: Concentrating on Content while Neglecting Uninformative Textual Styles for AI-Generated Peer Review Detection [60.52240468810558]
我々は、AI生成ピアレビューの詳細なデータセットの上に構築されたコンテンツ指向ベンチマークであるCoCoNUTSを紹介する。
また、マルチタスク学習フレームワークを介してAIレビュー検出を行うCoCoDetを開発し、レビューコンテンツにおけるAIのより正確で堅牢な検出を実現する。
論文 参考訳(メタデータ) (2025-08-28T06:03:11Z) - The AI Imperative: Scaling High-Quality Peer Review in Machine Learning [49.87236114682497]
AIによるピアレビューは、緊急の研究とインフラの優先事項になるべきだ、と私たちは主張する。
我々は、事実検証の強化、レビュアーのパフォーマンスの指導、品質改善における著者の支援、意思決定におけるAC支援におけるAIの具体的な役割を提案する。
論文 参考訳(メタデータ) (2025-06-09T18:37:14Z) - From Incidents to Insights: Patterns of Responsibility following AI Harms [1.9389881806157316]
AIインシデントデータベースは航空安全データベースにインスパイアされ、障害からの集合的学習を可能とし、将来のインシデントを防ぐ。
データベースは、ニュースやメディアから収集された数百のAI障害を文書化している。
技術的に焦点を絞った学習を超えて、データセットは新たな、非常に価値のある洞察を提供することができる、と私たちは主張する。
論文 参考訳(メタデータ) (2025-05-07T09:59:36Z) - Counter Turing Test CT^2: AI-Generated Text Detection is Not as Easy as
You May Think -- Introducing AI Detectability Index [9.348082057533325]
AI生成テキスト検出(AGTD)はすでに研究で注目を集めているトピックとして現れている。
本稿では,既存のAGTD手法の脆弱性を総合的に評価することを目的とした手法のベンチマークであるCounter Turing Test (CT2)を紹介する。
論文 参考訳(メタデータ) (2023-10-08T06:20:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。