論文の概要: Who Pays the Review Cost? Triage, Fairness, and Accountability in AI-authored Pull Requests
- arxiv url: http://arxiv.org/abs/2610.11179v1
- Date: Thu, 08 Oct 2026 03:38:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.768532
- Title: Who Pays the Review Cost? Triage, Fairness, and Accountability in AI-authored Pull Requests
- Title（参考訳）: 誰がレビューコストを支払うのか? AIが承認したプルリクエストのトリアージ、フェアネス、説明責任
- Abstract要約: 我々は、コードレビューの経験とAIPRへの様々な露出を有する31カ国の実践者239人を対象に調査を行った。
私たちは、欠落した理論的根拠、検証、オーナシップをレビュー可能性の負債として概念化し、生成されたコードに十分な人的根拠がない場合には、ワークレビュアーが吸収しなければなりません。
- 参考スコア（独自算出の注目度）: 6.429261912755283
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: AI coding agents are moving from local code assistance into pull-based workflows, where generated contributions must be reviewed, explained, and maintained within existing project norms. Although recent work has begun to characterize AI-authored pull requests (AIPRs), less is known about how reviewers govern their entry into review, how AI authorship reshapes credibility and fairness, and what intake mechanisms protect review sustainability. We report a mixed-method questionnaire survey of 239 practitioners from 31 countries with code-review experience and varying exposure to AIPRs. In the scenarios and self-reports elicited by the survey, AI authorship was not a categorical rejection signal. Instead, respondents described review effort as conditional on whether an AIPR arrived as an accountable contribution, with bounded scope, project-grounded rationale, validation beyond Continuous Integration (CI), contributor responsiveness, and identifiable post-merge ownership. This conditional logic extended to newcomer AIPRs, where respondents emphasized visible participation in the current review process over profile-level reputation alone. Qualitative responses further described shifts in mentoring, scrutiny, deferral, and routing when human stewardship was difficult to observe. We conceptualize missing rationale, validation, and ownership as reviewability debt, the work reviewers must absorb when generated code lacks sufficient human grounding. These findings reframe AIPR governance around making human judgment observable before generated contributions consume scarce reviewer attention.
- Abstract（参考訳）: AIコーディングエージェントは、ローカルコードアシストからプルベースのワークフローに移行する。そこで生成されたコントリビューションは、既存のプロジェクト規範内でレビュー、説明、維持されなければならない。
最近の研究では、AIによるプルリクエスト(AIPR)の特徴付けが始まっているが、レビュアーがレビューへの参入をどのように支配するか、AIオーサリングが信頼性と公平性をどう再認識するか、レビューの持続可能性を保護するメカニズムについてはあまり知られていない。
コードレビュー経験のある31カ国239人の実践者を対象に,AIPRの多彩な曝露調査を行った。
調査によって引き起こされたシナリオと自己報告では、AIのオーサシップはカテゴリー的な拒絶信号ではなかった。
その代わり、回答者はレビューの取り組みを、AIPRが説明可能なコントリビューションとして到達したかどうか、境界付きスコープ、プロジェクト基底の根拠、継続的インテグレーション(CI)を越えた検証、コントリビュータの応答性、マージ後の所有権の特定といった条件として説明した。
この条件付きロジックは新参のAIPRにまで拡張され、回答者はプロファイルレベルの評価だけでなく、現在のレビュープロセスへの目に見える参加を強調した。
質的な反応は、人間のスチュワードシップの観察が困難であったとき、メンタリング、精査、デフェラル、ルーティングのシフトをさらに記述した。
私たちは、欠落した理論的根拠、検証、オーナシップをレビュー可能性の負債として概念化し、生成されたコードに十分な人的根拠がない場合には、ワークレビュアーが吸収しなければなりません。
これらの発見は、人の判断を観察可能にすることでAIPRガバナンスを再編成し、作成したコントリビューションは、少ないレビューアの注意を消費する。
関連論文リスト
- Comprehension Audits to Mitigate Risks from Automated AI Research [0.0772395348658991]
既存の作業では、最小限の理解しきい値と、これを緩和するための未確認チェックが提案されている。
我々の知る限り、現在公表されているフロンティアAI保証体制は、責任ある人間が開発や使用を継続するための前提条件として構築しているものを理解していることを示す証拠を必要としている。
そこで我々は,責任ある人々が監査人に対してR&D貢献を説明し,理解を実証する新しい開発プロセス保証機構である包括的監査を提案する。
論文 参考訳（メタデータ） (2026-10-07T13:30:47Z) - How Far Did They Go? The Persuasive Tactics of Covert LLM Agents in a Discontinued Field Experiment [12.686044001239708]
本研究では、Redditのr/ChangeMyViewにおけるフィールド実験の中止から、公開データセットを分析した。
この介入は、未知の外部研究者によって実施され、倫理的反発を受けて停止された。
公開公開後、Redditはモデレーターに対して、AI生成されたコメントのアーカイブをリリースすることを許可した。
論文 参考訳（メタデータ） (2026-06-03T15:58:32Z) - Insights into Security-Related AI-Generated Pull Requests [0.0]
33,000以上のAI生成プルリクエスト(PR)を分析し、エージェントAIによる675件のセキュリティ関連の提出を識別する。
その結果,セキュリティ関連のAI PRでは,一連の脆弱性が繰り返し発生することがわかった。
AI PRのコミットメッセージの品質は、以前の研究で報告された人間のPRとは対照的に、受け入れやレイテンシに制限効果がある。
論文 参考訳（メタデータ） (2026-04-21T20:20:20Z) - Beyond Rating: A Comprehensive Evaluation and Benchmark for AI Reviews [69.66583722746904]
私たちは、AIレビュアーを5次元にわたって評価する総合的な評価フレームワークであるBeyond Ratingを紹介します。
本稿では,専門家の不一致に対応するためのMax-Recall戦略を提案する。
提案したテキスト中心の指標は、特に弱みの議論のリコールであり、評価精度と強く相関している。
論文 参考訳（メタデータ） (2026-04-21T14:21:15Z) - Beyond Detection: Governing GenAI in Academic Peer Review as a Sociotechnical Challenge [7.402573615005516]
生成型AIツールは、ますます学術的ピアレビューに入り、公正性、説明責任、評価的判断の正当性に関する疑問を提起している。
本稿では、14のエリアチェアとプログラムチェアを用いた448のソーシャルメディア投稿の談話分析について紹介する。
我々は、GenAIが限られた支援業務に受け入れられる可能性があると広く合意するが、その中核となる評価判断、新規性、貢献、受容は人間の責任のままである。
我々は、AI支援ピアレビューは、ブランケット禁止や検出のみではなく、人間に対する評価判断を明示的に保ちながら、強制的かつ役割特異的な制御を規定することによって、最善を尽くすと論じている。
論文 参考訳（メタデータ） (2026-03-02T19:23:04Z) - What happens when reviewers receive AI feedback in their reviews? [9.57486570505445]
支持者はAIがレビュー担当者の負担を減らし、品質を改善する可能性があると考えているが、批判者は公正さ、説明責任、信頼へのリスクを警告している。
ICLR 2025では、レビュアーにレビュー後提案を提供するために、公式のAIフィードバックツールがデプロイされた。
この研究は、ライブレビュープロセスにおいて、このようなAIツールの実証的な証拠として初めて貢献する。
論文 参考訳（メタデータ） (2026-02-14T15:22:33Z) - Automatic Reviewers Fail to Detect Faulty Reasoning in Research Papers: A New Counterfactual Evaluation Framework [55.078301794183496]
我々は、高品質なピアレビューを支えるコアレビュースキル、すなわち欠陥のある研究ロジックの検出に注力する。
これは、論文の結果、解釈、クレームの間の内部の一貫性を評価することを含む。
本稿では,このスキルを制御条件下で分離し,テストする,完全自動対物評価フレームワークを提案する。
論文 参考訳（メタデータ） (2025-08-29T08:48:00Z) - CoCoNUTS: Concentrating on Content while Neglecting Uninformative Textual Styles for AI-Generated Peer Review Detection [60.52240468810558]
我々は、AI生成ピアレビューの詳細なデータセットの上に構築されたコンテンツ指向ベンチマークであるCoCoNUTSを紹介する。
また、マルチタスク学習フレームワークを介してAIレビュー検出を行うCoCoDetを開発し、レビューコンテンツにおけるAIのより正確で堅牢な検出を実現する。
論文 参考訳（メタデータ） (2025-08-28T06:03:11Z) - The AI Imperative: Scaling High-Quality Peer Review in Machine Learning [49.87236114682497]
AIによるピアレビューは、緊急の研究とインフラの優先事項になるべきだ、と私たちは主張する。
我々は、事実検証の強化、レビュアーのパフォーマンスの指導、品質改善における著者の支援、意思決定におけるAC支援におけるAIの具体的な役割を提案する。
論文 参考訳（メタデータ） (2025-06-09T18:37:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。