論文の概要: Rejoinder: The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review
- arxiv url: http://arxiv.org/abs/2605.25172v1
- Date: Sun, 24 May 2026 17:06:47 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-26 19:50:18.938261
- Title: Rejoinder: The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review
- Title(参考訳): Rejoinder: ICML 2023ランキング実験: ML/AI Peerレビューにおける著者の自己評価
- Authors: Buxin Su, Jiayao Zhang, Natalie Collina, Yuling Yan, Didong Li, Kyunghyun Cho, Jianqing Fan, Aaron Roth, Weijie Su,
- Abstract要約: この記事は、The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review'のリファインダーである。
i)ピアレビューを統計的推定問題として定式化すること、(ii)アイソトニックメカニズムの展開における公平性と戦略的懸念を緩和すること、(iii)レビュアーランキングや構造化メタデータなどの補完的な信号を組み込むこと、(iv)生成AIの時代におけるピアレビューのための人間中心の枠組みを検討すること、の4つのテーマについて回答をまとめる。
- 参考スコア(独自算出の注目度): 49.43514488610211
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This article is the rejoinder to ``The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review,'' to appear in the Journal of the American Statistical Association with discussion. To address the practical and theoretical points raised by the discussants, we organize our response around four core themes: (i) formulating peer review as a statistical estimation problem; (ii) mitigating equity and strategic concerns in the deployment of the Isotonic Mechanism; (iii) incorporating complementary signals such as reviewer rankings and structured metadata; and (iv) exploring a human-centered framework for peer review in the era of generative AI.
- Abstract(参考訳): 本稿では,「The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review」を論じ,米国統計学会ジャーナルに掲載された。
議論者が提起した実践的・理論的問題に対処するため、我々は4つのテーマについて回答をまとめる。
一 統計的推定問題としてピアレビューを定式化すること。
二 イソトニック機構の展開における株式及び戦略上の懸念を緩和すること。
三 審査官の格付け及び構造化メタデータ等の補完的信号を取り入れること。
(4) 生成AI時代におけるピアレビューのための人間中心のフレームワークの探索。
関連論文リスト
- The AI Imperative: Scaling High-Quality Peer Review in Machine Learning [49.87236114682497]
AIによるピアレビューは、緊急の研究とインフラの優先事項になるべきだ、と私たちは主張する。
我々は、事実検証の強化、レビュアーのパフォーマンスの指導、品質改善における著者の支援、意思決定におけるAC支援におけるAIの具体的な役割を提案する。
論文 参考訳(メタデータ) (2025-06-09T18:37:14Z) - ReviewEval: An Evaluation Framework for AI-Generated Reviews [9.35023998408983]
学術研究の増大は、資格のあるレビュアーの不足と相まって、ピアレビューに対する革新的なアプローチを必要としている。
本稿では,AIによるレビューを総合的に評価するフレームワークであるReviewEvalを提案する。
本稿では、AIに基づくピアレビューに不可欠な指標を確立し、学術研究におけるAI生成レビューの信頼性と影響を大幅に向上させる。
論文 参考訳(メタデータ) (2025-02-17T12:22:11Z) - The ICML 2023 Ranking Experiment: Examining Author Self-Assessment in ML/AI Peer Review [49.43514488610211]
著者が提供するランキングは、機械学習カンファレンスでのピアレビュープロセスを改善するために利用することができる。
著者が提示したランキングを用いて生のレビュースコアを校正するイソトニックメカニズムに注目した。
本稿では,アイソトニック機構の慎重かつリスクの低いいくつかの応用と著者が提案する格付けをピアレビューで提案する。
論文 参考訳(メタデータ) (2024-08-24T01:51:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。