論文の概要: Predictive Multiplicity in Probabilistic Classification
- arxiv url: http://arxiv.org/abs/2206.01131v1
- Date: Thu, 2 Jun 2022 16:25:29 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-03 16:29:03.954104
- Title: Predictive Multiplicity in Probabilistic Classification
- Title(参考訳): 確率的分類における予測多重性
- Authors: Jamelle Watson-Daniels, David C. Parkes and Berk Ustun
- Abstract要約: マルチプライシティは、通常、機械学習モデルを開発、デプロイする方法を複雑にします。
この設定のための新しい測度を導入し、これらの測度を計算する最適化手法を提案する。
本研究では,現実のリスク評価タスクにおける予測多重度の発生頻度と頻度について検討する。
- 参考スコア(独自算出の注目度): 25.111463701666864
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: For a prediction task, there may exist multiple models that perform almost
equally well. This multiplicity complicates how we typically develop and deploy
machine learning models. We study how multiplicity affects predictions -- i.e.,
predictive multiplicity -- in probabilistic classification. We introduce new
measures for this setting and present optimization-based methods to compute
these measures for convex empirical risk minimization problems like logistic
regression. We apply our methodology to gain insight into why predictive
multiplicity arises. We study the incidence and prevalence of predictive
multiplicity in real-world risk assessment tasks. Our results emphasize the
need to report multiplicity more widely.
- Abstract(参考訳): 予測タスクでは、ほぼ等しく機能する複数のモデルが存在するかもしれない。
この多重性は、通常、機械学習モデルを開発、デプロイする方法を複雑にします。
確率的分類における多重度が予測(すなわち予測多重度)に与える影響について検討する。
本稿では,この設定に対する新たな対策と,ロジスティック回帰のような凸型リスク最小化問題に対する最適化手法を提案する。
我々は,予測多重性が発生する理由を考察するために,この手法を適用した。
実世界のリスクアセスメントタスクにおける予測重複の発生率と発生率について検討する。
その結果,乗算性をもっと広く報告する必要性が強調された。
関連論文リスト
- Reconciling Model Multiplicity for Downstream Decision Making [24.335927243672952]
2つの予測モデルがほぼ至るところでそれぞれの予測にほぼ一致しているとしても、最も応答性の高い行動が人口のかなりの部分で相違していることが示される。
本稿では,下流決定問題と個別確率予測の両方に関して,予測モデルを校正する枠組みを提案する。
論文 参考訳(メタデータ) (2024-05-30T03:36:46Z) - An Experimental Study on the Rashomon Effect of Balancing Methods in Imbalanced Classification [0.0]
本稿では,ラショモン効果を用いた予測多重度に及ぼすバランス法の影響について検討する。
データ中心のAIにおける盲点モデル選択は、ほぼ同じ精度のモデルのセットからリスクが高いため、非常に重要です。
論文 参考訳(メタデータ) (2024-03-22T13:08:22Z) - Predictive Churn with the Set of Good Models [64.05949860750235]
近似機械学習モデルの集合に対する競合予測の効果について検討する。
ラーショモン集合内のモデル間の係り受けに関する理論的結果を示す。
当社のアプローチは、コンシューマ向けアプリケーションにおいて、より予測し、削減し、混乱を避けるためにどのように使用できるかを示します。
論文 参考訳(メタデータ) (2024-02-12T16:15:25Z) - Structured Radial Basis Function Network: Modelling Diversity for
Multiple Hypotheses Prediction [51.82628081279621]
多重モード回帰は非定常過程の予測や分布の複雑な混合において重要である。
構造的放射基底関数ネットワークは回帰問題に対する複数の仮説予測器のアンサンブルとして提示される。
この構造モデルにより, このテッセルレーションを効率よく補間し, 複数の仮説対象分布を近似することが可能であることが証明された。
論文 参考訳(メタデータ) (2023-09-02T01:27:53Z) - Post-Selection Confidence Bounds for Prediction Performance [2.28438857884398]
機械学習では、潜在的に多くの競合モデルから有望なモデルを選択し、その一般化性能を評価することが重要な課題である。
本稿では,評価セットの予測性能に基づいて選択された複数のモデルに対して,有効な低信頼境界を求めるアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-10-24T13:28:43Z) - Rashomon Capacity: A Metric for Predictive Multiplicity in Probabilistic
Classification [4.492630871726495]
予測多重性は、分類モデルが個々のサンプルに矛盾する予測を割り当てたときに発生する。
ラショモン容量と呼ばれる確率的分類における予測多重度の新しい尺度を導入する。
ラショモン・キャパシティは利害関係者に矛盾するモデルを開示するための原則的戦略をもたらすことを示す。
論文 参考訳(メタデータ) (2022-06-02T20:44:19Z) - Mitigating multiple descents: A model-agnostic framework for risk
monotonization [84.6382406922369]
クロスバリデーションに基づくリスクモノトナイズのための一般的なフレームワークを開発する。
本稿では,データ駆動方式であるゼロステップとワンステップの2つの手法を提案する。
論文 参考訳(メタデータ) (2022-05-25T17:41:40Z) - Probabilistic Gradient Boosting Machines for Large-Scale Probabilistic
Regression [51.770998056563094]
PGBM(Probabilistic Gradient Boosting Machines)は、確率的予測を生成する手法である。
既存の最先端手法と比較してPGBMの利点を実証的に示す。
論文 参考訳(メタデータ) (2021-06-03T08:32:13Z) - Characterizing Fairness Over the Set of Good Models Under Selective
Labels [69.64662540443162]
同様の性能を実現するモデルセットに対して,予測公正性を特徴付けるフレームワークを開発する。
到達可能なグループレベルの予測格差の範囲を計算するためのトラクタブルアルゴリズムを提供します。
選択ラベル付きデータの実証的な課題に対処するために、我々のフレームワークを拡張します。
論文 参考訳(メタデータ) (2021-01-02T02:11:37Z) - Ambiguity in Sequential Data: Predicting Uncertain Futures with
Recurrent Models [110.82452096672182]
逐次データによる曖昧な予測を扱うために,Multiple hypothesis Prediction(MHP)モデルの拡張を提案する。
また、不確実性を考慮するのに適した曖昧な問題に対する新しい尺度も導入する。
論文 参考訳(メタデータ) (2020-03-10T09:15:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。