論文の概要: Discrimination, Calibration, and Ranking: A Unified Matrix Framework
- arxiv url: http://arxiv.org/abs/2611.02215v1
- Date: Sun, 01 Nov 2026 21:23:18 GMT
- ステータス: 情報取得中
- システム内更新日: 2026-11-03 19:17:11.734744
- Title: Discrimination, Calibration, and Ranking: A Unified Matrix Framework
- Title(参考訳): 識別・校正・ランク付け:統一マトリックスフレームワーク
- Abstract要約: 最近のインジケータ行列は、バイナリ、マルチクラス、マルチラベル、関連する設定のアカウント識別対策を統合する。
ランキングでは、生のDCGは集約にまたがって崩壊するが、nDCGはそうではない; クラスごとのnDCGとクラスごとのAUCは行列の双対性によって関連付けられる。
skew-invariant per-class building blocksは1つのクラス条件期待テンプレートを共有する。
- 参考スコア(独自算出の注目度): 0.0
- License:
- Abstract: Discrimination, calibration, and ranking are the three pillars of classifier evaluation, yet no single algebraic language spans all three. A recent indicator-matrix account unifies discrimination measures (precision, recall, F1, Matthews correlation) across binary, multiclass, multilabel and related settings, using Boolean cell operations on indicator label matrices, generalised to soft labels by t-norms. Calibration measures (Brier score, log-loss) and ranking measures (nDCG, AUC) fall outside it. We close the gap with two further classes of cell operators: deviation operators phi(y - yhat), which give a Calibration Framework, and rank- and slice-dependent operators (positional gains for DCG, column concordance cells for AUC), which give a Ranking Framework. Both inherit the micro/macro/exemplar aggregation architecture. For calibration, the three Brier aggregations collapse to one scalar; the Murphy decomposition holds in matrix form (unbinned, binned and isotonic); and, within the Brier-type class-indexed family, a measure is skew-invariant if and only if it depends only on the class-conditional errors alpha_j and beta_j, the calibration analogues of recall and specificity. For ranking, raw DCG collapses across aggregations while nDCG does not; per-class nDCG and per-class AUC are related by a row-column duality; micro-AUC differs from pooled ROC-AUC; raw positional scores are never strictly proper, and nDCG and AUC need not be proper. The skew-invariant per-class building blocks share one class-conditional expectation template. Experiments on two multilabel benchmarks illustrate the distinctions. Many of the results are machine-checked in Lean 4; the proofs, the experiments and the aggmetrics.scores package are public: https://github.com/rcprati/discrimination-calibration-ranking
- Abstract(参考訳): 識別、校正、ランク付けは分類器の評価の3つの柱であるが、3つにまたがる単一の代数言語は存在しない。
最近のインジケータ行列は、2進数、マルチクラス、マルチラベルおよび関連するセッティングにおける識別対策(精度、リコール、F1、マシューズ相関)を、インジケータラベル行列上のブールセル操作を用いて統一し、tノルムによってソフトラベルに一般化した。
校正基準 (Brier score, log-loss) とランキング基準 (nDCG, AUC) は、その外にある。
この差分演算子 phi(y - yhat) はCalibration Framework を与え、ランク依存およびスライス依存演算子(DCG の配置ゲイン、AUC のカラムコンコータンスセル) は Ranking Framework を提供する。
どちらもマイクロ/マクロ/エクストリームアグリゲーションアーキテクチャを継承する。
キャリブレーションのために、3つのブライア集合は1つのスカラーに崩壊し、マーフィー分解は行列形式(アンバインド、ビン付き、イソトニック)を持ち、ブリア型クラスインデクシングされた族において測度がスキュー不変であることと、それがリコールと特異性のキャリブレーション類似であるクラス条件誤差 α_j と beta_j にのみ依存していることは同値である。
nDCG と nDCG は行カラムの双対性、micro-AUC はプールされた ROC-AUC と異なり、生の位置スコアは厳密には適切ではなく、nDCG と AUC は適切ではない。
skew-invariant per-class building blocksは1つのクラス条件期待テンプレートを共有する。
2つのマルチラベルベンチマークの実験では、その違いが示されている。
結果の多くはLean 4でマシンチェックされています。証明、実験、アグリメトリs.scoresパッケージは公開されています。
関連論文リスト
- Predicted Class Correction: Conformal Thresholds for Classes with No Calibration Data [16.42016237685914]
クラス条件整合予測は、クラス毎に別々のスコア閾値を校正する。
既存の方法は定義されていないか、共有された限界閾値に戻すかのいずれかです。
そこで,予測クラス補正 (PCC) を提案する。
論文 参考訳(メタデータ) (2026-10-18T15:45:13Z) - Global Average Precision for Representation Learning [25.24226292234013]
gSAPはGlobal Average Precision (gAP)の代替品である
最大4倍の正のペアを同じ精度で取得する。
gSAPでトレーニングされたモデルは、より高い転送、$k$NN、ゼロショット分類の精度で、より良い表現を学習する。
論文 参考訳(メタデータ) (2026-10-07T11:22:05Z) - RLVR$^{2}$: Reinforcement Learning with Verifiable Rubric-based Ranking [13.774317167730553]
Reinforcement Learning with Verifiable Rewards (RLVR) は、数学やコードなど、明確に定義された正当性信号を持つタスクから、多次元ルーリックによって定義された多面的品質要件へと拡張されている。
本稿では,ルーリックベースRLVRのランキングパラダイムであるRLVR$2$を提案する。
各基準に対して、RLVR$2$はルーブリックスコアを基準固有のグループ内順序結果に変換し、結果の比較行列から潜在ユーティリティを回復し、これらのユーティリティを1つのトレーニング信号にマージする。
論文 参考訳(メタデータ) (2026-09-20T08:34:28Z) - A Unified Algebraic Framework for Classification Performance Evaluation [1.218340575383456]
分類性能評価のための統一的なフレームワークを提案する。
バイナリ、マルチクラス、マルチラベル、オーディナル、階層、コスト感受性、ソフトラベルの設定をカバーしている。
論文 参考訳(メタデータ) (2026-07-04T21:00:29Z) - Structured Proper Loss Geometries for Multiclass Classification: Theory and Controlled Empirical Evaluation [0.0]
本稿では,クラス対応2次ブラグマンスコア(CAPM),制約付きログコッシュリッジ(HPG)を備えた強い凸発生器,確率マージンペナルティ(APMS)を用いたHPGの3つの目的について検討する。
我々は,CAPMおよびHPGの条件回帰,曲率,範囲,およびロジット勾配境界を導出し,APMSの厳密なペナルティ範囲および条件目標変位境界を証明した。
論文 参考訳(メタデータ) (2026-06-28T15:57:59Z) - Calibratable Disambiguation Loss for Multi-Instance Partial-Label Learning [53.9713678229744]
MIPL(Multi-instance partial-label Learning)は、インスタンス空間とラベル空間の両方において、不正確な監督の課題に対処する弱い教師付きフレームワークである。
既存のMIPLアプローチは、しばしばキャリブレーションが悪く、信頼性を損なう。
分類精度と校正性能を同時に向上するプラグアンドプレイ校正型曖昧さ損失(CDL)を提案する。
論文 参考訳(メタデータ) (2025-12-19T16:58:31Z) - Benign Overfitting and the Geometry of the Ridge Regression Solution in Binary Classification [75.01389991485098]
リッジ回帰はクラスタ平均ベクトルのスケールによって定性的に異なる挙動を示す。
スケールが非常に大きいレジームでは、良心過剰を許容する条件は回帰タスクと同一であることが判明した。
論文 参考訳(メタデータ) (2025-03-11T01:45:42Z) - Generating Unbiased Pseudo-labels via a Theoretically Guaranteed
Chebyshev Constraint to Unify Semi-supervised Classification and Regression [57.17120203327993]
分類におけるしきい値と擬似ラベルプロセス(T2L)は、ラベルの品質を決定するために信頼性を使用する。
本質的には、レグレッションは高品質なラベルを生成するためにバイアスのない方法も必要である。
チェビシェフの不等式に基づく不偏ラベルを生成するための理論的に保証された制約を提案する。
論文 参考訳(メタデータ) (2023-11-03T08:39:35Z) - Parametric Classification for Generalized Category Discovery: A Baseline
Study [70.73212959385387]
Generalized Category Discovery (GCD)は、ラベル付きサンプルから学習した知識を用いて、ラベルなしデータセットで新しいカテゴリを発見することを目的としている。
パラメトリック分類器の故障を調査し,高品質な監視が可能であった場合の過去の設計選択の有効性を検証し,信頼性の低い疑似ラベルを重要課題として同定する。
エントロピー正規化の利点を生かし、複数のGCDベンチマークにおける最先端性能を実現し、未知のクラス数に対して強いロバスト性を示す、単純で効果的なパラメトリック分類法を提案する。
論文 参考訳(メタデータ) (2022-11-21T18:47:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。