論文の概要: Rank-LIME: Local Model-Agnostic Feature Attribution for Learning to Rank
- arxiv url: http://arxiv.org/abs/2212.12722v1
- Date: Sat, 24 Dec 2022 12:14:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-27 15:26:21.491989
- Title: Rank-LIME: Local Model-Agnostic Feature Attribution for Learning to Rank
- Title(参考訳): Rank-LIME: ランク学習における局所モデルに依存しない特徴属性
- Authors: Tanya Chowdhury, Razieh Rahimi, James Allan
- Abstract要約: Rank-LIMEは、モデルに依存しない局所的、ポストホック的特徴属性法である。
我々は,新しい相関に基づく摂動,微分可能なランキング損失関数を導入し,ランキングに基づく付加的特徴帰属モデルを評価するための新しい指標を導入する。
- 参考スコア(独自算出の注目度): 16.780058676633914
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Understanding why a model makes certain predictions is crucial when adapting
it for real world decision making. LIME is a popular model-agnostic feature
attribution method for the tasks of classification and regression. However, the
task of learning to rank in information retrieval is more complex in comparison
with either classification or regression. In this work, we extend LIME to
propose Rank-LIME, a model-agnostic, local, post-hoc linear feature attribution
method for the task of learning to rank that generates explanations for ranked
lists.
We employ novel correlation-based perturbations, differentiable ranking loss
functions and introduce new metrics to evaluate ranking based additive feature
attribution models. We compare Rank-LIME with a variety of competing systems,
with models trained on the MS MARCO datasets and observe that Rank-LIME
outperforms existing explanation algorithms in terms of Model Fidelity and
Explain-NDCG. With this we propose one of the first algorithms to generate
additive feature attributions for explaining ranked lists.
- Abstract(参考訳): モデルがなぜ特定の予測を行うのかを理解することは、現実の意思決定に適応する上で重要である。
limeは分類と回帰のタスクで一般的なモデルに依存しない特徴帰属手法である。
しかし,情報検索におけるランク付けの課題は,分類や回帰に比べて複雑である。
本研究では,分類表の説明を生成するランク付けタスクを学習するためのモデル非依存,局所的,ポストホックな線形特徴帰属法であるrank-limeを提案する。
我々は,新しい相関に基づく摂動,微分可能なランキング損失関数を導入し,ランキングに基づく付加的特徴帰属モデルを評価するための新しい指標を導入する。
我々は、Ranc-LIMEと様々な競合システムを比較し、MS MARCOデータセットで訓練されたモデルを用いて、Ranc-LIMEがモデル忠実度や説明-NDCGの点で既存の説明アルゴリズムより優れていることを観察する。
これにより、ランキングを説明するために付加的な特徴属性を生成する最初のアルゴリズムの1つを提案する。
関連論文リスト
- Ranking Unraveled: Recipes for LLM Rankings in Head-to-Head AI Combat [7.8905223445925055]
大規模言語モデル(LLM)に対する人間の嗜好を評価する新しい方法として、ペアワイズランキングが登場した。
LLMの前後比較におけるランキングシステムの有効性について検討する。
我々の分析は、ランキングの精度と効率に影響を与える要因について重要な洞察を見出している。
論文 参考訳(メタデータ) (2024-11-19T20:16:26Z) - RankUp: Boosting Semi-Supervised Regression with an Auxiliary Ranking Classifier [21.37308028303897]
最新技術(SOTA)の半教師付き学習技術であるFixMatchやその変種は、分類タスクにおいて印象的なパフォーマンスを示している。
本稿では,既存の半教師付き分類手法を応用し,回帰タスクの性能を向上させるための簡易かつ効果的なアプローチであるRangeUpを提案する。
論文 参考訳(メタデータ) (2024-10-29T15:25:21Z) - RankSHAP: Shapley Value Based Feature Attributions for Learning to Rank [28.438428292619577]
我々は、機能属性コミュニティで人気がある軸論的ゲーム理論のアプローチを採用し、全てのランク付けベースの特徴属性メソッドが満足すべき基本公理のセットを特定する。
次にRang-SHAPを導入し、古典的なShapley値をランキングに拡張します。
また、既存の帰属アルゴリズムの公理解析を行い、提案した公理に準拠するかどうかを判断する。
論文 参考訳(メタデータ) (2024-05-03T04:43:24Z) - Evaluating Generative Language Models in Information Extraction as Subjective Question Correction [49.729908337372436]
本稿では,新しい評価手法SQC-Scoreを提案する。
主観的質問訂正の原則に着想を得て,新しい評価手法SQC-Scoreを提案する。
3つの情報抽出タスクの結果から,SQC-Scoreは基準値よりもアノテータの方が好ましいことが示された。
論文 参考訳(メタデータ) (2024-04-04T15:36:53Z) - Learning List-Level Domain-Invariant Representations for Ranking [59.3544317373004]
リストレベルのアライメント -- より高いレベルのリストでドメイン不変表現を学習する。
利点は2つある: これは、ランク付けに縛られる最初のドメイン適応の一般化をもたらし、その結果、提案法に対する理論的支援を提供する。
論文 参考訳(メタデータ) (2022-12-21T04:49:55Z) - Self-Supervised Class Incremental Learning [51.62542103481908]
既存のクラスインクリメンタルラーニング(CIL)手法は、データラベルに敏感な教師付き分類フレームワークに基づいている。
新しいクラスデータに基づいて更新する場合、それらは破滅的な忘れがちである。
本稿では,SSCILにおける自己指導型表現学習のパフォーマンスを初めて考察する。
論文 参考訳(メタデータ) (2021-11-18T06:58:19Z) - Search Methods for Sufficient, Socially-Aligned Feature Importance
Explanations with In-Distribution Counterfactuals [72.00815192668193]
特徴重要度(FI)推定は一般的な説明形式であり、テスト時に特定の入力特徴を除去することによって生じるモデル信頼度の変化を計算し、評価することが一般的である。
FIに基づく説明の未探索次元についていくつかの考察を行い、この説明形式に対する概念的および実証的な改善を提供する。
論文 参考訳(メタデータ) (2021-06-01T20:36:48Z) - PiRank: Learning To Rank via Differentiable Sorting [85.28916333414145]
ランク付けのための新しい分類可能なサロゲートであるPiRankを提案する。
ピランクは所望の指標をゼロ温度の限界で正確に回収する。
論文 参考訳(メタデータ) (2020-12-12T05:07:36Z) - Interpretable Learning-to-Rank with Generalized Additive Models [78.42800966500374]
ラーニング・ツー・ランクのモデルの解釈可能性は、非常に重要でありながら、比較的過小評価されている研究分野である。
解釈可能なランキングモデルの最近の進歩は、主に既存のブラックボックスランキングモデルに対するポストホックな説明の生成に焦点を当てている。
一般化加法モデル(GAM)をランキングタスクに導入することにより,本質的に解釈可能な学習 to ランクの基盤を築いた。
論文 参考訳(メタデータ) (2020-05-06T01:51:30Z) - Valid Explanations for Learning to Rank Models [5.320400771224103]
本稿では,入力特徴の少数のサブセットをランキング決定の理由として同定するモデルに依存しない局所的説明法を提案する。
我々は,選択された特徴の有無に基づいて,ランク付けに特化して説明の妥当性と完全性という新たな概念を導入する。
論文 参考訳(メタデータ) (2020-04-29T06:21:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。