論文の概要: Explanation Shift: Detecting distribution shifts on tabular data via the
explanation space
- arxiv url: http://arxiv.org/abs/2210.12369v1
- Date: Sat, 22 Oct 2022 06:47:13 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-25 13:12:07.551466
- Title: Explanation Shift: Detecting distribution shifts on tabular data via the
explanation space
- Title(参考訳): 説明シフト:説明空間を介して表データ上の分布シフトを検出する
- Authors: Carlos Mougan, Klaus Broelemann, Gjergji Kasneci, Thanassis Tiropanis,
Steffen Staab
- Abstract要約: 本研究では, モデル予測性能とモデル説明特性の分布変化の影響について検討する。
我々は,予測性能変化の検出において,説明シフトのモデル化がより良い指標となることを見出した。
- 参考スコア(独自算出の注目度): 13.050516715665166
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: As input data distributions evolve, the predictive performance of machine
learning models tends to deteriorate. In the past, predictive performance was
considered the key indicator to monitor. However, explanation aspects have come
to attention within the last years. In this work, we investigate how model
predictive performance and model explanation characteristics are affected under
distribution shifts and how these key indicators are related to each other for
tabular data. We find that the modeling of explanation shifts can be a better
indicator for the detection of predictive performance changes than
state-of-the-art techniques based on representations of distribution shifts. We
provide a mathematical analysis of different types of distribution shifts as
well as synthetic experimental examples.
- Abstract(参考訳): 入力データ分布が進化するにつれて、機械学習モデルの予測性能は低下する傾向にある。
これまでは、予測性能がモニタリングの重要な指標と考えられていた。
しかし、近年では説明の側面が注目されている。
本研究では,分布シフトによってモデル予測性能とモデル説明特性がどのように影響を受けるか,およびこれらの指標が表データにどのように関連しているかについて検討する。
説明シフトのモデル化は,分布シフトの表現に基づく最先端技術よりも,予測性能変化の検出に適する指標であることがわかった。
本稿では, 異なる種類の分布シフトの数学的解析と, 合成実験例を提案する。
関連論文リスト
- Identifiable Latent Neural Causal Models [82.14087963690561]
因果表現学習は、低レベルの観測データから潜伏した高レベルの因果表現を明らかにすることを目指している。
因果表現の識別可能性に寄与する分布シフトのタイプを決定する。
本稿では,本研究の成果を実用的なアルゴリズムに翻訳し,信頼性の高い潜在因果表現の取得を可能にする。
論文 参考訳(メタデータ) (2024-03-23T04:13:55Z) - Out-of-Distribution Generalized Dynamic Graph Neural Network with
Disentangled Intervention and Invariance Promotion [61.751257172868186]
動的グラフニューラルネットワーク(DyGNN)は、グラフと時間力学を利用して強力な予測能力を実証している。
既存のDyGNNは、動的グラフに自然に存在する分散シフトを処理できない。
論文 参考訳(メタデータ) (2023-11-24T02:42:42Z) - Are Data-driven Explanations Robust against Out-of-distribution Data? [18.760475318852375]
エンドツーエンドのモデルに依存しない学習フレームワークであるDis Distributionally Robust Explanations (DRE)を提案する。
鍵となる考え方は、分配情報を完全に活用して、人間のアノテーションを使わずに説明の学習のための監視信号を提供することである。
提案手法は,分布変化に対する説明と予測の堅牢性の観点から,モデルの性能を著しく向上することを示す。
論文 参考訳(メタデータ) (2023-03-29T02:02:08Z) - Explanation Shift: How Did the Distribution Shift Impact the Model? [23.403838118256907]
本研究では,分布変化による説明特性の変化について検討した。
我々は、合成例と実世界のデータセットを用いて、異なる種類の分布シフトを分析する。
我々は、実験を再現するために使用されるコードと同様に、オープンソースのPythonパッケージでメソッドをリリースします。
論文 参考訳(メタデータ) (2023-03-14T17:13:01Z) - Performance Prediction Under Dataset Shift [1.1602089225841632]
生成した合成摂動を学習し,様々な性能予測モデルの新たな領域への一般化能力について検討する。
本稿では,性能予測器の信頼性を保証するために,予測精度の自然な不確実性評価を提案する。
論文 参考訳(メタデータ) (2022-06-21T19:40:58Z) - An Empirical Study on Distribution Shift Robustness From the Perspective
of Pre-Training and Data Augmentation [91.62129090006745]
本稿では,事前学習とデータ拡張の観点から分布シフト問題を考察する。
我々は,事前学習とデータ拡張に焦点を当てた,最初の総合的な実証的研究を行った。
論文 参考訳(メタデータ) (2022-05-25T13:04:53Z) - Predicting with Confidence on Unseen Distributions [90.68414180153897]
ドメイン適応と予測不確実性文学を結びつけて、挑戦的な未知分布のモデル精度を予測する。
分類器の予測における信頼度(DoC)の差は,様々な変化に対して,分類器の性能変化を推定することに成功した。
具体的には, 合成分布と自然分布の区別について検討し, その単純さにもかかわらず, DoCは分布差の定量化に優れることを示した。
論文 参考訳(メタデータ) (2021-07-07T15:50:18Z) - Why do classifier accuracies show linear trends under distribution
shift? [58.40438263312526]
あるデータ分布上のモデルの精度は、別の分布上の精度のほぼ線形関数である。
2つのモデルが予測で一致する確率は、精度レベルだけで推測できるものよりも高いと仮定します。
分布シフトの大きさが大きければ, 2 つの分布のモデルを評価する場合, 線形傾向が生じなければならない。
論文 参考訳(メタデータ) (2020-12-31T07:24:30Z) - Deducing neighborhoods of classes from a fitted model [68.8204255655161]
本稿では,新しいタイプの解釈可能な機械学習手法を提案する。
量子シフトを用いた分類モデルでは、特徴空間の予測クラスへの分割を理解するのに役立ちます。
基本的に、実際のデータポイント(または特定の関心点)を使用し、特定の特徴をわずかに引き上げたり減少させたりした後の予測の変化を観察する。
論文 参考訳(メタデータ) (2020-09-11T16:35:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。