論文の概要: Measuring Differences between Conditional Distributions using Kernel Embeddings
- arxiv url: http://arxiv.org/abs/2605.02260v1
- Date: Mon, 04 May 2026 06:16:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-05 20:33:50.158788
- Title: Measuring Differences between Conditional Distributions using Kernel Embeddings
- Title(参考訳): カーネル埋め込みを用いた条件分布の差の測定
- Authors: Peter Moskvichev, Siu Lun Chau, Dino Sejdinovic,
- Abstract要約: 本稿では,条件分布間のばらつきを計測するカーネルベースの手法を研究するためのコヒーレントな枠組みを確立する。
そこで本研究では,条件付き最大平均誤差(CMMD)を2倍頑健に推定する手法を提案する。
- 参考スコア(独自算出の注目度): 17.88693838540775
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Comparing conditional distributions is a fundamental challenge in statistics and machine learning, with applications across a wide range of domains. While proposed methods for measuring discrepancies using kernel embeddings of distributions in a reproducing kernel Hilbert space (RKHS) provide powerful non-parametric techniques, the existing literature remains fragmented and lacks a unified theoretical treatment. This paper addresses this gap by establishing a coherent framework for studying kernel-based methods to measure divergence between conditional distributions through what we refer to as conditional maximum mean discrepancy (CMMD). The CMMD consists of a family of metrics which we call levels, with three special cases each using a different type of RKHS embedding: CMMD$_0$ (conditional mean operators), CMMD$_1$ (conditional mean embeddings), and CMMD$_2$ (joint mean embeddings). We additionally introduce a general level $s$ CMMD, clarifying the required assumptions, and establishing mathematical connections between the levels through the lens of operator-based smoothing. In addition to reviewing previously proposed estimators, we introduce a novel doubly robust estimator for the CMMD that maintains consistency provided at least one of the underlying models is correctly specified. We provide numerical experiments demonstrating that the CMMD effectively captures complex conditional dependencies for statistical testing.
- Abstract(参考訳): 条件分布を比較することは、統計学と機械学習の基本的な課題であり、幅広い領域にまたがる応用がある。
再現されたカーネルヒルベルト空間(RKHS)における分布のカーネル埋め込みを用いて不一致を測定する手法は、強力な非パラメトリック技術を提供するが、既存の文献は断片化され、統一された理論的処理が欠如している。
本稿では,条件分布間のばらつきを条件付き最大平均差分法(CMMD)と呼ぶ手法をカーネルベースで研究するコヒーレントな枠組みを確立することにより,このギャップを解消する。
CMMDは、それぞれ異なるタイプのRKHS埋め込みを使用し、CMMD$_0$(条件平均埋め込み)、CMMD$_1$(条件平均埋め込み)、CMMD$_2$(結合平均埋め込み)の3つの特別なケースで構成されています。
さらに、所要の仮定を明確にし、演算子ベースの滑らか化のレンズを通してレベル間の数学的接続を確立するため、一般レベルの$s$ CMMDを導入する。
提案した推定器のレビューに加えて,少なくとも1つのモデルが正しく指定されている場合の整合性を維持するCMMD用の2倍頑健な推定器を導入する。
我々は,CMMDが統計的テストにおいて複雑な条件依存を効果的に捉えることを示す数値実験を行った。
関連論文リスト
- A Uniform Concentration Inequality for Kernel-Based Two-Sample Statistics [4.757470449749877]
これらの指標はカーネルベースの2サンプル統計学の一般的な枠組みの下で統一可能であることを示す。
本稿では、上記のカーネルベースの統計量に対して、新しい一様濃度不等式を確立する。
図示的応用として,これらの境界が距離共分散に基づく次元減少などの手順における誤差境界の構成をどのように促進するかを示す。
論文 参考訳(メタデータ) (2024-05-22T22:41:56Z) - Targeted Separation and Convergence with Kernel Discrepancies [61.973643031360254]
カーネルベースの不一致測度は、(i)ターゲットPを他の確率測度から分離するか、(ii)Pへの弱収束を制御する必要がある。
本稿では, (i) と (ii) を保証するのに十分な,必要な新しい条件を導出する。
可分距離空間上のMDDに対して、ボヒナー埋め込み可測度を分離するカーネルを特徴づけ、すべての測度を非有界カーネルと分離するための単純な条件を導入する。
論文 参考訳(メタデータ) (2022-09-26T16:41:16Z) - A Unified Framework for Multi-distribution Density Ratio Estimation [101.67420298343512]
バイナリ密度比推定(DRE)は多くの最先端の機械学習アルゴリズムの基礎を提供する。
ブレグマン最小化の発散の観点から一般的な枠組みを開発する。
我々のフレームワークはバイナリDREでそれらのフレームワークを厳格に一般化する手法に導かれることを示す。
論文 参考訳(メタデータ) (2021-12-07T01:23:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。