論文の概要: Embedding-Bias in Conditional Independence Testing
- arxiv url: http://arxiv.org/abs/2610.11584v1
- Date: Thu, 08 Oct 2026 09:33:23 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.931336
- Title: Embedding-Bias in Conditional Independence Testing
- Title(参考訳): 条件付き独立試験における埋め込みバイアス
- Abstract要約: テストは、$Z$が$X$または$Y$の$(Z)$とは独立で、データから確認できない場合に有効である。
特定の形式の依存に焦点を合わせることで、埋め込みが保持しなければならないものを緩和することを示す。
- 参考スコア(独自算出の注目度): 4.941630596191806
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: To test conditional independence of $X$ and $Y$ given a text or an image $Z$, one conditions on an embedding $ψ(Z)$ in place of $Z$. The embedded test is valid if $Z$ is independent of $X$ or of $Y$ given $ψ(Z)$, which cannot be confirmed from data, and when this fails, the rejection probability under the null hypothesis can tend to one. We study this failure, and show that focusing on a specific form of dependence relaxes what the embedding must retain. For a residual correlation test inspired by the Generalised Covariance Measure, validity only requires that the parts of $\mathbb{E}[X \mid Z]$ and $\mathbb{E}[Y \mid Z]$ missed by $\mathbb{E}[X \mid ψ(Z)]$ and $\mathbb{E}[Y \mid ψ(Z)]$ are uncorrelated. Otherwise, we treat the discarded information as an omitted variable. Under the null hypothesis, the bias equals the absolute correlation of the missed parts times the geometric mean of two partial $R^2$ values. This identity yields a robust test valid under a declared tolerance for the geometric mean, which, like a sensitivity parameter, is not identified from the data. On synthetic data and text embeddings, the robust test holds its level approximately. On text generated by a language model, under an exact null hypothesis, every embedding, even the generator's own states, biases the embedded test.
- Abstract(参考訳): X$ と $Y$ の条件独立性をテストするには、テキストまたはイメージが $Z$ を与えられる。
組込みテストは、$Z$ が$X$ または $Y$ から独立であり、データから確認できない場合には、null 仮説の下での拒絶確率が 1 になる傾向がある場合、有効である。
この失敗について検討し、特定の形式の依存に焦点を合わせることで、埋め込みが保持しなければならないことを緩和することを示す。
一般共分散測度にインスパイアされた残差相関テストでは、妥当性は $\mathbb{E}[X \mid Z]$ と $\mathbb{E}[Y \mid Z]$ と $\mathbb{E}[X \mid >(Z)]$ と $\mathbb{E}[Y \mid >(Z)]$ の部分が非相関であることが要求される。
さもなければ、廃棄された情報を省略変数として扱う。
ヌル仮説の下では、バイアスは2つの部分的な$R^2$値の幾何平均の欠落部分の絶対相関と等しい。
このアイデンティティは、幾何平均に対する宣言された許容条件の下で有効な堅牢なテストをもたらすが、これは感度パラメータのように、データから特定されない。
合成データとテキストの埋め込みについて、ロバストテストは、そのレベルをおよそ保持する。
言語モデルによって生成されたテキストでは、正確なnull仮説の下で、すべての埋め込み、ジェネレータ自身の状態でさえ、埋め込みテストに偏りがある。
関連論文リスト
- Anytime-valid simulation-based hypothesis testing [13.61966594130545]
我々は、i.d.シミュレーションにしかアクセスできない密度のない設定を考える。
我々は,e-testマーチンゲールを構築し,任意の値の型Iエラーを保証するシーケンシャルなテストを行う。
本論文の価値は、密度のないシミュレーションに基づく逐次仮説テストケースに対して、有効かつ有意な解をコンパクトに提示することにある。
論文 参考訳(メタデータ) (2026-10-06T12:03:25Z) - Information-Computation Tradeoffs for Noiseless Linear Regression with Oblivious Contamination [65.37519531362157]
このタスクに対する効率的な統計的クエリアルゴリズムは、VSTATの複雑さを少なくとも$tildeOmega(d1/2/alpha2)$で要求する。
論文 参考訳(メタデータ) (2025-10-12T15:42:44Z) - Non-iid hypothesis testing: from classical to quantum [4.258175645355975]
不特定分散環境での仮説テスト(いわゆる状態認証)について検討する。
任意の$d$-次元仮説状態 $sigma$ に対して、$rho_mathrmavg = sigma$ と $D_mathrmtr(rho_mathrmavg,sigma) > epsilon$ provided $T gg d/epsilon2$ を区別することができる。
論文 参考訳(メタデータ) (2025-10-07T17:19:26Z) - Differentially Private Conditional Independence Testing [35.376975903797444]
条件独立テスト(CI)は統計データ解析に広く用いられている。
本研究では,差分プライバシー制約下での条件付き独立試験について検討する。
論文 参考訳(メタデータ) (2023-06-11T16:46:00Z) - Statistical Learning under Heterogeneous Distribution Shift [71.8393170225794]
ground-truth predictor is additive $mathbbE[mathbfz mid mathbfx,mathbfy] = f_star(mathbfx) +g_star(mathbfy)$.
論文 参考訳(メタデータ) (2023-02-27T16:34:21Z) - Spectral properties of sample covariance matrices arising from random
matrices with independent non identically distributed columns [50.053491972003656]
関数 $texttr(AR(z))$, for $R(z) = (frac1nXXT- zI_p)-1$ and $Ain mathcal M_p$ deterministic, have a standard deviation of order $O(|A|_* / sqrt n)$.
ここでは、$|mathbb E[R(z)] - tilde R(z)|_F を示す。
論文 参考訳(メタデータ) (2021-09-06T14:21:43Z) - The Sample Complexity of Robust Covariance Testing [56.98280399449707]
i. i. d.
形式 $Z = (1-epsilon) X + epsilon B$ の分布からのサンプル。ここで $X$ はゼロ平均で未知の共分散である Gaussian $mathcalN(0, Sigma)$ である。
汚染がない場合、事前の研究は、$O(d)$サンプルを使用するこの仮説テストタスクの単純なテスターを与えた。
サンプル複雑性の上限が $omega(d2)$ for $epsilon$ an arbitrarily small constant and $gamma であることを証明します。
論文 参考訳(メタデータ) (2020-12-31T18:24:41Z) - Optimal rates for independence testing via $U$-statistic permutation
tests [7.090165638014331]
独立分布と同一分布のペアが$sigma$-finiteで分離可能な測度空間で値を取る独立性テストの問題について検討する。
最初に、独立性の有効なテストはなく、$f: D(f) geq rho2 $ という形の代替と一様に一致していることを示す。
論文 参考訳(メタデータ) (2020-01-15T19:04:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。