論文の概要: Bayesian Empirical Bayes: Simultaneous Inference from Probabilistic Symmetries
- arxiv url: http://arxiv.org/abs/2512.16239v2
- Date: Mon, 22 Dec 2025 06:11:51 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-12-24 19:17:49.566592
- Title: Bayesian Empirical Bayes: Simultaneous Inference from Probabilistic Symmetries
- Title(参考訳): ベイズ経験的ベイズ:確率論的対称性からの同時推論
- Authors: Bohan Wu, Eli N. Weinstein, David M. Blei,
- Abstract要約: 経験的ベイズ(EB)は「他人の経験から学ぶ」同時推論の精度を改善する
我々は変分推論とニューラルネットワークに基づくスケーラブルなアルゴリズムを開発した。
- 参考スコア(独自算出の注目度): 22.13100813745803
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Empirical Bayes (EB) improves the accuracy of simultaneous inference "by learning from the experience of others" (Efron, 2012). Classical EB theory focuses on latent variables that are iid draws from a fitted prior (Efron, 2019). Modern applications, however, feature complex structure, like arrays, spatial processes, or covariates. How can we apply EB ideas to these settings? We propose a generalized approach to empirical Bayes based on the notion of probabilistic symmetry. Our method pairs a simultaneous inference problem-with an unknown prior-to a symmetry assumption on the joint distribution of the latent variables. Each symmetry implies an ergodic decomposition, which we use to derive a corresponding empirical Bayes method. We call this methodBayesian empirical Bayes (BEB). We show how BEB recovers the classical methods of empirical Bayes, which implicitly assume exchangeability. We then use it to extend EB to other probabilistic symmetries: (i) EB matrix recovery for arrays and graphs; (ii) covariate-assisted EB for conditional data; (iii) EB spatial regression under shift invariance. We develop scalable algorithms based on variational inference and neural networks. In simulations, BEB outperforms existing approaches to denoising arrays and spatial data. On real data, we demonstrate BEB by denoising a cancer gene-expression matrix and analyzing spatial air-quality data from New York City.
- Abstract(参考訳): Empirical Bayes (EB) は「他人の経験から学習することで」同時推論の精度を向上させる(Efron, 2012)。
古典的 EB 理論は、適合した前者(Efron, 2019)から入射した iid 変数に焦点をあてる(Efron, 2019)。
しかし、現代の応用では配列や空間過程、共変量といった複雑な構造が特徴的である。
これらの設定にどのようにEBのアイデアを適用できますか?
確率対称性の概念に基づく経験的ベイズに対する一般化されたアプローチを提案する。
提案手法は,潜伏変数の共役分布について,未知の事前から対称性の仮定と同時推論問題とをペアリングする。
それぞれの対称性はエルゴード分解を意味し、これに対応する経験的ベイズ法を導出する。
この手法をBayesian empirical Bayes (BEB)と呼ぶ。
本稿では,BEBが経験的ベイズの古典的手法をいかに回復するかを示す。
その後、EBを他の確率的対称性に拡張するために使用します。
i) 配列とグラフに対するEB行列の回復
(二 条件データのための共変量補助EB
三 シフト不変条件下でのEB空間回帰
我々は変分推論とニューラルネットワークに基づくスケーラブルなアルゴリズムを開発した。
シミュレーションでは、BEBは配列や空間データをデノナイズする既存のアプローチよりも優れている。
実データでは, がん遺伝子発現行列を分解し, ニューヨーク市の空間空気質データを解析することにより, BEBを実証する。
関連論文リスト
- Discriminative versus Generative Approaches to Simulation-based Inference [0.19999259391104385]
ディープラーニングにより、未結合かつ高次元パラメータ推定が可能になった。
ニューラルシミュレーションに基づく推論(N SBI)における2つのアプローチの比較を行った。
直接確率比推定と確率比推定の両方が、妥当な不確実性を持つパラメータを効果的に抽出できることが判明した。
論文 参考訳(メタデータ) (2025-03-11T01:38:54Z) - Calibrating Neural Simulation-Based Inference with Differentiable
Coverage Probability [50.44439018155837]
ニューラルモデルのトレーニング目的に直接キャリブレーション項を含めることを提案する。
古典的なキャリブレーション誤差の定式化を緩和することにより、エンドツーエンドのバックプロパゲーションを可能にする。
既存の計算パイプラインに直接適用でき、信頼性の高いブラックボックス後部推論が可能である。
論文 参考訳(メタデータ) (2023-10-20T10:20:45Z) - Quantifying predictive uncertainty of aphasia severity in stroke patients with sparse heteroscedastic Bayesian high-dimensional regression [47.1405366895538]
高次元データに対する疎線型回帰法は、通常、残留物が一定の分散を持つと仮定するが、これは実際には破ることができる。
本稿では,ヘテロセダスティック分割経験的ベイズ期待条件最大化アルゴリズムを用いて,高次元ヘテロセダスティック線形回帰モデルを推定する。
論文 参考訳(メタデータ) (2023-09-15T22:06:29Z) - Sparse high-dimensional linear regression with a partitioned empirical
Bayes ECM algorithm [62.997667081978825]
疎高次元線形回帰に対する計算効率が高く強力なベイズ的手法を提案する。
パラメータに関する最小の事前仮定は、プラグイン経験的ベイズ推定(英語版)を用いて用いられる。
提案手法はRパッケージプローブに実装されている。
論文 参考訳(メタデータ) (2022-09-16T19:15:50Z) - Excess risk analysis for epistemic uncertainty with application to
variational inference [110.4676591819618]
我々は、未知の分布からデータが生成される頻繁なセッティングにおいて、新しいEU分析を提示する。
一般化能力と、予測分布の分散やエントロピーなど、広く使用されているEUの測定値との関係を示す。
本研究では,PAC-ベイジアン理論に基づく予測とEU評価性能を直接制御する新しい変分推論を提案する。
論文 参考訳(メタデータ) (2022-06-02T12:12:24Z) - Score Matched Conditional Exponential Families for Likelihood-Free
Inference [0.0]
Likelihood-Free Inference (LFI) はモデルからのシミュレーションに依存する。
モデルからパラメータシミュレーションペアを観測に基づいて独立に生成する。
重みをスコアマッチングで調整したニューラルネットワークを用いて,条件付き指数関数的家族度近似を学習する。
論文 参考訳(メタデータ) (2020-12-20T11:57:30Z) - Convergence Rates of Empirical Bayes Posterior Distributions: A
Variational Perspective [20.51199643121034]
非パラメトリックおよび高次元推論のための経験的ベイズ後部分布の収束率について検討した。
その結果,最大辺縁度推定器によって誘導される経験的ベイズ後部分布は,階層的ベイズ後部分布の変動近似とみなすことができることがわかった。
論文 参考訳(メタデータ) (2020-09-08T19:35:27Z) - $\beta$-Cores: Robust Large-Scale Bayesian Data Summarization in the
Presence of Outliers [14.918826474979587]
古典的ベイズ推定の質は、観測結果が推定データ生成モデルに適合するかどうかに大きく依存する。
本稿では,大容量データセットに同時スケール可能な変分推論手法を提案する。
多様なシミュレーションおよび実データ、および様々な統計モデルにおいて、我々のアプローチの適用性について説明する。
論文 参考訳(メタデータ) (2020-08-31T13:47:12Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。