論文の概要: On a Variational Approximation based Empirical Likelihood ABC Method
- arxiv url: http://arxiv.org/abs/2011.07721v1
- Date: Thu, 12 Nov 2020 21:24:26 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-26 07:44:48.446273
- Title: On a Variational Approximation based Empirical Likelihood ABC Method
- Title(参考訳): 変分近似に基づく経験的確率abc法について
- Authors: Sanjay Chaudhuri and Subhroshekhar Ghosh and David J. Nott and Kim Cuc
Pham
- Abstract要約: 本稿では,ABC法を提案する。
対象の対数姿勢は、期待される関節対数類似度とデータ生成密度の差分エントロピーの和として近似できることを示す。
- 参考スコア(独自算出の注目度): 1.5293427903448025
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Many scientifically well-motivated statistical models in natural,
engineering, and environmental sciences are specified through a generative
process. However, in some cases, it may not be possible to write down the
likelihood for these models analytically. Approximate Bayesian computation
(ABC) methods allow Bayesian inference in such situations. The procedures are
nonetheless typically computationally intensive. Recently, computationally
attractive empirical likelihood-based ABC methods have been suggested in the
literature. All of these methods rely on the availability of several suitable
analytically tractable estimating equations, and this is sometimes problematic.
We propose an easy-to-use empirical likelihood ABC method in this article.
First, by using a variational approximation argument as a motivation, we show
that the target log-posterior can be approximated as a sum of an expected joint
log-likelihood and the differential entropy of the data generating density. The
expected log-likelihood is then estimated by an empirical likelihood where the
only inputs required are a choice of summary statistic, it's observed value,
and the ability to simulate the chosen summary statistics for any parameter
value under the model. The differential entropy is estimated from the simulated
summaries using traditional methods. Posterior consistency is established for
the method, and we discuss the bounds for the required number of simulated
summaries in detail. The performance of the proposed method is explored in
various examples.
- Abstract(参考訳): 自然科学、工学、環境科学における科学的によく動機づけられた統計モデルは、生成過程を通じて特定される。
しかし、場合によっては、分析的にこれらのモデルの可能性を書き留めることはできないかもしれない。
近似ベイズ計算(abc)法はそのような状況でベイズ推論を可能にする。
しかしながら、手順は一般に計算集約的である。
近年,計算学的に魅力的な経験的確率に基づくabc法が文献に提案されている。
これらの手法はすべて、解析的に扱いやすいいくつかの推定式が利用可能であることに依拠しており、これはしばしば問題となる。
本稿では,abc法による簡易な経験的可能性を提案する。
まず, 変分近似引数をモチベーションとして使用することにより, 対象のログポストリエータを, 期待されたジョイントログの類似度とデータ生成密度の微分エントロピーの和として近似できることを示す。
予測されたログの類似度は、必要な入力がサマリ統計、観測値、モデル下の任意のパラメータ値に対する選択されたサマリ統計をシミュレートする能力のみである経験的確率によって推定される。
微分エントロピーは従来の方法を用いてシミュレーションされた要約から推定される。
提案手法では後方整合性が確立され,本手法で要求されるサマリー数の境界を詳細に検討する。
提案手法の性能を様々な例で検討した。
関連論文リスト
- Transformer-based Parameter Estimation in Statistics [0.0]
パラメータ推定のための変換器に基づく手法を提案する。
数値法で必要とされる確率密度関数を知る必要さえない。
提案手法は,平均二乗誤差で測定した手法と類似あるいは良好な精度を達成できることが示されている。
論文 参考訳(メタデータ) (2024-02-28T04:30:41Z) - Generalizing Backpropagation for Gradient-Based Interpretability [103.2998254573497]
モデルの勾配は、半環を用いたより一般的な定式化の特別な場合であることを示す。
この観測により、バックプロパゲーションアルゴリズムを一般化し、他の解釈可能な統計を効率的に計算することができる。
論文 参考訳(メタデータ) (2023-07-06T15:19:53Z) - Statistical Efficiency of Score Matching: The View from Isoperimetry [96.65637602827942]
本研究では, スコアマッチングの統計的効率と推定される分布の等尺性との間に, 密接な関係を示す。
これらの結果はサンプル状態と有限状態の両方で定式化する。
論文 参考訳(メタデータ) (2022-10-03T06:09:01Z) - A Statistical Decision-Theoretical Perspective on the Two-Stage Approach
to Parameter Estimation [7.599399338954307]
2段階(TS)アプローチは、信頼できるパラメトリック推定を得るために適用することができる。
独立したサンプルと同一のサンプルのモデルにTSアプローチを適用する方法を示す。
論文 参考訳(メタデータ) (2022-03-31T18:19:47Z) - Sampling from Arbitrary Functions via PSD Models [55.41644538483948]
まず確率分布をモデル化し,そのモデルからサンプリングする。
これらのモデルでは, 少数の評価値を用いて, 高精度に多数の密度を近似することが可能であることが示され, それらのモデルから効果的にサンプルする簡単なアルゴリズムが提示される。
論文 参考訳(メタデータ) (2021-10-20T12:25:22Z) - Leveraging Global Parameters for Flow-based Neural Posterior Estimation [90.21090932619695]
実験観測に基づくモデルのパラメータを推定することは、科学的方法の中心である。
特に困難な設定は、モデルが強く不確定であるとき、すなわち、パラメータの異なるセットが同一の観測をもたらすときである。
本稿では,グローバルパラメータを共有する観測の補助的セットによって伝達される付加情報を利用して,その不確定性を破る手法を提案する。
論文 参考訳(メタデータ) (2021-02-12T12:23:13Z) - New Algorithms And Fast Implementations To Approximate Stochastic
Processes [0.0]
モデリングプロセスの効率的な近似を求めるために,新しいアルゴリズムと高速な実装を提案する。
ゴールは常に有限モデルを見つけることであり、これは実際のデータプロセスに関する与えられた知識をできるだけ正確に表現するものである。
論文 参考訳(メタデータ) (2020-12-01T06:14:16Z) - A One-step Approach to Covariate Shift Adaptation [82.01909503235385]
多くの機械学習シナリオにおけるデフォルトの前提は、トレーニングとテストサンプルは同じ確率分布から引き出されることである。
予測モデルと関連する重みを1つの最適化で共同で学習する新しいワンステップアプローチを提案する。
論文 参考訳(メタデータ) (2020-07-08T11:35:47Z) - Marginal likelihood computation for model selection and hypothesis
testing: an extensive review [66.37504201165159]
この記事では、このトピックの最先端に関する総合的な研究について紹介する。
さまざまなテクニックの制限、メリット、コネクション、差異を強調します。
また、不適切な事前利用の問題や解決法についても述べる。
論文 参考訳(メタデータ) (2020-05-17T18:31:58Z) - On Contrastive Learning for Likelihood-free Inference [20.49671736540948]
Likelihood-freeメソッドは、可能性を評価することができるシミュレータモデルでパラメータ推論を行う。
この可能性のない問題の方法の1つのクラスは、パラメータ観測サンプルのペアを区別するために分類器を使用する。
別の一般的な手法のクラスは、パラメータの後方に直接条件分布を適合させ、特に最近の変種はフレキシブルな神経密度推定器の使用を可能にする。
論文 参考訳(メタデータ) (2020-02-10T13:14:01Z) - Unbiased and Efficient Log-Likelihood Estimation with Inverse Binomial
Sampling [9.66840768820136]
逆二項サンプリング(IBS)は、データセット全体のログ類似度を、バイアスなく効率的に推定することができる。
IBSは、推定パラメータと最大対数類似値において、代替サンプリング法よりも低い誤差を生成する。
論文 参考訳(メタデータ) (2020-01-12T19:51:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。