論文の概要: Direct Amortized Likelihood Ratio Estimation
- arxiv url: http://arxiv.org/abs/2311.10571v1
- Date: Fri, 17 Nov 2023 15:10:35 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-20 14:17:01.474734
- Title: Direct Amortized Likelihood Ratio Estimation
- Title(参考訳): 直アモーズド・イークリフト比の推定
- Authors: Adam D. Cobb, Brian Matejek, Daniel Elenius, Anirban Roy, Susmit Jha
- Abstract要約: 確率自由なシミュレーションに基づく推論のための新しいアモータイズされた確率比推定器を提案する。
我々の推定器は、神経推定器の1つの前方通過を用いて、その確率比を訓練し、推定することが容易である。
ニューラル比推定器を用いてクワッドコプターを設計することで,SBIの新たな実世界応用を含む。
- 参考スコア(独自算出の注目度): 12.865267623394532
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce a new amortized likelihood ratio estimator for likelihood-free
simulation-based inference (SBI). Our estimator is simple to train and
estimates the likelihood ratio using a single forward pass of the neural
estimator. Our approach directly computes the likelihood ratio between two
competing parameter sets which is different from the previous approach of
comparing two neural network output values. We refer to our model as the direct
neural ratio estimator (DNRE). As part of introducing the DNRE, we derive a
corresponding Monte Carlo estimate of the posterior. We benchmark our new ratio
estimator and compare to previous ratio estimators in the literature. We show
that our new ratio estimator often outperforms these previous approaches. As a
further contribution, we introduce a new derivative estimator for likelihood
ratio estimators that enables us to compare likelihood-free Hamiltonian Monte
Carlo (HMC) with random-walk Metropolis-Hastings (MH). We show that HMC is
equally competitive, which has not been previously shown. Finally, we include a
novel real-world application of SBI by using our neural ratio estimator to
design a quadcopter. Code is available at https://github.com/SRI-CSL/dnre.
- Abstract(参考訳): 本稿では,確率自由シミュレーションベース推論(sbi)のための新しい償却度比推定器を提案する。
私たちの推定器は簡単に訓練でき、神経推定器の1つの前方パスを使って推定できる。
提案手法は,2つのニューラルネットワークの出力値を比較する従来の手法とは異なる2つの競合パラメータセット間の確率比を直接計算する。
私たちはこのモデルをdirect neural ratio estimator(dnre)と呼んでいる。
DNREの導入の一環として、後部のモンテカルロ推定を導出する。
我々は,新しい比推定器をベンチマークし,文献における過去の比推定器と比較した。
我々は、新しい比推定器がこれらの従来の手法より優れていることを示す。
さらに,自由ハミルトンモンテカルロ (hmc) とランダムウォークメトロポリス・ハスティング (mh) を比較した,ラピッド比推定のための新しい微分推定器を提案する。
HMCは前例のない等しく競争力があることを示す。
最後に、ニューラル比推定器を用いてクワッドコプターを設計することにより、SBIの新たな実世界応用を含む。
コードはhttps://github.com/SRI-CSL/dnreで入手できる。
関連論文リスト
- Nearest Neighbour Score Estimators for Diffusion Generative Models [16.189734871742743]
トレーニングセットから複数のサンプルを抽出し,推定値の分散を劇的に低減する新しい近傍スコア関数推定器を提案する。
拡散モデルでは,確率フローODE統合のための学習ネットワークを推定器で置き換えることができ,将来的な研究の新たな道が開かれる。
論文 参考訳(メタデータ) (2024-02-12T19:27:30Z) - Consensus-Adaptive RANSAC [104.87576373187426]
本稿では,パラメータ空間の探索を学習する新しいRANSACフレームワークを提案する。
注意機構は、ポイント・ツー・モデル残差のバッチで動作し、軽量のワンステップ・トランスフォーマーで見いだされたコンセンサスを考慮するために、ポイント・ツー・モデル推定状態を更新する。
論文 参考訳(メタデータ) (2023-07-26T08:25:46Z) - Differentially Private Distributed Bayesian Linear Regression with MCMC [0.966840768820136]
我々は、複数のパーティがデータの一部を保持し、プライバシ保護ノイズにおけるその部分の要約統計を共有できる分散環境について検討する。
線形回帰統計学の要約統計学における有用な分布関係を生かした,個人共用統計学のための新しい生成統計学モデルを構築した。
本研究では,実データとシミュレーションデータの両方について数値計算を行い,提案アルゴリズムが十分に囲む推定と予測を行うことを示す。
論文 参考訳(メタデータ) (2023-01-31T17:27:05Z) - Low-variance estimation in the Plackett-Luce model via quasi-Monte Carlo
sampling [58.14878401145309]
PLモデルにおいて,より標本効率の高い予測値を生成するための新しい手法を開発した。
Amazon MusicのリアルなレコメンデーションデータとYahooの学習からランクへの挑戦を理論的にも実証的にも使用しています。
論文 参考訳(メタデータ) (2022-05-12T11:15:47Z) - Learning to Estimate Without Bias [57.82628598276623]
ガウスの定理は、重み付き最小二乗推定器は線形モデルにおける線形最小分散アンバイアスド推定(MVUE)であると述べている。
本稿では、バイアス制約のあるディープラーニングを用いて、この結果を非線形設定に拡張する第一歩を踏み出す。
BCEの第二の動機は、同じ未知の複数の推定値が平均化されてパフォーマンスが向上するアプリケーションにおいてである。
論文 参考訳(メタデータ) (2021-10-24T10:23:51Z) - Hierarchical Gaussian Process Models for Regression Discontinuity/Kink
under Sharp and Fuzzy Designs [0.0]
回帰不連続/リンク(RD/RK)を用いた因果推論のための非パラメトリックベイズ推定器を提案する。
これらの推定器は、中間ベイズニューラルネットワーク層を持つ階層型GPモデルに拡張される。
モンテカルロシミュレーションにより、我々の推定器は、精度、カバレッジ、間隔長の点で競合する推定器よりもよく、しばしばよく機能することを示した。
論文 参考訳(メタデータ) (2021-10-03T04:23:56Z) - A unified view of likelihood ratio and reparameterization gradients [91.4645013545015]
我々は、LRとRPが確率質量の運動を追跡する代替方法であることを示すために、第一原理のアプローチを用いる。
LRとRPを組み合わせた全ての可能な推定器の空間は、流れ場によって完全にパラメータ化可能であることを示す。
したがって、より優れたモンテカルロ勾配推定器をどこに探すべきかを明確にする。
論文 参考訳(メタデータ) (2021-05-31T11:53:08Z) - Learning Minimax Estimators via Online Learning [55.92459567732491]
確率分布のパラメータを推定するミニマックス推定器を設計する際の問題点を考察する。
混合ケースナッシュ平衡を求めるアルゴリズムを構築した。
論文 参考訳(メタデータ) (2020-06-19T22:49:42Z) - Nonparametric Estimation of the Fisher Information and Its Applications [82.00720226775964]
本稿では,大きさn$のランダムサンプルからフィッシャー情報の位置推定の問題について考察する。
Bhattacharyaにより提案された推定器を再検討し、収束率の向上を導出する。
クリッピング推定器と呼ばれる新しい推定器を提案する。
論文 参考訳(メタデータ) (2020-05-07T17:21:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。