論文の概要: Unbiased Estimation using the Underdamped Langevin Dynamics
- arxiv url: http://arxiv.org/abs/2206.07202v1
- Date: Tue, 14 Jun 2022 23:05:56 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-17 10:37:38.755202
- Title: Unbiased Estimation using the Underdamped Langevin Dynamics
- Title(参考訳): アンダーダムランゲヴィンダイナミクスを用いた非バイアス推定
- Authors: Hamza Ruzayqat, Neil K. Chada, Ajay Jasra
- Abstract要約: 我々は,アンダーダムのランゲヴィン力学による非バイアスな手法の開発に焦点をあてる。
特に連続時間において、この力学は定常測度として利害の確率を認めるように構成することができる。
標準的な仮定の下では、推定子は有限分散であり、期待されるコストが有限であるか、あるいは高い確率で有限コストであることを示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this work we consider the unbiased estimation of expectations
w.r.t.~probability measures that have non-negative Lebesgue density, and which
are known point-wise up-to a normalizing constant. We focus upon developing an
unbiased method via the underdamped Langevin dynamics, which has proven to be
popular of late due to applications in statistics and machine learning.
Specifically in continuous-time, the dynamics can be constructed to admit the
probability of interest as a stationary measure. We develop a novel scheme
based upon doubly randomized estimation, which requires access only to
time-discretized versions of the dynamics and are the ones that are used in
practical algorithms. We prove, under standard assumptions, that our estimator
is of finite variance and either has finite expected cost, or has finite cost
with a high probability. To illustrate our theoretical findings we provide
numerical experiments that verify our theory, which include challenging
examples from Bayesian statistics and statistical physics.
- Abstract(参考訳): 本研究では,非負のルベーグ密度を持ち,点的に上向きに正規化定数となる期待値w.r.t.~probability測度の偏りのない推定について考察する。
我々は、統計学や機械学習の応用により最近人気が高まっているランジェヴィン力学(Langevin dynamics)を用いて、バイアスのない方法の開発に注力する。
特に連続時間において、力学は、興味の確率を定常測度として認めるように構成できる。
本稿では,2倍ランダム化推定に基づく新しいスキームを開発し,動的に時間分割したバージョンにのみアクセスし,実用的なアルゴリズムで使用される手法を提案する。
標準的な仮定の下では、推定子は有限分散であり、期待されるコストが有限であるか、あるいは高い確率で有限コストであることを示す。
理論的な知見を説明するために、ベイズ統計学や統計物理学の挑戦的な例を含む、理論を検証する数値実験を行う。
関連論文リスト
- Stable Estimation of Survival Causal Effects [35.62449615170679]
生存因果効果を推定する問題について検討する。
目的は、介入が生存時間、すなわちイベントが起こるのにどのくらいの時間を要するかを特徴づけることである。
論文 参考訳(メタデータ) (2023-10-01T00:04:29Z) - Extending Path-Dependent NJ-ODEs to Noisy Observations and a Dependent
Observation Framework [6.404122934568861]
ノイズの多い観測を処理できる新しい損失関数を導入し、これまで使用されていた損失関数が一貫した推定値に導かなかった理由を説明する。
論文 参考訳(メタデータ) (2023-07-24T22:01:22Z) - The Implicit Delta Method [61.36121543728134]
本稿では,不確実性のトレーニング損失を無限に正規化することで機能する,暗黙のデルタ法を提案する。
有限差分により無限小変化が近似された場合でも, 正則化による評価の変化は評価推定器の分散に一定であることを示す。
論文 参考訳(メタデータ) (2022-11-11T19:34:17Z) - Continuous-Time Modeling of Counterfactual Outcomes Using Neural
Controlled Differential Equations [84.42837346400151]
反現実的な結果を予測することは、パーソナライズされたヘルスケアをアンロックする可能性がある。
既存の因果推論アプローチでは、観察と治療決定の間の通常の離散時間間隔が考慮されている。
そこで本研究では,腫瘍増殖モデルに基づく制御可能なシミュレーション環境を提案する。
論文 参考訳(メタデータ) (2022-06-16T17:15:15Z) - Uncertainty estimation of pedestrian future trajectory using Bayesian
approximation [137.00426219455116]
動的トラフィックシナリオでは、決定論的予測に基づく計画は信頼できない。
著者らは、決定論的アプローチが捉えられない近似を用いて予測中の不確実性を定量化する。
将来の状態の不確実性に対する降雨重量と長期予測の影響について検討した。
論文 参考訳(メタデータ) (2022-05-04T04:23:38Z) - Time varying regression with hidden linear dynamics [74.9914602730208]
線形力学系に従って未知のパラメータが進化することを前提とした時間変化線形回帰モデルを再検討する。
反対に、基礎となる力学が安定である場合、このモデルのパラメータは2つの通常の最小二乗推定と組み合わせることで、データから推定できることが示される。
論文 参考訳(メタデータ) (2021-12-29T23:37:06Z) - Learning to Estimate Without Bias [57.82628598276623]
ガウスの定理は、重み付き最小二乗推定器は線形モデルにおける線形最小分散アンバイアスド推定(MVUE)であると述べている。
本稿では、バイアス制約のあるディープラーニングを用いて、この結果を非線形設定に拡張する第一歩を踏み出す。
BCEの第二の動機は、同じ未知の複数の推定値が平均化されてパフォーマンスが向上するアプリケーションにおいてである。
論文 参考訳(メタデータ) (2021-10-24T10:23:51Z) - Optimization Variance: Exploring Generalization Properties of DNNs [83.78477167211315]
ディープニューラルネットワーク(DNN)のテストエラーは、しばしば二重降下を示す。
そこで本研究では,モデル更新の多様性を測定するために,新しい測度である最適化分散(OV)を提案する。
論文 参考訳(メタデータ) (2021-06-03T09:34:17Z) - Unbiased Estimation of the Gradient of the Log-Likelihood for a Class of
Continuous-Time State-Space Models [0.0]
連続時間状態空間モデルのクラスに対する静的パラメータ推定について検討する。
私たちのゴールは、ログライクリフの勾配(スコア関数)の偏りのない推定値を得ることです。
論文 参考訳(メタデータ) (2021-05-24T20:31:48Z) - Removing the mini-batching error in Bayesian inference using Adaptive
Langevin dynamics [0.0]
我々は、動的摩擦を伴う標準慣性ランゲヴィン力学の修正である、Adaptive Langevin dynamics(アダプティブランゲヴィン力学)を提唱する。
本稿では,Adaptive Langevinの前提となる仮定の実践的妥当性について検討する。
論文 参考訳(メタデータ) (2021-05-21T13:39:39Z) - Equivariant online predictions of non-stationary time series [0.0]
モデル不特定条件下での統計的手法の理論的予測特性を解析する。
ランダムウォーク・ダイナミック・リニア・モデル(ランダムウォーク・ダイナミック・リニア・モデル)の特定のクラスが、正確なミニマックス予測密度を生成することを示す。
論文 参考訳(メタデータ) (2019-11-20T01:46:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。