論文の概要: Optimization-Based MCMC Methods for Nonlinear Hierarchical Statistical
Inverse Problems
- arxiv url: http://arxiv.org/abs/2002.06358v1
- Date: Sat, 15 Feb 2020 10:19:42 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-31 23:20:23.363547
- Title: Optimization-Based MCMC Methods for Nonlinear Hierarchical Statistical
Inverse Problems
- Title(参考訳): 非線形階層統計逆問題に対する最適化に基づくmcmc法
- Authors: Johnathan Bardsley, Tiangang Cui
- Abstract要約: 多くの階層的逆問題において、パラメータ・可観測写像において高次元あるいは無限次元のモデルパラメータを推定するだけでなく、ハイパーパラメータを推定する必要がある。
本研究では,階層型ベイズ逆問題の解法として,スケーラブルな最適化に基づくマルコフ連鎖モンテカルロ法(MCMC)を提案する。
- 参考スコア(独自算出の注目度): 0.6091702876917279
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In many hierarchical inverse problems, not only do we want to estimate high-
or infinite-dimensional model parameters in the parameter-to-observable maps,
but we also have to estimate hyperparameters that represent critical
assumptions in the statistical and mathematical modeling processes. As a joint
effect of high-dimensionality, nonlinear dependence, and non-concave structures
in the joint posterior posterior distribution over model parameters and
hyperparameters, solving inverse problems in the hierarchical Bayesian setting
poses a significant computational challenge. In this work, we aim to develop
scalable optimization-based Markov chain Monte Carlo (MCMC) methods for solving
hierarchical Bayesian inverse problems with nonlinear parameter-to-observable
maps and a broader class of hyperparameters. Our algorithmic development is
based on the recently developed scalable randomize-then-optimize (RTO) method
[4] for exploring the high- or infinite-dimensional model parameter space. By
using RTO either as a proposal distribution in a Metropolis-within-Gibbs update
or as a biasing distribution in the pseudo-marginal MCMC [2], we are able to
design efficient sampling tools for hierarchical Bayesian inversion. In
particular, the integration of RTO and the pseudo-marginal MCMC has sampling
performance robust to model parameter dimensions. We also extend our methods to
nonlinear inverse problems with Poisson-distributed measurements. Numerical
examples in PDE-constrained inverse problems and positron emission tomography
(PET) are used to demonstrate the performance of our methods.
- Abstract(参考訳): 多くの階層的逆問題において、パラメータ・可観測写像の高次元・無限次元モデルパラメーターを推定するだけでなく、統計および数学的モデリングプロセスにおける臨界仮定を表すハイパーパラメーターを推定する必要がある。
高次元、非線形依存、非凹構造によるモデルパラメータとハイパーパラメータ上の後後方分布の合同効果として、階層ベイズ環境における逆問題を解くことは重要な計算課題となる。
本研究では,階層ベイズ逆問題を非線形パラメータ対可観測写像とより広い超パラメータのクラスで解くための,スケーラブルな最適化に基づくマルコフ連鎖モンテカルロ法(mcmc)の開発を目指している。
我々のアルゴリズム開発は,高次元あるいは無限次元のモデルパラメータ空間を探索するRTO法 [4] を最近開発した。
RTO をMetropolis-within-Gibbs の更新における提案分布として、あるいは擬行列MCMC [2] の偏り分布として使用することにより、階層ベイズ変換のための効率的なサンプリングツールを設計することができる。
特に、RTOと疑似マルチナルMCMCの統合は、モデルパラメータ次元に対して堅牢なサンプリング性能を有する。
また,ポアソン分布測定による非線形逆問題にも拡張する。
PDE制約逆問題とポジトロンエミッショントモグラフィ(PET)の数値例を用いて,本手法の性能を実証した。
関連論文リスト
- A Statistical Machine Learning Approach for Adapting Reduced-Order Models using Projected Gaussian Process [4.658371840624581]
適切な直交分解(POD)は、低次元の部分空間にまたがる最適基底モードを計算する。
本稿では,予測ガウス過程 (pGP) を提案し,PODベースを教師付き統計学習問題として適用する問題を定式化する。
パラメータ変化に対してPODベースを適用するために提案したpGPの利点を示す数値的な例を示す。
論文 参考訳(メタデータ) (2024-10-18T00:02:43Z) - Total Uncertainty Quantification in Inverse PDE Solutions Obtained with Reduced-Order Deep Learning Surrogate Models [50.90868087591973]
機械学習サロゲートモデルを用いて得られた逆PDE解の総不確かさを近似したベイズ近似法を提案する。
非線型拡散方程式に対する反復的アンサンブルスムーズおよび深層アンサンブル法との比較により,提案手法を検証した。
論文 参考訳(メタデータ) (2024-08-20T19:06:02Z) - A Metaheuristic for Amortized Search in High-Dimensional Parameter
Spaces [0.0]
本稿では,特徴インフォームド変換から次元還元を実現するメタヒューリスティックを提案する。
DR-FFITは、高次元空間における勾配自由パラメータ探索を容易にする効率的なサンプリング戦略を実装している。
実験データから,DR-FFITは,確立したメタヒューリスティックスに対するランダム検索とシミュレート・アニーリングの性能を向上させることが示された。
論文 参考訳(メタデータ) (2023-09-28T14:25:14Z) - Provably Efficient Algorithm for Nonstationary Low-Rank MDPs [48.92657638730582]
我々は,非定常RLを,遷移カーネルと報酬の両方が時間とともに変化するような,エピソードな低ランクMDPで調査する最初の試みを行っている。
本稿では,パラメータ依存型ポリシ最適化アルゴリズムである Portal を提案し,パラメータフリー版である Ada-Portal の Portal をさらに改良する。
両アルゴリズムとも,非定常性が著しく大きくない限り, Portal と Ada-PortAL はサンプリング効率が良く,サンプリング複雑性を伴う平均的動的準最適ギャップを任意に小さく得ることを示す。
論文 参考訳(メタデータ) (2023-08-10T09:52:44Z) - An iterative multi-fidelity approach for model order reduction of
multi-dimensional input parametric PDE systems [0.0]
多次元入力パラメトリック空間を用いた大規模PDEシステムの縮小のためのサンプリングパラメトリック戦略を提案する。
これはパラメトリック空間全体の低忠実度モデルを効率的なサンプリング戦略を用いてサンプリングポイントに利用することで達成される。
提案手法は,低忠実度モデルを用いてソリューションデータベースを同化するため,オフライン段階での計算コストを大幅に削減する。
論文 参考訳(メタデータ) (2023-01-23T15:25:58Z) - Optimization of Annealed Importance Sampling Hyperparameters [77.34726150561087]
Annealed Importance Smpling (AIS) は、深層生成モデルの難易度を推定するために使われる一般的なアルゴリズムである。
本稿では、フレキシブルな中間分布を持つパラメータAISプロセスを提案し、サンプリングに少ないステップを使用するようにブリッジング分布を最適化する。
我々は, 最適化AISの性能評価を行い, 深部生成モデルの限界推定を行い, 他の推定値と比較した。
論文 参考訳(メタデータ) (2022-09-27T07:58:25Z) - Counting Phases and Faces Using Bayesian Thermodynamic Integration [77.34726150561087]
本稿では,2パラメータ統計力学系における熱力学関数と位相境界の再構成手法を提案する。
提案手法を用いて,IsingモデルとTASEPの分割関数と位相図を正確に再構成する。
論文 参考訳(メタデータ) (2022-05-18T17:11:23Z) - Bayesian multiscale deep generative model for the solution of
high-dimensional inverse problems [0.0]
深層確率的生成モデルに基づく新しいマルチスケールベイズ推論手法が導入された。
この方法は、安定性、効率、精度を示しながら、高次元パラメータ推定を可能にする。
論文 参考訳(メタデータ) (2021-02-04T11:47:21Z) - Pushing the Envelope of Rotation Averaging for Visual SLAM [69.7375052440794]
視覚SLAMシステムのための新しい最適化バックボーンを提案する。
従来の単分子SLAMシステムの精度, 効率, 堅牢性を向上させるために, 平均化を活用している。
我々のアプローチは、公開ベンチマークの最先端技術に対して、同等の精度で最大10倍高速に表示することができる。
論文 参考訳(メタデータ) (2020-11-02T18:02:26Z) - Understanding Implicit Regularization in Over-Parameterized Single Index
Model [55.41685740015095]
我々は高次元単一インデックスモデルのための正規化自由アルゴリズムを設計する。
暗黙正則化現象の理論的保証を提供する。
論文 参考訳(メタデータ) (2020-07-16T13:27:47Z) - Bayesian System ID: Optimal management of parameter, model, and
measurement uncertainty [0.0]
システム識別(ID)の確率的定式化の頑健さを,スパース,ノイズ,間接データに対して評価した。
従来手法の目的関数面と比較して,ログ後部は幾何学的特性が向上したことを示す。
論文 参考訳(メタデータ) (2020-03-04T22:48:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。