論文の概要: Bayesian Imaging With Data-Driven Priors Encoded by Neural Networks:
Theory, Methods, and Algorithms
- arxiv url: http://arxiv.org/abs/2103.10182v1
- Date: Thu, 18 Mar 2021 11:34:08 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-19 14:07:27.089965
- Title: Bayesian Imaging With Data-Driven Priors Encoded by Neural Networks:
Theory, Methods, and Algorithms
- Title(参考訳): ニューラルネットワークで符号化されたデータ駆動プリミティブによるベイズイメージング:理論、手法、アルゴリズム
- Authors: Matthew Holden, Marcelo Pereyra, Konstantinos C. Zygalakis
- Abstract要約: 本稿では,事前知識がトレーニングデータとして利用可能である逆問題に対して,ベイズ推定を行う新しい手法を提案する。
容易に検証可能な条件下で,関連する後方モーメントの存在と適切性を確立する。
モデル精度解析により、データ駆動モデルによって報告されるベイズ確率は、頻繁な定義の下で著しく正確であることが示された。
- 参考スコア(独自算出の注目度): 2.266704469122763
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper proposes a new methodology for performing Bayesian inference in
imaging inverse problems where the prior knowledge is available in the form of
training data. Following the manifold hypothesis and adopting a generative
modelling approach, we construct a data-driven prior that is supported on a
sub-manifold of the ambient space, which we can learn from the training data by
using a variational autoencoder or a generative adversarial network. We
establish the existence and well-posedness of the associated posterior
distribution and posterior moments under easily verifiable conditions,
providing a rigorous underpinning for Bayesian estimators and uncertainty
quantification analyses. Bayesian computation is performed by using a parallel
tempered version of the preconditioned Crank-Nicolson algorithm on the
manifold, which is shown to be ergodic and robust to the non-convex nature of
these data-driven models. In addition to point estimators and uncertainty
quantification analyses, we derive a model misspecification test to
automatically detect situations where the data-driven prior is unreliable, and
explain how to identify the dimension of the latent space directly from the
training data. The proposed approach is illustrated with a range of experiments
with the MNIST dataset, where it outperforms alternative image reconstruction
approaches from the state of the art. A model accuracy analysis suggests that
the Bayesian probabilities reported by the data-driven models are also
remarkably accurate under a frequentist definition of probability.
- Abstract(参考訳): 本稿では,事前知識がトレーニングデータとして利用可能である逆問題に対して,ベイズ推定を行う新しい手法を提案する。
多様体仮説に従い、生成的モデリング手法を採用することにより、変動型オートエンコーダや生成型逆ネットワークを用いて、トレーニングデータから学習可能な、環境空間のサブマニフォールド上でサポートされたデータ駆動前置モデルを構築する。
簡易検証可能な条件下では,関連する後方分布と後方モーメントの存在と適切性を確立し,ベイズ推定器に対する厳密な基礎と不確実性定量化分析を提供する。
ベイズ計算は、多様体上の事前条件付きcrank-nicolsonアルゴリズムの並列テンパレートバージョンを用いて行われ、これらのデータ駆動モデルの非凸性にエルゴードかつロバストであることが示されている。
点推定器と不確実性定量化解析に加えて,データ駆動前駆者が信頼できない状況を自動的に検出するモデルの誤特定テストを行い,学習データから直接潜在空間の次元を識別する方法を説明する。
提案手法は、MNISTデータセットによる様々な実験で説明され、芸術的状態から代替画像再構成アプローチよりも優れている。
モデル精度解析により、データ駆動モデルによって報告されるベイズ確率もまた確率の頻繁な定義の下で著しく正確であることが示された。
関連論文リスト
- Bayesian Estimation and Tuning-Free Rank Detection for Probability Mass Function Tensors [17.640500920466984]
本稿では,関節のPMFを推定し,そのランクを観測データから自動的に推定する新しい枠組みを提案する。
我々は、様々なモデルパラメータの後方分布を近似するために、変分推論(VI)に基づく決定論的解を導出し、さらに、変分推論(SVI)を利用して、VVIベースのアプローチのスケーラブルバージョンを開発する。
合成データと実映画レコメンデーションデータの両方を含む実験は、推定精度、自動ランク検出、計算効率の点で、VVIおよびSVIベースの手法の利点を示している。
論文 参考訳(メタデータ) (2024-10-08T20:07:49Z) - Inflationary Flows: Calibrated Bayesian Inference with Diffusion-Based Models [0.0]
本稿では,拡散モデルを用いてベイズ推定を行う方法を示す。
本稿では,新しいノイズスケジュールを用いて,標準的なDBMトレーニングを通じてそのようなマップを学習する方法を示す。
その結果は、低次元の潜在空間上で一意に定義される非常に表現性の高い生成モデルのクラスである。
論文 参考訳(メタデータ) (2024-07-11T19:58:19Z) - A variational neural Bayes framework for inference on intractable posterior distributions [1.0801976288811024]
トレーニングされたニューラルネットワークに観測データを供給することにより、モデルパラメータの後方分布を効率的に取得する。
理論的には、我々の後部はKulback-Leiblerの発散において真の後部に収束することを示す。
論文 参考訳(メタデータ) (2024-04-16T20:40:15Z) - Calibrating Neural Simulation-Based Inference with Differentiable
Coverage Probability [50.44439018155837]
ニューラルモデルのトレーニング目的に直接キャリブレーション項を含めることを提案する。
古典的なキャリブレーション誤差の定式化を緩和することにより、エンドツーエンドのバックプロパゲーションを可能にする。
既存の計算パイプラインに直接適用でき、信頼性の高いブラックボックス後部推論が可能である。
論文 参考訳(メタデータ) (2023-10-20T10:20:45Z) - Uncertainty Quantification for Local Model Explanations Without Model
Access [0.44241702149260353]
本稿では,機械学習モデルに対するポストホックな説明を生成するためのモデルに依存しないアルゴリズムを提案する。
本アルゴリズムは,モデルクエリの有限サンプルから説明を生成する際に必然的に発生する不確実性を定量化するためにブートストラップ方式を用いる。
論文 参考訳(メタデータ) (2023-01-13T21:18:00Z) - Fast Estimation of Bayesian State Space Models Using Amortized
Simulation-Based Inference [0.0]
本稿では,ベイズ状態空間モデルの隠れ状態を推定するための高速アルゴリズムを提案する。
事前トレーニングの後、データセットの後方分布を見つけるには、100分の1秒から10分の1秒かかる。
論文 参考訳(メタデータ) (2022-10-13T16:37:05Z) - Conformal prediction for the design problem [72.14982816083297]
機械学習の現実的な展開では、次にテストすべきデータを選択するために予測アルゴリズムを使用します。
このような設定では、トレーニングデータとテストデータの間には、異なるタイプの分散シフトがある。
このような環境で予測の不確実性を定量化する手法を提案する。
論文 参考訳(メタデータ) (2022-02-08T02:59:12Z) - Training on Test Data with Bayesian Adaptation for Covariate Shift [96.3250517412545]
ディープニューラルネットワークは、信頼できない不確実性推定で不正確な予測を行うことが多い。
分布シフトの下でのラベルなし入力とモデルパラメータとの明確に定義された関係を提供するベイズモデルを導出する。
本手法は精度と不確実性の両方を向上することを示す。
論文 参考訳(メタデータ) (2021-09-27T01:09:08Z) - Improving Uncertainty Calibration via Prior Augmented Data [56.88185136509654]
ニューラルネットワークは、普遍関数近似器として機能することで、複雑なデータ分布から学習することに成功した。
彼らはしばしば予測に自信過剰であり、不正確で誤った確率的予測に繋がる。
本稿では,モデルが不当に過信である特徴空間の領域を探索し,それらの予測のエントロピーをラベルの以前の分布に対して条件的に高める手法を提案する。
論文 参考訳(メタデータ) (2021-02-22T07:02:37Z) - Unlabelled Data Improves Bayesian Uncertainty Calibration under
Covariate Shift [100.52588638477862]
後続正則化に基づく近似ベイズ推定法を開発した。
前立腺癌の予後モデルを世界規模で導入する上で,本手法の有用性を実証する。
論文 参考訳(メタデータ) (2020-06-26T13:50:19Z) - Uncertainty Estimation Using a Single Deep Deterministic Neural Network [66.26231423824089]
本稿では,1回のフォワードパスで,テスト時に分布データポイントの発見と拒否が可能な決定論的ディープモデルを訓練する手法を提案する。
我々は,新しい損失関数とセントロイド更新方式を用いて,これらをスケールトレーニングし,ソフトマックスモデルの精度に適合させる。
論文 参考訳(メタデータ) (2020-03-04T12:27:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。