論文の概要: Mathematical Theory of Bayesian Statistics for Unknown Information
Source
- arxiv url: http://arxiv.org/abs/2206.05630v1
- Date: Sat, 11 Jun 2022 23:35:06 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-14 18:25:01.798820
- Title: Mathematical Theory of Bayesian Statistics for Unknown Information
Source
- Title(参考訳): 未知情報源に対するベイズ統計の数学的理論
- Authors: Sumio Watanabe
- Abstract要約: 統計的推測では、不確実性は未知であり、全てのモデルが間違っている。
クロスバリデーション, 情報基準, 限界確率の一般的な特性を示す。
導出理論は、未知の不確実性が統計的モレルによって実現不可能であったり、後部分布が正規分布によって近似できないとしても成り立つ。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In statistical inference, uncertainty is unknown and all models are wrong. A
person who makes a statistical model and a prior distribution is simultaneously
aware that they are fictional and virtual candidates. In order to study such
cases, several statistical measures have been constructed, such as cross
validation, information criteria, and marginal likelihood, however, their
mathematical properties have not yet been completely clarified when statistical
models are under- and over- parametrized. In this paper, we introduce a place
of mathematical theory of Bayesian statistics for unknown uncertainty, on which
we show general properties of cross validation, information criteria, and
marginal likelihood. The derived theory holds even if an unknown uncertainty is
unrealizable by a statistical morel or even if the posterior distribution
cannot be approximated by any normal distribution, hence it gives a helpful
standpoint for a person who cannot believe in any specific model and prior. The
results are followings. (1) There exists a more precise statistical measure of
the generalization loss than leave-one-out cross validation and information
criterion based on the mathematical properties of them. (2) There exists a more
efficient approximation method of the free energy, which is the minus log
marginal likelihood, even if the posterior distribution cannot be approximated
by any normal distribution. (3) And the prior distributions optimized by the
cross validation and the widely applicable information criterion are
asymptotically equivalent to each other, which are different from that by the
marginal likelihood.
- Abstract(参考訳): 統計的推論では、不確実性は未知であり、全てのモデルは誤りである。
統計モデルと事前分布を作成する者は、虚構的かつ仮想的な候補であることを同時に認識する。
このようなケースを研究するために、クロスバリデーション、情報基準、限界的可能性などいくつかの統計測度が構築されているが、統計モデルが過度にパラメータ化されている場合、それらの数学的性質は完全には明らかになっていない。
本稿では,未知の不確実性に関するベイズ統計学の数学的理論の場所を紹介する。
導出理論は、統計的モレルによって未知の不確実性が実現できない場合や、後続分布が任意の正規分布によって近似できない場合においても成り立つので、特定のモデルや事前を信じない人には有用な立場を与える。
結果は以下の通り。
1) 一般化損失のより正確な統計学的尺度が存在し, それらの数学的性質に基づく相互検証や情報基準が設定されている。
2) 後続分布を正規分布で近似できない場合でも, 最小対数限界確率である自由エネルギーのより効率的な近似法が存在する。
(3) クロスバリデーションと広く適用可能な情報基準によって最適化された先行分布は互いに漸近的に等価であり, 限界確率によって異なる。
関連論文リスト
- Robust Estimation for Kernel Exponential Families with Smoothed Total Variation Distances [2.317910166616341]
統計的推測では、標本は独立であり、確率分布から同一に分布していると一般的に仮定する。
本稿では,GAN-like 推定器の一般統計モデルへの応用について検討する。
論文 参考訳(メタデータ) (2024-10-28T05:50:47Z) - Transformer-based Parameter Estimation in Statistics [0.0]
パラメータ推定のための変換器に基づく手法を提案する。
数値法で必要とされる確率密度関数を知る必要さえない。
提案手法は,平均二乗誤差で測定した手法と類似あるいは良好な精度を達成できることが示されている。
論文 参考訳(メタデータ) (2024-02-28T04:30:41Z) - User-defined Event Sampling and Uncertainty Quantification in Diffusion
Models for Physical Dynamical Systems [49.75149094527068]
拡散モデルを用いて予測を行い,カオス力学系に対する不確かさの定量化が可能であることを示す。
本研究では,雑音レベルが低下するにつれて真の分布に収束する条件付きスコア関数の確率的近似法を開発する。
推論時に非線形ユーザ定義イベントを条件付きでサンプリングすることができ、分布の尾部からサンプリングした場合でもデータ統計と一致させることができる。
論文 参考訳(メタデータ) (2023-06-13T03:42:03Z) - Sufficient Identification Conditions and Semiparametric Estimation under
Missing Not at Random Mechanisms [4.211128681972148]
統計的に有効な分析を行うことは、MNARデータの存在において困難である。
従来のMNARモデルを2つの方法で一般化したMNARモデルを考える。
そこで本稿では,確率比をパラメータとして,そのようなモデルで符号化された独立性制約をテストする手法を提案する。
論文 参考訳(メタデータ) (2023-06-10T13:46:16Z) - Recent Advances in Algebraic Geometry and Bayesian Statistics [0.0]
本稿では代数幾何学とベイズ統計学の研究分野における理論的進歩について概説する。
2つの数学的解法と代数幾何学に基づく統計学への3つの応用が、現在、データサイエンスと人工知能の多くの実践分野で使われている。
論文 参考訳(メタデータ) (2022-11-18T06:19:05Z) - Statistical Efficiency of Score Matching: The View from Isoperimetry [96.65637602827942]
本研究では, スコアマッチングの統計的効率と推定される分布の等尺性との間に, 密接な関係を示す。
これらの結果はサンプル状態と有限状態の両方で定式化する。
論文 参考訳(メタデータ) (2022-10-03T06:09:01Z) - Statistical Properties of the Entropy from Ordinal Patterns [55.551675080361335]
大規模な時系列モデルに対するエントロピー・統計複雑性の連立分布を知っていれば、今日まで利用できない統計テストが可能になるだろう。
実正規化エントロピーが零でも1でもないモデルに対して、経験的シャノンのエントロピーの分布を特徴づける。
2つの信号が同じシャノンのエントロピーを持つ順序パターンを生成するという仮説を否定するのに十分な証拠があるかどうかを検証する。
論文 参考訳(メタデータ) (2022-09-15T23:55:58Z) - Uncertainty Modeling for Out-of-Distribution Generalization [56.957731893992495]
特徴統計を適切に操作することで、ディープラーニングモデルの一般化能力を向上させることができると論じる。
一般的な手法では、特徴統計を学習した特徴から測定された決定論的値とみなすことが多い。
我々は、学習中に合成された特徴統計を用いて、領域シフトの不確かさをモデル化することにより、ネットワークの一般化能力を向上させる。
論文 参考訳(メタデータ) (2022-02-08T16:09:12Z) - Characterizations of non-normalized discrete probability distributions
and their application in statistics [0.0]
これらの分布を識別する離散確率法則の質量関数について明示的な式を導出する。
我々の特徴づけ、従ってそれらの上に構築された応用は、確率法則の正規化定数に関する知識を一切必要としない。
論文 参考訳(メタデータ) (2020-11-09T12:08:12Z) - Contextuality scenarios arising from networks of stochastic processes [68.8204255655161]
経験的モデルは、その分布が X 上の合同分布を極小化することができなければ文脈的と言える。
我々は、多くのプロセス間の相互作用という、文脈的経験的モデルの異なる古典的な源泉を示す。
長期にわたるネットワークの統計的挙動は、経験的モデルを一般的な文脈的かつ強い文脈的にする。
論文 参考訳(メタデータ) (2020-06-22T16:57:52Z) - Density of States Estimation for Out-of-Distribution Detection [69.90130863160384]
DoSEは状態推定器の密度である。
我々は、他の教師なしOOD検出器に対するDoSEの最先端性能を実証する。
論文 参考訳(メタデータ) (2020-06-16T16:06:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。