論文の概要: Generalized Bayesian Cram\'{e}r-Rao Inequality via Information Geometry
of Relative $\alpha$-Entropy
- arxiv url: http://arxiv.org/abs/2002.04732v1
- Date: Tue, 11 Feb 2020 23:38:01 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-02 02:56:53.197017
- Title: Generalized Bayesian Cram\'{e}r-Rao Inequality via Information Geometry
of Relative $\alpha$-Entropy
- Title(参考訳): 相対$\alpha$-エントロピーの情報幾何学による一般化ベイズ的クラム{e}r-ラオ不等式
- Authors: Kumar Vijay Mishra and M. Ashok Kumar
- Abstract要約: 相対$alpha$-エントロピーは相対エントロピーのR'enyiアナログである。
この量に関する最近の情報幾何学的な研究により、クラムラー・ラオの不等式が一般化された。
エントロピー次数がユニティに近づく極限の場合、この枠組みは従来のベイズ的クラム・ラオ不等式に還元される。
- 参考スコア(独自算出の注目度): 17.746238062801293
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The relative $\alpha$-entropy is the R\'enyi analog of relative entropy and
arises prominently in information-theoretic problems. Recent information
geometric investigations on this quantity have enabled the generalization of
the Cram\'{e}r-Rao inequality, which provides a lower bound for the variance of
an estimator of an escort of the underlying parametric probability
distribution. However, this framework remains unexamined in the Bayesian
framework. In this paper, we propose a general Riemannian metric based on
relative $\alpha$-entropy to obtain a generalized Bayesian Cram\'{e}r-Rao
inequality. This establishes a lower bound for the variance of an unbiased
estimator for the $\alpha$-escort distribution starting from an unbiased
estimator for the underlying distribution. We show that in the limiting case
when the entropy order approaches unity, this framework reduces to the
conventional Bayesian Cram\'{e}r-Rao inequality. Further, in the absence of
priors, the same framework yields the deterministic Cram\'{e}r-Rao inequality.
- Abstract(参考訳): 相対$\alpha$-エントロピーは相対エントロピーのR'enyiアナログであり、情報理論問題において顕著に現れる。
この量に関する最近の情報幾何学的な研究により、Clam\'{e}r-Raoの不等式が一般化され、基礎となるパラメトリック確率分布のエスコートの推定器の分散に対する低い境界が与えられる。
しかし、この枠組みはベイジアンの枠組みにはまだ見当たらない。
本稿では,相対$\alpha$-エントロピーに基づく一般リーマン計量を提案し,一般化ベイズ的クラム'{e}r-ラオ不等式を得る。
これは、基底分布の非バイアス推定子から始まる$\alpha$-escort分布に対する非バイアス推定子の分散に対する下界を確立する。
エントロピー次数がユニティに近づくときの極限の場合、この枠組みは従来のベイズ的クラム\'{e}r-ラオ不等式に還元される。
さらに、事前性が存在しない場合、同じ枠組みが決定論的クレー=ラオ不等式を与える。
関連論文リスト
- Sparse PCA with Oracle Property [115.72363972222622]
新規な正規化を伴うスパースPCAの半定緩和に基づく推定器群を提案する。
我々は、家族内の別の推定器が、スパースPCAの標準半定緩和よりも、より急激な収束率を達成することを証明した。
論文 参考訳(メタデータ) (2023-12-28T02:52:54Z) - Taming under isoperimetry [0.0]
本稿では,ログの増大に伴う分布のサンプル化を目的としたLangevinベースのスキームであるmathbfsTULA$を提案する。
非漸近KLを導出し、結果としてLog-Sobolevの不等式を満たす。
論文 参考訳(メタデータ) (2023-11-15T14:44:16Z) - Intrinsic Bayesian Cramér-Rao Bound with an Application to Covariance Matrix Estimation [49.67011673289242]
本稿では, 推定パラメータが滑らかな多様体内にある推定問題に対して, 新たな性能境界を提案する。
これはパラメータ多様体の幾何学と推定誤差測度の本質的な概念を誘導する。
論文 参考訳(メタデータ) (2023-11-08T15:17:13Z) - Curvature-Independent Last-Iterate Convergence for Games on Riemannian
Manifolds [77.4346324549323]
本研究では, 多様体の曲率に依存しないステップサイズが, 曲率非依存かつ直線的最終点収束率を達成することを示す。
我々の知る限りでは、曲率非依存率や/または最終点収束の可能性はこれまでに検討されていない。
論文 参考訳(メタデータ) (2023-06-29T01:20:44Z) - On Best-Arm Identification with a Fixed Budget in Non-Parametric
Multi-Armed Bandits [0.0]
我々は、腕上の分布の一般、おそらくはパラメトリックでないモデルDを考える。
情報理論量に基づいて最適なアームを誤識別する平均対数確率の上限を提案する。
論文 参考訳(メタデータ) (2022-09-30T10:55:40Z) - Robust Linear Predictions: Analyses of Uniform Concentration, Fast Rates
and Model Misspecification [16.0817847880416]
ヒルベルト空間上の様々な線形予測問題を含む統一的なフレームワークを提供する。
誤特定レベル $epsilon$ に対して、これらの推定器は、文献で最もよく知られたレートと一致する、$O(maxleft|mathcalO|1/2n-1/2, |mathcalI|1/2n-1 right+epsilon)$ の誤差率を達成する。
論文 参考訳(メタデータ) (2022-01-06T08:51:08Z) - Optimal policy evaluation using kernel-based temporal difference methods [78.83926562536791]
カーネルヒルベルト空間を用いて、無限水平割引マルコフ報酬過程の値関数を推定する。
我々は、関連するカーネル演算子の固有値に明示的に依存した誤差の非漸近上界を導出する。
MRP のサブクラスに対する minimax の下位境界を証明する。
論文 参考訳(メタデータ) (2021-09-24T14:48:20Z) - Spectral clustering under degree heterogeneity: a case for the random
walk Laplacian [83.79286663107845]
本稿では,ランダムウォークラプラシアンを用いたグラフスペクトル埋め込みが,ノード次数に対して完全に補正されたベクトル表現を生成することを示す。
次数補正ブロックモデルの特別な場合、埋め込みはK個の異なる点に集中し、コミュニティを表す。
論文 参考訳(メタデータ) (2021-05-03T16:36:27Z) - Distributionally Robust Bayesian Quadrature Optimization [60.383252534861136]
確率分布が未知な分布の不確実性の下でBQOについて検討する。
標準的なBQOアプローチは、固定されたサンプル集合が与えられたときの真の期待目標のモンテカルロ推定を最大化する。
この目的のために,新しい後方サンプリングに基づくアルゴリズム,すなわち分布的に堅牢なBQO(DRBQO)を提案する。
論文 参考訳(メタデータ) (2020-01-19T12:00:33Z) - Cram\'er-Rao Lower Bounds Arising from Generalized Csisz\'ar Divergences [17.746238062801293]
我々は Csisz'ar $f$-divergences の一般化された族に対する確率分布の幾何学について研究する。
これらの定式化が, 護衛モデルの偏りのない, 効率的な推定手法の発見に繋がることを示す。
論文 参考訳(メタデータ) (2020-01-14T13:41:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。