論文の概要: Thermodynamic Characterizations of Singular Bayesian Models: Specific Heat, Susceptibility, and Entropy Flow in Posterior Geometry
- arxiv url: http://arxiv.org/abs/2512.21411v1
- Date: Wed, 24 Dec 2025 20:19:28 GMT
- ステータス: 情報取得中
- システム内更新日: 2025-12-29 12:03:13.895145
- Title: Thermodynamic Characterizations of Singular Bayesian Models: Specific Heat, Susceptibility, and Entropy Flow in Posterior Geometry
- Title(参考訳): 特異熱, 感受性, エントロピー流の熱力学によるベイズモデルの解析
- Authors: Sean Plummer,
- Abstract要約: 特異な揺らぎは、精密で自然な解釈を固有熱として認めることを示す。
また, エントロピーフロー, 先行感受性, クロスサセプティビリティなど, 関連する熱力学量の収集についても紹介する。
この結果は特異学習理論と統計力学の具体的な橋渡しとなる。
- 参考スコア(独自算出の注目度): 0.12183405753834557
- License:
- Abstract: Singular learning theory (SLT) \citep{watanabe2009algebraic,watanabe2018mathematical} provides a rigorous asymptotic framework for Bayesian models with non-identifiable parameterizations, yet the statistical meaning of its second-order invariant, the \emph{singular fluctuation}, has remained unclear. In this work, we show that singular fluctuation admits a precise and natural interpretation as a \emph{specific heat}: the second derivative of the Bayesian free energy with respect to temperature. Equivalently, it measures the posterior variance of the log-likelihood observable under the tempered Gibbs posterior. We further introduce a collection of related thermodynamic quantities, including entropy flow, prior susceptibility, and cross-susceptibility, that together provide a detailed geometric diagnosis of singular posterior structure. Through extensive numerical experiments spanning discrete symmetries, boundary singularities, continuous gauge freedoms, and piecewise (ReLU) models, we demonstrate that these thermodynamic signatures cleanly distinguish singularity types, exhibit stable finite-sample behavior, and reveal phase-transition--like phenomena as temperature varies. We also show empirically that the widely used WAIC estimator \citep{watanabe2010asymptotic, watanabe2013widely} is exactly twice the thermodynamic specific heat at unit temperature, clarifying its robustness in singular models.Our results establish a concrete bridge between singular learning theory and statistical mechanics, providing both theoretical insight and practical diagnostics for modern Bayesian models.
- Abstract(参考訳): SLT (Singular Learning theory) \citep{watanabe2009algebraic,watanabe2018mathematical} はベイズ模型の非識別パラメータ化を伴う厳密な漸近的枠組みを提供するが、その2階不変量である 'emph{singular fluctuation} の統計的意味はいまだ不明である。
本研究では, 特異揺らぎは, 温度に対するベイズ自由エネルギーの2番目の微分である 'emph{specific heat} として, 正確かつ自然な解釈を持つことを示す。
等しく、温められたギブスの後部の下で観測可能な対数状生物の後方分散を測定する。
さらに, エントロピーフロー, 先行感受性, クロスサセプティビリティなど, 関連する熱力学的量のコレクションを導入し, 特異後部構造の詳細な幾何学的診断を行う。
離散対称性,境界特異点,連続ゲージ自由度,ピースワイズ(ReLU)モデルにまたがる広範な数値実験を通じて,これらの熱力学的シグネチャが特異性タイプをきれいに識別し,安定な有限サンプル挙動を示し,温度変化に伴う相転移様現象を明らかにする。
また、広範に使用されているWAIC推定器 \citep{watanabe2010asymsymptotic, watanabe2013widely} が単体温度における熱力学的比熱の2倍であり、特異モデルにおけるロバスト性を明らかにした。
関連論文リスト
- Particle creation, adiabaticity, and irreversibility in the TDHO [0.0]
粒子生成, 断熱性, 不可逆性の関係を3つの異なる表現の観点から検討した。
周波数の関数値とTDHOの進化全体に対して有効な分析結果を提供する。
論文 参考訳(メタデータ) (2025-11-30T10:01:47Z) - Eigenstate Thermalization Hypothesis correlations via non-linear Hydrodynamics [0.0]
熱力学限界における時間秩序付き自由累積材の潜時挙動を予測した。
よい一致は、無限温度と有限温度の両方で観測される。
論文 参考訳(メタデータ) (2025-05-11T06:35:16Z) - Symmetries, Conservation Laws and Entanglement in Non-Hermitian Fermionic Lattices [37.69303106863453]
非エルミート量子多体系は、ユニタリダイナミクスと散逸によって駆動される定常な絡み合い遷移を特徴とする。
定常状態は、一粒子の右固有状態に固有値の最大の虚部を埋めることによって得られることを示す。
これらの原理を周期境界条件を持つハナノ・ネルソンモデルと非エルミートス=シュリーファー=ヘーガーモデルで説明する。
論文 参考訳(メタデータ) (2025-04-11T14:06:05Z) - Finite-temperature properties of string-net models [0.0]
弦-ネットモデルの分割関数を計算し,いくつかの熱力学量について検討する。
熱力学の限界では、分配関数は純粋フラクトンと呼ばれる特別な粒子の寄与によって支配されることを示す。
また、励起に付随するウェグナー・ウィルソンループの挙動を解析し、それらが領域法則に従うことを示す。
論文 参考訳(メタデータ) (2024-06-28T07:51:58Z) - Signatures of a quantum phase transition on a single-mode bosonic model [0.0]
平衡相転移は多体系の微視的挙動から生じる。
これらは熱力学限界における熱力学ポテンシャルの非解析的挙動によって定義される。
これまでの考え方を極端に考えると、そのような制限は拡張されないシステムでも定義できると論じる。
論文 参考訳(メタデータ) (2023-03-22T20:14:45Z) - Statistical Properties of the Entropy from Ordinal Patterns [55.551675080361335]
大規模な時系列モデルに対するエントロピー・統計複雑性の連立分布を知っていれば、今日まで利用できない統計テストが可能になるだろう。
実正規化エントロピーが零でも1でもないモデルに対して、経験的シャノンのエントロピーの分布を特徴づける。
2つの信号が同じシャノンのエントロピーを持つ順序パターンを生成するという仮説を否定するのに十分な証拠があるかどうかを検証する。
論文 参考訳(メタデータ) (2022-09-15T23:55:58Z) - Uhlmann Fidelity and Fidelity Susceptibility for Integrable Spin Chains
at Finite Temperature: Exact Results [68.8204255655161]
奇数パリティ部分空間の適切な包含は、中間温度範囲における最大忠実度感受性の向上につながることを示す。
正しい低温の挙動は、2つの最も低い多体エネルギー固有状態を含む近似によって捉えられる。
論文 参考訳(メタデータ) (2021-05-11T14:08:02Z) - Exact thermal properties of free-fermionic spin chains [68.8204255655161]
自由フェルミオンの観点で記述できるスピンチェーンモデルに焦点をあてる。
温度の低い臨界点付近で、ユビキタス近似から生じる誤差を同定する。
論文 参考訳(メタデータ) (2021-03-30T13:15:44Z) - Probing eigenstate thermalization in quantum simulators via
fluctuation-dissipation relations [77.34726150561087]
固有状態熱化仮説(ETH)は、閉量子多体系の平衡へのアプローチの普遍的なメカニズムを提供する。
本稿では, ゆらぎ・散逸関係の出現を観測し, 量子シミュレータのフルETHを探索する理論に依存しない経路を提案する。
我々の研究は、量子シミュレータにおける熱化を特徴づける理論に依存しない方法を示し、凝縮物質ポンプ-プローブ実験をシミュレーションする方法を舗装する。
論文 参考訳(メタデータ) (2020-07-20T18:00:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。