論文の概要: Equivalence Between Nested Gibbs Measures and Log-Linear Combinations of Gibbs Measures
- arxiv url: http://arxiv.org/abs/2609.19988v1
- Date: Thu, 17 Sep 2026 09:58:04 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-20 08:55:54.211294
- Title: Equivalence Between Nested Gibbs Measures and Log-Linear Combinations of Gibbs Measures
- Title(参考訳): ネストギブズ対策とギブズ対策の対数組合せの等価性
- Abstract要約: 最初の操作は、しばしば再正規化と呼ばれ、ギブス確率測度を1つ取り、その密度のパワーを正規化することによって新しいギブス測度を生成する。
第2の操作は、ギブス確率測度の密度の正規化対数線形結合からなる。
第3の操作は2つのギブス確率測度を受け取り、後者の基準測度を前者に変更する。
- 参考スコア(独自算出の注目度): 6.040904021861969
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this paper, three operations on Gibbs probability measures are studied. The first operation, often referred to as renormalization, takes one Gibbs probability measure and generates a new Gibbs measure by normalizing a power of its density. This normalization has a twofold effect: it changes the regularization factor and concentrates the support within a subset of the original support. Interestingly, these effects can be independently controlled by different parameters. The second operation consists of a normalized log-linear combination of the densities of Gibbs probability measures. The third operation takes two Gibbs probability measures and changes the reference measure of the latter with the former. Hence, the former is said to be "nested" within the latter, yielding a new Gibbs probability measure. The resulting measures from the second and third operations are also Gibbs probability measures and are shown, respectively, to solve optimization problems involving the expectations of linear combinations of the objective functions of the given measures, subject to a relative entropy regularization. These optimization problems differ exclusively in the coefficients of the linear combinations. This leads to the conclusion that there exists a set of parameters for which nesting one Gibbs probability measure into another has the same effect as log-linearly combining them. These operations have relevant applications in statistical learning. As an example, a one-shot federated learning system in which clients send their locally trained Gibbs algorithms to the server for log-linear combination is shown to achieve the same performance as a Gibbs algorithm trained upon the aggregation of all local training datasets.
- Abstract(参考訳): 本稿では,ギブス確率測定の3つの操作について検討する。
最初の操作は、しばしば再正規化と呼ばれ、ギブス確率測度を1つ取り、その密度のパワーを正規化することによって新しいギブス測度を生成する。
この正規化には2つの効果があり、正規化係数を変更し、サポートを元のサポートのサブセットに集中させる。
興味深いことに、これらの効果は異なるパラメータによって独立に制御できる。
第2の操作は、ギブス確率測度の密度の正規化対数線形結合からなる。
第3の操作は2つのギブス確率測度を取り、後者の基準測度を前者に変更する。
したがって、前者は後者で「入れ子」とされ、新しいギブス確率測度が得られる。
第2および第3の操作から得られた測度は、それぞれギブス確率測度であり、相対エントロピー正則化の下で、与えられた測度の目的関数の線形結合の期待を含む最適化問題を解くために、それぞれ示される。
これらの最適化問題は、線形結合の係数にのみ異なる。
これは、あるギブス確率測度を別のギブス確率測度にネストするパラメータの集合が、これらを対数直線的に結合するのと同じ効果を持つという結論を導いた。
これらの操作は統計的学習に関連がある。
例えば、クライアントがローカルにトレーニングされたGibbsアルゴリズムをサーバに送信してログリニアの組み合わせを行うワンショットのフェデレーション学習システムでは、すべてのローカルトレーニングデータセットの集約に基づいてトレーニングされたGibbsアルゴリズムと同じパフォーマンスを実現する。
関連論文リスト
- Efficient Covariance Estimation for Sparsified Functional Data [51.69796254617083]
共分散関数のランダムノット(ランダムノット-空間)とB-スプライン(Bspline-Spatial)推定器は計算的に効率的である。
共分散の漸近的なポイントワイドは、ある規則性条件下でのスパース化された個々の軌跡に対して得られる。
論文 参考訳(メタデータ) (2025-11-23T00:50:33Z) - Bregman geometry-aware split Gibbs sampling for Bayesian Poisson inverse problems [8.115032818930457]
モンテカルロサンプリングアルゴリズムを用いて,逆問題の解法を提案する。
本手法は, 復元品質の点で競争性能が向上することを示す。
論文 参考訳(メタデータ) (2025-11-15T15:27:31Z) - Bayesian Circular Regression with von Mises Quasi-Processes [57.88921637944379]
本研究では、円値ランダム関数上の表現的および解釈可能な分布の族を探索する。
後部推論のために,高速ギブズサンプリングに寄与するストラトノビッチ様拡張法を導入する。
本研究では,このモデルを用いて風向予測と走行歩行周期のパーセンテージを関節角度の関数として適用する実験を行った。
論文 参考訳(メタデータ) (2024-06-19T01:57:21Z) - Law of Large Numbers for Bayesian two-layer Neural Network trained with
Variational Inference [0.0]
ベイズニューラルネットワークの変分推論(VI)によるトレーニングの厳密な分析を行う。
3つの異なるトレーニングスキームに対して、多数の法則を証明します。
重要な結果は、すべてのメソッドが同じ平均場極限に収束することである。
論文 参考訳(メタデータ) (2023-07-10T07:50:09Z) - A Heavy-Tailed Algebra for Probabilistic Programming [53.32246823168763]
本稿では,確率変数の尾を解析するための体系的アプローチを提案する。
本稿では,確率型プログラミング言語コンパイラの静的解析(サンプル作成前)において,この手法をどのように利用できるかを示す。
実験結果から,重み付き代数を利用する推論アルゴリズムは,多数の密度モデリングおよび変分推論タスクにおいて優れた性能が得られることを確認した。
論文 参考訳(メタデータ) (2023-06-15T16:37:36Z) - Gibbs-Duhem-Informed Neural Networks for Binary Activity Coefficient
Prediction [45.84205238554709]
本稿では,Gibs-Duhem-informed Neural Network を用いて,様々な組成における二成分活性係数の予測を行う。
ニューラルネットワークの学習における損失関数にギブス・デュヘム方程式を明示的に含んでいる。
論文 参考訳(メタデータ) (2023-05-31T07:36:45Z) - One-Shot Distributed Source Simulation: As Quantum as it Can Get [13.41622790253149]
分散ソースシミュレーションは、2つ(またはそれ以上)のパーティが何らかの相関したランダム性を共有するタスクである。
本研究では,スムーズなエントロピーフレームワークを用いたワンショット設定において,このタスクをほぼタイトに特徴付ける。
これは、ワンショット量子状態におけるこのネットワークタスクの強力な特徴を与える。
論文 参考訳(メタデータ) (2023-01-11T04:33:46Z) - Statistical Efficiency of Score Matching: The View from Isoperimetry [96.65637602827942]
本研究では, スコアマッチングの統計的効率と推定される分布の等尺性との間に, 密接な関係を示す。
これらの結果はサンプル状態と有限状態の両方で定式化する。
論文 参考訳(メタデータ) (2022-10-03T06:09:01Z) - Strong replica symmetry for high-dimensional disordered log-concave
Gibbs measures [9.761715495731938]
log-concave は、凸型経験的リスク最小化、最大 a-posteriori 推定、または M-estimation に現れる。
我々は、自由エネルギー、推論、一般化誤差に対してある種の「レプリカ対称式」を確立することに応用できると信じている。
論文 参考訳(メタデータ) (2020-09-27T20:24:58Z) - Recovering Joint Probability of Discrete Random Variables from Pairwise
Marginals [22.77704627076251]
確率変数(RV)の合同確率の学習は、統計信号処理と機械学習の基盤となる。
近年, 任意の数の RV の結合確率質量関数 (PMF) を3次元境界から復元する研究が提案されている。
正確に3次元の辺縁を推定することは、標本の複雑さの観点からもコストがかかる。
この研究は、ペアの辺りだけを用いて共同PMFを学習するための新しい枠組みを生み出した。
論文 参考訳(メタデータ) (2020-06-30T15:43:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。