論文の概要: Symbolic Density Estimators for Unnormalized Distributions
- arxiv url: http://arxiv.org/abs/2610.10807v1
- Date: Wed, 07 Oct 2026 19:09:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.637807
- Title: Symbolic Density Estimators for Unnormalized Distributions
- Title(参考訳): 非正規分布のシンボリック密度推定器
- Abstract要約: 観測試料から非正規分布の記号表現を推定する枠組みを開発した。
問題を抽出しやすくするために、大きな分布を分解するなどの帰納バイアスを組み込む。
実験により,密度関数を推定するためのフレームワークの有効性が示された。
- 参考スコア(独自算出の注目度): 6.22218624780989
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Estimating the symbolic or analytical form of probability density functions (PDFs) from observed samples is a fundamental challenge in statistical and computational modelling. This process is critical for deriving interpretable and generalizable relationships characterizing the underlying phenomenon. Traditionally, this estimation depends strongly on domain expertise and prior field-specific knowledge, with experts selecting appropriate functional forms or parametric families based on empirical evidence and theoretical understanding. The coefficients of these forms are then typically determined through parameter estimation. In this paper, we develop a framework for estimating symbolic expressions of unnormalized distributions from observed samples using domain-specific prior knowledge, such as the range of interactions and a predefined set of primitive functions. We integrate deep generative models with symbolic regression (SR), incorporating inductive biases, such as factorizing large distributions, to keep the problem tractable. The deep generative models we examine include likelihood-based models, viz., flow models, and score-based models. Experiments show the effectiveness of the proposed framework for estimating density functions for multivariate toy distributions as well as lattices from computational physics, namely, XY model and $φ^4$ theory. When applied to the renormalization problem in $φ^4$ theory, the proposed framework estimates compact symbolic approximations of the hamiltonian function at different scales directly from samples, yielding expressions that may be challenging to derive using traditional perturbative or analytic approaches in nonperturbative settings.
- Abstract(参考訳): 観測されたサンプルから確率密度関数の記号的あるいは解析的な形式(PDF)を推定することは、統計および計算モデルにおける根本的な課題である。
この過程は、その基礎となる現象を特徴づける解釈可能で一般化可能な関係を導出するために重要である。
伝統的に、この推定はドメインの専門知識とそれ以前の分野固有の知識に強く依存しており、専門家は経験的証拠と理論的理解に基づいて適切な機能形式やパラメトリックな家族を選択する。
これらの形式の係数は通常、パラメータ推定によって決定される。
本稿では,対話の範囲やプリミティブ関数の事前定義など,ドメイン固有の事前知識を用いて,観測されたサンプルから正規化されていない分布の記号表現を推定するフレームワークを開発する。
我々は,大きな分布を分解するなどの帰納的バイアスを取り入れ,問題を抽出しやすくするために,シンボル回帰(SR)と深い生成モデルを統合する。
我々が検討する深層生成モデルには、確率ベースモデル、ビズ、フローモデル、スコアベースモデルが含まれる。
実験により,多変量玩具分布の密度関数推定および計算物理学の格子,すなわちXYモデルと$φ^4$理論の有効性が示された。
φ^4$理論の正規化問題に適用した場合、提案フレームワークはサンプルから直接異なるスケールでハミルトン関数のコンパクトな記号近似を推定し、非摂動的設定において従来の摂動的あるいは解析的アプローチを用いて導出することが難しい表現を導出する。
関連論文リスト
- Diffusion Model for Manifold Data: Score Decomposition, Curvature, and Statistical Complexity [93.52679474816728]
拡散モデルは、生成モデリングにおける主要なフレームワークとなっている。
本稿では,拡散モデルが構造データをどのように学習するかを,統計的複雑性とデータ幾何学的性質の影響の2つの重要な側面に焦点をあてる。
また、スコア関数の構造と多様体曲率の相互作用も強調する。
論文 参考訳(メタデータ) (2026-03-21T04:40:19Z) - Understanding Generalization from Embedding Dimension and Distributional Convergence [13.491874401333021]
表現中心の観点から一般化を研究し、学習した埋め込みの幾何学が固定訓練モデルの予測性能をどのように制御するかを分析する。
人口リスクは, (i) 埋込み分布の内在的次元, (i) 埋込み分布のワッサーシュタイン距離における人口分布への収束率, (ii) 埋込みから予測への下流マッピングの感度, (ii) リプシッツ定数によって特徴づけられる。
論文 参考訳(メタデータ) (2026-01-30T09:32:04Z) - Scaling and renormalization in high-dimensional regression [72.59731158970894]
リッジ回帰に関する最近の結果について統一的な視点を提示する。
我々は、物理とディープラーニングの背景を持つ読者を対象に、ランダム行列理論と自由確率の基本的なツールを使用する。
我々の結果は拡張され、初期のスケーリング法則のモデルについて統一的な視点を提供する。
論文 参考訳(メタデータ) (2024-05-01T15:59:00Z) - Likelihood Based Inference in Fully and Partially Observed Exponential Family Graphical Models with Intractable Normalizing Constants [4.532043501030714]
マルコフ確率場を符号化する確率的グラフィカルモデルは、生成的モデリングの基本的な構成要素である。
本稿では,これらのモデルの全確率に基づく解析が,計算効率のよい方法で実現可能であることを示す。
論文 参考訳(メタデータ) (2024-04-27T02:58:22Z) - Diffeomorphic Measure Matching with Kernels for Generative Modeling [1.2058600649065618]
本稿では、常微分方程式(ODE)と再生成ケルネルヒルベルト空間(RKHS)を用いて、最小分散生成モデリングおよびサンプリングに向けた確率測度を伝達するための枠組みを提案する。
提案手法の理論的解析を行い,モデルの複雑さ,トレーニングセット内のサンプル数,モデルの誤識別という観点から,事前誤差境界を与える。
論文 参考訳(メタデータ) (2024-02-12T21:44:20Z) - Optimal regularizations for data generation with probabilistic graphical
models [0.0]
経験的に、よく調和された正規化スキームは、推論されたモデルの品質を劇的に改善する。
生成的ペアワイドグラフィカルモデルの最大Aポストエリオーリ(MAP)推論におけるL2とL1の正規化について検討する。
論文 参考訳(メタデータ) (2021-12-02T14:45:16Z) - Leveraging Global Parameters for Flow-based Neural Posterior Estimation [90.21090932619695]
実験観測に基づくモデルのパラメータを推定することは、科学的方法の中心である。
特に困難な設定は、モデルが強く不確定であるとき、すなわち、パラメータの異なるセットが同一の観測をもたらすときである。
本稿では,グローバルパラメータを共有する観測の補助的セットによって伝達される付加情報を利用して,その不確定性を破る手法を提案する。
論文 参考訳(メタデータ) (2021-02-12T12:23:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。