論文の概要: Monte Carlo Anti-Differentiation for Approximate Weighted Model
Integration
- arxiv url: http://arxiv.org/abs/2001.04566v1
- Date: Mon, 13 Jan 2020 23:45:10 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-11 23:16:50.373379
- Title: Monte Carlo Anti-Differentiation for Approximate Weighted Model
Integration
- Title(参考訳): 近似重み付きモデル統合のためのモンテカルロ反微分
- Authors: Pedro Zuidberg Dos Martires, Samuel Kolb
- Abstract要約: 我々は,抗誘導体のMC近似を計算したテクスタイトモンテカルロ反微分 (MCAD) を導入する。
実験の結果,既存のWMIソルバにMCADを組み込むことで,高速かつ信頼性の高い近似推論方式が得られることがわかった。
- 参考スコア(独自算出の注目度): 13.14502456511936
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Probabilistic inference in the hybrid domain, i.e. inference over
discrete-continuous domains, requires tackling two well known #P-hard problems
1)~weighted model counting (WMC) over discrete variables and 2)~integration
over continuous variables. For both of these problems inference techniques have
been developed separately in order to manage their #P-hardness, such as
knowledge compilation for WMC and Monte Carlo (MC) methods for (approximate)
integration in the continuous domain. Weighted model integration (WMI), the
extension of WMC to the hybrid domain, has been proposed as a formalism to
study probabilistic inference over discrete and continuous variables alike.
Recently developed WMI solvers have focused on exploiting structure in WMI
problems, for which they rely on symbolic integration to find the primitive of
an integrand, i.e. to perform anti-differentiation. To combine these advances
with state-of-the-art Monte Carlo integration techniques, we introduce
\textit{Monte Carlo anti-differentiation} (MCAD), which computes MC
approximations of anti-derivatives. In our empirical evaluation we substitute
the exact symbolic integration backend in an existing WMI solver with an MCAD
backend. Our experiments show that that equipping existing WMI solvers with
MCAD yields a fast yet reliable approximate inference scheme.
- Abstract(参考訳): ハイブリッド領域における確率的推論(すなわち離散連続領域上の推論)は、2つのよく知られた#p-ハード問題(1)〜重み付きモデルカウント(wmc)と(2)連続変数上の積分を必要とする。
これらの問題に対して、WMCの知識コンパイルや連続領域における(近似的な)統合のためのモンテカルロ(MC)メソッドといった、#Pハードネスを管理するために、推論技術が別々に開発された。
WMCのハイブリッド領域への拡張である重み付きモデル統合(WMI)は、離散変数や連続変数についても確率的推論を研究する形式として提案されている。
最近開発されたWMIソルバは、積分器のプリミティブを見つけるためにシンボリック積分に依存するWMI問題の構造を利用することに重点を置いている。
これらの進歩を最先端のモンテカルロ積分技術と組み合わせるために、抗微分のMC近似を計算する「textit{Monte Carlo anti-differentiation} (MCAD)」を導入する。
経験的評価では、既存のWMIソルバの正確なシンボリック統合バックエンドをMCADバックエンドに置き換える。
実験の結果,既存のWMIソルバにMCADを組み込むことで,高速かつ信頼性の高い近似推論方式が得られることがわかった。
関連論文リスト
- On Discriminative Probabilistic Modeling for Self-Supervised Representation Learning [85.75164588939185]
複数モーダルな)自己教師付き表現学習のための連続領域における識別確率モデル問題について検討する。
我々は、自己教師付き表現学習における現在のInfoNCEに基づくコントラスト損失の制限を明らかにするために一般化誤差解析を行う。
論文 参考訳(メタデータ) (2024-10-11T18:02:46Z) - Neural Control Variates with Automatic Integration [49.91408797261987]
本稿では,任意のニューラルネットワークアーキテクチャから学習可能なパラメトリック制御関数を構築するための新しい手法を提案する。
我々はこのネットワークを用いて積分器の反微分を近似する。
我々はウォーク・オン・スフィア・アルゴリズムを用いて偏微分方程式を解くために本手法を適用した。
論文 参考訳(メタデータ) (2024-09-23T06:04:28Z) - Sample Complexity Characterization for Linear Contextual MDPs [67.79455646673762]
文脈決定プロセス(CMDP)は、遷移カーネルと報酬関数がコンテキスト変数によってインデックス付けされた異なるMDPで時間とともに変化できる強化学習のクラスを記述する。
CMDPは、時間とともに変化する環境で多くの現実世界のアプリケーションをモデル化するための重要なフレームワークとして機能する。
CMDPを2つの線形関数近似モデルで検討する: 文脈変化表現とすべての文脈に対する共通線形重み付きモデルIと、すべての文脈に対する共通表現と文脈変化線形重み付きモデルIIである。
論文 参考訳(メタデータ) (2024-02-05T03:25:04Z) - Enhancing SMT-based Weighted Model Integration by Structure Awareness [10.812681884889697]
重み付きモデル統合(WMI)は、ハイブリッドドメインにおける確率的推論の統一形式として登場した。
本研究では,SMTに基づく列挙法と問題構造を効果的に符号化するアルゴリズムを開発した。
論文 参考訳(メタデータ) (2023-02-13T08:55:12Z) - SMT-based Weighted Model Integration with Structure Awareness [18.615397594541665]
本研究では,SMTに基づく列挙法と問題構造を効果的に符号化するアルゴリズムを開発した。
これにより,冗長モデルの生成を回避し,計算コストを大幅に削減できる。
論文 参考訳(メタデータ) (2022-06-28T09:46:17Z) - Learning Multimodal VAEs through Mutual Supervision [72.77685889312889]
MEMEは、相互監督を通じて暗黙的にモダリティ間の情報を結合する。
我々は、MEMEが、部分的および完全観察スキームの双方で標準メトリクスのベースラインを上回ることを実証する。
論文 参考訳(メタデータ) (2021-06-23T17:54:35Z) - Measure Theoretic Weighted Model Integration [4.324021238526106]
重み付きモデルカウント(WMC)は、離散的ランダム変数による確率推論を行う一般的なフレームワークである。
近年、WMCは連続変数の追加処理のために重み付けモデル統合(WMI)に拡張されている。
重み付きモデル統合の理論的に健全な測定理論定式化を提案し、連続変数がない場合に重み付きモデルカウントに自然に減少する。
論文 参考訳(メタデータ) (2021-03-25T15:11:11Z) - Kernel learning approaches for summarising and combining posterior
similarity matrices [68.8204255655161]
我々は,ベイズクラスタリングモデルに対するMCMCアルゴリズムの出力を要約するための新しいアプローチを提案するために,後部類似性行列(PSM)の概念を構築した。
我々の研究の重要な貢献は、PSMが正の半定値であり、したがって確率的に動機付けられたカーネル行列を定義するのに使用できることである。
論文 参考訳(メタデータ) (2020-09-27T14:16:14Z) - Scaling up Hybrid Probabilistic Inference with Logical and Arithmetic
Constraints via Message Passing [38.559697064390015]
重み付けされたモデル統合により、現実世界の問題の複雑な依存関係を表現することができる。
既存のWMIソルバは、これらの問題にスケールする準備ができていない。
メッセージパッシング(MP-WMI)に基づくスケーラブルなWMIソルバを考案する。
論文 参考訳(メタデータ) (2020-02-28T23:51:45Z) - Theoretical Convergence of Multi-Step Model-Agnostic Meta-Learning [63.64636047748605]
一般的なマルチステップMAMLアルゴリズムに対して収束保証を提供するための新しい理論フレームワークを開発する。
特に,本研究の結果は,収束を保証するためには,内部段階のステップを逆比例して$N$の内段ステップを選択する必要があることを示唆している。
論文 参考訳(メタデータ) (2020-02-18T19:17:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。