論文の概要: Barron Optimal Transport I: Generative Modeling
- arxiv url: http://arxiv.org/abs/2610.10875v1
- Date: Wed, 07 Oct 2026 20:22:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.666687
- Title: Barron Optimal Transport I: Generative Modeling
- Title(参考訳): Barron Optimal Transport I: Generative Modeling
- Abstract要約: コストがニューラルネットワークの複雑性の概念を捉えた最適な測度輸送のためのフレームワークを提案する。
バロン幾何学における拡散生成モデリングの準最適性を定量化する。
次に、代替生成モデルの研究方法として適応性の利点について検討する。
- 参考スコア(独自算出の注目度): 28.438691888179378
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Motivated by recent applications in generative modeling and sampling, we introduce a framework for optimal measure transport where cost captures the notion of neural network complexity. In transport-based generative models, samples from a reference distribution (e.g. Gaussian) are mapped to samples of a target distribution along ordinary or stochastic differential equations. These are implemented as deep residual networks when discretized in time, where each hidden layer approximates the associated instantaneous velocity. Thus, given a pair of target and reference measures, a natural question is to search for the most efficient neural representation that implements this transport. Our starting point is the kinetic formulation of OT, due to Benamou and Brenier. We replace the average kinetic $L^2$ energy by the \emph{Barron} energy \cite{bach2017breaking, ma2022barron}, a natural norm which measures the complexity of representing a given vector field with a neural hidden layer, and which captures the adaptive properties of feature learning. This defines a metric on the space of probability measures, complementing existing Wasserstein and Stein geometries. In this work we examine the properties of this metric in the context of generative modeling. As a first application, we quantify the suboptimality of diffusion generative modeling in the Barron geometry by establishing super-polynomial score approximation lower bounds for data generated by neural network pushforwards of the Gaussian. We then investigate the benefit of adaptivity as a way to study alternative generative models. In a companion paper \cite{companionpaper} we leverage the Barron transport geometry for sampling applications, extending the scope of Stein variational gradient methods via feature adaptation.
- Abstract(参考訳): 生成的モデリングとサンプリングの最近の応用により、コストがニューラルネットワークの複雑さの概念をとらえる最適な計測輸送のためのフレームワークが導入された。
輸送モデルに基づく生成モデルでは、基準分布(eg Gaussian)からのサンプルは、通常のあるいは確率微分方程式に沿った対象分布のサンプルにマッピングされる。
これらは、各隠れた層が関連する瞬時速度を近似する時間に離散化されると、深い残留ネットワークとして実装される。
したがって、目標と基準の対が与えられた場合、自然な疑問は、この輸送を実装する最も効率的な神経表現を探すことである。
我々の出発点は、ベナモとブレニエによるOTの運動的定式化である。
我々は、与えられたベクトル場をニューラルな隠蔽層で表す複雑さを測り、特徴学習の適応的性質を捉える自然ノルムである \emph{Barron} エネルギー \cite{bach2017breaking, ma2022barron} に置き換える。
これは確率測度の空間上の計量を定義し、既存のワッサーシュタイン測度とスタイン測度を補完する。
本研究は、生成モデリングの文脈において、この計量の性質について考察する。
まず,バロン幾何学における拡散生成モデリングの準最適性について,ガウスのニューラルネットワークのプッシュフォワードによって生成されたデータに対して,超多項式スコアの下位境界を定式化することにより定量化する。
次に、代替生成モデルの研究方法として適応性の利点について検討する。
共用論文 \cite{companionpaper} では、バロン輸送幾何学をサンプリングに利用し、特徴適応によるスタイン変分勾配法の範囲を広げる。
関連論文リスト
- Wasserstein Flow Matching: Generative modeling over families of distributions [13.620905707751747]
We propose Wasserstein flow matching (WFM) which lifts flow matching on the family of distributions using the Wasserstein geometry。
特に、WFMは、解析的に(ガウスとして)、または経験的に(点雲として)、高次元の分布を生成することができる最初のアルゴリズムである。
論文 参考訳(メタデータ) (2024-11-01T15:55:07Z) - Bayesian Circular Regression with von Mises Quasi-Processes [57.88921637944379]
本研究では、円値ランダム関数上の表現的および解釈可能な分布の族を探索する。
後部推論のために,高速ギブズサンプリングに寄与するストラトノビッチ様拡張法を導入する。
本研究では,このモデルを用いて風向予測と走行歩行周期のパーセンテージを関節角度の関数として適用する実験を行った。
論文 参考訳(メタデータ) (2024-06-19T01:57:21Z) - Geometric Neural Diffusion Processes [55.891428654434634]
拡散モデルの枠組みを拡張して、無限次元モデリングに一連の幾何学的先行を組み込む。
これらの条件で、生成関数モデルが同じ対称性を持つことを示す。
論文 参考訳(メタデータ) (2023-07-11T16:51:38Z) - Inverting brain grey matter models with likelihood-free inference: a
tool for trustable cytoarchitecture measurements [62.997667081978825]
脳の灰白質細胞構造の特徴は、体密度と体積に定量的に敏感であり、dMRIでは未解決の課題である。
我々は新しいフォワードモデル、特に新しい方程式系を提案し、比較的スパースなb殻を必要とする。
次に,提案手法を逆転させるため,確率自由推論 (LFI) として知られるベイズ解析から最新のツールを適用した。
論文 参考訳(メタデータ) (2021-11-15T09:08:27Z) - Goal-directed Generation of Discrete Structures with Conditional
Generative Models [85.51463588099556]
本稿では,強化学習目標を直接最適化し,期待される報酬を最大化するための新しいアプローチを提案する。
提案手法は、ユーザ定義プロパティを持つ分子の生成と、所定の目標値を評価する短いピソン表現の同定という2つのタスクで検証する。
論文 参考訳(メタデータ) (2020-10-05T20:03:13Z) - Variational Mixture of Normalizing Flows [0.0]
生成逆数ネットワークオートサイトGAN、変分オートエンコーダオートサイトベイペーパー、およびそれらの変種などの深い生成モデルは、複雑なデータ分布をモデル化するタスクに広く採用されている。
正規化フローはこの制限を克服し、確率密度関数にそのような公式の変更を利用する。
本研究は,混合モデルのコンポーネントとして正規化フローを用い,そのようなモデルのエンドツーエンドトレーニング手順を考案することによって,この問題を克服する。
論文 参考訳(メタデータ) (2020-09-01T17:20:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。