論文の概要: The data geometry of masking diffusion: Certified-optimal schedules via unmasking growth complexity
- arxiv url: http://arxiv.org/abs/2608.13520v1
- Date: Thu, 13 Aug 2026 17:40:17 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-14 18:29:38.620501
- Title: The data geometry of masking diffusion: Certified-optimal schedules via unmasking growth complexity
- Title(参考訳): マスキング拡散のデータ幾何:非マスキング成長複雑性による認証最適スケジュール
- Abstract要約: 離散サンプリングのためのマスキング拡散について検討し、インフンマスキング成長複雑性(textsfUGCxspace)と呼ばれるデータ幾何学の経路分解尺度を導入する。
局所的なインクリメントは、KL(Kullback--Leibler)の離散化誤差を直接制御し、ベルヌーイ部分集合と固定値アンマスキングスキームを統一的に解析する。
- 参考スコア(独自算出の注目度): 14.877292137182422
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study masking diffusion for discrete sampling and introduce a path-resolved measure of data geometry called the \emph{unmasking growth complexity} ({\textsf{UGC}\xspace}). Its local increments directly control Kullback--Leibler (KL) discretization error, yielding a unified analysis of Bernoulli-subset and fixed-cardinality unmasking schemes. In log-reveal-odds coordinates, this structure yields optimized single-block and multi-block schedules, and quantifies the gains from adapting computational effort to data geometry. Crucially, we show how {\textsf{UGC}\xspace} increments can be estimated from samples via KL increments along coupled reveal trajectories. This leads to \emph{certified-optimal} samplers that achieve a prescribed KL error with high probability and iteration complexity within a constant factor of the corresponding oracle procedure. Collapsing the \ugc path yields the aggregate {\textsf{UGC}\xspace} mass, which connects to classical multivariate dependence measures and complexity measures from previous analyses of discrete diffusion. In the fine-partition limit, the squared integral of the square-root {\textsf{UGC}\xspace} density determines the sharp leading-order optimal Euler discretization error. Examples exhibit substantial dimension-dependent gains over coarse schedules, including $\widetildeΩ(\sqrt{d})$ improvements achievable with a constant number of adaptively placed blocks.
- Abstract(参考訳): 本研究では,離散サンプリングのためのマスキング拡散について検討し,データ幾何学の経路分解尺度である 'emph{unmasking growth complexity} ({\textsf{UGC}\xspace}) を導入する。
局所的なインクリメントは、KL(Kullback--Leibler)の離散化誤差を直接制御し、ベルヌーイ部分集合と固定値アンマスキングスキームを統一的に解析する。
log-reveal-odds座標では、この構造は最適化されたシングルブロックとマルチブロックのスケジュールを生成し、計算作業からデータ幾何学への適応から得られる利益を定量化する。
重要なことは、KLインクリメントと結合した軌跡から {\textsf{UGC}\xspace}インクリメントをどのように推定できるかを示す。
これにより、対応するオラクル手順の定数係数内で、高い確率と繰り返しの複雑さを持つ所定のKL誤差を達成できる 'emph{certified-Optimal} サンプルが生成される。
これは古典的多変量依存測度と離散拡散の以前の分析から得られる複雑性測度に接続する。
微細分割極限において、平方根 {\textsf{UGC}\xspace} 密度の平方積分は鋭い前方最適オイラー離散誤差を決定する。
例えば、$\widetildeΩ(\sqrt{d})$ のような粗いスケジュールよりもかなりの次元依存的な利得を示す。
関連論文リスト
- The information geometry of product-reference discrete diffusion: Interaction growth complexity and optimal scheduling [14.877292137182422]
離散分布から抽出する製品参照拡散アルゴリズムのクラスについて検討する。
データジオメトリのパスベース尺度を用いて, サンプリング性能を評価できることを示す。
論文 参考訳(メタデータ) (2026-08-28T23:38:39Z) - Denoising growth complexity: Data geometry and certified schedules for diffusion sampling [14.877292137182422]
我々は、$mathsfDGC$インクリメントが、革新表現に適用されたオイラースキームのKL誤差に単純で明示的な境界をもたらすことを示す。
我々は、より単純なシングルブロック設定とより洗練された$K$ブロック設定の両方において、最適化されたステップサイズスケジュールに対するKLサンプリング保証を導出する。
論文 参考訳(メタデータ) (2026-07-28T21:26:16Z) - SILAGE: Memory-Efficient, Full-Gradient-Free Nonconvex Optimization for Nested Finite Sums [51.49970814177172]
データセットに対する経験的リスクは、自然に$N=nm$全サンプルに類似性を示す。
我々は悲観的な収束分析を避ける分析を提供する。
我々の成果は、既存の最先端の体制を改善した。
論文 参考訳(メタデータ) (2026-06-14T14:11:07Z) - Smoothed Score Queries and the Complexity of Sampling [17.319855487817257]
勾配情報を用いた高次元ガウス分布からのサンプリングのクエリ複雑性について検討する。
総変分エラー(_rm TV)に対するスムーズなスコアクエリは、(sqrt)から対数への条件数依存性を改善する。
また、有限ビット勾配オラクルも研究している。
論文 参考訳(メタデータ) (2026-05-26T23:38:20Z) - Adaptation to Intrinsic Dependence in Diffusion Language Models [5.185131234265025]
拡散言語モデル(DLM)は自己回帰(AR)アプローチに代わる有望な代替手段として登場した。
対象データ分布の(未知の)依存構造に適応するDLMの分布に依存しないアンマスキングスケジュールを提案する。
この結果は, 先行収束理論を著しく改善し, 低複雑さ分布に対する相当なサンプリング加速を得た。
論文 参考訳(メタデータ) (2026-02-23T18:41:34Z) - Analysis of Hessian Scaling for Local and Global Costs in Variational Quantum Algorithm [0.42970700836450487]
変分量子アルゴリズムにおけるヘッセンのエントリーワイズ解の定量化を行う。
ショットノイズに対してヘッセン成分を解くのに必要なサンプルの複雑さを規定する2つの異なるスケーリング機構を示す。
論文 参考訳(メタデータ) (2026-01-31T15:49:23Z) - Optimal Transportation and Alignment Between Gaussian Measures [80.4634530260329]
最適なトランスポート(OT)とGromov-Wasserstein(GW)アライメントは、データセットの解釈可能な幾何学的フレームワークを提供する。
これらのフレームワークは計算コストが高いため、大規模アプリケーションは2次コストでガウス分布の閉形式解に依存することが多い。
この研究は、ガウス的、二次的コスト OT と内部積 GW (IGW) のアライメントを包括的に扱い、文学におけるいくつかのギャップを埋めて適用性を広げる。
論文 参考訳(メタデータ) (2025-12-03T09:01:48Z) - A Sample Efficient Alternating Minimization-based Algorithm For Robust Phase Retrieval [56.67706781191521]
そこで本研究では,未知の信号の復元を課題とする,ロバストな位相探索問題を提案する。
提案するオラクルは、単純な勾配ステップと外れ値を用いて、計算学的スペクトル降下を回避している。
論文 参考訳(メタデータ) (2024-09-07T06:37:23Z) - Generalization Bounds for Stochastic Gradient Descent via Localized
$\varepsilon$-Covers [16.618918548497223]
本稿では,SGDの軌道に局在する新しい被覆手法を提案する。
このローカライゼーションは、境界数によって測定されるアルゴリズム固有のクラスタリングを提供する。
これらの結果は様々な文脈で導き出され、既知の最先端のラベルレートが向上する。
論文 参考訳(メタデータ) (2022-09-19T12:11:07Z) - Multi-block-Single-probe Variance Reduced Estimator for Coupled
Compositional Optimization [49.58290066287418]
構成問題の複雑さを軽減するために,MSVR (Multi-block-probe Variance Reduced) という新しい手法を提案する。
本研究の結果は, 試料の複雑さの順序や強靭性への依存など, 様々な面で先行して改善された。
論文 参考訳(メタデータ) (2022-07-18T12:03:26Z) - Distributed stochastic optimization with large delays [59.95552973784946]
大規模最適化問題を解決する最も広く使われている手法の1つは、分散非同期勾配勾配(DASGD)である。
DASGDは同じ遅延仮定の下で大域的最適実装モデルに収束することを示す。
論文 参考訳(メタデータ) (2021-07-06T21:59:49Z) - Spatially relaxed inference on high-dimensional linear models [48.989769153211995]
本研究では,空間的に制約されたクラスタリング,統計的推論,アンサンブルを組み合わせ,複数のクラスタリング推論解を集約するアンサンブルクラスタリング推論アルゴリズムの特性について検討する。
アンサンブルクラスタ推論アルゴリズムは,最大クラスター径に等しい$delta$-FWERの標準仮定で$delta$-FWERを制御することを示す。
論文 参考訳(メタデータ) (2021-06-04T16:37:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。