論文の概要: Revisiting Neural Processes via Fourier Transform and Volterra Series
- arxiv url: http://arxiv.org/abs/2606.01172v1
- Date: Sun, 31 May 2026 11:27:48 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-02 21:34:29.360584
- Title: Revisiting Neural Processes via Fourier Transform and Volterra Series
- Title(参考訳): フーリエ変換とボルテラ系列によるニューラルプロセスの再検討
- Authors: Peiman Mohseni, Nick Duffield, Raymond K. W. Wong,
- Abstract要約: 神経過程 (NPs) は確率的機能モデルの一種である。
NPは2つの制限に直面している: (i) 非線型なジェネリックコンポーネントをスタックし、誘導関数クラスを隠蔽し、解釈可能性を制限する。
本稿では,SFConvブロックを非線形にスタックするSFConvCNPと,Volterraの定式化を統合するSFVConvCNPという2つの条件付きNPを提案する。
- 参考スコア(独自算出の注目度): 8.061821280531884
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Modeling unknown latent functions from finite, irregularly sampled measurements is a recurring challenge across science and engineering. Neural processes (NPs), a family of probabilistic functional models, are promising solutions -- especially when endowed with domain-specific symmetries like translation equivariance, which improve sample efficiency and generalization. Yet existing translation-equivariant NPs face two limitations: (i) they stack generic components with non-linearities, obscuring the induced function class and limiting interpretability; and (ii) convolutional designs rely on kernels with local receptive fields and require dense uniform input grids, while attention-based methods avoid these issues but scale quadratically with the number of observations. We address both with two contributions. First, using the Volterra expansion, we characterize continuous translation-equivariant operators as sums of higher-order convolutions, yielding analytical transparency while admitting efficient approximation by first-order convolutions. Second, we introduce set Fourier convolutions (SFConvs), a frequency-domain parameterization that operates directly on irregularly sampled points, achieves approximately global receptive fields, and scales linearly in the number of observations. Building on these ideas, we propose two conditional NPs (CNPs): SFConvCNPs, which stack SFConv blocks with non-linearities, and SFVConvCNPs, which integrate the Volterra formulation. Experiments on synthetic and real-world datasets demonstrate our methods' efficacy against state-of-the-art baselines.
- Abstract(参考訳): 有限で不規則にサンプリングされた測定値から未知の潜伏関数をモデル化することは、科学と工学における繰り返しの課題である。
確率的機能モデルのファミリーであるニューラルプロセス(NP)は、特に、サンプル効率と一般化を改善する翻訳等のようなドメイン固有の対称性が与えられた場合、有望なソリューションである。
しかし、既存の翻訳同変NPは2つの制限に直面している。
(i)非線型なジェネリックコンポーネントをスタックし、誘導関数クラスを隠蔽し、解釈可能性を制限する。
(II)畳み込み設計は、局所受容場を持つカーネルに依存し、密度の均一な入力格子を必要とするが、注意に基づく手法はこれらの問題を回避しているが、観測回数の2倍にスケールする。
どちらも2つのコントリビューションで対処します。
まず、ボルテラ展開を用いて、連続翻訳同変作用素を高階畳み込みの和として特徴づけ、一階畳み込みによる効率的な近似を認めながら解析的透明性を得る。
第2に、不規則なサンプリング点を直接操作し、大域的受容場をほぼ達成し、観測数で線形にスケールする周波数領域のパラメータ化である、集合フーリエ畳み込み(SFConvs)を導入する。
これらのアイデアに基づいて、SFConvCNPとVolterraの定式化を統合するSFVConvCNPという2つの条件付きNP(CNP)を提案する。
合成および実世界のデータセットの実験は、我々の方法が最先端のベースラインに対して有効であることを示す。
関連論文リスト
- GRIFDIR: Graph Resolution-Invariant FEM Diffusion Models in Function Spaces over Irregular Domains [56.121725064621295]
関数空間におけるスコアベース拡散モデル(英語版)は関数値データをモデル化するための原則的なフレームワークを提供する。
しかし、実践的な実装はこれらの利点を完全に実現するのに苦労しています。
一般化された畳み込みカーネルを有限グラフカーネルとして表現する新しいアーキテクチャを提案する。
論文 参考訳(メタデータ) (2026-05-05T08:33:52Z) - A Unified Poisson Summation Framework for Generalized Quantum Matrix Transformations [2.1496959255800188]
非ユニタリ力学と行列関数の量子シミュレーションのための統一的なアルゴリズムフレームワークを提案する。
離散化誤差を二重領域のスペクトル折り畳みとして再解釈することにより、2つの異なるアルゴリズム経路を合成する。
多様な現象を効率的にシミュレートすることで,この枠組みの汎用性を実証する。
論文 参考訳(メタデータ) (2026-04-03T08:42:08Z) - Variational Entropic Optimal Transport [67.76725267984578]
本稿では,ドメイン翻訳問題に対する変分エントロピー最適輸送(VarEOT)を提案する。
VarEOTは、補助正の正規化子上のトラクタブルな一般化として、log-partition $log mathbbE[exp(cdot)$の正確な変分再構成に基づいている。
合成データと画像と画像の変換に関する実験は、競争力のあるか、あるいはより良い翻訳品質を示す。
論文 参考訳(メタデータ) (2026-02-02T15:48:44Z) - LFA applied to CNNs: Efficient Singular Value Decomposition of Convolutional Mappings by Local Fourier Analysis [4.69726714177332]
興味深いスペクトル特性を符号化した 畳み込み写像の特異値。
特異値の計算は典型的には資源集約である。
本稿では,局所フーリエ解析に基づく複雑性O(N)のアプローチを提案する。
論文 参考訳(メタデータ) (2025-06-05T22:10:01Z) - Spectral Convolutional Conditional Neural Processes [4.52069311861025]
条件付きニューラルプロセス(CNP)は、プロセスのパラメータ化にニューラルネットワークの柔軟性を利用する確率モデルの一群である。
本稿では、周波数領域における関数のより効率的な表現を可能にするNPsファミリーに新たに追加されたスペクトル畳み込み条件ニューラルネットワーク(SConvCNPs)を提案する。
論文 参考訳(メタデータ) (2024-04-19T21:13:18Z) - Score-based Diffusion Models in Function Space [137.70916238028306]
拡散モデルは、最近、生成モデリングの強力なフレームワークとして登場した。
この研究は、関数空間における拡散モデルをトレーニングするためのDDO(Denoising Diffusion Operators)と呼ばれる数学的に厳密なフレームワークを導入する。
データ解像度に依存しない固定コストで、対応する離散化アルゴリズムが正確なサンプルを生成することを示す。
論文 参考訳(メタデータ) (2023-02-14T23:50:53Z) - Efficient Semi-Implicit Variational Inference [65.07058307271329]
効率的でスケーラブルな半単純外挿 (SIVI) を提案する。
本手法はSIVIの証拠を低勾配値の厳密な推測にマッピングする。
論文 参考訳(メタデータ) (2021-01-15T11:39:09Z) - Central and Non-central Limit Theorems arising from the Scattering
Transform and its Neural Activation Generalization [4.125187280299247]
ニューラルアクティベーションST(NAST)と呼ばれる広いニューラルアクティベーション関数を含む散乱変換(ST)の一般化について検討する。
ここでは、非線形関数は入力信号によってニューロンが励起される方法をモデル化する。
その結果、NASTプロセスが複雑で定常でない時系列をどう処理するかを説明し、非ヌルケース下でのNASTに基づく統計的推測への道を開いた。
論文 参考訳(メタデータ) (2020-11-21T14:31:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。