論文の概要: Plug-and-Play Image Restoration with Flow Matching: A Continuous Viewpoint
- arxiv url: http://arxiv.org/abs/2512.04283v1
- Date: Wed, 03 Dec 2025 21:50:36 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-12-05 21:11:45.894992
- Title: Plug-and-Play Image Restoration with Flow Matching: A Continuous Viewpoint
- Title(参考訳): フローマッチングによるプラグイン・アンド・プレイ画像の再生:連続的な視点
- Authors: Fan Jia, Yuhao Huang, Shih-Hsin Wang, Cristina Garcia-Cardona, Andrea L. Bertozzi, Bao Wang,
- Abstract要約: フローマッチングサロゲートに基づく生成モデルは,プラグイン・アンド・プレイ画像復元フレームワークに統合されている。
我々は-Flowの連続的な極限を導出し、結果として微分モデル(SDE)を導出する。
我々はSDEインフォームドの改善を検証した。
いくつかのベンチマークタスクを使用したフロー、イメージのノーミング、デブロアリング、インペインティング。
- 参考スコア(独自算出の注目度): 15.60486692340679
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Flow matching-based generative models have been integrated into the plug-and-play image restoration framework, and the resulting plug-and-play flow matching (PnP-Flow) model has achieved some remarkable empirical success for image restoration. However, the theoretical understanding of PnP-Flow lags its empirical success. In this paper, we derive a continuous limit for PnP-Flow, resulting in a stochastic differential equation (SDE) surrogate model of PnP-Flow. The SDE model provides two particular insights to improve PnP-Flow for image restoration: (1) It enables us to quantify the error for image restoration, informing us to improve step scheduling and regularize the Lipschitz constant of the neural network-parameterized vector field for error reduction. (2) It informs us to accelerate off-the-shelf PnP-Flow models via extrapolation, resulting in a rescaled version of the proposed SDE model. We validate the efficacy of the SDE-informed improved PnP-Flow using several benchmark tasks, including image denoising, deblurring, super-resolution, and inpainting. Numerical results show that our method significantly outperforms the baseline PnP-Flow and other state-of-the-art approaches, achieving superior performance across evaluation metrics.
- Abstract(参考訳): フローマッチングに基づく生成モデルは、プラグアンドプレイ画像復元フレームワークに統合され、結果として得られるプラグアンドプレイフローマッチング(PnP-Flow)モデルは、画像復元において顕著な成功を収めた。
しかし、PnP-Flowの理論的な理解は実証的な成功を遅らせる。
本稿では,PnP-Flowの確率微分方程式 (SDE) シュロゲートモデルによりPnP-Flowの連続的極限を導出する。
SDEモデルは、画像復元のためのPnP-Flowを改善するための2つの特別な洞察を提供する: 1) 画像復元の誤差を定量化し、ステップスケジューリングを改善し、エラー低減のためにニューラルネットワークパラメータ化されたベクトル場のリプシッツ定数を規則化する。
2) 既設のPnP-Flowモデルを外挿により高速化し, 提案したSDEモデルの再スケール版を作成する。
我々は,SDEインフォームド改良PnP-Flowの有効性を,画像デノイング,デブロアリング,超解像,インペインティングなどのベンチマークタスクを用いて検証した。
数値計算の結果,本手法はPnP-Flowや他の最先端手法よりも優れた性能を示し,評価指標間で優れた性能を実現している。
関連論文リスト
- Which Layer Causes Distribution Deviation? Entropy-Guided Adaptive Pruning for Diffusion and Flow Models [77.55829017952728]
EntPrunerは、拡散およびフローモデルのためのエントロピー誘導自動プログレッシブプルーニングフレームワークである。
DiTモデルとSiTモデルの実験はEntPrunerの有効性を示し、最大2.22$times$推論スピードアップを達成する。
論文 参考訳(メタデータ) (2025-11-26T07:20:48Z) - PnP-Flow: Plug-and-Play Image Restoration with Flow Matching [9.589644878034553]
本稿では,逆画像問題の解法であるPlug-and-Play Flow Matchingを提案する。
我々は,デノイング,スーパーレゾリューション,インペインティングのタスクにおける性能を評価した。
論文 参考訳(メタデータ) (2024-10-03T12:13:56Z) - Fixed Point Diffusion Models [13.035518953879539]
FPDM(Fixed Point Diffusion Model)は、FPDM(Fixed Point Diffusion Model)の概念を拡散に基づく生成モデルに組み込んだ画像生成手法である。
提案手法では,拡散モデルのデノナイズネットワークに暗黙の固定点解法層を埋め込み,拡散過程を密接な関係のある固定点問題列に変換する。
我々は、ImageNet、FFHQ、CelebA-HQ、LSUN-Churchの最先端モデルを用いて実験を行い、性能と効率を大幅に改善した。
論文 参考訳(メタデータ) (2024-01-16T18:55:54Z) - EDA-DM: Enhanced Distribution Alignment for Post-Training Quantization of Diffusion Models [8.742501879586309]
量子化はモデルの複雑性を効果的に低減し、後学習量子化(PTQ)は拡散モデルの圧縮と加速に非常に有望である。
既存のPTQ法は, キャリブレーションサンプルレベルと再構成出力レベルの両方の分布ミスマッチ問題に悩まされている。
本稿では,上記の問題に効率的に対処する標準化されたPTQ手法であるEDA-DMを提案する。
論文 参考訳(メタデータ) (2024-01-09T14:42:49Z) - Deep Equilibrium Diffusion Restoration with Parallel Sampling [120.15039525209106]
拡散モデルに基づく画像復元(IR)は、拡散モデルを用いて劣化した画像から高品質な(本社)画像を復元し、有望な性能を達成することを目的としている。
既存のほとんどの手法では、HQイメージをステップバイステップで復元するために長いシリアルサンプリングチェーンが必要であるため、高価なサンプリング時間と高い計算コストがかかる。
本研究では,拡散モデルに基づくIRモデルを異なる視点,すなわちDeqIRと呼ばれるDeQ(Deep equilibrium)固定点系で再考することを目的とする。
論文 参考訳(メタデータ) (2023-11-20T08:27:56Z) - Post-training Quantization for Text-to-Image Diffusion Models with Progressive Calibration and Activation Relaxing [49.800746112114375]
本稿では,テキスト・画像拡散モデルのための学習後量子化手法(プログレッシブ・アンド・リラクシング)を提案する。
我々は,安定拡散XLの量子化を初めて達成し,その性能を維持した。
論文 参考訳(メタデータ) (2023-11-10T09:10:09Z) - Deep Equilibrium Optical Flow Estimation [80.80992684796566]
最近のSOTA(State-of-the-art)光フローモデルでは、従来のアルゴリズムをエミュレートするために有限ステップの更新操作を使用する。
これらのRNNは大きな計算とメモリオーバーヘッドを課し、そのような安定した推定をモデル化するために直接訓練されていない。
暗黙的層の無限レベル固定点として直接流れを解く手法として,Deep equilibrium Flow estimatorを提案する。
論文 参考訳(メタデータ) (2022-04-18T17:53:44Z) - Normalizing Flows with Multi-Scale Autoregressive Priors [131.895570212956]
マルチスケール自己回帰前処理(mAR)を通した遅延空間におけるチャネルワイド依存性を導入する。
我々のmARは、分割結合フロー層(mAR-SCF)を持つモデルに先立って、複雑なマルチモーダルデータの依存関係をよりよく捉えます。
我々は,mAR-SCFにより画像生成品質が向上し,FIDとインセプションのスコアは最先端のフローベースモデルと比較して向上したことを示す。
論文 参考訳(メタデータ) (2020-04-08T09:07:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。