論文の概要: Analysis of Deep Image Prior and Exploiting Self-Guidance for Image
Reconstruction
- arxiv url: http://arxiv.org/abs/2402.04097v2
- Date: Thu, 8 Feb 2024 03:01:07 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-09 11:30:08.129150
- Title: Analysis of Deep Image Prior and Exploiting Self-Guidance for Image
Reconstruction
- Title(参考訳): 奥行き画像の事前解析と自己誘導による画像再構成
- Authors: Shijun Liang, Evan Bell, Qing Qu, Rongrong Wang, Saiprasad Ravishankar
- Abstract要約: DIPがアンダーサンプドイメージング計測からどのように情報を回収するかを検討する。
ネットワーク重みと入力の両方を同時に最適化する自己駆動型再構築プロセスを導入する。
提案手法は,ネットワーク入力画像と再構成画像の両方の堅牢かつ安定した関節推定を可能にする,新しいデノイザ正規化項を組み込んだものである。
- 参考スコア(独自算出の注目度): 13.277067849874756
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The ability of deep image prior (DIP) to recover high-quality images from
incomplete or corrupted measurements has made it popular in inverse problems in
image restoration and medical imaging including magnetic resonance imaging
(MRI). However, conventional DIP suffers from severe overfitting and spectral
bias effects. In this work, we first provide an analysis of how DIP recovers
information from undersampled imaging measurements by analyzing the training
dynamics of the underlying networks in the kernel regime for different
architectures. This study sheds light on important underlying properties for
DIP-based recovery. Current research suggests that incorporating a reference
image as network input can enhance DIP's performance in image reconstruction
compared to using random inputs. However, obtaining suitable reference images
requires supervision, and raises practical difficulties. In an attempt to
overcome this obstacle, we further introduce a self-driven reconstruction
process that concurrently optimizes both the network weights and the input
while eliminating the need for training data. Our method incorporates a novel
denoiser regularization term which enables robust and stable joint estimation
of both the network input and reconstructed image. We demonstrate that our
self-guided method surpasses both the original DIP and modern supervised
methods in terms of MR image reconstruction performance and outperforms
previous DIP-based schemes for image inpainting.
- Abstract(参考訳): 画像修復やMRI(MRI)を含む医用画像の逆問題において、深部画像前処理(DIP)が不完全あるいは劣化した測定から高品質な画像の復元に役立っている。
しかし、従来のディップは重度の過剰フィッティングとスペクトルバイアスの影響に苦しむ。
本研究は,DIPが基盤となるネットワークのトレーニングダイナミクスを異なるアーキテクチャで解析することにより,アンダーサンプル画像計測からどのように情報を回復するかを,まず分析する。
本研究は、DIPベースの回復のための重要な基礎特性について光を当てる。
現在の研究では、参照画像をネットワーク入力として組み込むことで、ランダム入力よりも画像再構成におけるDIPの性能を向上させることが示唆されている。
しかし、適切な基準画像を得るには監督が必要であり、実用上の困難が伴う。
この障害を克服するために,我々はさらに,ネットワーク重みと入力の両方を同時に最適化し,トレーニングデータの必要性をなくす自己駆動型再構築プロセスを導入する。
提案手法は,ネットワーク入力画像と再構成画像の両方の堅牢かつ安定した関節推定を可能にする,新しいデノイザ正規化項を含む。
本手法は,mr画像再構成性能の観点から,従来のディップ法と近代的教師あり法を両立させ,従来のディップ法よりも優れていることを示す。
関連論文リスト
- DensePANet: An improved generative adversarial network for photoacoustic tomography image reconstruction from sparse data [1.4665304971699265]
スパースデータからのPAT画像再構成の問題を解決するために,DensePANetと呼ばれるエンドツーエンドの手法を提案する。
提案したモデルは、FD-UNet++と呼ばれるジェネレータにUNetを改良し、再構成性能を大幅に改善する。
論文 参考訳(メタデータ) (2024-04-19T09:52:32Z) - Enhancing Low-dose CT Image Reconstruction by Integrating Supervised and
Unsupervised Learning [13.17680480211064]
X線CT画像再構成のためのハイブリッド教師なし学習フレームワークを提案する。
提案された各訓練ブロックは、決定論的MBIRソルバとニューラルネットワークで構成されている。
限られた訓練データを用いた低用量CT画像再構成における本学習ハイブリッドモデルの有効性を実証する。
論文 参考訳(メタデータ) (2023-11-19T20:23:59Z) - Uncertainty-Aware Null Space Networks for Data-Consistent Image
Reconstruction [0.0]
近年の深層学習の進歩をもとに,最先端の再構築手法が開発されている。
医用画像などの安全クリティカルな領域で使用するためには, ネットワーク再構築は, 利用者に再構成画像を提供するだけでなく, ある程度の信頼を得る必要がある。
この研究は、入力依存のスケールマップを推定することによって、データ依存の不確実性をモデル化する逆問題に対する最初のアプローチである。
論文 参考訳(メタデータ) (2023-04-14T06:58:44Z) - Residual Back Projection With Untrained Neural Networks [1.2707050104493216]
CT(Computed tomography)における反復的再構成(IR)の枠組みについて述べる。
我々のフレームワークは、この構造情報をDIP(Deep Image Prior)として組み込んでいる。
対象関数を最小限に抑え,高精度な再構成を実現するために,未学習のU-netと新たな後方投射を併用して提案する。
論文 参考訳(メタデータ) (2022-10-26T01:58:09Z) - Model-Guided Multi-Contrast Deep Unfolding Network for MRI
Super-resolution Reconstruction [68.80715727288514]
MRI観察行列を用いて,反復型MGDUNアルゴリズムを新しいモデル誘導深部展開ネットワークに展開する方法を示す。
本稿では,医療画像SR再構成のためのモデルガイド型解釈可能なDeep Unfolding Network(MGDUN)を提案する。
論文 参考訳(メタデータ) (2022-09-15T03:58:30Z) - A Long Short-term Memory Based Recurrent Neural Network for
Interventional MRI Reconstruction [50.1787181309337]
本稿では,畳み込み長短期記憶(Conv-LSTM)に基づくリカレントニューラルネットワーク(Recurrent Neural Network, RNN)を提案する。
提案アルゴリズムは,DBSのリアルタイムi-MRIを実現する可能性があり,汎用的なMR誘導介入に使用できる。
論文 参考訳(メタデータ) (2022-03-28T14:03:45Z) - Is Deep Image Prior in Need of a Good Education? [57.3399060347311]
画像再構成に有効な先行画像として, 奥行き画像が導入された。
その印象的な再建性にもかかわらず、学習技術や伝統的な再建技術と比べてアプローチは遅い。
計算課題に対処する2段階の学習パラダイムを開発する。
論文 参考訳(メタデータ) (2021-11-23T15:08:26Z) - Multi-modal Aggregation Network for Fast MR Imaging [85.25000133194762]
我々は,完全サンプル化された補助モダリティから補完表現を発見できる,MANetという新しいマルチモーダル・アグリゲーション・ネットワークを提案する。
我々のMANetでは,完全サンプリングされた補助的およびアンアンサンプされた目標モダリティの表現は,特定のネットワークを介して独立に学習される。
私たちのMANetは、$k$-spaceドメインの周波数信号を同時に回復できるハイブリッドドメイン学習フレームワークに従います。
論文 参考訳(メタデータ) (2021-10-15T13:16:59Z) - Adaptive Gradient Balancing for UndersampledMRI Reconstruction and
Image-to-Image Translation [60.663499381212425]
本研究では,新しい適応勾配バランス手法を併用したwasserstein生成逆ネットワークを用いて,画質の向上を図る。
MRIでは、他の技術よりも鮮明な画像を生成する高品質の再構築を維持しながら、アーティファクトを最小限に抑えます。
論文 参考訳(メタデータ) (2021-04-05T13:05:22Z) - Joint reconstruction and bias field correction for undersampled MR
imaging [7.409376558513677]
k空間をMRIでアンサンプすることで、貴重な取得時間を節約できるが、結果として不適切な逆転問題が発生する。
ディープラーニングのスキームは、トレーニングデータと、テスト時に再構成される画像の違いに影響を受けやすい。
本研究は,再建問題のバイアス場に対する感度に対処し,再設計において明確にモデル化することを提案する。
論文 参考訳(メタデータ) (2020-07-26T12:58:34Z) - Deep Face Super-Resolution with Iterative Collaboration between
Attentive Recovery and Landmark Estimation [92.86123832948809]
本稿では,2つの繰り返しネットワーク間の反復的協調による深層面超解像(FSR)手法を提案する。
各繰り返しステップにおいて、リカバリブランチは、ランドマークの事前の知識を利用して、高品質な画像を生成する。
新しい注意融合モジュールはランドマークマップのガイダンスを強化するために設計されている。
論文 参考訳(メタデータ) (2020-03-29T16:04:48Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。