論文の概要: Deeply Learned Spectral Total Variation Decomposition
- arxiv url: http://arxiv.org/abs/2006.10004v2
- Date: Wed, 21 Oct 2020 17:03:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-19 20:47:35.564929
- Title: Deeply Learned Spectral Total Variation Decomposition
- Title(参考訳): 深く学習したスペクトル全変動分解
- Authors: Tamara G. Grossmann, Yury Korolev, Guy Gilboa, Carola-Bibiane
Sch\"onlieb
- Abstract要約: 非線形スペクトル分解のニューラルネットワーク近似を提案する。
我々は、メガピクセルサイズの画像の処理において最大4桁(時間1万ドル)のスピードアップを報告した。
- 参考スコア(独自算出の注目度): 8.679020335206753
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Non-linear spectral decompositions of images based on one-homogeneous
functionals such as total variation have gained considerable attention in the
last few years. Due to their ability to extract spectral components
corresponding to objects of different size and contrast, such decompositions
enable filtering, feature transfer, image fusion and other applications.
However, obtaining this decomposition involves solving multiple non-smooth
optimisation problems and is therefore computationally highly intensive. In
this paper, we present a neural network approximation of a non-linear spectral
decomposition. We report up to four orders of magnitude ($\times 10,000$)
speedup in processing of mega-pixel size images, compared to classical GPU
implementations. Our proposed network, TVSpecNET, is able to implicitly learn
the underlying PDE and, despite being entirely data driven, inherits
invariances of the model based transform. To the best of our knowledge, this is
the first approach towards learning a non-linear spectral decomposition of
images. Not only do we gain a staggering computational advantage, but this
approach can also be seen as a step towards studying neural networks that can
decompose an image into spectral components defined by a user rather than a
handcrafted functional.
- Abstract(参考訳): 全体変動のような一様関数に基づく画像の非線形スペクトル分解は,ここ数年で注目されている。
異なる大きさとコントラストのオブジェクトに対応するスペクトル成分を抽出できるため、このような分解によってフィルタリング、特徴移動、画像融合などの応用が可能になる。
しかし、この分解を得るには、複数の非滑らかな最適化問題を解く必要があるため、計算的に非常に集中的である。
本稿では,非線形スペクトル分解のニューラルネットワーク近似を提案する。
従来のgpuに比べて、メガピクセルサイズの画像の処理速度は最大4桁($\times 10,000$)と報告しています。
提案するネットワークであるTVSpecNETは,基礎となるPDEを暗黙的に学習し,完全にデータ駆動であるにもかかわらず,モデルベース変換の不変性を継承する。
我々の知る限りでは、これは画像の非線形スペクトル分解を学ぶための最初のアプローチである。
膨大な計算上の優位性を得るだけでなく、このアプローチは、手作りの関数ではなく、ユーザが定義したスペクトルコンポーネントに画像を分解できるニューラルネットワークの研究へのステップとも見ることができる。
関連論文リスト
- Multispectral Texture Synthesis using RGB Convolutional Neural Networks [2.3213238782019316]
最先端のRGBテクスチャ合成アルゴリズムは、深い特徴の統計によって計算されるスタイル距離に依存している。
本稿では,これらの手法をマルチスペクトルイメージングに拡張する2つの方法を提案する。
論文 参考訳(メタデータ) (2024-10-21T13:49:54Z) - Neural Spectral Decomposition for Dataset Distillation [48.59372086450124]
本稿では,データセット蒸留のための一般的な分解フレームワークであるニューラルスペクトル分解を提案する。
本研究の目的は,データセット全体の低ランク表現を発見し,効率的に蒸留を行うことである。
提案手法はCIFAR10, CIFAR100, Tiny Imagenet, ImageNet Subsetなどのベンチマーク上での最先端性能を実現する。
論文 参考訳(メタデータ) (2024-08-29T03:26:14Z) - Deep Learning Based Speckle Filtering for Polarimetric SAR Images. Application to Sentinel-1 [51.404644401997736]
本稿では、畳み込みニューラルネットワークを用いて偏光SAR画像のスペックルを除去するための完全なフレームワークを提案する。
実験により,提案手法はスペックル低減と分解能保存の両方において例外的な結果をもたらすことが示された。
論文 参考訳(メタデータ) (2024-08-28T10:07:17Z) - An Optical physics inspired CNN approach for intrinsic image
decomposition [0.0]
内在画像分解は、画像の構成成分を生成する開放的な問題である。
画像から導出した物理パラメータを用いてこの分解が可能なニューラルネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2021-05-21T00:54:01Z) - Efficient and Differentiable Shadow Computation for Inverse Problems [64.70468076488419]
微分可能幾何計算は画像に基づく逆問題に対する関心が高まっている。
微分可能な可視性とソフトシャドウ計算のための効率的かつ効率的なアプローチを提案する。
定式化は微分可能であるため, テクスチャ, 照明, 剛体ポーズ, 画像からの変形回復などの逆問題を解くために使用できる。
論文 参考訳(メタデータ) (2021-04-01T09:29:05Z) - Regularization by Denoising Sub-sampled Newton Method for Spectral CT
Multi-Material Decomposition [78.37855832568569]
スペクトルctを用いたマルチマテリアル画像再構成のためのモデルベース最大後課題の解決法を提案する。
特に,プラグイン画像復号化機能に基づく正規化最適化問題について提案する。
スペクトルct材料分解の数値的および実験的結果を示す。
論文 参考訳(メタデータ) (2021-03-25T15:20:10Z) - A Loss Function for Generative Neural Networks Based on Watson's
Perceptual Model [14.1081872409308]
変動オートエンコーダ(VAE)を訓練して現実的な画像を生成するには、画像類似性に対する人間の認識を反映する損失関数が必要である。
本稿では,周波数空間における重み付き距離を計算し,輝度とコントラストマスキングを考慮したWatsonの知覚モデルに基づく損失関数を提案する。
実験では、新しい損失関数で訓練されたVAEが、現実的で高品質な画像サンプルを生成した。
論文 参考訳(メタデータ) (2020-06-26T15:36:11Z) - Learning Spatial-Spectral Prior for Super-Resolution of Hyperspectral
Imagery [79.69449412334188]
本稿では,最先端の残差学習をベースとした単一グレー/RGB画像の超解像化手法について検討する。
本稿では,空間情報とハイパースペクトルデータのスペクトル間の相関をフル活用するための空間スペクトル先行ネットワーク(SSPN)を提案する。
実験結果から,SSPSR法により高分解能高分解能高分解能画像の詳細が得られた。
論文 参考訳(メタデータ) (2020-05-18T14:25:50Z) - Spectral Learning on Matrices and Tensors [74.88243719463053]
テンソル分解は行列法で欠落する潜伏効果を拾うことができることを示す。
また,効率的なテンソル分解法を設計するための計算手法についても概説する。
論文 参考訳(メタデータ) (2020-04-16T22:53:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。