論文の概要: Dynamic Message Propagation Network for RGB-D Salient Object Detection
- arxiv url: http://arxiv.org/abs/2206.09552v1
- Date: Mon, 20 Jun 2022 03:27:48 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-25 16:05:44.821465
- Title: Dynamic Message Propagation Network for RGB-D Salient Object Detection
- Title(参考訳): RGB-Dサルエント物体検出のための動的メッセージ伝搬ネットワーク
- Authors: Baian Chen, Zhilei Chen, Xiaowei Hu, Jun Xu, Haoran Xie, Mingqiang
Wei, Jing Qin
- Abstract要約: 本稿では,RGB画像と特徴レベルの深度マップ間のメッセージパッシングを制御することにより,RGB-D有意物体検出のための新しいディープニューラルネットワークフレームワークを提案する。
RGB-D能動的物体検出のための6つのベンチマークデータセットを用いた17の最先端手法と比較して,本手法は定量的・視覚的に,他の手法よりも優れていた。
- 参考スコア(独自算出の注目度): 47.00147036733322
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper presents a novel deep neural network framework for RGB-D salient
object detection by controlling the message passing between the RGB images and
depth maps on the feature level and exploring the long-range semantic contexts
and geometric information on both RGB and depth features to infer salient
objects. To achieve this, we formulate a dynamic message propagation (DMP)
module with the graph neural networks and deformable convolutions to
dynamically learn the context information and to automatically predict filter
weights and affinity matrices for message propagation control. We further embed
this module into a Siamese-based network to process the RGB image and depth map
respectively and design a multi-level feature fusion (MFF) module to explore
the cross-level information between the refined RGB and depth features.
Compared with 17 state-of-the-art methods on six benchmark datasets for RGB-D
salient object detection, experimental results show that our method outperforms
all the others, both quantitatively and visually.
- Abstract(参考訳): 本稿では,RGB画像と特徴レベルでの深度マップ間のメッセージパッシングを制御し,RGBと深度の両方の長範囲の意味的コンテキストと幾何学的情報を探索することにより,RGB-D有意物体検出のための新しいディープニューラルネットワークフレームワークを提案する。
これを実現するために、動的メッセージ伝搬(DMP)モジュールをグラフニューラルネットワークと変形可能な畳み込みで定式化し、コンテキスト情報を動的に学習し、メッセージ伝搬制御のためのフィルタ重みと親和性行列を自動的に予測する。
さらに,このモジュールをsiameseベースのネットワークに組み込み,rgb画像と深度マップをそれぞれ処理し,mff(multi-level feature fusion)モジュールを設計し,改良されたrgbと深度特徴のクロスレベル情報を探索する。
rgb-dサルエント物体検出のための6つのベンチマークデータセットにおける17の最先端手法と比較した結果,本手法は定量的および視覚的に他の手法よりも優れていることがわかった。
関連論文リスト
- RBF Weighted Hyper-Involution for RGB-D Object Detection [0.0]
リアルタイムと2つのストリームRGBDオブジェクト検出モデルを提案する。
提案モデルでは, 深度誘導型ハイパーインボリューションを生深度マップの空間的相互作用パターンに基づいて動的に適応する深度誘導型ハイパーインボリューションと, アップサンプリングに基づくトレーニング可能な融合層からなる。
提案モデルは,NYU Depth v2データセットで他のRGB-Dベースオブジェクト検出モデルよりも優れており,SUN RGB-Dで比較した(第2位)結果が得られることを示す。
論文 参考訳(メタデータ) (2023-09-30T11:25:34Z) - SPSN: Superpixel Prototype Sampling Network for RGB-D Salient Object
Detection [5.2134203335146925]
近年,RGB-D Salient Object Detection (SOD) が注目されている。
深層学習手法の進歩にもかかわらず、RGB-D SODは、RGB画像と深度マップと低品質深度マップとの間に大きな領域ギャップがあるため、依然として困難である。
本稿では,この問題を解決するために,新しいスーパーピクセルプロトタイプサンプリングネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2022-07-16T10:43:14Z) - Dual Swin-Transformer based Mutual Interactive Network for RGB-D Salient
Object Detection [67.33924278729903]
本研究では,Dual Swin-Transformerを用いたMutual Interactive Networkを提案する。
視覚入力における長距離依存をモデル化するために,RGBと奥行きモードの両方の機能抽出器としてSwin-Transformerを採用している。
5つの標準RGB-D SODベンチマークデータセットに関する総合的な実験は、提案手法の優位性を実証している。
論文 参考訳(メタデータ) (2022-06-07T08:35:41Z) - Multi-Scale Iterative Refinement Network for RGB-D Salient Object
Detection [7.062058947498447]
RGB画像の様々なスケールや解像度に、様々な特徴レベルの意味的ギャップがあるため、健全な視覚的手がかりが現れる。
同様のサージェントパターンは、クロスモーダルなディープイメージとマルチスケールバージョンで利用できる。
注意に基づく融合モジュール (ABF) を設計し, 相互相関に対処する。
論文 参考訳(メタデータ) (2022-01-24T10:33:00Z) - RGB-D Saliency Detection via Cascaded Mutual Information Minimization [122.8879596830581]
既存のRGB-Dサリエンシ検出モデルは、RGBと深さを効果的にマルチモーダル学習を実現するために明示的に奨励するものではない。
本稿では,RGB画像と深度データ間のマルチモーダル情報を「明示的」にモデル化するために,相互情報最小化による新しい多段階学習フレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-15T12:31:27Z) - Cross-modality Discrepant Interaction Network for RGB-D Salient Object
Detection [78.47767202232298]
本稿では,RGB-D SODのためのクロスモダリティ離散相互作用ネットワーク(CDINet)を提案する。
2つのコンポーネントは、効果的な相互モダリティ相互作用を実装するように設計されている。
我々のネットワークは、定量的にも質的にも15ドルの最先端の手法より優れています。
論文 参考訳(メタデータ) (2021-08-04T11:24:42Z) - MobileSal: Extremely Efficient RGB-D Salient Object Detection [62.04876251927581]
本稿では,効率的なRGB-Dサルエント物体検出(SOD)に焦点を当てた新しいネットワーク,メソッド名を提案する。
RGB-D SODのためのモバイルネットワークの特徴表現能力を強化するために,暗黙的深度復元(IDR)手法を提案する。
IDRとCPRを組み込むことで、7つの挑戦的なRGB-D SODデータセット上のsArtメソッドに対してメソッド名が好ましい。
論文 参考訳(メタデータ) (2020-12-24T04:36:42Z) - Cross-Modal Weighting Network for RGB-D Salient Object Detection [76.0965123893641]
我々は,RGB-D SODの深度チャネルとRGB-D SODの包括的相互作用を促進するために,新しいクロスモーダルウェイトリング(CMW)戦略を提案する。
具体的には、CMW-L、CMW-M、CMW-Hという3つのRGB-depth相互作用モジュールが、それぞれ低レベル、中級、高レベルのクロスモーダル情報融合を扱うように開発されている。
CMWNetは、7つの人気のあるベンチマークで15の最先端のRGB-D SODメソッドを上回っている。
論文 参考訳(メタデータ) (2020-07-09T16:01:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。