論文の概要: MSDPN: Monocular Depth Prediction with Partial Laser Observation using
Multi-stage Neural Networks
- arxiv url: http://arxiv.org/abs/2008.01405v1
- Date: Tue, 4 Aug 2020 08:27:40 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-02 23:55:29.436641
- Title: MSDPN: Monocular Depth Prediction with Partial Laser Observation using
Multi-stage Neural Networks
- Title(参考訳): MSDPN: 多段階ニューラルネットワークを用いた部分レーザー観測による単眼深度予測
- Authors: Hyungtae Lim, Hyeonjae Gil and Hyun Myung
- Abstract要約: 深層学習に基づくマルチステージネットワークアーキテクチャであるMulti-Stage Depth Prediction Network (MSDPN)を提案する。
MSDPNは2次元LiDARと単眼カメラを用いて深度マップを予測する。
実験により,本ネットワークは最先端手法に対して有望な性能を示す。
- 参考スコア(独自算出の注目度): 1.1602089225841632
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this study, a deep-learning-based multi-stage network architecture called
Multi-Stage Depth Prediction Network (MSDPN) is proposed to predict a dense
depth map using a 2D LiDAR and a monocular camera. Our proposed network
consists of a multi-stage encoder-decoder architecture and Cross Stage Feature
Aggregation (CSFA). The proposed multi-stage encoder-decoder architecture
alleviates the partial observation problem caused by the characteristics of a
2D LiDAR, and CSFA prevents the multi-stage network from diluting the features
and allows the network to learn the inter-spatial relationship between features
better. Previous works use sub-sampled data from the ground truth as an input
rather than actual 2D LiDAR data. In contrast, our approach trains the model
and conducts experiments with a physically-collected 2D LiDAR dataset. To this
end, we acquired our own dataset called KAIST RGBD-scan dataset and validated
the effectiveness and the robustness of MSDPN under realistic conditions. As
verified experimentally, our network yields promising performance against
state-of-the-art methods. Additionally, we analyzed the performance of
different input methods and confirmed that the reference depth map is robust in
untrained scenarios.
- Abstract(参考訳): 本研究では,2次元LiDARと単眼カメラを用いて深度マップを推定するために,MSDPN(Multi-Stage Depth Prediction Network)と呼ばれる深層学習に基づくマルチステージネットワークアーキテクチャを提案する。
提案するネットワークは,多段エンコーダデコーダアーキテクチャとクロスステージ特徴集合(CSFA)から構成される。
提案するマルチステージエンコーダ・デコーダアーキテクチャは,2次元lidarの特性に起因する部分的観測問題を軽減し,csfaはマルチステージネットワークが特徴を希釈することを防止し,ネットワークが特徴間の空間間関係をよりよく学習できるようにする。
これまでの研究では、実際の2D LiDARデータではなく、地上の真実からのサブサンプルデータを入力として使用していた。
対照的に、本手法はモデルをトレーニングし、物理的にコンパイルされた2次元LiDARデータセットを用いて実験を行う。
そこで我々は, KAIST RGBDスキャンデータセットという独自のデータセットを取得し, 現実的な条件下でのMSDPNの有効性とロバスト性を検証した。
実験により,本ネットワークは最先端手法に対して有望な性能を示す。
さらに,異なる入力手法の性能を解析し,未学習シナリオにおいて参照深度マップが堅牢であることを確認した。
関連論文リスト
- Efficient and Accurate Hyperspectral Image Demosaicing with Neural Network Architectures [3.386560551295746]
本研究では,ハイパースペクトル画像復調におけるニューラルネットワークアーキテクチャの有効性について検討した。
様々なネットワークモデルと修正を導入し、それらを従来の手法や既存の参照ネットワークアプローチと比較する。
その結果、我々のネットワークは、例外的な性能を示す両方のデータセットにおいて、参照モデルよりも優れるか、一致していることがわかった。
論文 参考訳(メタデータ) (2023-12-21T08:02:49Z) - HiDAnet: RGB-D Salient Object Detection via Hierarchical Depth Awareness [2.341385717236931]
本稿では,RGB-Dサリエンシ検出のための階層的深度認識ネットワーク(HiDAnet)を提案する。
我々のモチベーションは、幾何学的先行の多粒性特性がニューラルネットワーク階層とよく相関しているという観察から来ています。
当社のHiDAnetは最先端の手法よりも大きなマージンで良好に動作します。
論文 参考訳(メタデータ) (2023-01-18T10:00:59Z) - SwinDepth: Unsupervised Depth Estimation using Monocular Sequences via
Swin Transformer and Densely Cascaded Network [29.798579906253696]
教師付きトレーニングのための深層地下深度ラベルの取得は困難であり,単分子配列を用いた教師なし深度推定が有望な代替手段として出現する。
本稿では,画像特徴抽出器としてコンボリューションフリーのSwin Transformerを用い,局所的幾何学的特徴と大域的意味的特徴の両方を網羅して深度推定を行う。
また,Densely Cascaded Multi-scale Network (DCMNet)を提案する。
論文 参考訳(メタデータ) (2023-01-17T06:01:46Z) - A Model-data-driven Network Embedding Multidimensional Features for
Tomographic SAR Imaging [5.489791364472879]
多次元特徴量に基づくトモSARイメージングを実現するためのモデルデータ駆動型ネットワークを提案する。
画像シーンの多次元的特徴を効果的に向上するために、2つの2次元処理モジュール(畳み込みエンコーダ-デコーダ構造)を追加します。
従来のCS-based FISTA法とDL-based gamma-Net法と比較して,提案手法は良好な画像精度を有しつつ,完全性を向上させる。
論文 参考訳(メタデータ) (2022-11-28T02:01:43Z) - Pyramid Grafting Network for One-Stage High Resolution Saliency
Detection [29.013012579688347]
我々は、異なる解像度画像から特徴を独立して抽出する、Praamid Grafting Network (PGNet) と呼ばれるワンステージフレームワークを提案する。
CNNブランチが壊れた詳細情報をよりホモロジーに組み合わせられるように、アテンションベースのクロスモデルグラフティングモジュール (CMGM) が提案されている。
我々は,4K-8K解像度で5,920個の画像を含む超高分解能塩度検出データセットUHRSDを新たに提供した。
論文 参考訳(メタデータ) (2022-04-11T12:22:21Z) - Optimization-Based Separations for Neural Networks [57.875347246373956]
本研究では,2層のシグモダルアクティベーションを持つディープ2ニューラルネットワークを用いて,ボールインジケータ関数を効率よく学習できることを示す。
これは最適化に基づく最初の分離結果であり、より強力なアーキテクチャの近似の利点は、実際に確実に現れる。
論文 参考訳(メタデータ) (2021-12-04T18:07:47Z) - Sparse Auxiliary Networks for Unified Monocular Depth Prediction and
Completion [56.85837052421469]
コスト効率のよいセンサで得られたデータからシーン形状を推定することは、ロボットや自動運転車にとって鍵となる。
本稿では,1枚のRGB画像から,低コストな能動深度センサによるスパース計測により,深度を推定する問題について検討する。
sparse networks (sans) は,深さ予測と完了という2つのタスクをmonodepthネットワークで実行可能にする,新しいモジュールである。
論文 参考訳(メタデータ) (2021-03-30T21:22:26Z) - Multi-view Depth Estimation using Epipolar Spatio-Temporal Networks [87.50632573601283]
一つのビデオから多視点深度を推定する新しい手法を提案する。
提案手法は,新しいEpipolar Spatio-Temporal Transformer(EST)を用いて時間的コヒーレントな深度推定を行う。
最近のMixture-of-Expertsモデルにインスパイアされた計算コストを削減するため、我々はコンパクトなハイブリッドネットワークを設計する。
論文 参考訳(メタデータ) (2020-11-26T04:04:21Z) - Adaptive Context-Aware Multi-Modal Network for Depth Completion [107.15344488719322]
我々は,観測された空間コンテキストを捉えるために,グラフ伝搬を採用することを提案する。
次に、注意機構を伝搬に適用し、ネットワークが文脈情報を適応的にモデル化することを奨励する。
最後に、抽出したマルチモーダル特徴を効果的に活用するための対称ゲート融合戦略を導入する。
本稿では,Adaptive Context-Aware Multi-Modal Network (ACMNet) を2つのベンチマークで評価した。
論文 参考訳(メタデータ) (2020-08-25T06:00:06Z) - Cross-Modality 3D Object Detection [63.29935886648709]
本稿では,3次元物体検出のための新しい2段階多モード融合ネットワークを提案する。
アーキテクチャ全体が2段階の融合を促進する。
KITTIデータセットを用いた実験により,提案したマルチステージ融合により,ネットワークがより良い表現を学習できることが示唆された。
論文 参考訳(メタデータ) (2020-08-16T11:01:20Z) - Suppress and Balance: A Simple Gated Network for Salient Object
Detection [89.88222217065858]
両問題を同時に解くための単純なゲートネットワーク(GateNet)を提案する。
多レベルゲートユニットの助けを借りて、エンコーダからの貴重なコンテキスト情報をデコーダに最適に送信することができる。
さらに,提案したFold-ASPP操作(Fold-ASPP)に基づくアトラス空間ピラミッドプーリングを用いて,様々なスケールのサリアンオブジェクトを正確に位置決めする。
論文 参考訳(メタデータ) (2020-07-16T02:00:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。