論文の概要: NeuralPCI: Spatio-temporal Neural Field for 3D Point Cloud Multi-frame
Non-linear Interpolation
- arxiv url: http://arxiv.org/abs/2303.15126v1
- Date: Mon, 27 Mar 2023 11:58:52 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-28 15:31:30.656113
- Title: NeuralPCI: Spatio-temporal Neural Field for 3D Point Cloud Multi-frame
Non-linear Interpolation
- Title(参考訳): NeuralPCI: 3次元点雲非線形補間のための時空間ニューラルネットワーク
- Authors: Zehan Zheng, Danni Wu, Ruisi Lu, Fan Lu, Guang Chen, Changjun Jiang
- Abstract要約: 本稿では,3次元ポイント・クラウド・ニューラル化のためのエンドツーエンドの4次元点補間法を提案する。
我々は、自律走行シーンにおける大きな非線形運動のためのNL-Driveと呼ばれる新しいデータセットを構築した。
最終的に,本手法はDHB(Dynamic Human Bodies)とNL-Driveデータセットの両方で最先端の性能を実現する。
- 参考スコア(独自算出の注目度): 11.351949174797547
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In recent years, there has been a significant increase in focus on the
interpolation task of computer vision. Despite the tremendous advancement of
video interpolation, point cloud interpolation remains insufficiently explored.
Meanwhile, the existence of numerous nonlinear large motions in real-world
scenarios makes the point cloud interpolation task more challenging. In light
of these issues, we present NeuralPCI: an end-to-end 4D spatio-temporal Neural
field for 3D Point Cloud Interpolation, which implicitly integrates multi-frame
information to handle nonlinear large motions for both indoor and outdoor
scenarios. Furthermore, we construct a new multi-frame point cloud
interpolation dataset called NL-Drive for large nonlinear motions in autonomous
driving scenes to better demonstrate the superiority of our method. Ultimately,
NeuralPCI achieves state-of-the-art performance on both DHB (Dynamic Human
Bodies) and NL-Drive datasets. Beyond the interpolation task, our method can be
naturally extended to point cloud extrapolation, morphing, and auto-labeling,
which indicates its substantial potential in other domains. Codes are available
at https://github.com/ispc-lab/NeuralPCI.
- Abstract(参考訳): 近年,コンピュータビジョンの補間作業に注目が集まっている。
ビデオ補間が著しく進歩したにもかかわらず、点雲補間はまだ不十分である。
一方、実世界のシナリオに多数の非線形大きな動きが存在するため、ポイントクラウド補間作業はより困難になる。
これらの問題に照らし合わせて,3dポイントクラウド補間のためのエンドツーエンドの4次元空間的ニューラルフィールドであるneuralpciを提案する。
さらに,NL-Driveと呼ばれる複数フレームのクラウド補間データセットを構築し,自律走行シーンにおける大きな非線形動作を推定し,本手法の優位性を示す。
結局のところ、NeuralPCIはDHB(Dynamic Human Bodies)とNL-Driveデータセットの両方で最先端のパフォーマンスを達成する。
補間作業の他に,本手法は自然に雲外挿,モーフィング,自動ラベルまで拡張することができる。
コードはhttps://github.com/ispc-lab/NeuralPCIで入手できる。
関連論文リスト
- One for All: Multi-Domain Joint Training for Point Cloud Based 3D Object Detection [71.78795573911512]
textbfOneDet3Dは、異なるドメイン間での3D検出に対処する汎用的なワン・ツー・オール・モデルである。
本稿では、データ干渉問題に対処するため、ルーティング機構によって誘導される散乱とコンテキストにおけるドメイン認識を提案する。
完全なスパース構造とアンカーフリーヘッドは、さらに大きなスケールの差のある点雲を収容する。
論文 参考訳(メタデータ) (2024-11-03T14:21:56Z) - FASTC: A Fast Attentional Framework for Semantic Traversability Classification Using Point Cloud [7.711666704468952]
点雲を用いたトラバーサビリティ評価の問題に対処する。
本稿では,垂直に配置された点雲から特徴を捉えるために PointNet を利用した柱状特徴抽出モジュールを提案する。
次に、LIDAR点雲の密度問題に適切に対応できる多フレーム情報を融合する新しい時間的アテンションモジュールを提案する。
論文 参考訳(メタデータ) (2024-06-24T12:01:55Z) - Dynamic 3D Point Cloud Sequences as 2D Videos [81.46246338686478]
3Dポイントクラウドシーケンスは、現実世界の環境における最も一般的で実用的な表現の1つとして機能する。
textitStructured Point Cloud Videos (SPCV) と呼ばれる新しい汎用表現を提案する。
SPCVは点雲列を空間的滑らかさと時間的一貫性を持つ2Dビデオとして再編成し、画素値は点の3D座標に対応する。
論文 参考訳(メタデータ) (2024-03-02T08:18:57Z) - Point-Syn2Real: Semi-Supervised Synthetic-to-Real Cross-Domain Learning
for Object Classification in 3D Point Clouds [14.056949618464394]
LiDAR 3Dポイントクラウドデータを用いたオブジェクト分類は、自律運転のような現代的なアプリケーションにとって重要である。
本稿では,ポイントクラウドのマニュアルアノテーションに依存しない半教師付きクロスドメイン学習手法を提案する。
我々は、ポイントクラウド上でのクロスドメイン学習のための新しいベンチマークデータセットであるPoint-Syn2Realを紹介した。
論文 参考訳(メタデータ) (2022-10-31T01:53:51Z) - Learning Dynamic View Synthesis With Few RGBD Cameras [60.36357774688289]
本稿では,RGBDカメラを用いて動的屋内シーンのフリー視点映像を合成することを提案する。
我々は、RGBDフレームから点雲を生成し、それをニューラル機能を介して、自由視点ビデオにレンダリングする。
そこで本研究では,未完成の深度を適応的に塗布して新規なビューを描画する,シンプルなRegional Depth-Inpaintingモジュールを提案する。
論文 参考訳(メタデータ) (2022-04-22T03:17:35Z) - IDEA-Net: Dynamic 3D Point Cloud Interpolation via Deep Embedding
Alignment [58.8330387551499]
我々は、点方向軌跡(すなわち滑らかな曲線)の推定として問題を定式化する。
本稿では,学習した時間的一貫性の助けを借りて問題を解消する,エンドツーエンドのディープラーニングフレームワークであるIDEA-Netを提案する。
各種点群における本手法の有効性を実証し, 定量的かつ視覚的に, 最先端の手法に対する大幅な改善を観察する。
論文 参考訳(メタデータ) (2022-03-22T10:14:08Z) - PointAttN: You Only Need Attention for Point Cloud Completion [89.88766317412052]
ポイント・クラウド・コンプリート(Point cloud completion)とは、部分的な3次元ポイント・クラウドから3次元の形状を完成させることである。
そこで我々は,kNNを除去するために,ポイントクラウドをポイント単位に処理する新しいニューラルネットワークを提案する。
提案するフレームワークであるPointAttNはシンプルで簡潔で効果的であり、3次元形状の構造情報を正確に捉えることができる。
論文 参考訳(メタデータ) (2022-03-16T09:20:01Z) - Multi Projection Fusion for Real-time Semantic Segmentation of 3D LiDAR
Point Clouds [2.924868086534434]
本稿では,ポイントクラウドの複数のプロジェクションを利用する3次元ポイントクラウドセマンティックセマンティックセマンティクスの新しいアプローチを提案する。
我々のMulti-Projection Fusionフレームワークは、2つの異なる高効率2次元完全畳み込みモデルを用いて球面および鳥眼の視射影を解析する。
論文 参考訳(メタデータ) (2020-11-03T19:40:43Z) - Pseudo-LiDAR Point Cloud Interpolation Based on 3D Motion Representation
and Spatial Supervision [68.35777836993212]
我々はPseudo-LiDAR点雲ネットワークを提案し、時間的および空間的に高品質な点雲列を生成する。
点雲間のシーンフローを活用することにより,提案ネットワークは3次元空間運動関係のより正確な表現を学習することができる。
論文 参考訳(メタデータ) (2020-06-20T03:11:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。