論文の概要: CSDN: Cross-modal Shape-transfer Dual-refinement Network for Point Cloud
Completion
- arxiv url: http://arxiv.org/abs/2208.00751v1
- Date: Mon, 1 Aug 2022 11:20:56 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-02 13:58:32.804966
- Title: CSDN: Cross-modal Shape-transfer Dual-refinement Network for Point Cloud
Completion
- Title(参考訳): csdn:ポイントクラウド完成のためのクロスモーダルシェイプトランスファーデュアルレフィニメントネットワーク
- Authors: Zhe Zhu, Liangliang Nan, Haoran Xie, Honghua Chen, Mingqiang Wei, Jun
Wang, Jing Qin
- Abstract要約: 本稿では,ポイントクラウド補完のためのクロスモーダル・シェイプ・トランスファー・デュアルリファインメント・ネットワーク(CSDN)を提案する。
第1モジュールは、単一画像から固有形状特性を伝達し、欠測領域の幾何学的生成を導く。
第2モジュールは、生成された点の位置を調整することで粗い出力を洗練する。
- 参考スコア(独自算出の注目度): 28.012936521291834
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: How will you repair a physical object with some missings? You may imagine its
original shape from previously captured images, recover its overall (global)
but coarse shape first, and then refine its local details. We are motivated to
imitate the physical repair procedure to address point cloud completion. To
this end, we propose a cross-modal shape-transfer dual-refinement network
(termed CSDN), a coarse-to-fine paradigm with images of full-cycle
participation, for quality point cloud completion. CSDN mainly consists of
"shape fusion" and "dual-refinement" modules to tackle the cross-modal
challenge. The first module transfers the intrinsic shape characteristics from
single images to guide the geometry generation of the missing regions of point
clouds, in which we propose IPAdaIN to embed the global features of both the
image and the partial point cloud into completion. The second module refines
the coarse output by adjusting the positions of the generated points, where the
local refinement unit exploits the geometric relation between the novel and the
input points by graph convolution, and the global constraint unit utilizes the
input image to fine-tune the generated offset. Different from most existing
approaches, CSDN not only explores the complementary information from images
but also effectively exploits cross-modal data in the whole coarse-to-fine
completion procedure. Experimental results indicate that CSDN performs
favorably against ten competitors on the cross-modal benchmark.
- Abstract(参考訳): 物理的な物体をどうやって修理するの?
以前撮影された画像から元の形状を想像して、まず全体(グローバル)だが粗い形状を復元し、その後、局所的な詳細を磨き上げる。
我々は、点雲の完成に対処するための物理的修復手順を模倣する動機がある。
そこで本研究では,完全サイクル参加の画像を含む粗大なパラダイムであるクロスモーダルな形状変換型デュアルリファインメントネットワーク(CSDN)を提案する。
CSDNは、主に「シェイプ融合」と「デュアルリファインメント」モジュールから成り、クロスモーダルな課題に取り組む。
第1のモジュールは、単一画像から固有形状特性を転送し、点雲の欠落領域の幾何学的生成を導く。
第2モジュールは、局所改良部がグラフ畳み込みにより新規と入力点との幾何関係を利用する生成点の位置を調整することにより粗い出力を洗練し、大域制約部は入力画像を利用して生成されたオフセットを微調整する。
既存のほとんどのアプローチとは異なり、CSDNは画像から補完的な情報を探索するだけでなく、粗い補完手順全体において、効果的にクロスモーダルデータを利用する。
実験の結果、csdnはクロスモーダルベンチマークにおいて10の競合に対して好成績を示している。
関連論文リスト
- Self-supervised 3D Point Cloud Completion via Multi-view Adversarial Learning [61.14132533712537]
我々は、オブジェクトレベルとカテゴリ固有の幾何学的類似性の両方を効果的に活用するフレームワークであるMAL-SPCを提案する。
私たちのMAL-SPCは3Dの完全な監視を一切必要とせず、各オブジェクトに1つの部分点クラウドを必要とするだけです。
論文 参考訳(メタデータ) (2024-07-13T06:53:39Z) - DMF-Net: Image-Guided Point Cloud Completion with Dual-Channel Modality Fusion and Shape-Aware Upsampling Transformer [7.210417508954435]
本稿では,画像誘導点雲補完のための新しいデュアルチャネルモダリティ融合ネットワークを提案する。
第1段階では、DMF-Netは部分点雲と対応する画像を入力として取り出して粗い点雲を復元する。
第2段階では、粗い点雲が2回、形状を意識したアップサンプリング変圧器でアップサンプリングされ、密度の高い完全点雲が得られる。
論文 参考訳(メタデータ) (2024-06-25T07:08:19Z) - SVDFormer: Complementing Point Cloud via Self-view Augmentation and
Self-structure Dual-generator [30.483163963846206]
本稿では,ポイントクラウド補完における2つの課題に対処するために,新たなネットワークSVDFormerを提案する。
我々はまず,複数視点深度画像情報を利用して不完全な自己形成を観測するセルフビューフュージョンネットワークを設計する。
次に,自己構造デュアルジェネレータ (Self-structure Dual-generator) と呼ばれる改良モジュールを導入する。
論文 参考訳(メタデータ) (2023-07-17T13:55:31Z) - Point Cloud Completion Guided by Prior Knowledge via Causal Inference [19.935868881427226]
本稿では,ポイントPCと呼ばれる新たなクラウド完了タスクを提案する。
Point-PCはメモリネットワークを用いて形状の先行情報を検索し、因果推論モデルを設計し、欠落した形状情報をフィルタリングする。
ShapeNet-55、PCN、KITTIデータセットの実験結果から、Point-PCは最先端の手法よりも優れていることが示された。
論文 参考訳(メタデータ) (2023-05-28T16:33:35Z) - Variational Relational Point Completion Network for Robust 3D
Classification [59.80993960827833]
可変点雲補完法は、局所的な詳細を欠くため、大域的な形状の骨格を生成する傾向がある。
本稿では2つの魅力的な特性を持つ変分フレームワークであるポイントコンプリートネットワーク(VRCNet)を提案する。
VRCNetは、現実世界のポイントクラウドスキャンにおいて、非常に一般化性と堅牢性を示している。
論文 参考訳(メタデータ) (2023-04-18T17:03:20Z) - RecRecNet: Rectangling Rectified Wide-Angle Images by Thin-Plate Spline
Model and DoF-based Curriculum Learning [62.86400614141706]
我々はRecRecNet(Rectangling Rectification Network)という新しい学習モデルを提案する。
我々のモデルは、ソース構造をターゲット領域に柔軟にワープし、エンドツーエンドの非教師なし変形を実現する。
実験により, 定量評価と定性評価の両面において, 比較法よりも解法の方が優れていることが示された。
論文 参考訳(メタデータ) (2023-01-04T15:12:57Z) - Point cloud completion on structured feature map with feedback network [28.710494879042002]
本稿では,FSNetを提案する。FSNetは,ポイントワイドな特徴を適応的に2次元構造的特徴マップに集約できる機能構造化モジュールである。
2次元畳み込みニューラルネットワークを用いて、FSNetから粗い完全点クラウドに特徴マップをデコードする。
点雲アップサンプリングネットワークを用いて、部分入力と粗い中間出力から高密度点雲を生成する。
論文 参考訳(メタデータ) (2022-02-17T10:59:40Z) - Cascaded Refinement Network for Point Cloud Completion with
Self-supervision [74.80746431691938]
形状整形のための2分岐ネットワークを提案する。
第1分枝は、完全なオブジェクトを合成するためのカスケード形状補完サブネットワークである。
第2のブランチは、元の部分入力を再構築する自動エンコーダである。
論文 参考訳(メタデータ) (2020-10-17T04:56:22Z) - Point Cloud Completion by Skip-attention Network with Hierarchical
Folding [61.59710288271434]
本研究では,3Dポイントクラウド補完のためのSkip-Attention Network (SA-Net)を提案する。
まず,不完全点雲の局所構造を効果的に活用するためのスキップアテンション機構を提案する。
第二に、異なる解像度でスキップアテンション機構によって符号化された選択された幾何情報を完全に活用するために、新しい構造保存デコーダを提案する。
論文 参考訳(メタデータ) (2020-05-08T06:23:51Z) - Shape-Oriented Convolution Neural Network for Point Cloud Analysis [59.405388577930616]
ポイントクラウドは3次元幾何学情報符号化に採用されている主要なデータ構造である。
形状指向型メッセージパッシング方式であるShapeConvを提案する。
論文 参考訳(メタデータ) (2020-04-20T16:11:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。