論文の概要: Joint Deep Multi-Graph Matching and 3D Geometry Learning from
Inhomogeneous 2D Image Collections
- arxiv url: http://arxiv.org/abs/2103.17229v1
- Date: Wed, 31 Mar 2021 17:25:36 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-01 17:59:41.628736
- Title: Joint Deep Multi-Graph Matching and 3D Geometry Learning from
Inhomogeneous 2D Image Collections
- Title(参考訳): 非均質な2次元画像コレクションからの深部多グラフマッチングと3次元幾何学習
- Authors: Zhenzhang Ye, Tarun Yenamandra, Florian Bernard, Daniel Cremers
- Abstract要約: 非均質な画像コレクションから変形可能な3Dジオメトリモデルを学ぶためのトレーニング可能なフレームワークを提案する。
さらに,2次元画像で表現された物体の3次元形状も取得する。
- 参考スコア(独自算出の注目度): 57.60094385551773
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Graph matching aims to establish correspondences between vertices of graphs
such that both the node and edge attributes agree. Various learning-based
methods were recently proposed for finding correspondences between image key
points based on deep graph matching formulations. While these approaches mainly
focus on learning node and edge attributes, they completely ignore the 3D
geometry of the underlying 3D objects depicted in the 2D images. We fill this
gap by proposing a trainable framework that takes advantage of graph neural
networks for learning a deformable 3D geometry model from inhomogeneous image
collections, i.e. a set of images that depict different instances of objects
from the same category. Experimentally we demonstrate that our method
outperforms recent learning-based approaches for graph matching considering
both accuracy and cycle-consistency error, while we in addition obtain the
underlying 3D geometry of the objects depicted in the 2D images.
- Abstract(参考訳): グラフマッチングは、ノード属性とエッジ属性の両方が一致するように、グラフの頂点間の対応を確立することを目的としている。
近年,深層グラフマッチング式に基づく画像キー点間の対応関係を求めるための学習ベース手法が提案されている。
これらのアプローチは主にノードとエッジ属性の学習に重点を置いているが、基礎となる3Dオブジェクトの3次元幾何学を完全に無視している。
このギャップを埋めるために,グラフニューラルネットワークを活用したトレーニング可能なフレームワークを提案し,不均質な画像コレクションから変形可能な3次元形状モデルを学習する。
同じカテゴリのオブジェクトの異なるインスタンスを描写する画像のセット。
本手法は,精度とサイクルコンシスタンス誤差の両方を考慮し,最近の学習に基づくグラフマッチング手法よりも優れており,さらに2次元画像に表される物体の3次元形状を求める。
関連論文リスト
- Weakly-Supervised 3D Scene Graph Generation via Visual-Linguistic Assisted Pseudo-labeling [9.440800948514449]
視覚言語支援擬似ラベルを用いた弱教師付き3次元シーングラフ生成法を提案する。
我々の3D-VLAPは、テキストと2D画像のセマンティクスを調整するために、現在の大規模視覚言語モデルの優れた能力を利用する。
エッジ自己アテンションに基づくグラフニューラルネットワークを設計し、3Dポイントクラウドシーンのシーングラフを生成する。
論文 参考訳(メタデータ) (2024-04-03T07:30:09Z) - Explicit3D: Graph Network with Spatial Inference for Single Image 3D
Object Detection [35.85544715234846]
本稿では,オブジェクトの幾何学的特徴と意味論的特徴に基づいて,Explicit3Dという動的スパースグラフパイプラインを提案する。
SUN RGB-Dデータセットによる実験結果から,我々のExplicit3Dは最先端技術よりも優れた性能バランスを実現することが示された。
論文 参考訳(メタデータ) (2023-02-13T16:19:54Z) - Neural Correspondence Field for Object Pose Estimation [67.96767010122633]
1枚のRGB画像から3次元モデルで剛体物体の6DoFポーズを推定する手法を提案する。
入力画像の画素で3次元オブジェクト座標を予測する古典的対応法とは異なり,提案手法はカメラフラストラムでサンプリングされた3次元クエリポイントで3次元オブジェクト座標を予測する。
論文 参考訳(メタデータ) (2022-07-30T01:48:23Z) - Spatial Feature Mapping for 6DoF Object Pose Estimation [29.929911622127502]
この研究は、6Dof (6D)オブジェクトのポーズを背景クラッタで推定することを目的としている。
本稿では,強い閉塞と背景雑音を考慮し,この課題に対処するために空間構造を活用することを提案する。
論文 参考訳(メタデータ) (2022-06-03T21:44:10Z) - Self-Supervised Image Representation Learning with Geometric Set
Consistency [50.12720780102395]
本稿では,3次元幾何整合性に基づく自己教師付き画像表現学習法を提案する。
具体的には、画像ビュー内の特徴整合性を強化するために、コントラスト学習フレームワークに3次元幾何学的整合性を導入する。
論文 参考訳(メタデータ) (2022-03-29T08:57:33Z) - Learning Geometry-Disentangled Representation for Complementary
Understanding of 3D Object Point Cloud [50.56461318879761]
3次元画像処理のためのGDANet(Geometry-Disentangled Attention Network)を提案する。
GDANetは、点雲を3Dオブジェクトの輪郭と平らな部分に切り離し、それぞれ鋭い変化成分と穏やかな変化成分で表される。
3Dオブジェクトの分類とセグメンテーションベンチマークの実験は、GDANetがより少ないパラメータで最先端の処理を実現していることを示している。
論文 参考訳(メタデータ) (2020-12-20T13:35:00Z) - Hard Example Generation by Texture Synthesis for Cross-domain Shape
Similarity Learning [97.56893524594703]
画像に基づく3次元形状検索(IBSR)は、与えられた2次元画像の対応する3次元形状を、大きな3次元形状データベースから見つけることを目的としている。
いくつかの適応技法によるメートル法学習は、類似性学習を形作るための自然な解決策のようです。
テクスチャ合成を応用した幾何中心の多視点メトリック学習フレームワークを開発した。
論文 参考訳(メタデータ) (2020-10-23T08:52:00Z) - Canonical 3D Deformer Maps: Unifying parametric and non-parametric
methods for dense weakly-supervised category reconstruction [79.98689027127855]
独立オブジェクトの2次元画像の集合から学習できる共通オブジェクトカテゴリの3次元形状の表現を提案する。
提案手法は, パラメトリック変形モデル, 非パラメトリック3次元再構成, 標準埋め込みの概念に基づく新しい手法で構築する。
顔、車、鳥の野生のデータセットを3Dで再現することで、最先端の成果が得られます。
論文 参考訳(メタデータ) (2020-08-28T15:44:05Z) - 3D Shape Segmentation with Geometric Deep Learning [2.512827436728378]
本稿では,部分分割問題としてセグメント化全体を解くために,3次元形状の3次元拡張ビューを生成するニューラルネットワークベースのアプローチを提案する。
提案手法は,公開データセットの3次元形状と,フォトグラム法を用いて再構成した実物体を用いて検証する。
論文 参考訳(メタデータ) (2020-02-02T14:11:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。