論文の概要: DCL: Differential Contrastive Learning for Geometry-Aware Depth
Synthesis
- arxiv url: http://arxiv.org/abs/2107.13087v1
- Date: Tue, 27 Jul 2021 21:25:07 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-29 14:01:13.537296
- Title: DCL: Differential Contrastive Learning for Geometry-Aware Depth
Synthesis
- Title(参考訳): dcl:幾何認識深度合成のための差分コントラスト学習
- Authors: Yanchao Yang, Yuefan Shen, Youyi Zheng, C. Karen Liu and Leonidas
Guibas
- Abstract要約: 本稿では,実深度スキャンから多様な変化を学習する現実的な深度合成法について述べる。
提案手法は,他の最先端手法よりも,より優れた合成-実間転送性能を実現することを示す。
- 参考スコア(独自算出の注目度): 23.985611769236275
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We describe a method for realistic depth synthesis that learns diverse
variations from the real depth scans and ensures geometric consistency for
effective synthetic-to-real transfer. Unlike general image synthesis pipelines,
where geometries are mostly ignored, we treat geometries carried by the depth
based on their own existence. We propose differential contrastive learning that
explicitly enforces the underlying geometric properties to be invariant
regarding the real variations been learned. The resulting depth synthesis
method is task-agnostic and can be used for training any task-specific networks
with synthetic labels. We demonstrate the effectiveness of the proposed method
by extensive evaluations on downstream real-world geometric reasoning tasks. We
show our method achieves better synthetic-to-real transfer performance than the
other state-of-the-art. When fine-tuned on a small number of real-world
annotations, our method can even surpass the fully supervised baselines.
- Abstract(参考訳): 本稿では, 実深度スキャンから多様な変化を学習し, 有効合成-実移動のための幾何整合性を確保するための現実深度合成法について述べる。
ジオメトリーがほとんど無視される一般的な画像合成パイプラインとは異なり、深度によって運ばれるジオメトリーは、彼ら自身の存在に基づいて扱う。
そこで本研究では,学習した実変分に関して,基礎となる幾何学的性質を不変と明示的に強制する差分学習を提案する。
結果の深さ合成法はタスク非依存であり、任意のタスク固有のネットワークを合成ラベルでトレーニングするために使用できる。
提案手法の有効性を,下流の幾何推論タスクを広範囲に評価することで実証する。
本手法は他の最先端技術に比べて合成から実への転送性能が向上することを示す。
少数の実世界のアノテーションを微調整すると、我々の手法は完全な教師付きベースラインを超えてしまう。
関連論文リスト
- Alignment and Outer Shell Isotropy for Hyperbolic Graph Contrastive
Learning [69.6810940330906]
高品質なグラフ埋め込みを学習するための新しいコントラスト学習フレームワークを提案する。
具体的には、階層的なデータ不変情報を効果的にキャプチャするアライメントメトリックを設計する。
双曲空間において、木の性質に関連する葉と高さの均一性に対処する必要があることを示す。
論文 参考訳(メタデータ) (2023-10-27T15:31:42Z) - ContraNeRF: Generalizable Neural Radiance Fields for Synthetic-to-real
Novel View Synthesis via Contrastive Learning [102.46382882098847]
まず,合成から現実への新規な視点合成における合成データの影響について検討した。
本稿では,幾何制約を伴う多視点一貫した特徴を学習するために,幾何対応のコントラスト学習を導入することを提案する。
提案手法は,PSNR,SSIM,LPIPSの点で,既存の一般化可能な新規ビュー合成手法よりも高い画質で精細な画像を描画することができる。
論文 参考訳(メタデータ) (2023-03-20T12:06:14Z) - Depth Completion using Geometry-Aware Embedding [22.333381291860498]
本稿では,幾何認識の埋め込みを効率的に学習する手法を提案する。
局所的および大域的な幾何学的構造情報を、例えば、シーンレイアウト、オブジェクトのサイズと形状などの3Dポイントから符号化し、深度推定を導く。
論文 参考訳(メタデータ) (2022-03-21T12:06:27Z) - Learning Topology from Synthetic Data for Unsupervised Depth Completion [66.26787962258346]
画像から高密度深度マップとスパース深度測定を推定する手法を提案する。
我々は,疎点雲と密度の高い自然形状の関係を学習し,その画像を用いて予測深度マップの検証を行う。
論文 参考訳(メタデータ) (2021-06-06T00:21:12Z) - Self-Guided Instance-Aware Network for Depth Completion and Enhancement [6.319531161477912]
既存の手法では,画素ワイド画像の内容とそれに対応する近傍の深度値に基づいて,欠落した深度測定を直接補間する。
本稿では、自己誘導機構を利用して、深度復元に必要なインスタンスレベルの特徴を抽出する自己誘導型インスタンス認識ネットワーク(SG-IANet)を提案する。
論文 参考訳(メタデータ) (2021-05-25T19:41:38Z) - Adaptive Surface Normal Constraint for Depth Estimation [102.7466374038784]
アダプティブサーフェスノーマル(ASN)制約と呼ばれるシンプルで効果的な手法を導入し、深さ推定と幾何学的一貫性を相関させます。
本手法は3次元形状を忠実に再構成でき,境界,鋭角,雑音などの局所形状変化に頑健である。
論文 参考訳(メタデータ) (2021-03-29T10:36:25Z) - 3D Dense Geometry-Guided Facial Expression Synthesis by Adversarial
Learning [54.24887282693925]
本稿では,3次元密度(深度,表面正規度)情報を表現操作に用いる新しいフレームワークを提案する。
既製の最先端3D再構成モデルを用いて深度を推定し,大規模RGB-Depthデータセットを作成する。
実験により,提案手法は競争ベースラインと既存の芸術を大きなマージンで上回ることを示した。
論文 参考訳(メタデータ) (2020-09-30T17:12:35Z) - Neural Topological SLAM for Visual Navigation [112.73876869904]
意味論を生かし、近似幾何学的推論を行う空間のトポロジ的表現を設計する。
本稿では,ノイズのあるアクティベーションの下でそのような表現を構築し,維持し,使用することができる教師付き学習ベースアルゴリズムについて述べる。
論文 参考訳(メタデータ) (2020-05-25T17:56:29Z) - Learning Rope Manipulation Policies Using Dense Object Descriptors
Trained on Synthetic Depth Data [32.936908766549344]
本稿では,初期とゴールのロープ構成間の点対対応を学習する手法を提案する。
ABB YuMi Robotによるノットタイリングタスクの50回の試行では、これまで見つからなかった構成から66%のノットタイリング成功率を達成した。
論文 参考訳(メタデータ) (2020-03-03T23:43:05Z) - Symmetrical Synthesis for Deep Metric Learning [17.19890778916312]
対称合成と呼ばれる新しい合成ハードサンプル生成法を提案する。
同じクラスから2つの元の特徴点が与えられた場合、提案手法は対称性の軸として互いに合成点を生成する。
原点および合成点内で硬い負のペアマイニングを行い、計量学習損失を計算するためのより有益な負のペアを選択する。
論文 参考訳(メタデータ) (2020-01-31T04:56:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。