論文の概要: Localising In Complex Scenes Using Balanced Adversarial Adaptation
- arxiv url: http://arxiv.org/abs/2011.04122v1
- Date: Mon, 9 Nov 2020 00:40:50 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-28 00:24:01.178346
- Title: Localising In Complex Scenes Using Balanced Adversarial Adaptation
- Title(参考訳): 平衡逆順応を用いた複雑な場面における位置決め
- Authors: Gil Avraham, Yan Zuo and Tom Drummond
- Abstract要約: ドメイン適応と生成モデリングは、データ収集とラベル付けの高価な性質を全体として緩和している。
本研究では,シミュレーション環境のローカライズに最適化された表現と,実環境におけるそのような表現の適用との間に存在する性能ギャップについて検討する。
- 参考スコア(独自算出の注目度): 19.160686658569507
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Domain adaptation and generative modelling have collectively mitigated the
expensive nature of data collection and labelling by leveraging the rich
abundance of accurate, labelled data in simulation environments. In this work,
we study the performance gap that exists between representations optimised for
localisation on simulation environments and the application of such
representations in a real-world setting. Our method exploits the shared
geometric similarities between simulation and real-world environments whilst
maintaining invariance towards visual discrepancies. This is achieved by
optimising a representation extractor to project both simulated and real
representations into a shared representation space. Our method uses a
symmetrical adversarial approach which encourages the representation extractor
to conceal the domain that features are extracted from and simultaneously
preserves robust attributes between source and target domains that are
beneficial for localisation. We evaluate our method by adapting representations
optimised for indoor Habitat simulated environments (Matterport3D and Replica)
to a real-world indoor environment (Active Vision Dataset), showing that it
compares favourably against fully-supervised approaches.
- Abstract(参考訳): ドメイン適応と生成モデリングは、シミュレーション環境における正確なラベル付きデータの豊富さを活用することで、データ収集とラベリングの費用対効果を和らげる。
本研究では,シミュレーション環境のローカライズに最適化された表現と実環境におけるそのような表現の適用との間に存在する性能ギャップについて検討する。
本手法はシミュレーションと実環境の共通幾何学的類似性を生かしつつ,視覚的な差異に対する不均一性を維持しながら活用する。
これは、表現抽出器を最適化して、シミュレーションと実表現の両方を共有表現空間に投影することで達成される。
提案手法では,表現抽出器が特徴を抽出した領域を隠蔽し,局所化に有用なソースとターゲットドメイン間のロバストな属性を同時に保持する。
本研究では,屋内ハビタットシミュレーション環境 (Matterport3D, Replica) に最適化された表現を実環境屋内環境 (Active Vision Dataset) に適応させることにより,本手法の評価を行った。
関連論文リスト
- Deep Domain Adaptation: A Sim2Real Neural Approach for Improving Eye-Tracking Systems [80.62854148838359]
眼球画像のセグメンテーションは、最終視線推定に大きな影響を及ぼす眼球追跡の重要なステップである。
対象視線画像と合成訓練データとの重なり合いを測定するために,次元還元法を用いている。
提案手法は,シミュレーションと実世界のデータサンプルの相違に対処する際の頑健で,性能が向上する。
論文 参考訳(メタデータ) (2024-03-23T22:32:06Z) - Reconstructing Spatiotemporal Data with C-VAEs [49.1574468325115]
移動領域の条件付き連続表現は一般的に用いられる。
本研究では,条件変数自動エンコーダ(C-VAE)モデルを用いて,領域の進化を現実的に表現する機能について検討する。
論文 参考訳(メタデータ) (2023-07-12T15:34:10Z) - HaDR: Applying Domain Randomization for Generating Synthetic Multimodal
Dataset for Hand Instance Segmentation in Cluttered Industrial Environments [0.0]
本研究では、ドメインランダム化を用いて、マルチモーダルインスタンスセグメンテーションモデルのトレーニングのための合成RGB-Dデータセットを生成する。
提案手法により,既存の最先端データセットでトレーニングしたモデルよりも優れた性能が得られることを示す。
論文 参考訳(メタデータ) (2023-04-12T13:02:08Z) - One-Shot Domain Adaptive and Generalizable Semantic Segmentation with
Class-Aware Cross-Domain Transformers [96.51828911883456]
セマンティックセグメンテーションのための教師なしのsim-to-realドメイン適応(UDA)は、シミュレーションデータに基づいて訓練されたモデルの実世界のテスト性能を改善することを目的としている。
従来のUDAは、適応のためのトレーニング中に利用可能なラベルのない実世界のサンプルが豊富にあると仮定することが多い。
実世界のデータサンプルが1つしか利用できない,一発の教師なしシム・トゥ・リアル・ドメイン適応(OSUDA)と一般化問題について検討する。
論文 参考訳(メタデータ) (2022-12-14T15:54:15Z) - Unsupervised Contrastive Domain Adaptation for Semantic Segmentation [75.37470873764855]
クロスドメイン適応における特徴アライメントのためのコントラスト学習を導入する。
提案手法は、ドメイン適応のための最先端手法を一貫して上回る。
Cityscapesデータセットで60.2% mIoUを達成した。
論文 参考訳(メタデータ) (2022-04-18T16:50:46Z) - Image Synthesis via Semantic Composition [74.68191130898805]
本稿では,その意味的レイアウトに基づいて現実的なイメージを合成する新しい手法を提案する。
類似した外観を持つ物体に対して、類似した表現を共有するという仮説が立てられている。
本手法は, 空間的変化と関連表現の両方を生じる, 外観相関による領域間の依存関係を確立する。
論文 参考訳(メタデータ) (2021-09-15T02:26:07Z) - DIRL: Domain-Invariant Representation Learning for Sim-to-Real Transfer [2.119586259941664]
本稿では,ドメイン不変表現学習(DIRL)アルゴリズムを提案する。
桁領域の実験は、挑戦的なベンチマークで最先端のパフォーマンスを得る。
論文 参考訳(メタデータ) (2020-11-15T17:39:01Z) - Unsupervised Metric Relocalization Using Transform Consistency Loss [66.19479868638925]
メートル法再ローカライズを行うためのトレーニングネットワークは、従来、正確な画像対応が必要である。
地図内のクエリ画像のローカライズは、登録に使用される参照画像に関係なく、同じ絶対的なポーズを与えるべきである。
提案手法は, 限られた地下構造情報が得られる場合に, 他の教師あり手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2020-11-01T19:24:27Z) - Domain-invariant Similarity Activation Map Contrastive Learning for
Retrieval-based Long-term Visual Localization [30.203072945001136]
本研究では,多領域画像変換による領域不変特徴抽出のために,確率論的に一般アーキテクチャを定式化する。
そして、より精密な局所化のために、新しい勾配重み付き類似性活性化写像損失(Grad-SAM)を組み込んだ。
CMUSeasonsデータセットにおける提案手法の有効性を検証するために大規模な実験が行われた。
我々の性能は、最先端のイメージベースのローカライゼーションベースラインを中あるいは高精度で上回るか、あるいは上回る。
論文 参考訳(メタデータ) (2020-09-16T14:43:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。