論文の概要: DensePASS: Dense Panoramic Semantic Segmentation via Unsupervised Domain
Adaptation with Attention-Augmented Context Exchange
- arxiv url: http://arxiv.org/abs/2108.06383v1
- Date: Fri, 13 Aug 2021 20:15:46 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-17 14:45:17.830909
- Title: DensePASS: Dense Panoramic Semantic Segmentation via Unsupervised Domain
Adaptation with Attention-Augmented Context Exchange
- Title(参考訳): densepass:entententment-augmented context exchangeを用いた教師なしドメイン適応による高密度パノラマ意味セグメンテーション
- Authors: Chaoxiang Ma, Jiaming Zhang, Kailun Yang, Alina Roitberg and Rainer
Stiefelhagen
- Abstract要約: パノラマ的セマンティックセグメンテーションのための教師なしドメイン適応のタスクを形式化する。
パノラマ画像の異なるターゲット領域にピンホールカメラデータのソース領域からラベル付き例に基づいて訓練されたネットワークを配置する。
我々は、注目強化ドメイン適応モジュールの異なる変種に基づいて、ドメイン間パノラマセマンティックセマンティックセマンティックセマンティクスのための汎用フレームワークを構築した。
- 参考スコア(独自算出の注目度): 32.29797061415896
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Intelligent vehicles clearly benefit from the expanded Field of View (FoV) of
the 360-degree sensors, but the vast majority of available semantic
segmentation training images are captured with pinhole cameras. In this work,
we look at this problem through the lens of domain adaptation and bring
panoramic semantic segmentation to a setting, where labelled training data
originates from a different distribution of conventional pinhole camera images.
First, we formalize the task of unsupervised domain adaptation for panoramic
semantic segmentation, where a network trained on labelled examples from the
source domain of pinhole camera data is deployed in a different target domain
of panoramic images, for which no labels are available. To validate this idea,
we collect and publicly release DensePASS - a novel densely annotated dataset
for panoramic segmentation under cross-domain conditions, specifically built to
study the Pinhole-to-Panoramic transfer and accompanied with pinhole camera
training examples obtained from Cityscapes. DensePASS covers both, labelled-
and unlabelled 360-degree images, with the labelled data comprising 19 classes
which explicitly fit the categories available in the source domain (i.e.
pinhole) data. To meet the challenge of domain shift, we leverage the current
progress of attention-based mechanisms and build a generic framework for
cross-domain panoramic semantic segmentation based on different variants of
attention-augmented domain adaptation modules. Our framework facilitates
information exchange at local- and global levels when learning the domain
correspondences and improves the domain adaptation performance of two standard
segmentation networks by 6.05% and 11.26% in Mean IoU.
- Abstract(参考訳): インテリジェントな車両は360度センサーの視野拡大(FoV)によって明らかに恩恵を受けるが、利用可能なセマンティックセグメンテーションのトレーニング画像の大部分はピンホールカメラで撮影されている。
本研究では、ドメイン適応のレンズを用いてこの問題を考察し、従来のピンホールカメラ画像の異なる分布からラベル付きトレーニングデータが導出される設定にパノラマセマンティックセマンティックセマンティックセグメンテーションをもたらす。
まず,ピンホールカメラデータのソースドメインからラベル付きサンプルをトレーニングしたネットワークを,異なるターゲット領域のパノラマ画像に展開するパノラマ意味セグメンテーションのための教師なしドメイン適応のタスクを定式化する。
このアイデアを検証するために、我々はDensePASS – ドメイン間条件下でパノラマセグメンテーションを高度に注釈付けした新しいデータセット - を収集、公開し、特にPinhole-to-Panoramicトランスファーの研究用に構築し、Cityscapesから取得したピンホールカメラトレーニングのサンプルを添付した。
DensePASSは、ラベル付きおよび未ラベルの360度画像の両方をカバーし、ラベル付きデータは、ソースドメイン(すなわち、ソースドメインで利用可能なカテゴリに明示的に適合する19のクラスから構成される。
ピンホール) データ。
ドメインシフトの課題を満たすために、注意に基づくメカニズムの現在の進歩を活用し、注意喚起されたドメイン適応モジュールの異なる変種に基づいて、クロスドメインパノラマ意味セグメンテーションのための汎用フレームワークを構築する。
このフレームワークは、ドメイン対応を学ぶ際に、局所的およびグローバルレベルでの情報交換を促進し、平均iouにおける2つの標準セグメンテーションネットワークのドメイン適応性能を6.05%、11.26%向上させる。
関連論文リスト
- Multi-source Domain Adaptation for Panoramic Semantic Segmentation [22.367890439050786]
パノラマ的セマンティックセグメンテーションのためのマルチソースドメイン適応のための新しいタスクを提案する。
本研究の目的は, 実際のピンホール合成パノラマ画像の両方をソース領域で活用することであり, セグメンテーションモデルが未ラベルの実際のパノラマ画像に対して良好に動作できるようにすることである。
DTA4PASSはソースドメインのすべてのピンホール画像をパノラマのようなイメージに変換し、変換されたソースドメインをターゲットドメインに整列させる。
論文 参考訳(メタデータ) (2024-08-29T12:00:11Z) - I2F: A Unified Image-to-Feature Approach for Domain Adaptive Semantic
Segmentation [55.633859439375044]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は、重いアノテーション作業から人々を解放する有望なタスクである。
この問題に対処する主要なアイデアは、画像レベルと特徴レベルの両方を共同で実行することである。
本稿では,画像レベルと特徴レベルを統一したセマンティックセグメンテーションのための新しいUDAパイプラインを提案する。
論文 参考訳(メタデータ) (2023-01-03T15:19:48Z) - PiPa: Pixel- and Patch-wise Self-supervised Learning for Domain
Adaptative Semantic Segmentation [100.6343963798169]
教師なしドメイン適応(Unsupervised Domain Adaptation, UDA)は、学習モデルの他のドメインへの一般化を強化することを目的としている。
そこで我々は,ドメイン適応型セマンティックセマンティックセグメンテーションのための,PiPaという,画素・パッチ対応の自己教師付き学習フレームワークを提案する。
論文 参考訳(メタデータ) (2022-11-14T18:31:24Z) - Multi-Scale Multi-Target Domain Adaptation for Angle Closure
Classification [50.658613573816254]
角度閉包分類のためのM2DAN(Multi-scale Multi-target Domain Adversarial Network)を提案する。
異なるスケールでのこれらのドメイン不変性に基づいて、ソースドメインで訓練されたディープモデルは、複数のターゲットドメインの角度クロージャを分類することができる。
論文 参考訳(メタデータ) (2022-08-25T15:27:55Z) - Panoramic Panoptic Segmentation: Insights Into Surrounding Parsing for
Mobile Agents via Unsupervised Contrastive Learning [93.6645991946674]
我々はパノラマパノラマパノプティクスのセグメンテーションを最も総合的なシーン理解として紹介する。
完全な周囲の理解は、移動エージェントに最大限の情報を提供する。
本稿では,標準的なピンホール画像のモデルトレーニングを可能にし,学習した特徴を別のドメインに転送するフレームワークを提案する。
論文 参考訳(メタデータ) (2022-06-21T20:07:15Z) - HYLDA: End-to-end Hybrid Learning Domain Adaptation for LiDAR Semantic
Segmentation [13.87939140266266]
完全ラベル付きソースデータセットと少数のラベルしか持たないターゲットデータセットを用いて,LiDARセマンティックセマンティックセマンティクスネットワークをトレーニングする問題に対処する。
我々は、新しい画像から画像への変換エンジンを開発し、それをLiDARセマンティックセマンティックセグメンテーションネットワークと組み合わせることで、HYLDAと呼ばれる統合ドメイン適応アーキテクチャを実現する。
論文 参考訳(メタデータ) (2022-01-14T18:13:09Z) - Transfer beyond the Field of View: Dense Panoramic Semantic Segmentation
via Unsupervised Domain Adaptation [30.104947024614127]
パノラマ的セマンティックセグメンテーションのための教師なしドメイン適応のタスクを形式化する。
DensePASSはドメイン横断条件下でのパノラマセグメンテーションのための新しいデータセットである。
P2PDAはPinhole-to-Panoramicセマンティックセグメンテーションのための汎用フレームワークである。
論文 参考訳(メタデータ) (2021-10-21T11:22:05Z) - DRANet: Disentangling Representation and Adaptation Networks for
Unsupervised Cross-Domain Adaptation [23.588766224169493]
dranetは画像表現を分離し、教師なしのクロスドメイン適応のために潜在空間に視覚属性を転送するネットワークアーキテクチャである。
私たちのモデルは、ソースイメージとターゲットイメージの両方からコンテンツ(シーン構造)とスタイル(芸術的外観)の個々の表現をエンコードします。
変換されたスタイルファクタを、各ドメインに指定された学習可能なウェイトと共にコンテンツファクタに組み込むことで、ドメインに適応する。
論文 参考訳(メタデータ) (2021-03-24T18:54:23Z) - Domain Adaptation on Semantic Segmentation for Aerial Images [3.946367634483361]
セマンティックイメージセグメンテーションにおける領域シフトに対処する、新しい教師なしドメイン適応フレームワークを提案する。
また、ターゲット領域にエントロピー最小化を適用し、高信頼な予測を生成する。
様々な指標を用いて最先端手法の改善を示す。
論文 参考訳(メタデータ) (2020-12-03T20:58:27Z) - DoFE: Domain-oriented Feature Embedding for Generalizable Fundus Image
Segmentation on Unseen Datasets [96.92018649136217]
対象ドメインに対するCNNの一般化能力を向上させるために,新しいドメイン指向特徴埋め込み(DoFE)フレームワークを提案する。
私たちのDoFEフレームワークは、マルチソースドメインから学んだ追加のドメイン事前知識で、画像機能を動的に強化します。
本フレームワークは、未確認データセットのセグメンテーション結果を満足して生成し、他の領域の一般化やネットワークの正規化手法を超越する。
論文 参考訳(メタデータ) (2020-10-13T07:28:39Z) - Phase Consistent Ecological Domain Adaptation [76.75730500201536]
意味的セグメンテーション(意味的セグメンテーション)の課題に焦点をあてる。そこでは、注釈付き合成データが多用されるが、実際のデータへのアノテートは困難である。
視覚心理学に触発された最初の基準は、2つの画像領域間の地図が位相保存であることである。
第2の基準は、照明剤や撮像センサーの特性に関わらず、その画像に現れる環境統計、またはシーン内の規則を活用することを目的としている。
論文 参考訳(メタデータ) (2020-04-10T06:58:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。