論文の概要: Context-self contrastive pretraining for crop type semantic segmentation
- arxiv url: http://arxiv.org/abs/2104.04310v1
- Date: Fri, 9 Apr 2021 11:29:44 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-12 17:45:37.524399
- Title: Context-self contrastive pretraining for crop type semantic segmentation
- Title(参考訳): 作物型セマンティックセグメンテーションのための文脈自己コントラスト事前学習
- Authors: Michail Tarasiou, Riza Alp Guler, Stefanos Zafeiriou
- Abstract要約: 提案する文脈自己コントラスト損失(cscl)は、意味境界をポップアップさせる埋め込み空間を学習する。
衛星画像からの作物型セマンティックセマンティックセグメンテーションでは、パーセル境界における性能が重要なボトルネックとなる。
CSCLが課題の根本原因にどのように取り組むかを示し、その課題における最先端の性能を改善する。
- 参考スコア(独自算出の注目度): 65.32800740616835
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this paper we propose a fully-supervised pretraining scheme based on
contrastive learning particularly tailored to dense classification tasks. The
proposed Context-Self Contrastive Loss (CSCL) learns an embedding space that
makes semantic boundaries pop-up by use of a similarity metric between every
location in an training sample and its local context. For crop type semantic
segmentation from satellite images we find performance at parcel boundaries to
be a critical bottleneck and explain how CSCL tackles the underlying cause of
that problem, improving the state-of-the-art performance in this task.
Additionally, using images from the Sentinel-2 (S2) satellite missions we
compile the largest, to our knowledge, dataset of satellite image timeseries
densely annotated by crop type and parcel identities, which we make publicly
available together with the data generation pipeline. Using that data we find
CSCL, even with minimal pretraining, to improve all respective baselines and
present a process for semantic segmentation at super-resolution for obtaining
crop classes at a more granular level. The proposed method is further validated
on the task of semantic segmentation on 2D and 3D volumetric images showing
consistent performance improvements upon competitive baselines.
- Abstract(参考訳): 本稿では,特に密な分類タスクに適したコントラスト学習に基づく,教師付き事前学習方式を提案する。
提案するコンテキスト自己コントラスト損失(cscl)は、トレーニングサンプル内の各場所とそのローカルコンテキスト間の類似度メトリックを用いて意味境界をポップアップする埋め込み空間を学習する。
衛星画像からの作物型セマンティックセマンティックセグメンテーションでは、サテライト境界における性能が重要なボトルネックとなり、CSCLがその問題の根本原因に取り組む方法を説明し、このタスクにおける最先端のパフォーマンスを改善する。
さらに、Sentinel-2(S2)衛星ミッションの画像を用いて、我々の知る限り、作物のタイプとパーセルのアイデンティティによって高度にアノテートされた衛星画像のデータセットをコンパイルし、データ生成パイプラインと共に公開する。
このデータを用いて、CSCLは最小限の事前学習でも、すべてのベースラインを改善し、より粒度の細かい作物のクラスを得るための超解像でのセマンティックセグメンテーションのプロセスを示す。
提案手法は,2次元および3次元ボリューム画像における意味的セグメンテーションの課題に基づいて,競合ベースラインにおける一貫した性能向上を示す。
関連論文リスト
- Evaluating the Efficacy of Cut-and-Paste Data Augmentation in Semantic Segmentation for Satellite Imagery [4.499833362998487]
本研究では,衛星画像のセマンティックセグメンテーションにおけるカット・アンド・ペースト拡張手法の有効性について検討した。
私たちは、通常ラベル付きインスタンスを必要とするこの拡張を、セマンティックセグメンテーションのケースに適用します。
評価のためにDynamicEarthNetデータセットとU-Netモデルを用いて、この拡張により、テストセットのmIoUスコアが37.9から44.1に大幅に向上することを発見した。
論文 参考訳(メタデータ) (2024-04-08T17:18:30Z) - OMH: Structured Sparsity via Optimally Matched Hierarchy for Unsupervised Semantic Segmentation [69.37484603556307]
Un Semantic segmenting (USS)は、事前に定義されたラベルに頼ることなく、イメージをセグメント化する。
上記の問題を同時に解決するために,OMH (Optimally Matched Hierarchy) という新しいアプローチを導入する。
我々のOMHは既存のUSS法と比較して教師なしセグメンテーション性能がよい。
論文 参考訳(メタデータ) (2024-03-11T09:46:41Z) - Auxiliary Tasks Enhanced Dual-affinity Learning for Weakly Supervised
Semantic Segmentation [79.05949524349005]
AuxSegNet+は、サリエンシマップから豊富な情報を探索する弱教師付き補助学習フレームワークである。
また,サリエンシとセグメンテーションの特徴マップから画素レベルの親和性を学習するためのクロスタスク親和性学習機構を提案する。
論文 参考訳(メタデータ) (2024-03-02T10:03:21Z) - A Lightweight Clustering Framework for Unsupervised Semantic
Segmentation [28.907274978550493]
教師なしセマンティックセグメンテーションは、注釈付きデータを用いることなく、画像の各ピクセルを対応するクラスに分類することを目的としている。
教師なしセマンティックセグメンテーションのための軽量クラスタリングフレームワークを提案する。
本フレームワークは,PASCAL VOCおよびMS COCOデータセットの最先端結果を実現する。
論文 参考訳(メタデータ) (2023-11-30T15:33:42Z) - Location-Aware Self-Supervised Transformers [74.76585889813207]
画像部品の相対的な位置を予測し,セマンティックセグメンテーションのためのネットワークを事前訓練する。
参照パッチのサブセットを問合せのサブセットにマスキングすることで,タスクの難しさを制御します。
実験により,この位置認識事前学習が,いくつかの難解なセマンティックセグメンテーションベンチマークに競合する表現をもたらすことが示された。
論文 参考訳(メタデータ) (2022-12-05T16:24:29Z) - Improving Semi-Supervised and Domain-Adaptive Semantic Segmentation with
Self-Supervised Depth Estimation [94.16816278191477]
本稿では,セミアダプティブなセマンティックセマンティックセマンティックセグメンテーションのためのフレームワークを提案する。
ラベルのない画像シーケンスでのみ訓練された自己教師付き単眼深度推定によって強化される。
提案したモデルをCityscapesデータセット上で検証する。
論文 参考訳(メタデータ) (2021-08-28T01:33:38Z) - CTNet: Context-based Tandem Network for Semantic Segmentation [77.4337867789772]
本研究では,空間コンテキスト情報とチャネルコンテキスト情報とを対話的に探索し,新しいコンテキストベースタンデムネットワーク(CTNet)を提案する。
セマンティックセグメンテーションのための学習表現の性能をさらに向上するため、2つのコンテキストモジュールの結果を適応的に統合する。
論文 参考訳(メタデータ) (2021-04-20T07:33:11Z) - A Benchmark for LiDAR-based Panoptic Segmentation based on KITTI [44.79849028988664]
本稿では,レーザーによるパノプティックセグメンテーションのトレーニングと評価のためのセマンティックキッティの拡張について述べる。
データを提供し、時間的に一貫したインスタンス情報で与えられたセマンティックアノテーションを強化するために必要な処理手順について議論する。
我々は、最先端LiDARに基づくセマンティックセグメンテーションアプローチと最先端検出器を組み合わせた2つの強力なベースラインを提案する。
論文 参考訳(メタデータ) (2020-03-04T23:44:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。