論文の概要: Revisiting Image Reconstruction for Semi-supervised Semantic
Segmentation
- arxiv url: http://arxiv.org/abs/2303.09794v1
- Date: Fri, 17 Mar 2023 06:31:06 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-20 15:32:17.218998
- Title: Revisiting Image Reconstruction for Semi-supervised Semantic
Segmentation
- Title(参考訳): 半教師付き意味セグメンテーションのための再訪画像再構成
- Authors: Yuhao Lin, Haiming Xu, Lingqiao Liu, Jinan Zou, Javen Qinfeng Shi
- Abstract要約: 画像再構成を補助課題として利用し、半教師付きセマンティックセグメンテーションフレームワークに組み込むという考え方を再考する。
驚くことに、このような半教師付き学習の古いアイデアは、最先端のセマンティックセグメンテーションアルゴリズムと競合する結果をもたらす。
- 参考スコア(独自算出の注目度): 16.27277238968567
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Autoencoding, which aims to reconstruct the input images through a bottleneck
latent representation, is one of the classic feature representation learning
strategies. It has been shown effective as an auxiliary task for
semi-supervised learning but has become less popular as more sophisticated
methods have been proposed in recent years. In this paper, we revisit the idea
of using image reconstruction as the auxiliary task and incorporate it with a
modern semi-supervised semantic segmentation framework. Surprisingly, we
discover that such an old idea in semi-supervised learning can produce results
competitive with state-of-the-art semantic segmentation algorithms. By
visualizing the intermediate layer activations of the image reconstruction
module, we show that the feature map channel could correlate well with the
semantic concept, which explains why joint training with the reconstruction
task is helpful for the segmentation task. Motivated by our observation, we
further proposed a modification to the image reconstruction task, aiming to
further disentangle the object clue from the background patterns. From
experiment evaluation on various datasets, we show that using reconstruction as
auxiliary loss can lead to consistent improvements in various datasets and
methods. The proposed method can further lead to significant improvement in
object-centric segmentation tasks.
- Abstract(参考訳): ボトルネック潜在表現を通じて入力画像を再構成することを目的としたオートエンコーディングは、古典的な特徴表現学習戦略の1つである。
半教師付き学習の補助タスクとして有効であることが示されているが、近年ではより洗練された手法が提案されているため、あまり普及していない。
本稿では,画像再構成を補助課題として活用するという考え方を再考し,半教師付きセマンティックセマンティクスフレームワークに組み込む。
驚くことに、このような半教師付き学習の古いアイデアは、最先端のセマンティックセグメンテーションアルゴリズムと競合する結果をもたらす。
画像再構成モジュールの中間層活性化を可視化することにより,特徴写像チャネルが意味論的概念とよく相関することを示す。
本研究の目的は,背景パターンから物体の手がかりをさらに遠ざけることを目的として,画像再構成タスクの修正を提案することである。
各種データセットに対する実験結果から,再構成を補助的損失として用いることにより,各種データセットや手法の一貫性が向上することを示した。
提案手法は,オブジェクト中心セグメンテーションタスクの大幅な改善につながる可能性がある。
関連論文リスト
- Towards Task-Compatible Compressible Representations [0.7980273012483663]
マルチタスクで学習可能な圧縮において、あるタスクで学習した表現が別のタスクの速度歪み性能に肯定的な寄与をしない問題について検討する。
学習可能なスケーラブルコーディングでは、この共有表現を学習する際に入力再構成にも報いることで、入力再構成のためのサイド情報の利用が増加した。
我々はCOCO 2017のオブジェクト検出とCityscapesデータセットの深さ推定のために訓練された表現を用いて実験を行い、画像再構成とセマンティックセグメンテーションタスクを支援する。
論文 参考訳(メタデータ) (2024-05-16T16:47:46Z) - Localized Region Contrast for Enhancing Self-Supervised Learning in
Medical Image Segmentation [27.82940072548603]
本稿では,地域コントラスト(LRC)を統合した新しいコントラスト学習フレームワークを提案する。
提案手法では,Felzenszwalbのアルゴリズムによるスーパーピクセルの同定と,新しいコントラッシブサンプリング損失を用いた局所コントラスト学習を行う。
論文 参考訳(メタデータ) (2023-04-06T22:43:13Z) - Semantics-Aware Dynamic Localization and Refinement for Referring Image
Segmentation [102.25240608024063]
画像の参照は、言語表現からのイメージセグメントを参照する。
そこで我々は,局所化中心からセグメンテーション言語へ移行するアルゴリズムを開発した。
比較すると,本手法はより汎用的で有効である。
論文 参考訳(メタデータ) (2023-03-11T08:42:40Z) - An Empirical Investigation of Representation Learning for Imitation [76.48784376425911]
視覚、強化学習、NLPにおける最近の研究は、補助的な表現学習の目的が、高価なタスク固有の大量のデータの必要性を減らすことを示している。
本稿では,表現学習アルゴリズムを構築するためのモジュラーフレームワークを提案する。
論文 参考訳(メタデータ) (2022-05-16T11:23:42Z) - Unsupervised Part Discovery from Contrastive Reconstruction [90.88501867321573]
自己監督型視覚表現学習の目標は、強く伝達可能な画像表現を学習することである。
対象部分の発見とセグメンテーションに対する教師なしアプローチを提案する。
本手法は, 細粒度, 視覚的に異なるカテゴリ間でセマンティックな部分を生成する。
論文 参考訳(メタデータ) (2021-11-11T17:59:42Z) - Leveraging Auxiliary Tasks with Affinity Learning for Weakly Supervised
Semantic Segmentation [88.49669148290306]
そこで我々はAuxSegNetと呼ばれる弱教師付きマルチタスク・フレームワークを提案し,サリエンシ検出とマルチラベル画像分類を補助タスクとして活用する。
同様の構造的セマンティクスに着想を得て,サリエンシとセグメンテーションの表現から,クロスタスクなグローバル画素レベルの親和性マップを学習することを提案する。
学習されたクロスタスク親和性は、両方のタスクに対して改善された擬似ラベルを提供するために、唾液度予測を洗練し、CAMマップを伝播するために使用することができる。
論文 参考訳(メタデータ) (2021-07-25T11:39:58Z) - Self-supervised Segmentation via Background Inpainting [96.10971980098196]
移動可能なカメラで撮影された単一の画像で、自己教師付き検出とセグメンテーションのアプローチを導入する。
我々は、提案に基づくセグメンテーションネットワークのトレーニングに利用する自己教師付き損失関数を利用する。
本手法は,標準ベンチマークから視覚的に切り離された画像の人間の検出とセグメント化に応用し,既存の自己監督手法より優れていることを示す。
論文 参考訳(メタデータ) (2020-11-11T08:34:40Z) - Mining Cross-Image Semantics for Weakly Supervised Semantic Segmentation [128.03739769844736]
2つのニューラルコアテンションを分類器に組み込んで、画像間のセマンティックな類似点と相違点をキャプチャする。
オブジェクトパターン学習の強化に加えて、コアテンションは他の関連する画像からのコンテキストを活用して、ローカライズマップの推論を改善することができる。
提案アルゴリズムは,これらすべての設定に対して新たな最先端性を設定し,その有効性と一般化性を示す。
論文 参考訳(メタデータ) (2020-07-03T21:53:46Z) - Image Embedded Segmentation: Uniting Supervised and Unsupervised
Objectives for Segmenting Histopathological Images [0.0]
本稿では,意味組織分割のための完全畳み込みネットワークを学習するための新しい正規化手法を提案する。
これは教師なし学習(イメージ再構成)の利点をネットワークトレーニングに頼っている。
我々の実験は、これらのデータセットのセグメンテーション結果が、データセットのセグメンテーション結果よりも優れていることを示した。
論文 参考訳(メタデータ) (2020-01-30T08:09:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。