論文の概要: Saliency Can Be All You Need In Contrastive Self-Supervised Learning
- arxiv url: http://arxiv.org/abs/2210.16776v1
- Date: Sun, 30 Oct 2022 08:47:53 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-01 17:36:04.759574
- Title: Saliency Can Be All You Need In Contrastive Self-Supervised Learning
- Title(参考訳): 自己監督型学習では、Saliencyは必要なすべてだ
- Authors: Veysel Kocaman, Ofer M. Shir, Thomas B\"ack, Ahmed Nabil Belbachir
- Abstract要約: 我々は,すでに確立されている「グローバル・コントラスト・ベース・サリアント領域検出」という手法を用いて,コントラスト型自己監視学習(SSL)のための拡張ポリシーを提案する。
- 参考スコア(独自算出の注目度): 2.867517731896504
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose an augmentation policy for Contrastive Self-Supervised Learning
(SSL) in the form of an already established Salient Image Segmentation
technique entitled Global Contrast based Salient Region Detection. This
detection technique, which had been devised for unrelated Computer Vision
tasks, was empirically observed to play the role of an augmentation facilitator
within the SSL protocol. This observation is rooted in our practical attempts
to learn, by SSL-fashion, aerial imagery of solar panels, which exhibit
challenging boundary patterns. Upon the successful integration of this
technique on our problem domain, we formulated a generalized procedure and
conducted a comprehensive, systematic performance assessment with various
Contrastive SSL algorithms subject to standard augmentation techniques. This
evaluation, which was conducted across multiple datasets, indicated that the
proposed technique indeed contributes to SSL. We hypothesize whether salient
image segmentation may suffice as the only augmentation policy in Contrastive
SSL when treating downstream segmentation tasks.
- Abstract(参考訳): 本稿では,グローバルコントラストベースサルエント領域検出という,すでに確立されているサルエント画像分割手法を用いて,コントラスト自己教師付き学習(ssl)のための拡張ポリシーを提案する。
この検出技術は、無関係なコンピュータビジョンタスクのために開発されたもので、SSLプロトコル内で拡張ファシリテータの役割を担っている。
この観察は、太陽パネルの空中画像であるSSLファッションによって、挑戦的な境界パターンを示す我々の実践的な試みに根ざしている。
問題領域におけるこの手法の統合が成功すると、一般化された手順を定式化し、標準拡張技術に基づく様々なコントラストSSLアルゴリズムによる総合的かつ体系的な性能評価を行った。
この評価は複数のデータセットで行われ、提案手法がSSLに実際に寄与していることを示している。
我々は、下流セグメンテーションタスクの処理において、コントラシティブSSLにおける唯一の拡張ポリシーとして、有能な画像セグメンテーションが有効かどうかを仮定する。
関連論文リスト
- Improving Representation Learning for Histopathologic Images with
Cluster Constraints [31.426157660880673]
自己教師型学習(SSL)事前学習戦略が,現実的な代替手段として浮上している。
転送可能な表現学習と意味的に意味のあるクラスタリングのためのSSLフレームワークを導入する。
我々の手法は、下流の分類やクラスタリングタスクにおいて一般的なSSLメソッドよりも優れています。
論文 参考訳(メタデータ) (2023-10-18T21:20:44Z) - Localized Region Contrast for Enhancing Self-Supervised Learning in
Medical Image Segmentation [27.82940072548603]
本稿では,地域コントラスト(LRC)を統合した新しいコントラスト学習フレームワークを提案する。
提案手法では,Felzenszwalbのアルゴリズムによるスーパーピクセルの同定と,新しいコントラッシブサンプリング損失を用いた局所コントラスト学習を行う。
論文 参考訳(メタデータ) (2023-04-06T22:43:13Z) - Understanding and Improving the Role of Projection Head in
Self-Supervised Learning [77.59320917894043]
自己教師付き学習(SSL)は、人間のラベル付きデータアノテーションにアクセスせずに有用な特徴表現を作成することを目的としている。
現在の対照的な学習アプローチは、InfoNCEの目的を最適化するために、あるバックボーンネットワークの端にパラメータ化されたプロジェクションヘッドを付加する。
学習可能なプロジェクションヘッドが、トレーニング後にそれを破棄する場合、なぜ必要となるのか?
論文 参考訳(メタデータ) (2022-12-22T05:42:54Z) - Benchmarking Self-Supervised Learning on Diverse Pathology Datasets [10.868779327544688]
自己教師付き学習は、ラベルのないデータを活用する効果的な方法であることが示されている。
我々は、病理画像データに基づいてSSL事前トレーニングを行う最大規模の研究を行う。
核インスタンスセグメンテーションの課題に対してSSLを初めて適用する。
論文 参考訳(メタデータ) (2022-12-09T06:38:34Z) - Data-Limited Tissue Segmentation using Inpainting-Based Self-Supervised
Learning [3.7931881761831328]
プレテキストタスクを含む自己教師付き学習(SSL)メソッドは、ラベルなしデータを使用したモデルの最初の事前トレーニングによって、この要件を克服する可能性を示している。
ラベル限定シナリオにおけるCTとMRI画像のセグメンテーションにおける2つのSSL手法の有効性を評価する。
最適に訓練され,実装が容易なSSLセグメンテーションモデルは,ラベル制限シナリオにおけるMRIおよびCT組織セグメンテーションの古典的な手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2022-10-14T16:34:05Z) - Decoupled Adversarial Contrastive Learning for Self-supervised
Adversarial Robustness [69.39073806630583]
頑健な表現学習のための対人訓練(AT)と教師なし表現学習のための自己教師型学習(SSL)は2つの活発な研究分野である。
Decoupled Adversarial Contrastive Learning (DeACL) と呼ばれる2段階のフレームワークを提案する。
論文 参考訳(メタデータ) (2022-07-22T06:30:44Z) - On Higher Adversarial Susceptibility of Contrastive Self-Supervised
Learning [104.00264962878956]
コントラスト型自己教師学習(CSL)は,画像と映像の分類において,教師あり学習のパフォーマンスに適合するか上回っている。
2つの学習パラダイムによって誘導される表現の性質が似ているかどうかは、いまだに不明である。
我々は,CSL表現空間における単位超球面上のデータ表現の均一分布を,この現象の鍵となる要因として同定する。
CSLトレーニングでモデルロバスト性を改善するのにシンプルだが有効である戦略を考案する。
論文 参考訳(メタデータ) (2022-07-22T03:49:50Z) - Collaborative Intelligence Orchestration: Inconsistency-Based Fusion of
Semi-Supervised Learning and Active Learning [60.26659373318915]
アクティブラーニング(AL)と半教師付きラーニング(SSL)は2つの効果があるが、しばしば孤立している。
本稿では、SSL-ALの潜在的な優位性をさらに調査するために、革新的な一貫性に基づく仮想aDvErialアルゴリズムを提案する。
2つの実世界のケーススタディは、提案したデータサンプリングアルゴリズムの適用と展開の実践的な産業価値を可視化する。
論文 参考訳(メタデータ) (2022-06-07T13:28:43Z) - On Data-Augmentation and Consistency-Based Semi-Supervised Learning [77.57285768500225]
最近提案された整合性に基づく半教師付き学習(SSL)手法は,複数のSSLタスクにおいて最先端技術である。
これらの進歩にもかかわらず、これらの手法の理解はまだ比較的限られている。
論文 参考訳(メタデータ) (2021-01-18T10:12:31Z) - Adversarial Self-Supervised Learning for Semi-Supervised 3D Action
Recognition [123.62183172631443]
本稿では,SSLと半教師付きスキームを緊密に結合する新しいフレームワークであるAdversarial Self-Supervised Learning (ASSL)を紹介する。
具体的には,3次元動作認識のための学習表現の識別能力を向上させる効果的なSSL方式を設計する。
論文 参考訳(メタデータ) (2020-07-12T08:01:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。