論文の概要: On the Effects of Self-supervision and Contrastive Alignment in Deep
Multi-view Clustering
- arxiv url: http://arxiv.org/abs/2303.09877v1
- Date: Fri, 17 Mar 2023 10:51:38 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-20 15:05:18.301474
- Title: On the Effects of Self-supervision and Contrastive Alignment in Deep
Multi-view Clustering
- Title(参考訳): 深層多視点クラスタリングにおける自己スーパービジョンとコントラストアライメントの効果について
- Authors: Daniel J. Trosten, Sigurd L{\o}kse, Robert Jenssen, Michael C.
Kampffmeyer
- Abstract要約: 我々は、最近の多くのメソッドをインスタンスとして含むディープMVCのための統一されたフレームワークを提示します。
我々は、自己超越の効果、特に、コントラスト学習による表現の整合性の欠点について重要な観察を行う。
われわれは新たな自己監督型DeepMVCインスタンスを複数開発した。
- 参考スコア(独自算出の注目度): 16.63376980974536
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Self-supervised learning is a central component in recent approaches to deep
multi-view clustering (MVC). However, we find large variations in the
development of self-supervision-based methods for deep MVC, potentially slowing
the progress of the field. To address this, we present DeepMVC, a unified
framework for deep MVC that includes many recent methods as instances. We
leverage our framework to make key observations about the effect of
self-supervision, and in particular, drawbacks of aligning representations with
contrastive learning. Further, we prove that contrastive alignment can
negatively influence cluster separability, and that this effect becomes worse
when the number of views increases. Motivated by our findings, we develop
several new DeepMVC instances with new forms of self-supervision. We conduct
extensive experiments and find that (i) in line with our theoretical findings,
contrastive alignments decreases performance on datasets with many views; (ii)
all methods benefit from some form of self-supervision; and (iii) our new
instances outperform previous methods on several datasets. Based on our
results, we suggest several promising directions for future research. To
enhance the openness of the field, we provide an open-source implementation of
DeepMVC, including recent models and our new instances. Our implementation
includes a consistent evaluation protocol, facilitating fair and accurate
evaluation of methods and components.
- Abstract(参考訳): 自己教師付き学習は、近年の深層多視点クラスタリング(MVC)における中心的なアプローチである。
しかし、ディープMVCのための自己超越的手法の開発には大きなバリエーションがあり、フィールドの進行を遅らせる可能性がある。
この問題に対処するため、最近の多くのメソッドをインスタンスとして含むディープMVCの統一フレームワークであるDeepMVCを紹介します。
我々は,自己超越の効果,特にコントラスト学習による表現の整合性の欠点について重要な観察を行うために,我々の枠組みを活用する。
さらに,コントラストアライメントがクラスタ分離性に負の影響を及ぼし,ビュー数が増加すると効果が悪化することを示した。
われわれは新たな自己監督型DeepMVCインスタンスを複数開発した。
広範囲にわたる実験を行い
(i)我々の理論的知見に従い、対照的なアライメントは、多くのビューを持つデータセットのパフォーマンスを低下させる。
(二)全ての方法が何らかの形態の自己監督から恩恵を受けること
(iii)我々の新しいインスタンスは、複数のデータセット上の以前のメソッドよりも優れています。
この結果をもとに,今後の研究に期待できる方向をいくつか提案する。
フィールドのオープン性を高めるため,最新のモデルや新しいインスタンスを含む,DeepMVCのオープンソース実装を提供する。
実装には一貫した評価プロトコルが含まれており,メソッドやコンポーネントの公平かつ正確な評価が容易である。
関連論文リスト
- Contrastive Continual Multi-view Clustering with Filtered Structural
Fusion [57.193645780552565]
ビューが事前に収集されるアプリケーションでは、マルチビュークラスタリングが成功します。
データビューがシーケンシャルに収集されるシナリオ、すなわちリアルタイムデータを見落としている。
いくつかの方法が提案されているが、安定塑性ジレンマに閉じ込められている。
フィルタ構造融合を用いたコントラスト連続多視点クラスタリングを提案する。
論文 参考訳(メタデータ) (2023-09-26T14:18:29Z) - A Novel Approach for Effective Multi-View Clustering with
Information-Theoretic Perspective [24.630259061774836]
本研究では,多視点クラスタリングフレームワークを情報理論の観点から検討する,SUMVC(Sufficient Multi-View Clustering)と呼ばれる新しい手法を提案する。
まず,変分解析を用いて一貫した情報を生成する,シンプルで信頼性の高いマルチビュークラスタリング手法SCMVCを開発する。
次に、一貫した情報を強化し、ビュー間の不要な情報を最小限に抑えるのに十分な表現境界を提案する。
論文 参考訳(メタデータ) (2023-09-25T09:41:11Z) - Diffusion-based Visual Counterfactual Explanations -- Towards Systematic
Quantitative Evaluation [64.0476282000118]
視覚的対物的説明法(VCE)の最新手法は、深い生成モデルの力を利用して、印象的な画質の高次元画像の新しい例を合成する。
評価手順が大きく異なり,個々の実例の視覚検査や小規模なユーザスタディなど,これらのVCE手法の性能を比較することは,現時点では困難である。
本稿では,VCE手法の体系的,定量的評価のためのフレームワークと,使用する指標の最小セットを提案する。
論文 参考訳(メタデータ) (2023-08-11T12:22:37Z) - Semi-supervised multi-view concept decomposition [30.699496411869834]
概念因子化(CF)は、マルチビュークラスタリングタスクにおいて優れた性能を示している。
そこで我々は,SMVCFという,新しい半教師付き多視点概念分解モデルを提案する。
SMVCFの性能を評価するために,4つの多様なデータセットの実験を行った。
論文 参考訳(メタデータ) (2023-07-03T10:50:44Z) - Multi-View Class Incremental Learning [57.14644913531313]
マルチビュー学習(MVL)は、下流タスクのパフォーマンスを改善するためにデータセットの複数の視点から情報を統合することで大きな成功を収めている。
本稿では,複数視点クラスインクリメンタルラーニング(MVCIL)と呼ばれる新しいパラダイムについて考察する。
論文 参考訳(メタデータ) (2023-06-16T08:13:41Z) - Investigating and Mitigating the Side Effects of Noisy Views for Self-Supervised Clustering Algorithms in Practical Multi-View Scenarios [35.32285779434823]
マルチビュークラスタリング(MVC)は,マルチビューデータのカテゴリ構造を自己管理的に探索することを目的としている。
ノイズの多いビューは、実際のマルチビューシナリオでビューがノイズの多いときに、深刻な縮退する可能性がある。
この問題に対処するために理論的に基礎をおくディープMVC法(別名MVCAN)を提案する。
論文 参考訳(メタデータ) (2023-03-30T09:22:17Z) - Deep Incomplete Multi-view Clustering with Cross-view Partial Sample and
Prototype Alignment [50.82982601256481]
深層不完全なマルチビュークラスタリングのためのクロスビュー部分サンプルとプロトタイプアライメントネットワーク(CPSPAN)を提案する。
従来のコントラストベースの手法とは異なり、インスタンスとインスタンスの対応構築を導くために、ペア観測データアライメントを「プロキシ監視信号」として採用する。
論文 参考訳(メタデータ) (2023-03-28T02:31:57Z) - Unsupervised Multi-view Clustering by Squeezing Hybrid Knowledge from
Cross View and Each View [68.88732535086338]
本稿では,適応グラフ正規化に基づくマルチビュークラスタリング手法を提案する。
5つの多視点ベンチマークの実験結果から,提案手法が他の最先端手法をクリアマージンで上回ることを示す。
論文 参考訳(メタデータ) (2020-08-23T08:25:06Z) - Generative Partial Multi-View Clustering [133.36721417531734]
本稿では,不完全なマルチビュー問題に対処するため,GP-MVCと呼ばれる生成的部分的マルチビュークラスタリングモデルを提案する。
まず、マルチビューエンコーダネットワークをトレーニングして、一般的な低次元表現を学習し、次にクラスタリング層を使用して複数のビューをまたいだ一貫したクラスタ構造をキャプチャする。
第2に、他のビューが与える共有表現に基づいて、1つのビュー条件の欠落データを生成するために、ビュー固有の生成敵ネットワークを開発する。
論文 参考訳(メタデータ) (2020-03-29T17:48:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。