論文の概要: Adversarial Ensemble Training by Jointly Learning Label Dependencies and
Member Models
- arxiv url: http://arxiv.org/abs/2206.14477v3
- Date: Tue, 23 May 2023 03:35:34 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-25 01:40:08.686736
- Title: Adversarial Ensemble Training by Jointly Learning Label Dependencies and
Member Models
- Title(参考訳): ラベル依存とメンバーモデルの共同学習による対人アンサンブルトレーニング
- Authors: Lele Wang, Bin Liu
- Abstract要約: 本稿では,ラベル依存性とメンバーモデルとを協調的に学習する,新たな対戦型エンサンブルトレーニング手法を提案する。
提案手法は,学習したラベル依存を,メンバーモデル間での表層的多様性に適応的に活用する。
我々は,最先端の手法と比較して,ブラックボックス攻撃に対する堅牢性が高いことを示す。
- 参考スコア(独自算出の注目度): 7.377544184225868
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Training an ensemble of diverse sub-models has been empirically demonstrated
as an effective strategy for improving the adversarial robustness of deep
neural networks. However, current ensemble training methods for image
recognition typically encode image labels using one-hot vectors, which overlook
dependency relationships between the labels. In this paper, we propose a novel
adversarial en-semble training approach that jointly learns the label
dependencies and member models. Our approach adaptively exploits the learned
label dependencies to pro-mote diversity among the member models. We evaluate
our approach on widely used datasets including MNIST, FashionMNIST, and
CIFAR-10, and show that it achieves superior robustness against black-box
attacks compared to state-of-the-art methods. Our code is available at
https://github.com/ZJLAB-AMMI/LSD.
- Abstract(参考訳): 多様なサブモデルのアンサンブルを訓練することは、ディープニューラルネットワークの対角的堅牢性を改善する効果的な戦略として実証されている。
しかし、現在の画像認識のためのアンサンブル訓練法は、通常、ラベル間の依存関係関係を見落としているワンホットベクトルを用いて画像ラベルを符号化する。
本稿では,ラベルの依存関係とメンバーモデルとを協調的に学習する,新たな逆アンサンブル学習手法を提案する。
提案手法は,学習したラベル依存をメンバーモデル間の表層的多様性に適応的に活用する。
mnist,fashionmnist,cifar-10など,広く使用されているデータセットに対するアプローチを評価し,最先端の手法と比較して,ブラックボックス攻撃に対して優れた堅牢性を実現することを示す。
私たちのコードはhttps://github.com/ZJLAB-AMMI/LSD.comで公開されています。
関連論文リスト
- Deep Boosting Learning: A Brand-new Cooperative Approach for Image-Text Matching [53.05954114863596]
画像テキストマッチングのための新しいDeep Boosting Learning (DBL)アルゴリズムを提案する。
アンカーブランチは、まずデータプロパティに関する洞察を提供するために訓練される。
ターゲットブランチは、一致したサンプルと未一致のサンプルとの相対距離をさらに拡大するために、より適応的なマージン制約を同時に課される。
論文 参考訳(メタデータ) (2024-04-28T08:44:28Z) - Semi-supervised Medical Image Segmentation Method Based on Cross-pseudo
Labeling Leveraging Strong and Weak Data Augmentation Strategies [2.8246591681333024]
本稿では,Fixmatch の概念を革新的に取り入れた半教師付きモデル DFCPS を提案する。
整合性学習と自己学習を統合したクロス擬似スーパービジョンが導入された。
我々のモデルは、ラベルなしデータの比率が異なる4つの区分全てにおいて、常に優れた性能を示す。
論文 参考訳(メタデータ) (2024-02-17T13:07:44Z) - Semantic Contrastive Bootstrapping for Single-positive Multi-label
Recognition [36.3636416735057]
本研究では,意味的コントラスト型ブートストラップ法(Scob)を用いて,オブジェクト間の関係を徐々に回復する手法を提案する。
次に、アイコン的オブジェクトレベルの表現を抽出する再帰的セマンティックマスク変換器を提案する。
大規模な実験結果から,提案手法が最先端のモデルを超えていることが示唆された。
論文 参考訳(メタデータ) (2023-07-15T01:59:53Z) - Semi-Supervised Learning of Semantic Correspondence with Pseudo-Labels [26.542718087103665]
SemiMatchは意味論的に類似した画像間の密接な対応を確立するための半教師付きソリューションである。
筆者らのフレームワークは,ソースと弱増強ターゲット間のモデル予測自体を用いて擬似ラベルを生成し,擬似ラベルを用いてソースと強増強ターゲット間のモデルの再学習を行う。
実験では、SemiMatchは様々なベンチマーク、特にPF-Willowにおける最先端のパフォーマンスを大きなマージンで達成している。
論文 参考訳(メタデータ) (2022-03-30T03:52:50Z) - Multi-Label Image Classification with Contrastive Learning [57.47567461616912]
コントラスト学習の直接適用は,複数ラベルの場合においてほとんど改善できないことを示す。
完全教師付き環境下でのコントラスト学習を用いたマルチラベル分類のための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2021-07-24T15:00:47Z) - Knowledge-Guided Multi-Label Few-Shot Learning for General Image
Recognition [75.44233392355711]
KGGRフレームワークは、ディープニューラルネットワークと統計ラベル相関の事前知識を利用する。
まず、統計ラベルの共起に基づいて異なるラベルを相関させる構造化知識グラフを構築する。
次に、ラベルセマンティクスを導入し、学習セマンティクス固有の特徴をガイドする。
グラフノードの相互作用を探索するためにグラフ伝搬ネットワークを利用する。
論文 参考訳(メタデータ) (2020-09-20T15:05:29Z) - Stylized Adversarial Defense [105.88250594033053]
逆行訓練は摂動パターンを生成し、モデルを堅牢化するためのトレーニングセットにそれらを含む。
我々は、より強力な敵を作るために、機能空間から追加情報を活用することを提案する。
我々の対人訓練アプローチは、最先端の防御と比べて強い堅牢性を示している。
論文 参考訳(メタデータ) (2020-07-29T08:38:10Z) - Adversarial Learning for Personalized Tag Recommendation [61.76193196463919]
大規模データセットでトレーニング可能なエンドツーエンドのディープネットワークを提案する。
ユーザの嗜好と視覚的エンコーディングの合同トレーニングにより、ネットワークは視覚的嗜好をタグ付け行動と効率的に統合することができる。
本稿では,提案モデルの有効性を2つの大規模および公開データセットで示す。
論文 参考訳(メタデータ) (2020-04-01T20:41:41Z) - Un-Mix: Rethinking Image Mixtures for Unsupervised Visual Representation
Learning [108.999497144296]
近年の先進的な教師なし学習手法では,同じ画像から2つの「ビュー」を学習表現として比較するために,サイムズ様の枠組みを用いている。
この研究は、教師なし学習においてラベル空間上の距離の概念を巻き込み、正対と負対のソフトな類似度をモデルに認識させることを目的としている。
その概念的単純さにもかかわらず、この解 -- 教師なし画像混合(Un-Mix)により、変換された入力と対応する新しいラベル空間からより微妙でより堅牢で一般化された表現を学習できることを実証的に示す。
論文 参考訳(メタデータ) (2020-03-11T17:59:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。