論文の概要: LA3: Efficient Label-Aware AutoAugment
- arxiv url: http://arxiv.org/abs/2304.10310v1
- Date: Thu, 20 Apr 2023 13:42:18 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-21 13:03:03.075816
- Title: LA3: Efficient Label-Aware AutoAugment
- Title(参考訳): la3: 効率的なラベル認識オートオーグメント
- Authors: Mingjun Zhao, Shan Lu, Zixuan Wang, Xiaoli Wang and Di Niu
- Abstract要約: 本稿では,ラベル情報を利用した新しい2段階データ拡張アルゴリズムであるラベル認識自動拡張(LA3)を提案する。
LA3は2つの学習段階から構成されており、第1段階ではラベルごとに個別の拡張手法を評価してランク付けする。
第2段階では、有効性の選択と相補的な増強から複合増強ポリシーを構築し、性能を著しく向上させる。
- 参考スコア(独自算出の注目度): 23.705059658590436
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Automated augmentation is an emerging and effective technique to search for
data augmentation policies to improve generalizability of deep neural network
training. Most existing work focuses on constructing a unified policy
applicable to all data samples in a given dataset, without considering sample
or class variations. In this paper, we propose a novel two-stage data
augmentation algorithm, named Label-Aware AutoAugment (LA3), which takes
advantage of the label information, and learns augmentation policies separately
for samples of different labels. LA3 consists of two learning stages, where in
the first stage, individual augmentation methods are evaluated and ranked for
each label via Bayesian Optimization aided by a neural predictor, which allows
us to identify effective augmentation techniques for each label under a low
search cost. And in the second stage, a composite augmentation policy is
constructed out of a selection of effective as well as complementary
augmentations, which produces significant performance boost and can be easily
deployed in typical model training. Extensive experiments demonstrate that LA3
achieves excellent performance matching or surpassing existing methods on
CIFAR-10 and CIFAR-100, and achieves a new state-of-the-art ImageNet accuracy
of 79.97% on ResNet-50 among auto-augmentation methods, while maintaining a low
computational cost.
- Abstract(参考訳): 自動拡張は、ディープニューラルネットワークトレーニングの一般化性を改善するために、データ拡張ポリシーを探索する新興かつ効果的な技術である。
既存の作業のほとんどは、サンプルやクラスの変更を考慮せずに、所定のデータセット内のすべてのデータサンプルに適用可能な統一ポリシーの構築に重点を置いている。
本稿では,ラベル情報を利用したラベル認識自動拡張(LA3)と呼ばれる新しい2段階データ拡張アルゴリズムを提案し,異なるラベルのサンプルに対して個別に拡張ポリシーを学習する。
la3は2つの学習段階から構成されており、第1段階では、ニューラルネットワークによって支援されるベイズ最適化によって、各ラベルに対して個々の拡張法を評価し、ランク付けする。
また,第2段階では,実効性の選択と相補性強化から複合強化ポリシーを構築し,優れた性能向上を実現し,典型的なモデルトレーニングに容易に展開することができる。
LA3 は CIFAR-10 と CIFAR-100 の既存の手法よりも優れた性能のマッチングを達成し,ResNet-50 では 79.97% の精度を達成し,計算コストの低減を図っている。
関連論文リスト
- Ali-AUG: Innovative Approaches to Labeled Data Augmentation using One-Step Diffusion Model [0.14999444543328289]
Ali-AUGは、産業応用における効率的なラベル付きデータ拡張のための新しい単一ステップ拡散モデルである。
提案手法は, 正確な特徴挿入を伴う合成ラベル付き画像を生成することで, 限られたラベル付きデータの課題に対処する。
論文 参考訳(メタデータ) (2024-10-24T12:12:46Z) - KECOR: Kernel Coding Rate Maximization for Active 3D Object Detection [48.66703222700795]
我々は、ラベルの取得に最も有用なポイントクラウドを特定するために、新しいカーネル戦略を利用する。
1段目(SECOND)と2段目(SECOND)の両方に対応するため、アノテーションに選択した境界ボックスの総数と検出性能のトレードオフをよく組み込んだ分類エントロピー接点を組み込んだ。
その結果,ボックスレベルのアノテーションのコストは約44%,計算時間は26%削減された。
論文 参考訳(メタデータ) (2023-07-16T04:27:03Z) - Enhancing Label Sharing Efficiency in Complementary-Label Learning with
Label Augmentation [92.4959898591397]
学習中に近隣の事例における補完ラベルの暗黙的な共有を分析した。
相補的なラベル拡張による共有効率を向上させる新しい手法を提案する。
実験結果から,従来のCLLモデルよりも相補的ラベル拡張により経験的性能が向上することが確認された。
論文 参考訳(メタデータ) (2023-05-15T04:43:14Z) - Adversarial Auto-Augment with Label Preservation: A Representation
Learning Principle Guided Approach [95.74102207187545]
本研究では,事前自由な自律的データ拡張の目的が表現学習の原則から導出可能であることを示す。
そこで我々は,既存の手法にシームレスに最適化し,シームレスに統合できる目的に対して,実用的なサロゲートを提案する。
論文 参考訳(メタデータ) (2022-11-02T02:02:51Z) - Boosting the Efficiency of Parametric Detection with Hierarchical Neural
Networks [4.1410005218338695]
高速検出のための新しい手法として階層型検出ネットワーク(HDN)を提案する。
ネットワークは、統計的精度と効率の目標を同時に符号化する新しい損失関数を用いて訓練される。
2層モデルを用いた3層HDNのトレーニングにより,精度と効率が向上することを示す。
論文 参考訳(メタデータ) (2022-07-23T19:23:00Z) - Open-Set Semi-Supervised Learning for 3D Point Cloud Understanding [62.17020485045456]
半教師付き学習(SSL)では、ラベル付きデータと同じ分布からラベル付きデータが引き出されることが一般的である。
サンプル重み付けによりラベルなしデータを選択的に活用することを提案する。
論文 参考訳(メタデータ) (2022-05-02T16:09:17Z) - Interpolation-based Contrastive Learning for Few-Label Semi-Supervised
Learning [43.51182049644767]
半教師付き学習(SSL)は,ラベルが限定された強力なモデルを構築する上で,有効な手法であることが長年証明されてきた。
摂動サンプルを元のものと類似した予測を強制する正規化に基づく手法が注目されている。
本稿では,学習ネットワークの埋め込みを誘導し,サンプル間の線形変化を誘導する新たな対照的な損失を提案する。
論文 参考訳(メタデータ) (2022-02-24T06:00:05Z) - Few-Shot Named Entity Recognition: A Comprehensive Study [92.40991050806544]
マルチショット設定のモデル一般化能力を向上させるための3つの手法を検討する。
ラベル付きデータの比率の異なる10の公開nerデータセットについて経験的比較を行う。
マルチショットとトレーニングフリーの両方の設定で最新の結果を作成します。
論文 参考訳(メタデータ) (2020-12-29T23:43:16Z) - Improving Auto-Augment via Augmentation-Wise Weight Sharing [123.71986174280741]
自動拡張検索の重要な要素は、特定の拡張ポリシーの評価プロセスである。
本稿では,モデルの強化トレーニングのダイナミクスについて検討する。
我々は,Augmentation-Wise Weight Sharing (AWS)に基づいて,高速かつ高精度な評価プロセスを構築するために,強力で効率的なプロキシタスクを設計する。
論文 参考訳(メタデータ) (2020-09-30T15:23:12Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。