論文の概要: A Robust Contrastive Alignment Method For Multi-Domain Text
Classification
- arxiv url: http://arxiv.org/abs/2204.12125v1
- Date: Tue, 26 Apr 2022 07:34:24 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-27 13:37:09.154038
- Title: A Robust Contrastive Alignment Method For Multi-Domain Text
Classification
- Title(参考訳): マルチドメインテキスト分類のためのロバストコントラストアライメント法
- Authors: Xuefeng Li, Hao Lei, Liwen Wang, Guanting Dong, Jinzheng Zhao, Jiachi
Liu, Weiran Xu, Chunyun Zhang
- Abstract要約: マルチドメインテキスト分類は、様々なシナリオで自動的にテキストを分類することができる。
現在の高度なメソッドでは、プライベート共有のパラダイムを使用し、共有エンコーダによってドメイン共有の機能をキャプチャし、各ドメインに対してプライベートエンコーダをトレーニングしてドメイン固有の特徴を抽出する。
教師付きコントラスト学習により,異なる領域のテキスト分類特徴を同じ特徴空間に整列させる頑健なコントラストアライメント手法を提案する。
- 参考スコア(独自算出の注目度): 21.35729884948437
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Multi-domain text classification can automatically classify texts in various
scenarios. Due to the diversity of human languages, texts with the same label
in different domains may differ greatly, which brings challenges to the
multi-domain text classification. Current advanced methods use the
private-shared paradigm, capturing domain-shared features by a shared encoder,
and training a private encoder for each domain to extract domain-specific
features. However, in realistic scenarios, these methods suffer from
inefficiency as new domains are constantly emerging. In this paper, we propose
a robust contrastive alignment method to align text classification features of
various domains in the same feature space by supervised contrastive learning.
By this means, we only need two universal feature extractors to achieve
multi-domain text classification. Extensive experimental results show that our
method performs on par with or sometimes better than the state-of-the-art
method, which uses the complex multi-classifier in a private-shared framework.
- Abstract(参考訳): マルチドメインテキスト分類は、様々なシナリオで自動的にテキストを分類することができる。
ヒト言語の多様性のため、異なるドメインで同じラベルを持つテキストは、大きく異なる可能性があるため、マルチドメインのテキスト分類に課題が生じる。
現在の先進的な手法では、プライベート共有パラダイムを使用し、共有エンコーダによってドメイン共有機能をキャプチャし、ドメイン固有の特徴を抽出するために各ドメインのプライベートエンコーダをトレーニングする。
しかし、現実のシナリオでは、新しいドメインが常に出現しているため、これらのメソッドは非効率に苦しむ。
本論文では,教師付きコントラスト学習により,異なる領域のテキスト分類特徴を同じ特徴空間に整列させる頑健なコントラストアライメント手法を提案する。
これにより、多領域テキスト分類を実現するために、2つの普遍的特徴抽出器が必要である。
大規模な実験結果から,本手法は,プライベート共有フレームワークにおける複雑なマルチクラス化手法を用いて,最先端の手法と同等あるいは時折同等に動作することが示された。
関連論文リスト
- A Curriculum Learning Approach for Multi-domain Text Classification
Using Keyword weight Ranking [17.71297141482757]
本稿では,キーワードウェイトランキングに基づくカリキュラム学習戦略を用いて,マルチドメインテキスト分類モデルの性能を向上させることを提案する。
AmazonのレビューとFDU-MTLデータセットの実験結果から,カリキュラム学習戦略は多分野テキスト分類モデルの性能を効果的に向上することが示された。
論文 参考訳(メタデータ) (2022-10-27T03:15:26Z) - Domain Invariant Masked Autoencoders for Self-supervised Learning from
Multi-domains [73.54897096088149]
マルチドメインからの自己教師型学習のためのドメイン不変のMasked AutoEncoder (DiMAE)を提案する。
中心となる考え方は、入力画像を異なるドメインからのスタイルノイズで拡張し、拡張イメージの埋め込みからイメージを再構築することである。
PACSとDomainNetの実験は、最近の最先端の手法と比較して、DiMAEがかなりの利益を得ていることを示している。
論文 参考訳(メタデータ) (2022-05-10T09:49:40Z) - Disentangled Unsupervised Image Translation via Restricted Information
Flow [61.44666983942965]
多くの最先端のメソッドは、所望の共有vs固有の分割をアーキテクチャにハードコードする。
帰納的アーキテクチャバイアスに依存しない新しい手法を提案する。
提案手法は,2つの合成データセットと1つの自然なデータセットに対して一貫した高い操作精度を実現する。
論文 参考訳(メタデータ) (2021-11-26T00:27:54Z) - Structured Latent Embeddings for Recognizing Unseen Classes in Unseen
Domains [108.11746235308046]
本稿では,異なる領域からの画像を投影することで,ドメインに依存しない遅延埋め込みを学習する手法を提案する。
挑戦的なDomainNetとDomainNet-LSベンチマークの実験は、既存のメソッドよりもアプローチの方が優れていることを示している。
論文 参考訳(メタデータ) (2021-07-12T17:57:46Z) - Learning to Share by Masking the Non-shared for Multi-domain Sentiment
Classification [24.153584996936424]
テキストからドメイン関連語を明示的にマスキングし,これらのドメインに依存しないテキストからドメイン不変感の特徴を学習し,それらのマスキング語を用いてドメイン認識文表現を形成するネットワークを提案する。
適応度の高い複数領域感情分類データセットの実証実験により,提案モデルの有効性が実証された。
論文 参考訳(メタデータ) (2021-04-17T08:15:29Z) - Text Recognition in Real Scenarios with a Few Labeled Samples [55.07859517380136]
Scene Text Recognition (STR) はコンピュータビジョン分野におけるホットな研究テーマである。
本稿では,数ショットの逆数列領域適応 (FASDA) を用いて構築シーケンスを適応する手法を提案する。
我々のアプローチは、ソースドメインとターゲットドメインの間の文字レベルの混乱を最大化することができる。
論文 参考訳(メタデータ) (2020-06-22T13:03:01Z) - Differential Treatment for Stuff and Things: A Simple Unsupervised
Domain Adaptation Method for Semantic Segmentation [105.96860932833759]
最先端のアプローチは、セマンティックレベルのアライメントの実行がドメインシフトの問題に取り組むのに役立つことを証明している。
我々は,物事領域や物事に対する異なる戦略による意味レベルのアライメントを改善することを提案する。
提案手法に加えて,提案手法は,ソースとターゲットドメイン間の最も類似した機能やインスタンス機能を最小化することにより,この問題の緩和に有効であることを示す。
論文 参考訳(メタデータ) (2020-03-18T04:43:25Z) - Improving Domain-Adapted Sentiment Classification by Deep Adversarial
Mutual Learning [51.742040588834996]
ドメイン適応型感情分類(ドメイン適応型感情分類、Domain-adapted sentiment classification)は、ラベル付きソースドメインでトレーニングを行い、ラベルなしターゲットドメイン上で文書レベルの感情を適切に推測する。
本稿では,2つの特徴抽出器群,ドメイン識別器群,感情分類器群,ラベル探索器群を包含する新たな相互学習手法を提案する。
論文 参考訳(メタデータ) (2020-02-01T01:22:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。