論文の概要: An Enhanced Span-based Decomposition Method for Few-Shot Sequence
Labeling
- arxiv url: http://arxiv.org/abs/2109.13023v1
- Date: Mon, 27 Sep 2021 12:59:48 GMT
- ステータス: 処理完了
- システム内更新日: 2021-09-28 15:34:15.428375
- Title: An Enhanced Span-based Decomposition Method for Few-Shot Sequence
Labeling
- Title(参考訳): Few-Shot Sequence LabelingのためのSpan-based Decomposition法の改良
- Authors: Peiyi Wang, Runxin Xu, Tianyu Liu, Qingyu Zhou, Yunbo Cao, Baobao
Chang, Zhifang Sui
- Abstract要約: FSSL(Few-Shot Sequence Labeling)は、タグ付けモデルが新たなリソース共有ドメインを一般化するための標準的なソリューションである。
本稿では,FSSLのメトリックベースメタラーニングパラダイムに従う拡張Spanベースの解法を提案する。
- 参考スコア(独自算出の注目度): 27.468499201647063
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Few-Shot Sequence Labeling (FSSL) is a canonical solution for the tagging
models to generalize on an emerging, resource-scarce domain. In this paper, we
propose ESD, an Enhanced Span-based Decomposition method, which follows the
metric-based meta-learning paradigm for FSSL. ESD improves previous methods
from two perspectives: a) Introducing an optimal span decomposition framework.
We formulate FSSL as an optimization problem that seeks for an optimal span
matching between test query and supporting instances. During inference, we
propose a post-processing algorithm to alleviate false positive labeling by
resolving span conflicts. b) Enhancing representation for spans and class
prototypes. We refine span representation by inter- and cross-span attention,
and obtain the class prototypical representation with multi-instance learning.
To avoid the semantic drift when representing the O-type (not a specific entity
or slot) prototypes, we divide the O-type spans into three categories according
to their boundary information. ESD outperforms previous methods in two popular
FSSL benchmarks, FewNERD and SNIPS, and is proven to be more robust in the
nested and noisy tagging scenarios.
- Abstract(参考訳): few-shot sequence labeling (fssl) は、新興のリソース・スカースドメインを一般化するタグモデルのための標準的なソリューションである。
本稿では,FSSLのメトリックベースメタラーニングパラダイムに従う拡張Spanベースの分解法であるESDを提案する。
ESDは以前の手法を2つの観点から改善する。
a) 最適なスパン分解フレームワークの導入。
テストクエリとサポートインスタンス間の最適なスパンマッチングを求める最適化問題としてFSSLを定式化する。
推測中,スパンコンフリクトを解決することで偽陽性ラベリングを緩和する後処理アルゴリズムを提案する。
b) スパン及びクラスプロトタイプの表現の強化。
我々は,横断的注意によるスパン表現を洗練し,マルチインスタンス学習を用いたクラスプロトタイプ表現を得る。
O型(特定のエンティティやスロットではない)のプロトタイプを表す場合のセマンティックドリフトを避けるため、O型は境界情報に基づいて3つのカテゴリに分割する。
ESDは2つの人気のあるFSSLベンチマークであるFewNERDとSNIPSで従来のメソッドよりも優れており、ネストされた、ノイズの多いタグ付けシナリオではより堅牢であることが証明されている。
関連論文リスト
- Step-wise Distribution Alignment Guided Style Prompt Tuning for Source-free Cross-domain Few-shot Learning [53.60934432718044]
クロスドメインの少数ショット学習手法は、アクセス不能なソースデータとトレーニング戦略により、大規模事前学習モデルの課題に直面している。
本稿では,ステップワイド配向ガイド型プロンプトチューニング(StepSPT)を紹介する。
StepSPTは予測分布最適化を通じて暗黙的にドメインギャップを狭める。
論文 参考訳(メタデータ) (2024-11-15T09:34:07Z) - Symmetrical Joint Learning Support-query Prototypes for Few-shot Segmentation [33.33249452130038]
クラス内変動の重要な問題に対処するFew-Shot(FSS)のための新しいフレームワークであるSym-Netを提案する。
我々は、クエリとプロトタイプの両方を対称的に学習し、学習プロセスが他方よりも1つのセット(サポートまたはクエリ)を好まないようにします。
実験の結果,提案したSym-Netは最先端モデルよりも優れていた。
論文 参考訳(メタデータ) (2024-07-27T17:37:56Z) - Rethinking Few-shot 3D Point Cloud Semantic Segmentation [62.80639841429669]
本稿では,FS-PCSによる3Dポイント・クラウドセマンティックセマンティックセグメンテーションについて再検討する。
我々は、最先端の2つの重要な問題、前景の漏洩とスパースポイントの分布に焦点をあてる。
これらの問題に対処するために、新しいベンチマークを構築するための標準化されたFS-PCS設定を導入する。
論文 参考訳(メタデータ) (2024-03-01T15:14:47Z) - Class-Imbalanced Semi-Supervised Learning for Large-Scale Point Cloud
Semantic Segmentation via Decoupling Optimization [64.36097398869774]
半教師付き学習(SSL)は大規模3Dシーン理解のための活発な研究課題である。
既存のSSLベースのメソッドは、クラス不均衡とポイントクラウドデータのロングテール分布による厳しいトレーニングバイアスに悩まされている。
本稿では,特徴表現学習と分類器を別の最適化方法で切り離してバイアス決定境界を効果的にシフトする,新しいデカップリング最適化フレームワークを提案する。
論文 参考訳(メタデータ) (2024-01-13T04:16:40Z) - Boosting Few-shot 3D Point Cloud Segmentation via Query-Guided
Enhancement [30.017448714419455]
本稿では,PC-FSSモデルの改良手法を提案する。
従来のPC-FSSでは,クエリサンプルの新規クラスを識別するために,サポートプロトタイプのカテゴリ情報を直接活用する手法とは異なり,モデル性能を著しく向上させる2つの重要な側面を同定する。
論文 参考訳(メタデータ) (2023-08-06T18:07:45Z) - SpanProto: A Two-stage Span-based Prototypical Network for Few-shot
Named Entity Recognition [45.012327072558975]
名前付きエンティティ認識(NER)は、アノテーション付きデータが少ない名前付きエンティティを識別することを目的としている。
そこで本研究では,2段階のアプローチを用いて,数発のNERに対処するセミナルスパンベースプロトタイプネットワーク(SpanProto)を提案する。
スパン抽出の段階では、逐次タグを大域境界行列に変換し、モデルが明示的な境界情報に集中できるようにする。
分類に言及するために、原型学習を活用してラベル付きスパンのセマンティック表現をキャプチャし、新しいクラスエンティティへの適応性を向上する。
論文 参考訳(メタデータ) (2022-10-17T12:59:33Z) - Query Adaptive Few-Shot Object Detection with Heterogeneous Graph
Convolutional Networks [33.446875089255876]
Few-shot Object Detection (FSOD) は、いくつかの例を使って見えないオブジェクトを検出することを目的としている。
異種グラフ畳み込みネットワークを用いた新しいFSODモデルを提案する。
論文 参考訳(メタデータ) (2021-12-17T22:08:15Z) - Plug-and-Play Few-shot Object Detection with Meta Strategy and Explicit
Localization Inference [78.41932738265345]
本稿では, 微調整を行なわずに新しいカテゴリーの物体を正確に検出できるプラグ検出器を提案する。
局所化プロセスに2つの明示的な推論を導入し、アノテーション付きデータへの依存を減らす。
これは、様々な評価プロトコルの下で、効率、精度、リコールの両方において大きなリードを示している。
論文 参考訳(メタデータ) (2021-10-26T03:09:57Z) - Contrastive Prototype Learning with Augmented Embeddings for Few-Shot
Learning [58.2091760793799]
拡張埋め込み(CPLAE)モデルを用いた新しいコントラスト型プロトタイプ学習を提案する。
クラスプロトタイプをアンカーとして、CPLは、同じクラスのクエリサンプルを、異なるクラスのサンプルを、さらに遠くに引き出すことを目的としている。
いくつかのベンチマークによる大規模な実験により,提案したCPLAEが新たな最先端を実現することが示された。
論文 参考訳(メタデータ) (2021-01-23T13:22:44Z) - Prior Guided Feature Enrichment Network for Few-Shot Segmentation [64.91560451900125]
最先端のセマンティックセグメンテーション手法は、良い結果を得るために十分なラベル付きデータを必要とする。
少数のラベル付きサポートサンプルを持つ新しいクラスに迅速に適応するモデルを学習することで,この問題に対処するためのショットセグメンテーションが提案されている。
これらのフレームワークは、高レベルのセマンティック情報の不適切な使用により、目に見えないクラスにおける一般化能力の低下という課題に直面している。
論文 参考訳(メタデータ) (2020-08-04T10:41:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。