論文の概要: DemoSG: Demonstration-enhanced Schema-guided Generation for Low-resource
Event Extraction
- arxiv url: http://arxiv.org/abs/2310.10481v1
- Date: Mon, 16 Oct 2023 15:02:37 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-17 13:35:57.893012
- Title: DemoSG: Demonstration-enhanced Schema-guided Generation for Low-resource
Event Extraction
- Title(参考訳): DemoSG: 低リソースイベント抽出のためのデモエンハンスドスキーマ誘導生成
- Authors: Gang Zhao, Xiaocheng Gong, Xinjie Yang, Guanting Dong, Shudong Lu, Si
Li
- Abstract要約: 低リソースEEの恩恵を受けるDemonstration-enhanced-guided Generation (DemoSG)モデルを提案する。
まず、アノテートされたデータを完全に活用するための、EEのための実証に基づく学習パラダイムを提案する。
次に、スキーマベースのプロンプトによって導かれる自然言語生成タスクとしてEEを定式化する。
- 参考スコア(独自算出の注目度): 10.344696466848312
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Most current Event Extraction (EE) methods focus on the high-resource
scenario, which requires a large amount of annotated data and can hardly be
applied to low-resource domains. To address EE more effectively with limited
resources, we propose the Demonstration-enhanced Schema-guided Generation
(DemoSG) model, which benefits low-resource EE from two aspects: Firstly, we
propose the demonstration-based learning paradigm for EE to fully use the
annotated data, which transforms them into demonstrations to illustrate the
extraction process and help the model learn effectively. Secondly, we formulate
EE as a natural language generation task guided by schema-based prompts,
thereby leveraging label semantics and promoting knowledge transfer in
low-resource scenarios. We conduct extensive experiments under in-domain and
domain adaptation low-resource settings on three datasets, and study the
robustness of DemoSG. The results show that DemoSG significantly outperforms
current methods in low-resource scenarios.
- Abstract(参考訳): 現在のイベント抽出(ee)メソッドのほとんどは、大量のアノテートデータを必要とする低リソースドメインに適用できない高リソースシナリオに焦点を当てている。
限られたリソースでより効果的にEEに対処するために、我々は、低リソースのEEに2つの側面から恩恵を与えるDemonstration-enhanced Schema-guided Generation (DemoSG)モデルを提案する。
次に、スキーマベースのプロンプトによって導かれる自然言語生成タスクとしてEEを定式化し、ラベルのセマンティクスを活用し、低リソースシナリオにおける知識伝達を促進する。
3つのデータセットに対して、ドメイン内およびドメイン適応の低リソース設定の下で広範な実験を行い、DemoSGの堅牢性について検討する。
その結果,DemoSGは低リソースシナリオにおいて,現在の手法よりも大幅に優れていた。
関連論文リスト
- Language Models are Graph Learners [70.14063765424012]
言語モデル(LM)は、グラフニューラルネットワーク(GNN)やグラフトランスフォーマー(GT)など、ドメイン固有のモデルの優位性に挑戦している。
本稿では,ノード分類タスクにおける最先端のGNNに匹敵する性能を実現するために,既製のLMを有効活用する手法を提案する。
論文 参考訳(メタデータ) (2024-10-03T08:27:54Z) - Inverse-RLignment: Inverse Reinforcement Learning from Demonstrations for LLM Alignment [62.05713042908654]
本稿では,これらの課題を克服するために,高品質な実演データを活用する新しいアプローチであるAlignment from Demonstrations (AfD)を紹介する。
AfDをシーケンシャルな意思決定フレームワークで形式化し、報酬信号の欠如というユニークな課題を強調します。
そこで本研究では,AfD に適した報酬モデル上で補間を行う計算効率のよいアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-05-24T15:13:53Z) - APrompt4EM: Augmented Prompt Tuning for Generalized Entity Matching [5.92432068962337]
Generalized Entity Matching (GEM)は、異なるフォーマットで表される2つのレコードが同じ現実世界のエンティティを指すかどうかを判定することを目的としている。
本稿では,2つの主な改善点からなる課題に対する拡張的プロンプトチューニングフレームワークを提案する。
論文 参考訳(メタデータ) (2024-05-08T05:38:56Z) - Empower Text-Attributed Graphs Learning with Large Language Models
(LLMs) [5.920353954082262]
本稿では,Large Language Models (LLMs) を用いたノード生成によるテキスト分散グラフの強化のためのプラグイン・アンド・プレイ手法を提案する。
エッジ予測器を用いて、生のデータセットに固有の構造情報をキャプチャし、新たに生成されたサンプルを元のグラフに統合する。
実験では、特に低ショットシナリオにおいて、提案したパラダイムの卓越した性能を示す。
論文 参考訳(メタデータ) (2023-10-15T16:04:28Z) - MoDem: Accelerating Visual Model-Based Reinforcement Learning with
Demonstrations [36.44386146801296]
サンプルの低さは、現実世界のアプリケーションに深層強化学習(RL)アルゴリズムをデプロイする上で、依然として最大の課題である。
モデルベースRLのサンプル効率を劇的に向上させることができるのは,ごく少数のデモンストレーションのみである。
本研究では,3つの複雑なビジュオモータ制御領域を実験的に検討し,スパース報酬タスクの完了に150%-250%成功していることを確認した。
論文 参考訳(メタデータ) (2022-12-12T04:28:50Z) - Schema-aware Reference as Prompt Improves Data-Efficient Knowledge Graph
Construction [57.854498238624366]
本稿では,データ効率のよい知識グラフ構築のためのRAP(Schema-Aware Reference As Prompt)の検索手法を提案する。
RAPは、人間の注釈付きおよび弱教師付きデータから受け継いだスキーマと知識を、各サンプルのプロンプトとして動的に活用することができる。
論文 参考訳(メタデータ) (2022-10-19T16:40:28Z) - Towards Realistic Low-resource Relation Extraction: A Benchmark with
Empirical Baseline Study [51.33182775762785]
本稿では,低リソース環境下での関係抽出システムを構築するための実証的研究について述べる。
低リソース環境での性能を評価するための3つのスキームについて検討する。 (i) ラベル付きラベル付きデータを用いた異なるタイプのプロンプトベース手法、 (ii) 長期分布問題に対処する多様なバランシング手法、 (iii) ラベル付きインドメインデータを生成するためのデータ拡張技術と自己学習。
論文 参考訳(メタデータ) (2022-10-19T15:46:37Z) - Improving Meta-learning for Low-resource Text Classification and
Generation via Memory Imitation [87.98063273826702]
本稿では,メモリ模倣メタラーニング(MemIML)手法を提案する。
本手法の有効性を証明するために理論的解析を行った。
論文 参考訳(メタデータ) (2022-03-22T12:41:55Z) - Information Extraction in Low-Resource Scenarios: Survey and Perspective [56.5556523013924]
情報抽出は構造化されていないテキストから構造化された情報を導き出そうとする。
本稿では,emphLLMおよびemphLLMに基づく低リソースIEに対するニューラルアプローチについて概説する。
論文 参考訳(メタデータ) (2022-02-16T13:44:00Z) - Active Learning for Event Extraction with Memory-based Loss Prediction
Model [12.509218857483223]
イベント抽出は、多くの産業アプリケーションシナリオにおいて重要な役割を果たす。
イベントアノテーションのコストを削減するために,アクティブラーニング(AL)技術を導入する。
バッチベースの選択戦略とメモリベース損失予測モデル(MBLP)を提案し,ラベルのないサンプルを効率的に選択する。
論文 参考訳(メタデータ) (2021-11-26T07:58:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。