論文の概要: Improving Event Definition Following For Zero-Shot Event Detection
- arxiv url: http://arxiv.org/abs/2403.02586v1
- Date: Tue, 5 Mar 2024 01:46:50 GMT
- ステータス: 処理完了
- システム内更新日: 2024-03-06 16:28:41.902331
- Title: Improving Event Definition Following For Zero-Shot Event Detection
- Title(参考訳): ゼロショットイベント検出のためのイベント定義の改善
- Authors: Zefan Cai, Po-Nien Kung, Ashima Suvarna, Mingyu Derek Ma, Hritik
Bansal, Baobao Chang, P. Jeffrey Brantingham, Wei Wang, Nanyun Peng
- Abstract要約: ゼロショットイベント検出に対する既存のアプローチは通常、既知のイベントタイプをアノテートしたデータセット上でモデルをトレーニングする。
イベント定義に従うためのトレーニングモデルによるゼロショットイベント検出の改善を目指しています。
- 参考スコア(独自算出の注目度): 66.27883872707523
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing approaches on zero-shot event detection usually train models on
datasets annotated with known event types, and prompt them with unseen event
definitions. These approaches yield sporadic successes, yet generally fall
short of expectations. In this work, we aim to improve zero-shot event
detection by training models to better follow event definitions. We hypothesize
that a diverse set of event types and definitions are the key for models to
learn to follow event definitions while existing event extraction datasets
focus on annotating many high-quality examples for a few event types. To verify
our hypothesis, we construct an automatically generated Diverse Event
Definition (DivED) dataset and conduct comparative studies. Our experiments
reveal that a large number of event types (200) and diverse event definitions
can significantly boost event extraction performance; on the other hand, the
performance does not scale with over ten examples per event type. Beyond
scaling, we incorporate event ontology information and hard-negative samples
during training, further boosting the performance. Based on these findings, we
fine-tuned a LLaMA-2-7B model on our DivED dataset, yielding performance that
surpasses SOTA large language models like GPT-3.5 across three open benchmarks
on zero-shot event detection.
- Abstract(参考訳): ゼロショットイベント検出の既存のアプローチは通常、既知のイベントタイプにアノテートされたデータセット上のモデルをトレーニングし、未認識のイベント定義でそれらをプロンプトする。
これらのアプローチは散発的な成功をもたらすが、概して期待に届かない。
本研究は,イベント定義に従うためのトレーニングモデルによるゼロショットイベント検出の改善を目的とする。
既存のイベント抽出データセットは、いくつかのイベントタイプのために多くの高品質な例をアノテートすることに焦点を当てている一方で、モデルがイベント定義に従うことを学ぶ上では、さまざまなイベントタイプと定義が鍵となると仮定しています。
仮説を検証するため,自動生成したDiverse Event Definition (DivED)データセットを構築し,比較研究を行う。
私たちの実験では、多数のイベントタイプ(200)と多様なイベント定義が、イベント抽出性能を著しく向上させる可能性があることが分かりました。
スケーリング以外にも、トレーニング中にイベントオントロジー情報とハードネガティブなサンプルを組み込んで、パフォーマンスをさらに向上します。
これらの結果から,ゼロショットイベント検出の3つのオープンベンチマークにおいて,gpt-3.5のようなsoma大規模言語モデルを上回るパフォーマンスを実現するために,llama-2-7bモデルを拡張データセット上で微調整した。
関連論文リスト
- Zero- and Few-Shot Event Detection via Prompt-Based Meta Learning [45.3385722995475]
ゼロおよび少数ショットイベント検出のためのメタ学習ベースのフレームワークであるMetaEventを提案する。
本フレームワークでは,クローゼをベースとしたプロンプトとトリガ対応ソフトを用いて,未知のイベントタイプに効率的に出力を投影する手法を提案する。
そのため、提案されたMetaEventは、事前の知識なしに、機能とイベントタイプをマッピングすることで、ゼロショットイベント検出を実行することができる。
論文 参考訳(メタデータ) (2023-05-27T05:36:46Z) - Semantic Pivoting Model for Effective Event Detection [19.205550116466604]
Event Detectionは、構造化されていない記事からイベントインスタンスの参照を識別し、分類することを目的としている。
イベント検出の既存のテクニックは、イベントタイプクラスを表現するために、均質な1ホットベクトルのみを使用しており、型の意味がタスクにとって重要であるという事実を無視している。
本稿では,学習中の事前情報を明示的に組み込んで,入力とイベント間の意味的に意味のある相関関係を捉えるセマンティック・ピロリング・モデル(SPEED)を提案する。
論文 参考訳(メタデータ) (2022-11-01T19:20:34Z) - Unifying Event Detection and Captioning as Sequence Generation via
Pre-Training [53.613265415703815]
本稿では,イベント検出とキャプションのタスク間関連性を高めるための,事前学習と微調整の統合フレームワークを提案する。
我々のモデルは最先端の手法よりも優れており、大規模ビデオテキストデータによる事前学習ではさらに向上できる。
論文 参考訳(メタデータ) (2022-07-18T14:18:13Z) - The Art of Prompting: Event Detection based on Type Specific Prompts [28.878630198163556]
我々は、教師付き、少数ショット、ゼロショットイベント検出のためのイベントタイプ固有のプロンプトを組み込む統一されたフレームワークを開発する。
我々のフレームワークは、これまでの最先端のベースラインよりも最大24.3%のFスコアアップを示している。
論文 参考訳(メタデータ) (2022-04-14T21:28:50Z) - PILED: An Identify-and-Localize Framework for Few-Shot Event Detection [79.66042333016478]
本研究では,事前学習した言語モデルから事象関連知識を引き出すために,クローゼプロンプトを用いた。
型固有のパラメータの数を最小化し、新しい型に対するイベント検出タスクに迅速に適応できるようにします。
論文 参考訳(メタデータ) (2022-02-15T18:01:39Z) - Learning Constraints and Descriptive Segmentation for Subevent Detection [74.48201657623218]
本稿では,サブイベント検出とEventSeg予測の依存関係をキャプチャする制約を学習し,強制するアプローチを提案する。
我々は制約学習にRectifier Networksを採用し、学習した制約をニューラルネットワークの損失関数の正規化項に変換する。
論文 参考訳(メタデータ) (2021-09-13T20:50:37Z) - Extensively Matching for Few-shot Learning Event Detection [66.31312496170139]
超視覚的な学習設定下でのイベント検出モデルは、新しいイベントタイプへの転送に失敗する。
イベント検出では、あまり画像学習は行われていない。
sup-port の例にマッチする2つのノベルロス因子を提案し,モデルにより多くのトレーニング信号を与える。
論文 参考訳(メタデータ) (2020-06-17T18:30:30Z) - Team RUC_AIM3 Technical Report at Activitynet 2020 Task 2: Exploring
Sequential Events Detection for Dense Video Captioning [63.91369308085091]
本稿では、イベントシーケンス生成のための新規でシンプルなモデルを提案し、ビデオ中のイベントシーケンスの時間的関係を探索する。
提案モデルでは,非効率な2段階提案生成を省略し,双方向時間依存性を条件としたイベント境界を直接生成する。
総合システムは、チャレンジテストセットの9.894 METEORスコアで、ビデオタスクにおける密封イベントの最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2020-06-14T13:21:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。