論文の概要: ESTER: A Machine Reading Comprehension Dataset for Event Semantic
Relation Reasoning
- arxiv url: http://arxiv.org/abs/2104.08350v1
- Date: Fri, 16 Apr 2021 19:59:26 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-20 14:17:13.847895
- Title: ESTER: A Machine Reading Comprehension Dataset for Event Semantic
Relation Reasoning
- Title(参考訳): ESTER: イベントセマンティックリレーショナル推論のための機械読み取り包括的データセット
- Authors: Rujun Han, I-Hung Hsu, Jiao Sun, Julia Baylon, Qiang Ning, Dan Roth,
Nanyun Pen
- Abstract要約: イベントセマンティックリレーション推論のための包括的な機械学習理解データセットESTERを紹介します。
もっともよく使われるイベント意味関係を5つ検討し、質問応答タスクとして定式化します。
実験の結果、現在のSOTAシステムは、イベントベースF1、トークンベースF1、HIT@1スコアそれぞれ60.5%、57.8%、76.3%を達成した。
- 参考スコア(独自算出の注目度): 49.795767003586235
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Stories and narratives are composed based on a variety of events.
Understanding how these events are semantically related to each other is the
essence of reading comprehension. Recent event-centric reading comprehension
datasets focus on either event arguments or event temporal commonsense.
Although these tasks evaluate machines' ability of narrative understanding,
human like reading comprehension requires the capability to process event-based
semantics beyond arguments and temporal commonsense. For example, to understand
causality between events, we need to infer motivations or purposes; to
understand event hierarchy, we need to parse the composition of events. To
facilitate these tasks, we introduce ESTER, a comprehensive machine reading
comprehension (MRC) dataset for Event Semantic Relation Reasoning. We study
five most commonly used event semantic relations and formulate them as question
answering tasks. Experimental results show that the current SOTA systems
achieve 60.5%, 57.8%, and 76.3% for event-based F1, token based F1 and HIT@1
scores respectively, which are significantly below human performances.
- Abstract(参考訳): 物語や物語は様々な出来事に基づいて構成される。
これらのイベントが相互に意味的にどのように関連しているかを理解することは、理解を読むことの本質である。
最近のイベント中心の読み取り理解データセットは、イベント引数またはイベント時間的常識に重点を置いている。
これらのタスクは機械のナラティブ理解能力を評価するが、人間ライディング理解は、議論や一時的な常識を超えてイベントベースのセマンティクスを処理する能力を必要とする。
例えば、イベント間の因果関係を理解するためには、モチベーションや目的を推論する必要がある。
これらの作業を容易にするために,イベントセマンティックリレーショナル推論のための総合的機械読解(MRC)データセットであるESTERを紹介する。
我々は,最もよく使われる5つの事象意味関係を研究し,質問応答タスクとして定式化する。
実験の結果,現在のSOTAシステムでは,イベントベースF1では60.5%,57.8%,76.3%,トークンベースF1,HIT@1では76.3%のスコアが達成されている。
関連論文リスト
- EVIT: Event-Oriented Instruction Tuning for Event Reasoning [18.012724531672813]
イベント推論は、特定の関係に従ってイベントを推論し、将来のイベントを予測することを目的としている。
大規模言語モデル(LLM)は、その豊富な知識と推論能力のために、イベント推論において大きな進歩を遂げている。
しかし、現在使われている命令調整モデルでは、これらのタスクを管理するのに例外的な習熟度が一貫して示されていない。
論文 参考訳(メタデータ) (2024-04-18T08:14:53Z) - Towards Event Extraction from Speech with Contextual Clues [61.164413398231254]
本稿では,音声イベント抽出(SpeechEE)タスクを導入し,3つの合成トレーニングセットと1つの人為的テストセットを構築した。
テキストからのイベント抽出と比較して、SpeechEEは、主に連続的で単語境界を持たない複雑な音声信号のために、より大きな課題を提起する。
我々の手法はすべてのデータセットに大幅な改善をもたらし、最大10.7%のF1ゲインを達成する。
論文 参考訳(メタデータ) (2024-01-27T11:07:19Z) - MAVEN-Arg: Completing the Puzzle of All-in-One Event Understanding Dataset with Event Argument Annotation [104.6065882758648]
MAVEN-Argは、イベント検出、イベント引数抽出、イベント関係抽出をサポートする最初のオールインワンデータセットである。
EAEベンチマークでは、(1)162のイベントタイプと612の引数ロールをカバーする包括的なスキーマ、(2)98,591のイベントと290,613の引数を含む大規模なデータスケール、(3)EAEのすべてのタスク変種をサポートする包括的なアノテーションの3つの利点がある。
論文 参考訳(メタデータ) (2023-11-15T16:52:14Z) - COMET-M: Reasoning about Multiple Events in Complex Sentences [14.644677930985816]
本稿では,複合文中の対象事象に対するコモンセンス推論を生成可能なイベント中心のコモンセンスモデルであるCOMET-Mを提案する。
COMET-Mは、単純な文に対するイベント中心の推論を排他的に生成するCOMETの上に構築されている。
論文 参考訳(メタデータ) (2023-05-24T01:35:01Z) - Rich Event Modeling for Script Event Prediction [60.67635412135682]
スクリプトイベント予測のためのリッチイベント予測(REP)フレームワークを提案する。
REPは、テキストからそのような情報を抽出するイベント抽出器を含む。
予測器の中核となるコンポーネントは、任意の数の引数を柔軟に扱う変換器ベースのイベントエンコーダである。
論文 参考訳(メタデータ) (2022-12-16T05:17:59Z) - Are All Steps Equally Important? Benchmarking Essentiality Detection of
Events [92.92425231146433]
本稿では,現在のモデルが目標イベントに関連するステップイベントの本質をどの程度理解しているかについて検討する。
コミュニティガイドサイトWikiHowから収集した高品質なペア(ゴール,ステップ)コーパスをコントリビュートする。
高いアノテータ間の合意は、人間が事象の本質について一貫した理解を持っていることを証明している。
論文 参考訳(メタデータ) (2022-10-08T18:00:22Z) - CLIP-Event: Connecting Text and Images with Event Structures [123.31452120399827]
視覚言語事前学習モデルを適用したコントラスト学習フレームワークを提案する。
我々は、イベント構造知識を得るために、テキスト情報抽出技術を利用する。
実験により、ゼロショットCLIP-Eventは引数抽出において最先端の教師付きモデルよりも優れていることが示された。
論文 参考訳(メタデータ) (2022-01-13T17:03:57Z) - Document-level Event Extraction with Efficient End-to-end Learning of
Cross-event Dependencies [37.96254956540803]
本稿では,構造化予測アルゴリズムであるDeep Value Networks (DVN) を利用したエンドツーエンドモデルを提案する。
提案手法はACE05上でのCRFモデルに匹敵する性能を達成し,計算効率は極めて高い。
論文 参考訳(メタデータ) (2020-10-24T05:28:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。