論文の概要: Narrative Incoherence Detection
- arxiv url: http://arxiv.org/abs/2012.11157v2
- Date: Thu, 15 Apr 2021 11:47:45 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-29 09:00:59.226964
- Title: Narrative Incoherence Detection
- Title(参考訳): 物語的不整合検出
- Authors: Deng Cai and Yizhe Zhang and Yichen Huang and Wai Lam and Bill Dolan
- Abstract要約: 本稿では,文間セマンティック理解のための新たなアリーナとして,物語不整合検出の課題を提案する。
複数文の物語を考えると、物語の流れに意味的な矛盾があるかどうかを決定します。
- 参考スコア(独自算出の注目度): 76.43894977558811
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose the task of narrative incoherence detection as a new arena for
inter-sentential semantic understanding: Given a multi-sentence narrative,
decide whether there exist any semantic discrepancies in the narrative flow.
Specifically, we focus on the missing sentence and discordant sentence
detection. Despite its simple setup, this task is challenging as the model
needs to understand and analyze a multi-sentence narrative, and predict
incoherence at the sentence level. As an initial step towards this task, we
implement several baselines either directly analyzing the raw text
(\textit{token-level}) or analyzing learned sentence representations
(\textit{sentence-level}). We observe that while token-level modeling has
better performance when the input contains fewer sentences, sentence-level
modeling performs better on longer narratives and possesses an advantage in
efficiency and flexibility. Pre-training on large-scale data and auxiliary
sentence prediction training objective further boost the detection performance
of the sentence-level model.
- Abstract(参考訳): 本研究では, 意味的理解のための新しい場として, ナラティブ・アンコヒーレンス検出の課題を提案する。
具体的には,欠文と不一致文の検出に注目した。
単純な設定にもかかわらず、モデルが多文の物語を理解し分析し、文レベルでの一貫性を予測する必要があるため、このタスクは困難である。
この課題に向けた最初のステップとして、原文を直接解析する(\textit{token-level})か、学習した文表現を解析する(\textit{sentence-level})。
トークンレベルのモデリングは、入力に文が少なくなると性能が向上するが、文レベルのモデリングは長文の物語よりも優れ、効率性と柔軟性に優位性がある。
大規模データによる事前学習と補助文予測訓練により,文レベルのモデルの検出性能がさらに向上する。
関連論文リスト
- Sentence Representation Learning with Generative Objective rather than
Contrastive Objective [86.01683892956144]
句再構成に基づく新たな自己教師型学習目標を提案する。
我々の生成学習は、十分な性能向上を達成し、現在の最先端のコントラスト法よりも優れています。
論文 参考訳(メタデータ) (2022-10-16T07:47:46Z) - DEIM: An effective deep encoding and interaction model for sentence
matching [0.0]
本稿では,ディープエンコーディングとインタラクションに基づく文マッチング手法を提案する。
エンコーダ層では、1つの文を符号化する過程で他の文の情報を参照し、その後、アルゴリズムを用いて情報を融合する。
インタラクション層では、双方向の注意機構と自己注意機構を用いて深い意味情報を得る。
論文 参考訳(メタデータ) (2022-03-20T07:59:42Z) - Clustering and Network Analysis for the Embedding Spaces of Sentences
and Sub-Sentences [69.3939291118954]
本稿では,文とサブ文の埋め込みを対象とする包括的クラスタリングとネットワーク解析について検討する。
その結果,1つの手法が最もクラスタリング可能な埋め込みを生成することがわかった。
一般に、スパン部分文の埋め込みは、原文よりもクラスタリング特性が優れている。
論文 参考訳(メタデータ) (2021-10-02T00:47:35Z) - A New Sentence Ordering Method Using BERT Pretrained Model [2.1793134762413433]
本稿では,訓練段階を必要とせず,学習のための大きなコーパスを必要とする文順序付け手法を提案する。
提案手法は,5文ストーリーのコーパスであるROCStoriesの他のベースラインよりも優れていた。
この方法の他の利点の1つは、言語知識に対する解釈可能性と不要性である。
論文 参考訳(メタデータ) (2021-08-26T18:47:15Z) - LadRa-Net: Locally-Aware Dynamic Re-read Attention Net for Sentence
Semantic Matching [66.65398852962177]
文意味マッチングのための新しい動的再読ネットワーク(DRr-Net)を開発した。
DRr-Netをローカルに認識する動的再読み取り注意ネット(LadRa-Net)に拡張する
2つの一般的な文意味マッチングタスクの実験により、DRr-Netは文意味マッチングの性能を大幅に改善できることを示した。
論文 参考訳(メタデータ) (2021-08-06T02:07:04Z) - Evaluating Document Coherence Modelling [37.287725949616934]
英語文侵入検出タスクにおけるプリトレーニング済みLMの広い範囲の性能を検討する。
実験の結果,事前学習したLMはドメイン内評価において顕著に機能するが,クロスドメイン設定の大幅な低下を経験することがわかった。
論文 参考訳(メタデータ) (2021-03-18T10:05:06Z) - Unsupervised Extractive Summarization by Pre-training Hierarchical
Transformers [107.12125265675483]
教師なし抽出文書要約は、訓練中にラベル付き要約を用いることなく、文書から重要な文章を選択することを目的としている。
既存の手法は主にグラフベースで、文をノードとして、エッジの重みは文の類似性によって測定される。
教師なし抽出要約のための文のランク付けにはトランスフォーマーの注意が利用できることがわかった。
論文 参考訳(メタデータ) (2020-10-16T08:44:09Z) - Document-Level Event Role Filler Extraction using Multi-Granularity
Contextualized Encoding [40.13163091122463]
イベントロールフィラーに対応するテキストの幅を決定するために、より大きなコンテキストのビューを必要とするため、イベント抽出は難しいタスクである。
まず、文書レベルのロールフィラー抽出において、エンドツーエンドのニューラルシーケンスモデルがどのように機能するかを検討する。
私たちの最高のシステムは、以前の作業よりもかなり優れたパフォーマンスを示します。
論文 参考訳(メタデータ) (2020-05-13T20:42:17Z) - Toward Better Storylines with Sentence-Level Language Models [54.91921545103256]
本稿では,文章中の次の文を選択する文レベル言語モデルを提案する。
教師なしストーリークローゼタスクにおける最先端の精度によるアプローチの有効性を実証する。
論文 参考訳(メタデータ) (2020-05-11T16:54:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。