論文の概要: Generating Fluent Fact Checking Explanations with Unsupervised
Post-Editing
- arxiv url: http://arxiv.org/abs/2112.06924v1
- Date: Mon, 13 Dec 2021 15:31:07 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-15 14:39:25.632241
- Title: Generating Fluent Fact Checking Explanations with Unsupervised
Post-Editing
- Title(参考訳): unsupervised post-editing によるfluent factcheck 説明の生成
- Authors: Shailza Jolly, Pepa Atanasova, Isabelle Augenstein
- Abstract要約: 本稿では,句レベルの編集のみを用いて,支配コメントの教師なし後編集を行う反復編集アルゴリズムを提案する。
本モデルでは, 流動性, 可読性, 非冗長性, 事実チェックのための重要な情報をカバーする説明文を生成する。
- 参考スコア(独自算出の注目度): 22.5444107755288
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Fact-checking systems have become important tools to verify fake and
misguiding news. These systems become more trustworthy when human-readable
explanations accompany the veracity labels. However, manual collection of such
explanations is expensive and time-consuming. Recent works frame explanation
generation as extractive summarization, and propose to automatically select a
sufficient subset of the most important facts from the ruling comments (RCs) of
a professional journalist to obtain fact-checking explanations. However, these
explanations lack fluency and sentence coherence. In this work, we present an
iterative edit-based algorithm that uses only phrase-level edits to perform
unsupervised post-editing of disconnected RCs. To regulate our editing
algorithm, we use a scoring function with components including fluency and
semantic preservation. In addition, we show the applicability of our approach
in a completely unsupervised setting. We experiment with two benchmark
datasets, LIAR-PLUS and PubHealth. We show that our model generates
explanations that are fluent, readable, non-redundant, and cover important
information for the fact check.
- Abstract(参考訳): フェイクチェックシステムは、偽ニュースや誤報を検証するための重要なツールとなっている。
これらのシステムは、人間が読める説明がveracityラベルに付随すると、より信頼できるものになる。
しかし、手作業による説明の収集は高価で時間がかかります。
近年の作業フレーム説明生成を抽出要約として,専門家ジャーナリストのコメント(RC)から重要な事実の十分なサブセットを自動的に選択し,事実確認説明を得る方法を提案する。
しかし、これらの説明は流血性や文の一貫性に欠ける。
本研究では,句レベルの編集のみを用いた反復的な編集に基づくアルゴリズムを提案する。
編集アルゴリズムの調整には,フラレンシや意味保存などの要素を用いたスコアリング機能を用いる。
さらに、完全に教師なしの環境で、我々のアプローチの適用性を示す。
LIAR-PLUSとPubHealthの2つのベンチマークデータセットを実験した。
本モデルでは, 流動性, 可読性, 非冗長性, 事実チェックのための重要な情報をカバーする説明文を生成する。
関連論文リスト
- Analysing Zero-Shot Readability-Controlled Sentence Simplification [54.09069745799918]
本研究では,異なる種類の文脈情報が,所望の可読性を持つ文を生成するモデルの能力に与える影響について検討する。
結果から,全ての試験されたモデルは,原文の制限や特徴のため,文の簡略化に苦慮していることがわかった。
実験では、RCTSに合わせたより良い自動評価指標の必要性も強調した。
論文 参考訳(メタデータ) (2024-09-30T12:36:25Z) - Evaluating Evidence Attribution in Generated Fact Checking Explanations [48.776087871960584]
生成した説明文の属性品質を評価するために,新しい評価プロトコル,引用マスキングとリカバリを導入する。
実験により、最高の性能を持つLSMは、不正確な属性を持つ説明を生成することが明らかとなった。
より良い説明を生み出すには人為的な証拠が不可欠である。
論文 参考訳(メタデータ) (2024-06-18T14:13:13Z) - Explanation Selection Using Unlabeled Data for Chain-of-Thought
Prompting [80.9896041501715]
非専門家によって書かれたオフ・ザ・シェルフの説明のように、タスクのために"チューニング"されていない説明は、中途半端なパフォーマンスをもたらす可能性がある。
本稿では,ブラックボックス方式で説明拡散プロンプトを最適化する方法の課題に対処する。
論文 参考訳(メタデータ) (2023-02-09T18:02:34Z) - WeCheck: Strong Factual Consistency Checker via Weakly Supervised
Learning [40.5830891229718]
本稿では,複数のリソースを集約して,正確かつ効率的な実測値(WeCheck)をトレーニングする,弱教師付きフレームワークを提案する。
様々なタスクに関する総合的な実験は、平均してTRUEベンチマークにおける従来の最先端手法よりも3.4%の絶対的な改善を実現するWeCheckの強い性能を示す。
論文 参考訳(メタデータ) (2022-12-20T08:04:36Z) - Grounded Keys-to-Text Generation: Towards Factual Open-Ended Generation [92.1582872870226]
そこで我々は,新しい接地型キー・ツー・テキスト生成タスクを提案する。
タスクは、ガイドキーと接地パスのセットが与えられたエンティティに関する事実記述を生成することである。
近年のQAに基づく評価手法に着想を得て,生成した記述の事実的正当性を示す自動計量MAFEを提案する。
論文 参考訳(メタデータ) (2022-12-04T23:59:41Z) - Factual Error Correction for Abstractive Summaries Using Entity
Retrieval [57.01193722520597]
本稿では,エンティティ検索後処理に基づく効率的な事実誤り訂正システムRFECを提案する。
RFECは、原文と対象要約とを比較して、原文から証拠文を検索する。
次に、RFECは、エビデンス文を考慮し、要約中のエンティティレベルのエラーを検出し、エビデンス文から正確なエンティティに置換する。
論文 参考訳(メタデータ) (2022-04-18T11:35:02Z) - Assessing Effectiveness of Using Internal Signals for Check-Worthy Claim
Identification in Unlabeled Data for Automated Fact-Checking [6.193231258199234]
本稿では,偽ニュース記事からチェック価値のあるクレーム文を特定する手法について検討する。
我々は2つの内部監督信号(見出しと抽象的な要約)を利用して文をランク付けする。
見出しは、ファクトチェックのWebサイトがクレームを記述する方法とよく似ているが、要約ベースのパイプラインは、エンドツーエンドのファクトチェックシステムにとって最も有望である。
論文 参考訳(メタデータ) (2021-11-02T16:17:20Z) - Factual Error Correction of Claims [18.52583883901634]
本稿では,事実誤り訂正の課題を紹介する。
誤情報を含む文章を修正するメカニズムを提供します。
これは、すでに証拠によって部分的に支持されている主張に固有の説明として機能する。
論文 参考訳(メタデータ) (2020-12-31T18:11:26Z) - Generating Fact Checking Explanations [52.879658637466605]
まだ欠けているパズルの重要なピースは、プロセスの最も精巧な部分を自動化する方法を理解することです。
本稿では、これらの説明を利用可能なクレームコンテキストに基づいて自動生成する方法について、最初の研究を行う。
この結果から,個別に学習するのではなく,両目標を同時に最適化することで,事実確認システムの性能が向上することが示唆された。
論文 参考訳(メタデータ) (2020-04-13T05:23:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。