論文の概要: Generative Long-form Question Answering: Relevance, Faithfulness and
Succinctness
- arxiv url: http://arxiv.org/abs/2211.08386v1
- Date: Tue, 15 Nov 2022 18:36:01 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-16 13:14:38.195418
- Title: Generative Long-form Question Answering: Relevance, Faithfulness and
Succinctness
- Title(参考訳): 生成的長文質問応答:関連性、忠実性、簡潔性
- Authors: Dan Su
- Abstract要約: Long Form Question Answering (LFQA) は、ある質問に対して、より深い、項長の回答を生成することを目的としている。
LFQAシステムを効果的に構築する作業はほとんど行われていない。
1)質問関連性,2)回答忠実性,3)回答簡潔性の観点から回答品質を改善するための研究の方向性を開拓した。
- 参考スコア(独自算出の注目度): 9.770663160391287
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: In this thesis, we investigated the relevance, faithfulness, and succinctness
aspects of Long Form Question Answering (LFQA). LFQA aims to generate an
in-depth, paragraph-length answer for a given question, to help bridge the gap
between real scenarios and the existing open-domain QA models which can only
extract short-span answers. LFQA is quite challenging and under-explored. Few
works have been done to build an effective LFQA system. It is even more
challenging to generate a good-quality long-form answer relevant to the query
and faithful to facts, since a considerable amount of redundant, complementary,
or contradictory information will be contained in the retrieved documents.
Moreover, no prior work has been investigated to generate succinct answers. We
are among the first to research the LFQA task. We pioneered the research
direction to improve the answer quality in terms of 1) query-relevance, 2)
answer faithfulness, and 3) answer succinctness.
- Abstract(参考訳): 本論文では,Long Form Question Answering(LFQA)の関連性,忠実性,簡潔性について検討した。
LFQAは、与えられた質問に対する詳細な項長の回答を生成し、実際のシナリオと、短い回答しか抽出できない既存のオープンドメインQAモデルとのギャップを埋めることを目指している。
LFQAは非常に困難で、探索不足です。
LFQAシステムを効果的に構築する作業はほとんど行われていない。
検索された文書にかなりの量の冗長性、補完性、あるいは矛盾する情報が含まれるため、クエリに関連する高品質な長文の回答を生成することはさらに困難である。
さらに、簡潔な回答を生成するための事前の研究は行われていない。
私たちはLFQAタスクを最初に研究しました。
答えの質を改善するために 研究の方向性を開拓し
1)クエリ関連、
2)忠実に答える、そして
3)簡潔さに答える。
関連論文リスト
- Retrieving Contextual Information for Long-Form Question Answering using Weak Supervision [23.394961301584026]
LFQA(Long-form Question answering)は、エンドユーザの質問に対する詳細な回答を生成することを目的としている。
本研究では,文脈情報の検索を最適化するために,様々な弱い監視手法を提案し,比較する。
長文の回答は、しばしばフォローアップの質問を予想することを示している。
論文 参考訳(メタデータ) (2024-10-11T08:42:02Z) - RAG-QA Arena: Evaluating Domain Robustness for Long-form Retrieval Augmented Question Answering [61.19126689470398]
Long-form RobustQA (LFRQA)は、7つの異なるドメインにわたる26Kクエリと大きなコーパスをカバーする新しいデータセットである。
RAG-QAアリーナと人間の回答品質判断は高い相関関係にあることを示す。
最も競争力のあるLLMの回答の41.3%のみがLFRQAの回答に好まれており、RAG-QAアリーナは将来の研究の挑戦的な評価プラットフォームであることを示している。
論文 参考訳(メタデータ) (2024-07-19T03:02:51Z) - Chain-of-Discussion: A Multi-Model Framework for Complex Evidence-Based Question Answering [55.295699268654545]
本稿では,オープンソースのLarge Language Model間の相乗効果を利用する新しいChain-of-Discussionフレームワークを提案する。
実験の結果,複数のLSM間の議論は回答の質を高める上で重要な役割を担っていることがわかった。
論文 参考訳(メタデータ) (2024-02-26T05:31:34Z) - Long-form Question Answering: An Iterative Planning-Retrieval-Generation
Approach [28.849548176802262]
長文質問応答(LFQA)は,段落の形で詳細な回答を生成するため,課題となる。
本稿では,反復計画,検索,生成を伴うLFQAモデルを提案する。
我々のモデルはLFQAタスクの様々なテキストおよび実測値の最先端モデルよりも優れていることがわかった。
論文 参考訳(メタデータ) (2023-11-15T21:22:27Z) - Modern Question Answering Datasets and Benchmarks: A Survey [5.026863544662493]
質問回答(QA)は、自然言語処理(NLP)の最も重要なタスクの一つである。
NLP技術を用いて、大量の非構造化コーパスに基づいて、与えられた質問に対する対応する回答を生成することを目的としている。
本稿では,ディープラーニングの時代にリリースされた,影響力あるQAデータセットについて検討する。
論文 参考訳(メタデータ) (2022-06-30T05:53:56Z) - Modeling Multi-hop Question Answering as Single Sequence Prediction [88.72621430714985]
本稿では,単純な生成手法(PathFid)を提案する。
PathFidは、マルチホップ質問に対する回答を解決するための推論プロセスを明示的にモデル化する。
実験の結果,PathFidは2つのマルチホップQAデータセットに対して高い性能向上をもたらすことが示された。
論文 参考訳(メタデータ) (2022-05-18T21:57:59Z) - ASQA: Factoid Questions Meet Long-Form Answers [35.11889930792675]
この研究は、解釈によって異なる正しい答えを持つ、あいまいな事実型問題に焦点を当てている。
曖昧な質問に対する回答は、複数の情報源からの事実情報を長文の要約にまとめるべきである。
我々は、この正確性の概念を用いて、ASQAのパフォーマンスの自動測定基準を定義します。
論文 参考訳(メタデータ) (2022-04-12T21:58:44Z) - Multifaceted Improvements for Conversational Open-Domain Question
Answering [54.913313912927045]
対話型オープンドメイン質問回答(MICQA)のための多面的改善フレームワークを提案する。
第一に、提案したKL分割に基づく正規化は、検索と解答のためのより良い質問理解をもたらすことができる。
第二に、追加されたポストランカモジュールは、より関連性の高いパスをトップにプッシュし、2アスペクトの制約で読者に選択できる。
第3に、十分に設計されたカリキュラム学習戦略は、訓練と推論の黄金の通路設定のギャップを効果的に狭め、黄金の通路支援なしで真の答えを見つけることを奨励する。
論文 参考訳(メタデータ) (2022-04-01T07:54:27Z) - Read before Generate! Faithful Long Form Question Answering with Machine
Reading [77.17898499652306]
LFQA(Long-form Question answering)は、ある質問に対する段落長の回答を生成することを目的としている。
生成と機械読取を協調的にモデル化する新しいエンドツーエンドフレームワークを提案する。
論文 参考訳(メタデータ) (2022-03-01T10:41:17Z) - Hurdles to Progress in Long-form Question Answering [34.805039943215284]
タスクの定式化は評価とデータセットの作成に関する根本的な課題を提起する。
まず,最先端性能を実現するために,注意の疎化とコントラストレトリバー学習による新しいシステムを設計する。
論文 参考訳(メタデータ) (2021-03-10T20:32:30Z) - Harvesting and Refining Question-Answer Pairs for Unsupervised QA [95.9105154311491]
教師なし質問回答(QA)を改善するための2つのアプローチを提案する。
まず、ウィキペディアから語彙的・構文的に異なる質問を抽出し、質問応答対のコーパスを自動的に構築する(RefQAと名づけられる)。
第2に、より適切な回答を抽出するためにQAモデルを活用し、RefQA上でデータを反復的に洗練する。
論文 参考訳(メタデータ) (2020-05-06T15:56:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。