論文の概要: Answering Ambiguous Questions through Generative Evidence Fusion and
Round-Trip Prediction
- arxiv url: http://arxiv.org/abs/2011.13137v2
- Date: Sun, 30 May 2021 07:07:19 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-20 08:13:29.474658
- Title: Answering Ambiguous Questions through Generative Evidence Fusion and
Round-Trip Prediction
- Title(参考訳): 生成的証拠融合とラウンドトリップ予測によるあいまいな質問への回答
- Authors: Yifan Gao, Henghui Zhu, Patrick Ng, Cicero Nogueira dos Santos, Zhiguo
Wang, Feng Nan, Dejiao Zhang, Ramesh Nallapati, Andrew O. Arnold, Bing Xiang
- Abstract要約: 本稿では,複数の通路からの証拠を集約し,一つの回答や質問対の集合を適応的に予測するモデルを提案する。
我々のモデルはRefuelと呼ばれ、AmbigQAデータセット上で新しい最先端のパフォーマンスを実現し、NQ-OpenおよびTriviaQA上での競合性能を示す。
- 参考スコア(独自算出の注目度): 46.38201136570501
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: In open-domain question answering, questions are highly likely to be
ambiguous because users may not know the scope of relevant topics when
formulating them. Therefore, a system needs to find possible interpretations of
the question, and predict one or multiple plausible answers. When multiple
plausible answers are found, the system should rewrite the question for each
answer to resolve the ambiguity. In this paper, we present a model that
aggregates and combines evidence from multiple passages to adaptively predict a
single answer or a set of question-answer pairs for ambiguous questions. In
addition, we propose a novel round-trip prediction approach to iteratively
generate additional interpretations that our model fails to find in the first
pass, and then verify and filter out the incorrect question-answer pairs to
arrive at the final disambiguated output. Our model, named Refuel, achieves a
new state-of-the-art performance on the AmbigQA dataset, and shows competitive
performance on NQ-Open and TriviaQA. The proposed round-trip prediction is a
model-agnostic general approach for answering ambiguous open-domain questions,
which improves our Refuel as well as several baseline models. We release source
code for our models and experiments at
https://github.com/amzn/refuel-open-domain-qa.
- Abstract(参考訳): オープンドメインの質問応答では、ユーザは関連するトピックのスコープを知らない可能性があるため、質問は曖昧になりがちである。
したがって、システムは問題の可能な解釈を見つけ、1つまたは複数の妥当な答えを予測する必要がある。
複数の妥当な答えが見つかると、システムは曖昧さを解決するために各回答の質問を書き直す必要がある。
本稿では,複数の通路から証拠を集約・結合し,一対の質問対や質問対を適応的に予測するモデルを提案する。
さらに,提案手法では,提案するモデルが第1パスで見つからない解釈を反復的に生成し,不正確な問合せ対が最終的な不明瞭な出力に到達することを検証し,フィルタリングする。
我々のモデルはRefuelと呼ばれ、AmbigQAデータセット上で新しい最先端のパフォーマンスを実現し、NQ-OpenおよびTriviaQA上での競合性能を示す。
提案するラウンドトリップ予測はあいまいなオープンドメインの質問に答えるためのモデルに依存しない一般的なアプローチである。
私たちは、モデルと実験のソースコードをhttps://github.com/amzn/refuel-open-domain-qaでリリースします。
関連論文リスト
- Answering Ambiguous Questions via Iterative Prompting [84.3426020642704]
オープンドメインの質問応答では、質問のあいまいさのため、複数の妥当な回答が存在する可能性がある。
ひとつのアプローチは、すべての有効な回答を直接予測することですが、これは、妥当性と多様性のバランスに苦労する可能性があります。
本稿では,あいまいな疑問に答える既存手法の欠陥に対処するため,AmbigPromptを提案する。
論文 参考訳(メタデータ) (2023-07-08T04:32:17Z) - Model Analysis & Evaluation for Ambiguous Question Answering [0.0]
質問回答モデルは、しばしば矛盾する情報の断片を組み合わせた長文の回答を生成するために必要である。
この分野の最近の進歩は、流動的な応答を発生させる強力な能力を示しているが、いくつかの研究課題は未解決のままである。
これらの側面を徹底的に調査し、現在のアプローチの限界について貴重な洞察を提供することを目指しています。
論文 参考訳(メタデータ) (2023-05-21T15:20:20Z) - Realistic Conversational Question Answering with Answer Selection based
on Calibrated Confidence and Uncertainty Measurement [54.55643652781891]
対話型質問回答モデル(ConvQA)は,会話中に複数回発生した質問文と過去の質問文のペアを用いて質問に回答することを目的としている。
本稿では,会話履歴における不正確な回答を,ConvQAモデルから推定された信頼度と不確実性に基づいてフィルタリングすることを提案する。
我々は2つの標準ConvQAデータセット上で、回答選択に基づくリアルな会話質問回答モデルの有効性を検証する。
論文 参考訳(メタデータ) (2023-02-10T09:42:07Z) - CREPE: Open-Domain Question Answering with False Presuppositions [92.20501870319765]
オンライン情報検索フォーラムからの予測失敗の自然な分布を含むQAデータセットであるCREPEを紹介する。
25%の質問が偽の前提命題を含み、これらの前提命題とその修正のための注釈を提供する。
既存のオープンドメインQAモデルの適応は適度に予測できるが、仮定が実際に正しいかどうかを予測するのに苦労する。
論文 参考訳(メタデータ) (2022-11-30T18:54:49Z) - A Wrong Answer or a Wrong Question? An Intricate Relationship between
Question Reformulation and Answer Selection in Conversational Question
Answering [15.355557454305776]
会話の文脈における質問書き直し(QR)は、この現象により多くの光を放つことができることを示す。
TREC CAsT と QuAC (CANARD) のデータセットを用いて解析を行った。
論文 参考訳(メタデータ) (2020-10-13T06:29:51Z) - Robust Question Answering Through Sub-part Alignment [53.94003466761305]
我々はアライメント問題として質問応答をモデル化する。
私たちは、SQuAD v1.1でモデルをトレーニングし、いくつかの逆および外ドメインデータセットでそれをテストします。
論文 参考訳(メタデータ) (2020-04-30T09:10:57Z) - AmbigQA: Answering Ambiguous Open-domain Questions [99.59747941602684]
我々はAmbigQAを紹介した。AmbigQAは、あらゆる可能な答えを見つけることを含む、新しいオープンドメインの質問応答タスクである。
この課題を研究するために,NQ-openから14,042質問をカバーしたデータセットAmbigNQを構築した。
NQオープンの質問の半数以上が曖昧で、イベントやエンティティ参照といった曖昧さの源泉が多様であることがわかった。
論文 参考訳(メタデータ) (2020-04-22T15:42:13Z) - Rephrasing visual questions by specifying the entropy of the answer
distribution [0.0]
本稿では,質問のあいまいさを制御し,新しい課題を提案する。
視覚的質問のあいまいさは、VQAモデルによって予測される回答分布のエントロピーを用いて定義される。
我々は,質問のあいまいさを制御できるアプローチの利点を実証し,あいまいさを減らすことよりも増大が難しいという興味深い観察を行った。
論文 参考訳(メタデータ) (2020-04-10T09:32:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。