論文の概要: Answer Consolidation: Formulation and Benchmarking
- arxiv url: http://arxiv.org/abs/2205.00042v1
- Date: Fri, 29 Apr 2022 18:57:23 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-03 14:30:56.698988
- Title: Answer Consolidation: Formulation and Benchmarking
- Title(参考訳): 回答統合:定式化とベンチマーク
- Authors: Wenxuan Zhou, Qiang Ning, Heba Elfardy, Kevin Small, Muhao Chen
- Abstract要約: 我々は、回答を複数のグループに分割する、回答統合の問題を定式化する。
包括的で非冗長な答えの集合は、各グループから1つの答えを選択することで構成できる。
最高のパフォーマンスの教師付きモデルによって達成される有望なパフォーマンスにもかかわらず、このタスクにはさらなる改善の余地があると考えています。
- 参考スコア(独自算出の注目度): 35.38034364777484
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Current question answering (QA) systems primarily consider the single-answer
scenario, where each question is assumed to be paired with one correct answer.
However, in many real-world QA applications, multiple answer scenarios arise
where consolidating answers into a comprehensive and non-redundant set of
answers is a more efficient user interface. In this paper, we formulate the
problem of answer consolidation, where answers are partitioned into multiple
groups, each representing different aspects of the answer set. Then, given this
partitioning, a comprehensive and non-redundant set of answers can be
constructed by picking one answer from each group. To initiate research on
answer consolidation, we construct a dataset consisting of 4,699 questions and
24,006 sentences and evaluate multiple models. Despite a promising performance
achieved by the best-performing supervised models, we still believe this task
has room for further improvements.
- Abstract(参考訳): 現在の質問応答(qa)システムは、主に単一回答のシナリオを考慮し、各質問は1つの正しい回答と組み合わせられると仮定される。
しかし、多くの現実世界のqaアプリケーションでは、回答を包括的かつ非冗長な回答の集合に統合する複数の回答シナリオが生まれます。
本稿では,回答集合の異なる側面を表す複数のグループに解を分割する解集合の問題を定式化する。
そして、この分割を考えると、各グループから1つの回答を選択することで、包括的かつ非冗長な回答の集合を構築することができる。
4,699の質問と24,006の文からなるデータセットを構築し,複数のモデルを評価する。
最高のパフォーマンスの教師付きモデルによって達成される有望なパフォーマンスにもかかわらず、このタスクにはさらなる改善の余地があると考えています。
関連論文リスト
- Aspect-oriented Consumer Health Answer Summarization [2.298110639419913]
コミュニティ質問回答(Community Question-Answering、CQA)フォーラムは、人々が情報を求める方法、特に医療ニーズに関連するものに革命をもたらした。
単一のクエリに対する応答にはいくつかの回答があるため、特定の健康上の懸念に関連する重要な情報を把握することが難しくなる。
本研究は、この制限に対処するために、側面に基づく健康回答の要約に焦点を当てている。
論文 参考訳(メタデータ) (2024-05-10T07:52:43Z) - Federated Prompting and Chain-of-Thought Reasoning for Improving LLMs
Answering [13.735277588793997]
クラウドベースLarge Language Models (LLMs) を用いた分散ユーザによる質問に対する回答精度の向上について検討する。
本研究は,同じ数学的推論ステップと問題解決手順を含む類似のクエリをユーザが質問する典型的な状況に焦点を当てる。
本稿では,自己整合性(SC)とCoT(Chain-of-Thought)技術を用いて,分散同義語質問を改善することを提案する。
論文 参考訳(メタデータ) (2023-04-27T01:48:03Z) - Successive Prompting for Decomposing Complex Questions [50.00659445976735]
最近の研究は、大規模言語モデル(LM)の機能を活用して、数ショットで複雑な質問応答を行う。
そこでは、複雑なタスクを単純なタスクに繰り返し分解し、それを解決し、最終解を得るまでプロセスを繰り返します。
我々の最良のモデル(逐次プロンプト付き)は、DROPデータセットの数ショットバージョンにおいて、5%の絶対F1の改善を実現します。
論文 参考訳(メタデータ) (2022-12-08T06:03:38Z) - Co-VQA : Answering by Interactive Sub Question Sequence [18.476819557695087]
本稿では,質問者,Oracle,Answererの3つのコンポーネントからなる対話型VQAフレームワークを提案する。
モデル毎に教師あり学習を行うために,VQA 2.0 と VQA-CP v2 データセット上で,各質問に対する SQS を構築する方法を提案する。
論文 参考訳(メタデータ) (2022-04-02T15:09:16Z) - AnswerSumm: A Manually-Curated Dataset and Pipeline for Answer
Summarization [73.91543616777064]
Stack OverflowやYahoo!のようなコミュニティ質問回答(CQA)フォーラムには、幅広いコミュニティベースの質問に対する回答の豊富なリソースが含まれている。
回答の要約の1つのゴールは、回答の視点の範囲を反映した要約を作成することである。
本研究は,専門言語学者による解答要約のための4,631個のCQAスレッドからなる新しいデータセットを導入する。
論文 参考訳(メタデータ) (2021-11-11T21:48:02Z) - GooAQ: Open Question Answering with Diverse Answer Types [63.06454855313667]
さまざまな回答型を持つ大規模データセットであるGooAQを紹介する。
このデータセットには500万の質問と300万の回答が含まれている。
論文 参考訳(メタデータ) (2021-04-18T05:40:39Z) - Multi-Perspective Abstractive Answer Summarization [76.10437565615138]
コミュニティ質問応答フォーラムには、幅広い質問に対する回答の豊富なリソースが含まれている。
マルチパースペクティブな回答要約の目標は、答えのすべての観点を含む要約を作成することである。
本研究は,多視点抽象要約を自動生成する新しいデータセット作成手法を提案する。
論文 参考訳(メタデータ) (2021-04-17T13:15:29Z) - Diverse and Non-redundant Answer Set Extraction on Community QA based on
DPPs [18.013010857062643]
コミュニティベースの質問応答プラットフォームでは、ユーザが多くの回答の中から有用な情報を得るのに時間がかかる。
本稿では,回答のランク付けよりも多様で非冗長な回答セットを選択することを提案する。
論文 参考訳(メタデータ) (2020-11-18T07:33:03Z) - Unsupervised Question Decomposition for Question Answering [102.56966847404287]
本論文では, ワンツーNアン教師付きシーケンスシーケンス(ONUS)のアルゴリズムを提案する。
当初,ドメイン外,マルチホップ開発セットのベースラインが強かったため,HotpotQAでは大きなQA改善が見られた。
論文 参考訳(メタデータ) (2020-02-22T19:40:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。