論文の概要: Are Current Task-oriented Dialogue Systems Able to Satisfy Impolite
Users?
- arxiv url: http://arxiv.org/abs/2210.12942v1
- Date: Mon, 24 Oct 2022 04:11:52 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-25 16:44:36.294580
- Title: Are Current Task-oriented Dialogue Systems Able to Satisfy Impolite
Users?
- Title(参考訳): 現在のタスク指向対話システムはユーザ満足度が高いか?
- Authors: Zhiqiang Hu, Roy Kaa-Wei Lee, Nancy F. Chen
- Abstract要約: 我々は,不規則な対話コーパスを構築し,最先端のTODシステムを評価する実験を行った。
実験の結果,既存のTODシステムでは不規則な発話を処理できないことがわかった。
また,不規則対話におけるTOD性能向上のためのデータ拡張手法を提案する。
- 参考スコア(独自算出の注目度): 26.066439234012275
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Task-oriented dialogue (TOD) systems have assisted users on many tasks,
including ticket booking and service inquiries. While existing TOD systems have
shown promising performance in serving customer needs, these systems mostly
assume that users would interact with the dialogue agent politely. This
assumption is unrealistic as impatient or frustrated customers may also
interact with TOD systems impolitely. This paper aims to address this research
gap by investigating impolite users' effects on TOD systems. Specifically, we
constructed an impolite dialogue corpus and conducted extensive experiments to
evaluate the state-of-the-art TOD systems on our impolite dialogue corpus. Our
experimental results show that existing TOD systems are unable to handle
impolite user utterances. We also present a data augmentation method to improve
TOD performance in impolite dialogues. Nevertheless, handling impolite
dialogues remains a very challenging research task. We hope by releasing the
impolite dialogue corpus and establishing the benchmark evaluations, more
researchers are encouraged to investigate this new challenging research task.
- Abstract(参考訳): タスク指向対話(tod)システムは、チケット予約やサービス問い合わせなど、多くのタスクのユーザを支援する。
既存のtodシステムは、顧客のニーズに応える上で有望な性能を示しているが、これらのシステムは、ユーザが対話エージェントと丁寧に対話することを想定している。
この仮定は非現実的であり、不愉快な顧客やフラストレーションのある顧客はTODシステムと不当に対話する可能性がある。
本稿は,TODシステムに対するユーザの影響を調査することで,この研究ギャップに対処することを目的とする。
具体的には,無作為対話コーパスを構築し,無作為対話コーパスの最先端todシステムを評価するための広範な実験を行った。
実験の結果,既存のtodシステムは不適切なユーザの発話を処理できないことがわかった。
また,不規則対話におけるTOD性能向上のためのデータ拡張手法を提案する。
それでも、不規則な対話を扱うことは、非常に難しい研究課題である。
インポライトな対話コーパスを公開し、ベンチマーク評価を確立することで、この新たな挑戦的な研究課題を調査できることを願っている。
関連論文リスト
- Are cascade dialogue state tracking models speaking out of turn in
spoken dialogues? [1.786898113631979]
本稿では,対話状態追跡のような複雑な環境下でのアートシステムのエラーを包括的に解析する。
音声MultiWozに基づいて、音声対話システムとチャットベースの対話システムとのギャップを埋めるためには、非カテゴリースロットの値の誤差に対処することが不可欠である。
論文 参考訳(メタデータ) (2023-11-03T08:45:22Z) - Enhancing Large Language Model Induced Task-Oriented Dialogue Systems
Through Look-Forward Motivated Goals [76.69419538047813]
ProToDアプローチは、将来の対話行動を予測し、ToDシステムを強化するためにゴール指向の報酬シグナルを組み込む。
本稿では,目標駆動型対話シミュレーションに基づくToDシステム評価手法を提案する。
また,MultiWoZ 2.1データセットを用いた実験により,データの10%しか利用せず,優れた性能が得られることを示した。
論文 参考訳(メタデータ) (2023-09-16T10:56:00Z) - A Survey on Proactive Dialogue Systems: Problems, Methods, and Prospects [100.75759050696355]
本稿では,対話エージェントの多種多様な対話における能動性に関する顕著な問題と先進的な設計について概説する。
我々は、現実世界のアプリケーションのニーズを満たすが、将来もっと研究に焦点を当てる必要がある課題について議論する。
論文 参考訳(メタデータ) (2023-05-04T11:38:49Z) - A Chit-Chats Enhanced Task-Oriented Dialogue Corpora for Fuse-Motive
Conversation Systems [9.541995537438394]
CCET (China Chat-Enhanced-Task) と呼ばれるマルチターン対話データセットをリリースする。
本稿では, CC音声で統合されたTODセッションの評価指標とともに, ヒューズ動機対話の形式化手法を提案する。
論文 参考訳(メタデータ) (2022-05-12T05:43:18Z) - User Satisfaction Estimation with Sequential Dialogue Act Modeling in
Goal-oriented Conversational Systems [65.88679683468143]
我々は,ユーザ満足度を予測するために,対話行動の逐次的ダイナミクスを取り入れた新しいフレームワーク,すなわちUSDAを提案する。
USDAは、ユーザの満足度を予測するために、コンテンツと行動機能の連続的な遷移を対話に取り入れている。
4つのベンチマーク目標指向対話データセットによる実験結果から,提案手法はUSEの既存手法よりも大幅に優れていた。
論文 参考訳(メタデータ) (2022-02-07T02:50:07Z) - Task-oriented Dialogue Systems: performance vs. quality-optima, a review [0.0]
最先端のタスク指向対話システムは、まだその可能性を最大限に発揮できていない。
他の会話の品質特性は、会話の成功を示すもの、そうでなければ、無視されることがある。
本稿では,対話システムの評価枠組みと対話システムにおける会話品質特性の役割について考察する。
論文 参考訳(メタデータ) (2021-12-21T13:16:24Z) - Automatic Evaluation and Moderation of Open-domain Dialogue Systems [59.305712262126264]
研究者が悩む長きにわたる課題は、効果的な自動評価指標の欠如である。
本稿では, 対話システム技術チャレンジ10(DSTC10)におけるトラック5で得られたデータ, ベースライン, 結果について述べる。
論文 参考訳(メタデータ) (2021-11-03T10:08:05Z) - UniDS: A Unified Dialogue System for Chit-Chat and Task-oriented
Dialogues [59.499965460525694]
上記の2つのスキルを備えた統合対話システム(UniDS)を提案する。
我々は、チャットとタスク指向の対話の両方に対応可能な統合対話データスキーマを設計する。
我々は、事前訓練されたチャット対話モデルから混合対話データでUniDSを訓練する。
論文 参考訳(メタデータ) (2021-10-15T11:56:47Z) - Recent Advances and Challenges in Task-oriented Dialog System [63.82055978899631]
課題指向対話システムは、学術・産業社会でますます注目を集めている。
タスク指向ダイアログシステムにおける3つの重要なトピックについて論じる。(1)低リソース環境でのダイアログモデリングを容易にするデータ効率の改善、(2)ダイアログポリシー学習のためのマルチターンダイナミクスのモデリング、(3)ダイアログモデルへのドメイン知識の統合。
論文 参考訳(メタデータ) (2020-03-17T01:34:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。