論文の概要: Text and Audio Simplification: Human vs. ChatGPT
- arxiv url: http://arxiv.org/abs/2405.01592v1
- Date: Mon, 29 Apr 2024 21:00:33 GMT
- ステータス: 処理完了
- システム内更新日: 2024-05-06 16:58:34.528203
- Title: Text and Audio Simplification: Human vs. ChatGPT
- Title（参考訳）: テキストと音声の単純化: Human vs. ChatGPT
- Authors: Gondy Leroy, David Kauchak, Philip Harber, Ankit Pal, Akash Shukla,
- Abstract要約: テキストの難易度を示す14の指標を用いて,人間とチャットGPTの簡易テキストを比較した。
単純なコーパスは人間の簡易テキストとの類似性が高いことがわかった。
医学領域の専門家による評価では、ChatGPTスタイルが好まれていたが、内容保持のためにテキスト自体が低く評価された。
- 参考スコア（独自算出の注目度）: 1.0785332257549372
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Text and audio simplification to increase information comprehension are important in healthcare. With the introduction of ChatGPT, an evaluation of its simplification performance is needed. We provide a systematic comparison of human and ChatGPT simplified texts using fourteen metrics indicative of text difficulty. We briefly introduce our online editor where these simplification tools, including ChatGPT, are available. We scored twelve corpora using our metrics: six text, one audio, and five ChatGPT simplified corpora. We then compare these corpora with texts simplified and verified in a prior user study. Finally, a medical domain expert evaluated these texts and five, new ChatGPT simplified versions. We found that simple corpora show higher similarity with the human simplified texts. ChatGPT simplification moves metrics in the right direction. The medical domain expert evaluation showed a preference for the ChatGPT style, but the text itself was rated lower for content retention.
- Abstract（参考訳）: 医療において、情報理解を高めるためのテキストと音声の簡易化が重要である。
ChatGPTの導入により、その簡易化性能の評価が必要とされる。
テキストの難易度を示す14の指標を用いて,人間とチャットGPTの簡易テキストを体系的に比較する。
本稿では,ChatGPTなどの簡易ツールが利用可能となるオンラインエディタについて紹介する。
測定値を用いて12のコーパス,6つのテキスト,1つのオーディオ,5つのChatGPT簡易コーパスを測定した。
次に、これらのコーパスを、前回のユーザ調査で単純化されたテキストと検証したテキストと比較する。
最後に、医療分野の専門家がこれらのテキストと5つの新しいChatGPT簡易版を評価した。
単純なコーパスは人間の簡易テキストとの類似性が高いことがわかった。
ChatGPTの単純化はメトリクスを正しい方向に移動させる。
医学領域の専門家による評価では、ChatGPTスタイルが好まれていたが、内容保持のためにテキスト自体が低評価であった。
関連論文リスト
- Evaluating LLMs for Targeted Concept Simplification for Domain-Specific Texts [53.421616210871704]
コンテクストの欠如と難解な概念に対する不慣れさは、大人の読者がドメイン固有のテキストに難渋する大きな理由である。
テキストの書き直しを簡略化し,不慣れな概念を含むテキストの理解を支援する「目標概念の簡略化」を提案する。
本研究は,オープンソースおよび商用LLMの性能と,この課題に対する簡単な辞書ベースラインのベンチマークを行う。
論文 参考訳（メタデータ） (2024-10-28T05:56:51Z) - Role of Dependency Distance in Text Simplification: A Human vs ChatGPT Simplification Comparison [1.1571000076281823]
文法的難易度が増大する220の文は、人間の専門家とChatGPTによって単純化された。
その結果, 3つの文集合は, 平均依存距離が異なり, 原文集合の最上位, 後続のChatGPT簡易文, 人為的簡易文は平均依存距離が低かった。
論文 参考訳（メタデータ） (2024-05-20T17:43:17Z) - Using ChatGPT as a CAT tool in Easy Language translation [0.7499722271664147]
我々はChatGPTを使用して、言語と全体主義という2つの戦略を用いて、ドイツの公共機関のウェブサイトから選ばれたテキストを翻訳する。
その結果, 生成したテキストは標準テキストよりも容易であるが, 確立された Easy Language 標準を十分に満たしていないことがわかった。
論文 参考訳（メタデータ） (2023-08-22T16:59:31Z) - Is ChatGPT Involved in Texts? Measure the Polish Ratio to Detect
ChatGPT-Generated Text [48.36706154871577]
我々はHPPT(ChatGPT-polished academic abstracts)と呼ばれる新しいデータセットを紹介する。
純粋なChatGPT生成テキストの代わりに、人書きとChatGPTポリケートされた抽象文のペアを構成することで、既存のコーパスから分岐する。
また,ChatGPTによる修正の度合いを,オリジナルの人文テキストと比較した革新的な尺度であるPolish Ratio法を提案する。
論文 参考訳（メタデータ） (2023-07-21T06:38:37Z) - Text Simplification of Scientific Texts for Non-Expert Readers [3.4761212729163318]
科学的な抽象化の単純化は、非専門家がコア情報にアクセスするのに役立つ。
これは、例えば、新しい治療法について読んでいるがん患者に特に関係している。
論文 参考訳（メタデータ） (2023-07-07T13:05:11Z) - Multilingual Simplification of Medical Texts [49.469685530201716]
4つの言語で医療領域のための文章整列型多言語テキスト単純化データセットであるMultiCochraneを紹介する。
これらの言語にまたがる微調整およびゼロショットモデルの評価を行い,人間による評価と分析を行った。
モデルは、実行可能な単純化されたテキストを生成することができるが、このデータセットが扱う可能性のある、卓越した課題を特定する。
論文 参考訳（メタデータ） (2023-05-21T18:25:07Z) - ChatGPT for Us: Preserving Data Privacy in ChatGPT via Dialogue Text
Ambiguation to Expand Mental Health Care Delivery [52.73936514734762]
ChatGPTは人間のような対話を生成する能力で人気を集めている。
データに敏感なドメインは、プライバシとデータ所有に関する懸念から、ChatGPTを使用する際の課題に直面している。
ユーザのプライバシーを守るためのテキスト曖昧化フレームワークを提案する。
論文 参考訳（メタデータ） (2023-05-19T02:09:52Z) - Differentiate ChatGPT-generated and Human-written Medical Texts [8.53416950968806]
この研究は、医学における責任と倫理的AIGC(Artificial Intelligence Generated Content)に関する最初の研究である。
本稿では,ChatGPTによる人的専門家による医療用テキストの差異の分析に焦点をあてる。
次のステップでは、これらの2種類の内容の言語的特徴を分析し、語彙、部分音声、依存性、感情、難易度などの違いを明らかにする。
論文 参考訳（メタデータ） (2023-04-23T07:38:07Z) - To ChatGPT, or not to ChatGPT: That is the question! [78.407861566006]
本研究は,ChatGPT検出における最新の手法を包括的かつ現代的に評価するものである。
我々は、ChatGPTと人間からのプロンプトからなるベンチマークデータセットをキュレートし、医療、オープンQ&A、ファイナンスドメインからの多様な質問を含む。
評価の結果,既存の手法ではChatGPT生成内容を効果的に検出できないことがわかった。
論文 参考訳（メタデータ） (2023-04-04T03:04:28Z) - Is ChatGPT A Good Translator? Yes With GPT-4 As The Engine [97.8609714773255]
機械翻訳におけるChatGPTの評価には,翻訳プロンプト,多言語翻訳,翻訳堅牢性などが含まれる。
ChatGPTは商用翻訳製品と競合するが、低リソースや遠方の言語では遅れている。
GPT-4エンジンの打ち上げにより、ChatGPTの翻訳性能は大幅に向上した。
論文 参考訳（メタデータ） (2023-01-20T08:51:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。