論文の概要: Can AI Write Classical Chinese Poetry like Humans? An Empirical Study
Inspired by Turing Test
- arxiv url: http://arxiv.org/abs/2401.04952v1
- Date: Wed, 10 Jan 2024 06:21:47 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-11 15:15:38.275097
- Title: Can AI Write Classical Chinese Poetry like Humans? An Empirical Study
Inspired by Turing Test
- Title(参考訳): aiは人間のように漢詩を書けるのか?
チューリングテストに触発された経験的研究
- Authors: Zekun Deng, Hao Yang, Jun Wang
- Abstract要約: 本稿では,AIの詩文作成能力を評価するために,チューリングテストに触発された新しい評価フレームワークであるProFTAPを提案する。
近年の大規模言語モデル (LLM) には,人間とほとんど区別できない古典中国語の詩を書く能力があることがわかった。
- 参考スコア(独自算出の注目度): 8.539465812580612
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Some argue that the essence of humanity, such as creativity and sentiment,
can never be mimicked by machines. This paper casts doubt on this belief by
studying a vital question: Can AI compose poetry as well as humans? To answer
the question, we propose ProFTAP, a novel evaluation framework inspired by
Turing test to assess AI's poetry writing capability. We apply it on current
large language models (LLMs) and find that recent LLMs do indeed possess the
ability to write classical Chinese poems nearly indistinguishable from those of
humans. We also reveal that various open-source LLMs can outperform GPT-4 on
this task.
- Abstract(参考訳): 創造性や感情といった人間性の本質は機械によって模倣されることはないと主張する者もいる。
この論文は、AIが人間と同様に詩を構成することができるのか?
そこで我々は,AIの詩文作成能力を評価するために,チューリングテストに触発された新しい評価フレームワークであるProFTAPを提案する。
現在の大言語モデル(LLM)に適用し,近年のLLMには,人間とほとんど区別できない古典中国語の詩を書く能力があることがわかった。
また,様々なオープンソース LLM が GPT-4 より優れていることも明らかにした。
関連論文リスト
- AI as Humanity's Salieri: Quantifying Linguistic Creativity of Language Models via Systematic Attribution of Machine Text against Web Text [53.15652021126663]
本稿では、テキストの言語的創造性を定量化する第一歩として、CREATIVITY INDEXを提案する。
CREATIVITY INDEXを効率的に計算するために,新しい動的プログラミングアルゴリズムであるDJ SEARCHを導入する。
実験の結果、プロの人間作家のCreativity INDEXはLLMよりも平均66.2%高いことが判明した。
論文 参考訳(メタデータ) (2024-10-05T18:55:01Z) - Pron vs Prompt: Can Large Language Models already Challenge a World-Class Fiction Author at Creative Text Writing? [0.8999666725996975]
言語モデル(LLM)は、言語に関連した幅広いタスクにおいて、平均的な人間よりも優れています。
我々は,DeepBlue vs. Kasparov や AlphaGo vs. Lee Sidol といったAIと人間のデュエルの精神において,Patricio Pron と GPT-4 の対戦を行った。
結果は、LLMは人間のクリエイティブな作家に挑戦するほど遠くないことを示している。
論文 参考訳(メタデータ) (2024-07-01T09:28:58Z) - Evaluating Diversity in Automatic Poetry Generation [25.53206868552533]
我々は、構造的、語彙的、意味的、様式的な側面に沿って自動生成された詩の多様性を評価する。
現在の自動詩体系は,多次元にまたがってかなり過渡していることがわかった。
我々の特定された制限は、より真に多様な未来の詩生成モデルの基礎となるかもしれない。
論文 参考訳(メタデータ) (2024-06-21T16:03:21Z) - How Well Can LLMs Echo Us? Evaluating AI Chatbots' Role-Play Ability with ECHO [55.25989137825992]
チューリングテストに触発された評価フレームワークECHOを紹介する。
この枠組みは、人間と機械が生成した反応を区別するために、対象個人の知名度に係わる。
基礎モデルとして GPT-3.5 と GPT-4 の3つのロールプレイング LLM をECHO を用いて評価した。
論文 参考訳(メタデータ) (2024-04-22T08:00:51Z) - PaperCard for Reporting Machine Assistance in Academic Writing [48.33722012818687]
2022年11月にOpenAIが発表した質問応答システムChatGPTは,学術論文作成に活用可能な,さまざまな機能を実証した。
これは学術における著者概念に関する批判的な疑問を提起する。
我々は、人間の著者が記述プロセスにおけるAIの使用を透過的に宣言するための文書である"PaperCard"というフレームワークを提案する。
論文 参考訳(メタデータ) (2023-10-07T14:28:04Z) - Borges and AI [14.879252696060302]
代弁者や反対者は、SFによって広められたイメージを通してAIを把握します。
マシンは知性を持ち、創造者に対して反抗するだろうか?
このエクササイズは、言語モデリングと人工知能の関係を照らす新しい視点につながります。
論文 参考訳(メタデータ) (2023-09-27T16:15:34Z) - Understanding Natural Language Understanding Systems. A Critical
Analysis [91.81211519327161]
自然言語理解システム(Natural Language Understanding (NLU) system)としても知られる usguillemotright(英語版) のようなギユモトレフトークを持つ機械の開発は、人工知能の聖杯(英語版) (AI) である。
しかし、Gillemottalking machineguillemotrightを構築することができるという信頼は、次世代のNLUシステムによってもたらされたものよりも強かった。
私たちは新しい時代の夜明けに、ついに砂利が我々に近づいたのか?
論文 参考訳(メタデータ) (2023-03-01T08:32:55Z) - Generation of Chinese classical poetry based on pre-trained model [1.6114012813668934]
本稿では,主にBARTやその他の事前学習モデルを用いて,韻律的詩文を生成する。
一連のAI詩のチューリング問題を開発し、詩や詩を書く研究者のグループによってレビューされた。
著者が研究した詩文生成のモデルは、先進的な学者と区別できない作品を一般化している。
論文 参考訳(メタデータ) (2022-11-04T16:05:31Z) - BACON: Deep-Learning Powered AI for Poetry Generation with Author
Linguistic Style Transfer [91.3755431537592]
本稿では,BACONについて述べる。BACONは,著者の言語スタイルを伝達する自動詩生成器のプロトタイプである。
有限状態機械、確率モデル、人工ニューラルネットワーク、深層学習の概念と技法を組み合わせて、任意の著者のスタイルで豊かな美的品質でオリジナルの詩を書く。
論文 参考訳(メタデータ) (2021-12-14T00:08:36Z) - CCPM: A Chinese Classical Poetry Matching Dataset [50.90794811956129]
本稿では,詩のマッチングによるモデルの意味的理解を評価するための新しい課題を提案する。
この課題は、現代漢訳の漢詩では、4人の候補者の中から1行の漢詩を選ばなければならない。
このデータセットを構築するために、まず中国古典詩と現代中国語の翻訳の並列データを得る。
論文 参考訳(メタデータ) (2021-06-03T16:49:03Z) - Artificial Intelligence versus Maya Angelou: Experimental evidence that
people cannot differentiate AI-generated from human-written poetry [0.0]
自然言語生成アルゴリズム(NLG)は、多くの注目を集め、議論を呼んだ。
一つの理由は、アルゴリズムが様々な領域にまたがって人間のようなテキストを生成する能力を持っているからである。
我々は,現在最先端の自然言語生成アルゴリズムであるGPT-2に対する行動反応を評価する2つの実験を行った。
これらの結果が人間に似たテキストを生成するためのNLGアルゴリズムの性能にどう影響するかを議論し、そのような学習アルゴリズムを人力実験環境で研究する手法を提案する。
論文 参考訳(メタデータ) (2020-05-20T11:52:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。