論文の概要: How Furiously Can Colourless Green Ideas Sleep? Sentence Acceptability
in Context
- arxiv url: http://arxiv.org/abs/2004.00881v1
- Date: Thu, 2 Apr 2020 08:58:44 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-17 10:12:11.196825
- Title: How Furiously Can Colourless Green Ideas Sleep? Sentence Acceptability
in Context
- Title(参考訳): グリーンのアイデアはどんなに眠れるのか?
文脈における文受容性
- Authors: Jey Han Lau, Carlos S. Armendariz, Shalom Lappin, Matthew Purver,
Chang Shu
- Abstract要約: 我々は、独立に判断された文の受容性評価を、関連する文脈と無関係な文脈で比較する。
その結果、文脈は人間の認知的負荷を誘発し、評価の分布を圧縮することがわかった。
関連する文脈では、アクセプティビリティを均一に高める談話コヒーレンス効果を観察する。
- 参考スコア(独自算出の注目度): 17.4919556893898
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We study the influence of context on sentence acceptability. First we compare
the acceptability ratings of sentences judged in isolation, with a relevant
context, and with an irrelevant context. Our results show that context induces
a cognitive load for humans, which compresses the distribution of ratings.
Moreover, in relevant contexts we observe a discourse coherence effect which
uniformly raises acceptability. Next, we test unidirectional and bidirectional
language models in their ability to predict acceptability ratings. The
bidirectional models show very promising results, with the best model achieving
a new state-of-the-art for unsupervised acceptability prediction. The two sets
of experiments provide insights into the cognitive aspects of sentence
processing and central issues in the computational modelling of text and
discourse.
- Abstract(参考訳): 文脈が文受容性に及ぼす影響について検討する。
まず,個別に判断された文の受容性評価と関連する文脈,無関係な文脈を比較した。
その結果,コンテクストは人間の認知負荷を誘発し,評価の分布を圧縮することが示された。
さらに、関連する文脈では、アクセシビリティを均一に高める談話コヒーレンス効果を観察する。
次に,アクセシビリティ評価を予測できる一方向および双方向言語モデルをテストする。
双方向モデルは非常に有望な結果を示し、最高のモデルは教師なしアクセプタビリティ予測のための新しい最先端技術を達成する。
2つの実験セットは、文処理の認知的側面と、テキストと談話の計算モデリングにおける中心的な問題に関する洞察を提供する。
関連論文リスト
- Quantifying the Plausibility of Context Reliance in Neural Machine
Translation [25.29330352252055]
我々は、PECoRe(Context Reliance)の可塑性評価を導入する。
PECoReは、言語モデル世代におけるコンテキスト使用量の定量化を目的として設計されたエンドツーエンドの解釈可能性フレームワークである。
我々は、文脈対応機械翻訳モデルの妥当性を定量化するために、pecoreを使用します。
論文 参考訳(メタデータ) (2023-10-02T13:26:43Z) - RankCSE: Unsupervised Sentence Representations Learning via Learning to
Rank [54.854714257687334]
本稿では,教師なし文表現学習のための新しい手法であるRangCSEを提案する。
コントラスト学習を伴うランキング一貫性とランキング蒸留を統一された枠組みに組み込む。
セマンティックテキスト類似性(STS)と転送タスク(TR)の両方について、広範な実験が実施されている。
論文 参考訳(メタデータ) (2023-05-26T08:27:07Z) - Relational Sentence Embedding for Flexible Semantic Matching [86.21393054423355]
文埋め込みの可能性を明らかにするための新しいパラダイムとして,文埋め込み(Sentence Embedding, RSE)を提案する。
RSEは文関係のモデル化に有効で柔軟性があり、一連の最先端の埋め込み手法より優れている。
論文 参考訳(メタデータ) (2022-12-17T05:25:17Z) - Evaluating context-invariance in unsupervised speech representations [15.67794428589585]
現在のベンチマークでは文脈不変性は測定されていない。
我々は文脈不変性を測定するZeroSpeech ABXベンチマークの新バージョンを開発する。
表現の文脈依存性は単語レベルの表現の安定性の予測であることを示す。
論文 参考訳(メタデータ) (2022-10-27T21:15:49Z) - Beyond Model Interpretability: On the Faithfulness and Adversarial
Robustness of Contrastive Textual Explanations [2.543865489517869]
本研究は、説明の忠実さに触発された新たな評価手法の基盤を築き、テキストの反事実を動機づけるものである。
感情分析データを用いた実験では, 両モデルとも, 対物関係の関連性は明らかでないことがわかった。
論文 参考訳(メタデータ) (2022-10-17T09:50:02Z) - Lost in Context? On the Sense-wise Variance of Contextualized Word
Embeddings [11.475144702935568]
各単語感覚の文脈的埋め込みが、典型的な事前学習モデルにおける文脈によってどの程度異なるかを定量化する。
単語表現は位置バイアスを受けており、異なる文脈における最初の単語はより類似する傾向にある。
論文 参考訳(メタデータ) (2022-08-20T12:27:25Z) - Keywords and Instances: A Hierarchical Contrastive Learning Framework
Unifying Hybrid Granularities for Text Generation [59.01297461453444]
入力テキスト中のハイブリッドな粒度意味を統一する階層的コントラスト学習機構を提案する。
実験により,本モデルがパラフレージング,対話生成,ストーリーテリングタスクにおいて,競争ベースラインより優れていることが示された。
論文 参考訳(メタデータ) (2022-05-26T13:26:03Z) - Conditional Supervised Contrastive Learning for Fair Text Classification [59.813422435604025]
対照的な学習を通してテキスト分類のための等化オッズとして知られる公平性の概念を満たす学習公正表現について研究する。
具体的には、まず、公正性制約のある学習表現と条件付き教師付きコントラスト目的との間の関係を理論的に分析する。
論文 参考訳(メタデータ) (2022-05-23T17:38:30Z) - Naturalistic Causal Probing for Morpho-Syntax [76.83735391276547]
スペインにおける実世界のデータに対する入力レベルの介入に対する自然主義的戦略を提案する。
提案手法を用いて,共同設立者から文章中の形態・症状の特徴を抽出する。
本研究では,事前学習したモデルから抽出した文脈化表現に対する性別と数字の因果効果を解析するために,本手法を適用した。
論文 参考訳(メタデータ) (2022-05-14T11:47:58Z) - Did they answer? Subjective acts and intents in conversational discourse [48.63528550837949]
英会話の複数の主観的かつ主観的な解釈を含む最初の対話データセットを提示する。
意見の相違が曖昧であることを示し、異なる文脈要因についてより深く理解する必要がある。
論文 参考訳(メタデータ) (2021-04-09T16:34:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。