論文の概要: Pragmatically Informative Color Generation by Grounding Contextual
Modifiers
- arxiv url: http://arxiv.org/abs/2010.04372v1
- Date: Fri, 9 Oct 2020 04:54:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-09 04:22:05.004922
- Title: Pragmatically Informative Color Generation by Grounding Contextual
Modifiers
- Title(参考訳): 接地文脈修飾器による実時間変色生成
- Authors: Zhengxuan Wu, Desmond C. Ong
- Abstract要約: 基準色「緑」と修飾色「青」が与えられた場合、どのようにして「青緑」を表す色を生成するのか?
本稿では、この色生成タスクを話者とリスナーの間で再帰的なゲームとして定式化する計算実用モデルを提案する。
本稿では,他の最先端ディープラーニングモデルと比較して,実用的情報の導入によって性能が大幅に向上することを示す。
- 参考スコア(独自算出の注目度): 14.394987796101349
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Grounding language in contextual information is crucial for fine-grained
natural language understanding. One important task that involves grounding
contextual modifiers is color generation. Given a reference color "green", and
a modifier "bluey", how does one generate a color that could represent "bluey
green"? We propose a computational pragmatics model that formulates this color
generation task as a recursive game between speakers and listeners. In our
model, a pragmatic speaker reasons about the inferences that a listener would
make, and thus generates a modified color that is maximally informative to help
the listener recover the original referents. In this paper, we show that
incorporating pragmatic information provides significant improvements in
performance compared with other state-of-the-art deep learning models where
pragmatic inference and flexibility in representing colors from a large
continuous space are lacking. Our model has an absolute 98% increase in
performance for the test cases where the reference colors are unseen during
training, and an absolute 40% increase in performance for the test cases where
both the reference colors and the modifiers are unseen during training.
- Abstract(参考訳): 文脈情報における接地言語は、きめ細かい自然言語理解に不可欠である。
文脈修飾器の接地に関わる重要なタスクは色生成である。
基準色 "green" と修飾色 "bluey" が与えられたとき、どのようにして "bluey green" を表すことができる色を生成するのか?
本稿では、この色生成タスクを話者とリスナー間の再帰ゲームとして定式化する計算実用モデルを提案する。
本モデルでは,本モデルでは,聴取者が提案する推測を実践的話者が原因として,聴取者が元の参照を回復するのを助けるために,最大情報量で修正色を生成する。
本稿では,実用的情報を取り込むことによって,実利的な推論や大きな連続空間からの色彩表現の柔軟性に欠ける他の最先端ディープラーニングモデルと比較して,性能が大幅に向上することを示す。
本モデルでは,トレーニング中に基準色が認識されないテストケースでは絶対98%,トレーニング中に基準色と修正子の両方が認識されないテストケースでは絶対40%向上する。
関連論文リスト
- Collapsed Language Models Promote Fairness [88.48232731113306]
偏りのある言語モデルはトークン表現と単語埋め込みの間に崩壊したアライメントを示す。
我々は,幅広い脱バイアス法において,公平性を効果的に向上する原理的な微調整法を設計する。
論文 参考訳(メタデータ) (2024-10-06T13:09:48Z) - Learning High-Quality and General-Purpose Phrase Representations [9.246374019271938]
フレーズ表現は、データサイエンスと自然言語処理において重要な役割を果たす。
現在の最先端手法では、フレーズ埋め込みのための訓練済み言語モデルを微調整する。
文脈自由な方法で句表現を学習するための改良されたフレームワークを提案する。
論文 参考訳(メタデータ) (2024-01-18T22:32:31Z) - Improving Fairness using Vision-Language Driven Image Augmentation [60.428157003498995]
公平性は、特に顔領域において、ディープラーニングの識別モデルを訓練する際に重要である。
モデルは、特定の特性(年齢や肌の色など)と無関係な属性(下流タスク)を関連付ける傾向がある
本稿では,これらの相関を緩和し,公平性を向上する手法を提案する。
論文 参考訳(メタデータ) (2023-11-02T19:51:10Z) - How to Plant Trees in Language Models: Data and Architectural Effects on
the Emergence of Syntactic Inductive Biases [28.58785395946639]
事前学習は、微調整後にタスクを実行する際に、階層的な構文的特徴に依存するように言語モデルを教えることができることを示す。
アーキテクチャの特徴(深さ、幅、パラメータ数)と、事前学習コーパスのジャンルとサイズに焦点を当てる。
論文 参考訳(メタデータ) (2023-05-31T14:38:14Z) - L-CAD: Language-based Colorization with Any-level Descriptions using
Diffusion Priors [62.80068955192816]
我々は,任意のレベルの記述で言語ベースの色付けを行う統一モデルを提案する。
我々は、その頑健な言語理解と豊かな色優先のために、事前訓練されたモダリティ生成モデルを活用する。
提案した新しいサンプリング戦略により,多様な複雑なシナリオにおいて,インスタンス認識のカラー化を実現する。
論文 参考訳(メタデータ) (2023-05-24T14:57:42Z) - Can Language Models Encode Perceptual Structure Without Grounding? A
Case Study in Color [18.573415435334105]
我々は,知覚的に有意な距離測定値を持つ色空間であるCIELABで表されるモノレキセミックカラー用語とカラーチップのデータセットを用いる。
この空間における色の構造的アライメントをテキスト由来の色項表現で評価する2つの手法を用いて,有意な対応性を見出した。
温かい色は、平均すると、より涼しい色よりも知覚的な色空間に合わせた方がよいことがわかりました。
論文 参考訳(メタデータ) (2021-09-13T17:09:40Z) - Sentiment analysis in tweets: an assessment study from classical to
modern text representation models [59.107260266206445]
Twitterで公開された短いテキストは、豊富な情報源として大きな注目を集めている。
非公式な言語スタイルや騒々しい言語スタイルといったそれらの固有の特徴は、多くの自然言語処理(NLP)タスクに挑戦し続けている。
本研究では,22データセットの豊富なコレクションを用いて,ツイートに表される感情を識別する既存言語モデルの評価を行った。
論文 参考訳(メタデータ) (2021-05-29T21:05:28Z) - Infusing Finetuning with Semantic Dependencies [62.37697048781823]
シンタックスとは異なり、セマンティクスは今日の事前訓練モデルによって表面化されないことを示す。
次に、畳み込みグラフエンコーダを使用して、タスク固有の微調整にセマンティック解析を明示的に組み込む。
論文 参考訳(メタデータ) (2020-12-10T01:27:24Z) - Grounded Compositional Outputs for Adaptive Language Modeling [59.02706635250856]
言語モデルの語彙$-$典型的にはトレーニング前に選択され、後で永久に固定される$-$は、そのサイズに影響します。
言語モデルのための完全合成出力埋め込み層を提案する。
我々の知る限り、この結果はトレーニング語彙に依存しないサイズを持つ最初の単語レベル言語モデルである。
論文 参考訳(メタデータ) (2020-09-24T07:21:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。