論文の概要: Theoretical foundations and limits of word embeddings: what types of
meaning can they capture?
- arxiv url: http://arxiv.org/abs/2107.10413v1
- Date: Thu, 22 Jul 2021 00:40:33 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-23 23:22:32.677524
- Title: Theoretical foundations and limits of word embeddings: what types of
meaning can they capture?
- Title(参考訳): 単語埋め込みの理論的基礎と限界: どのような意味を捉えられるのか?
- Authors: Alina Arseniev-Koehler
- Abstract要約: 意味を測定することは文化社会学の中心的な問題である。
私は、単語埋め込みが意味の構造的言語理論の3つの中核的な前提をモデル化する方法を理論化します。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Measuring meaning is a central problem in cultural sociology and word
embeddings may offer powerful new tools to do so. But like any tool, they build
on and exert theoretical assumptions. In this paper I theorize the ways in
which word embeddings model three core premises of a structural linguistic
theory of meaning: that meaning is relational, coherent, and may be analyzed as
a static system. In certain ways, word embedding methods are vulnerable to the
same, enduring critiques of these premises. In other ways, they offer novel
solutions to these critiques. More broadly, formalizing the study of meaning
with word embeddings offers theoretical opportunities to clarify core concepts
and debates in cultural sociology, such as the coherence of meaning. Just as
network analysis specified the once vague notion of social relations (Borgatti
et al. 2009), formalizing meaning with embedding methods can push us to specify
and reimagine meaning itself.
- Abstract(参考訳): 意味を測定することは文化社会学における中心的な問題であり、単語埋め込みは強力な新しいツールを提供するかもしれない。
しかし、他のツールと同様に、彼らは理論的な仮定を構築し、実行します。
本稿では,単語埋め込みが意味の構造的言語理論の中核となる3つの前提をモデル化する方法を理論的に論じる。
ある意味では、単語の埋め込み方法は同じに脆弱であり、これらの前提に対する批判に耐えられる。
言い換えれば、これらの批判に対する新しい解決策を提供する。
より広範に、単語埋め込みによる意味の研究を形式化することは、意味の一貫性のような文化的社会学における中核的な概念と議論を明らかにする理論的機会を与える。
ネットワーク分析が社会関係の曖昧な概念を規定したように(Borgatti et al)。
2009年) 埋め込みメソッドで意味を定式化すれば、意味そのものを特定・再想像できる。
関連論文リスト
- A Complexity-Based Theory of Compositionality [53.025566128892066]
AIでは、構成表現は配布外一般化の強力な形式を可能にすることができる。
ここでは、構成性に関する直観を考慮し、拡張する構成性の公式な定義を提案する。
この定義は概念的には単純で量的であり、アルゴリズム情報理論に基礎を置いており、あらゆる表現に適用できる。
論文 参考訳(メタデータ) (2024-10-18T18:37:27Z) - A Category-theoretical Meta-analysis of Definitions of Disentanglement [97.34033555407403]
データの変化の要因を識別することは、機械学習の基本的な概念である。
本稿では,既存の乱れの定義をメタ分析する。
論文 参考訳(メタデータ) (2023-05-11T15:24:20Z) - How Do Transformers Learn Topic Structure: Towards a Mechanistic
Understanding [56.222097640468306]
我々は、トランスフォーマーが「意味構造」を学ぶ方法の機械的理解を提供する
数学的解析とウィキペディアデータの実験を組み合わせることで、埋め込み層と自己保持層がトピック構造をエンコードしていることを示す。
論文 参考訳(メタデータ) (2023-03-07T21:42:17Z) - Towards a Theoretical Understanding of Word and Relation Representation [8.020742121274418]
ベクトルまたは埋め込みによる単語の表現は、計算的推論を可能にする。
テキストコーパスと知識グラフから学習した単語埋め込みに注目した。
論文 参考訳(メタデータ) (2022-02-01T15:34:58Z) - On the Faithfulness Measurements for Model Interpretations [100.2730234575114]
ポストホックな解釈は、自然言語処理(NLP)モデルがどのように予測を行うかを明らかにすることを目的とする。
これらの問題に取り組むために,我々は,削除基準,解釈の感度,解釈の安定性という3つの基準から始める。
これらの忠実性概念のデシデラタムに動機づけられ、敵対的領域からのテクニックを採用する新しい解釈方法のクラスを導入する。
論文 参考訳(メタデータ) (2021-04-18T09:19:44Z) - How to marry a star: probabilistic constraints for meaning in context [11.670687428360688]
我々は「文脈における言葉の意味」という概念を導出し、その意味を強迫観念と概念の両方として特徴づける。
本稿では,文脈における単語の意味に関する局所的制約とグローバルな制約を,その相互作用とともに定義するフレームワークを提案する。
文の意味は, 発話理解を, 観察された発話を考慮に入れた1つ以上の状況に記述する精神的なプロセスとみなす確率論的モデルである'situation description system'として表現する。
論文 参考訳(メタデータ) (2020-09-16T21:11:23Z) - Computational linguistic assessment of textbook and online learning
media by means of threshold concepts in business education [59.003956312175795]
言語学的観点では、しきい値の概念は特別な語彙の例であり、特定の言語的特徴を示す。
ビジネス教育における63のしきい値の概念のプロファイルは、教科書、新聞、ウィキペディアで調査されている。
3種類のリソースは、しきい値の概念のプロファイルから区別できる。
論文 参考訳(メタデータ) (2020-08-05T12:56:16Z) - Cultural Cartography with Word Embeddings [0.0]
本稿では,単語の埋め込みが社会学における意味論とどのように一致しているかを示す。
まず、条件を一定に保ち、埋め込み空間が周囲をどう動くかを測定することができる。
第二に、埋め込み空間定数を保持して、ドキュメントや著者がそれに対してどのように動くかを確認することもできる。
論文 参考訳(メタデータ) (2020-07-09T01:58:28Z) - (Re)construing Meaning in NLP [15.37817898307963]
本研究では,情報伝達のコンセプト化やコンストラクションの異なる方法に,表現方法が反映されていることを示す。
提案手法は,NLPにおける理論的,実践的な作業に対して,コンストラクチュアルからの洞察がどのような影響を及ぼすかを示す。
論文 参考訳(メタデータ) (2020-05-18T21:21:34Z) - A computational model implementing subjectivity with the 'Room Theory'.
The case of detecting Emotion from Text [68.8204255655161]
本研究は,テキスト分析における主観性と一般的文脈依存性を考慮した新しい手法を提案する。
単語間の類似度を用いて、ベンチマーク中の要素の相対的関連性を抽出することができる。
この方法は、主観的評価がテキストの相対値や意味を理解するために関係しているすべてのケースに適用できる。
論文 参考訳(メタデータ) (2020-05-12T21:26:04Z) - Expressiveness and machine processability of Knowledge Organization
Systems (KOS): An analysis of concepts and relations [0.0]
各知識組織システムの表現性と機械処理性の両方の可能性は、その構造規則によって広範囲に規制されている。
オントロジーは多種多様な関係を明示的に定義し、その性質上機械処理可能である。
論文 参考訳(メタデータ) (2020-03-11T12:35:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。