論文の概要: Solving Hard Analogy Questions with Relation Embedding Chains
- arxiv url: http://arxiv.org/abs/2310.12379v1
- Date: Wed, 18 Oct 2023 23:13:22 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-20 17:36:33.306842
- Title: Solving Hard Analogy Questions with Relation Embedding Chains
- Title(参考訳): 関係埋め込み連鎖を用いたハードアナロジー問題の解法
- Authors: Nitesh Kumar and Steven Schockaert
- Abstract要約: 概念がどのように関連しているかをモデル化することは、語彙意味論において中心的なトピックである。
KG は固定された関係型の集合に限られており、それらは不完全であり、しばしばうるさい。
微調整言語モデルから関係埋め込みを蒸留する。
提案した表現は,難解な類似問題を解くのに有用であることを示す。
- 参考スコア(独自算出の注目度): 21.31821067426995
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Modelling how concepts are related is a central topic in Lexical Semantics. A
common strategy is to rely on knowledge graphs (KGs) such as ConceptNet, and to
model the relation between two concepts as a set of paths. However, KGs are
limited to a fixed set of relation types, and they are incomplete and often
noisy. Another strategy is to distill relation embeddings from a fine-tuned
language model. However, this is less suitable for words that are only
indirectly related and it does not readily allow us to incorporate structured
domain knowledge. In this paper, we aim to combine the best of both worlds. We
model relations as paths but associate their edges with relation embeddings.
The paths are obtained by first identifying suitable intermediate words and
then selecting those words for which informative relation embeddings can be
obtained. We empirically show that our proposed representations are useful for
solving hard analogy questions.
- Abstract(参考訳): 概念の関連性をモデル化することは、語彙意味論において中心的なトピックである。
共通の戦略は、概念ネットのような知識グラフ(kgs)に依存し、2つの概念の関係を経路の集合としてモデル化することである。
しかしながら、KGは関係型の固定集合に限られており、それらは不完全であり、しばしばうるさい。
もう1つの戦略は、微調整言語モデルから関係埋め込みを蒸留することである。
しかし、これは間接的にのみ関係のある単語には適さないため、構造化されたドメイン知識を組み込むことはできない。
本稿では,両世界のベストを組み合わせることを目的とする。
我々は関係を経路としてモデル化するが、エッジと関係埋め込みを関連付ける。
経路は、まず適切な中間語を識別し、次に情報的関係埋め込みが得られる単語を選択することで得られる。
提案した表現は,難解な類似問題の解法に有用であることを示す。
関連論文リスト
- Konstruktor: A Strong Baseline for Simple Knowledge Graph Question Answering [60.6042489577575]
Konstruktor - 問題を3つのステップに分割する,効率的で堅牢なアプローチ。
我々のアプローチは言語モデルと知識グラフを統合し、前者の力と後者の解釈可能性を活用する。
関係検出において、ワークフローの最も困難なステップとして、関係分類・生成とランク付けの組み合わせが、他の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2024-09-24T09:19:11Z) - Relational Sentence Embedding for Flexible Semantic Matching [86.21393054423355]
文埋め込みの可能性を明らかにするための新しいパラダイムとして,文埋め込み(Sentence Embedding, RSE)を提案する。
RSEは文関係のモデル化に有効で柔軟性があり、一連の最先端の埋め込み手法より優れている。
論文 参考訳(メタデータ) (2022-12-17T05:25:17Z) - Discovering Fine-Grained Semantics in Knowledge Graph Relations [5.619233302594469]
異なるタイプのエンティティ間の多文の関係は、複数の意味論を表す。
エンティティタイプ分類、質問応答、知識グラフ補完などの多くのユースケースでは、正しい意味解釈が必要である。
本稿では,抽象的関係に関連する異なる意味を発見するための戦略を提案し,細かな意味を持つ多くの部分関係を導出する。
論文 参考訳(メタデータ) (2022-02-17T22:05:41Z) - What is Learned in Knowledge Graph Embeddings? [3.224929252256631]
知識グラフ(英: knowledge graph, KG)とは、有向グラフの頂点と辺として実体と関係を表すデータ構造である。
本稿では,関係性間の規則の学習が,組込み方式の性能向上の要因であるかどうかを考察する。
合成KGの実験により、KGモデルがモチーフを学習し、その能力が非モチーフエッジによってどのように劣化するかを示す。
論文 参考訳(メタデータ) (2021-10-19T13:52:11Z) - Distilling Relation Embeddings from Pre-trained Language Models [35.718167335989854]
事前学習した言語モデルから関係埋め込みを蒸留することが可能であることを示す。
我々は、(手動または自動生成)プロンプトを使って単語ペアを符号化し、言語モデルを微調整する。
結果として得られる関係埋め込みは、アナログ(教師なし)と関係分類(教師なし)のベンチマークで非常に競合する。
論文 参考訳(メタデータ) (2021-09-21T15:05:27Z) - Logic-guided Semantic Representation Learning for Zero-Shot Relation
Classification [31.887770824130957]
ゼロショット関係分類のための論理誘導型意味表現学習モデルを提案する。
我々のアプローチは、暗黙的および明示的な意味表現と知識グラフの埋め込みと論理規則との接続を構築する。
論文 参考訳(メタデータ) (2020-10-30T04:30:09Z) - Joint Semantics and Data-Driven Path Representation for Knowledge Graph
Inference [60.048447849653876]
我々は,KG埋め込みの枠組みにおける説明可能性と一般化のバランスをとる,新しい共同意味論とデータ駆動経路表現を提案する。
提案手法はリンク予測と経路問合せ応答という2つのタスクのクラスで評価される。
論文 参考訳(メタデータ) (2020-10-06T10:24:45Z) - End-to-End Entity Linking and Disambiguation leveraging Word and
Knowledge Graph Embeddings [20.4826750211045]
我々は,KGと単語埋め込みを併用した最初のエンドツーエンドニューラルネットワークアプローチを提案し,単純な質問の結合関係と実体分類を行う。
実験により,提案手法が最先端のエンティティリンクに匹敵する性能を実現することを示す。
論文 参考訳(メタデータ) (2020-02-25T19:07:54Z) - Relational Message Passing for Knowledge Graph Completion [78.47976646383222]
本稿では,知識グラフ補完のためのリレーショナルメッセージパッシング手法を提案する。
エッジ間でリレーショナルメッセージを反復的に送信し、近隣情報を集約する。
その結果,本手法は最先端の知識完成手法よりも大きなマージンで優れていることがわかった。
論文 参考訳(メタデータ) (2020-02-17T03:33:41Z) - Rethinking Class Relations: Absolute-relative Supervised and
Unsupervised Few-shot Learning [157.62595449130973]
本稿では,現在の数ショット学習法における単純化型クラスモデリングの基本的問題について検討する。
本稿では,ラベル情報をフル活用して画像表現を洗練するための,絶対相対学習パラダイムを提案する。
論文 参考訳(メタデータ) (2020-01-12T12:25:46Z) - Multiplex Word Embeddings for Selectional Preference Acquisition [70.33531759861111]
単語間の様々な関係に応じて容易に拡張できる多重単語埋め込みモデルを提案する。
本モデルでは,不必要なスパース性を導入することなく,関係の異なる単語を効果的に識別することができる。
論文 参考訳(メタデータ) (2020-01-09T04:47:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。