論文の概要: Multi-modal Entity Alignment in Hyperbolic Space
- arxiv url: http://arxiv.org/abs/2106.03619v1
- Date: Mon, 7 Jun 2021 13:45:03 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-08 18:12:55.414217
- Title: Multi-modal Entity Alignment in Hyperbolic Space
- Title(参考訳): 双曲空間におけるマルチモーダルエンティティアライメント
- Authors: Hao Guo, Jiuyang Tang, Weixin Zeng, Xiang Zhao, Li Liu
- Abstract要約: ハイパボリック・マルチモーダル・エンティティアライメント(HMEA)の新たな多モード・エンティティアライメント手法を提案する。
まず、ハイパーボリックグラフ畳み込みネットワーク(HGCN)を用いて、エンティティの構造表現を学習する。
次に、双曲空間の構造と視覚表現を組み合わせて、集約された埋め込みを用いて潜在的なアライメントの結果を予測する。
- 参考スコア(独自算出の注目度): 13.789898717291251
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Many AI-related tasks involve the interactions of data in multiple
modalities. It has been a new trend to merge multi-modal information into
knowledge graph(KG), resulting in multi-modal knowledge graphs (MMKG). However,
MMKGs usually suffer from low coverage and incompleteness. To mitigate this
problem, a viable approach is to integrate complementary knowledge from other
MMKGs. To this end, although existing entity alignment approaches could be
adopted, they operate in the Euclidean space, and the resulting Euclidean
entity representations can lead to large distortion of KG's hierarchical
structure. Besides, the visual information has yet not been well exploited. In
response to these issues, in this work, we propose a novel multi-modal entity
alignment approach, Hyperbolic multi-modal entity alignment(HMEA), which
extends the Euclidean representation to hyperboloid manifold. We first adopt
the Hyperbolic Graph Convolutional Networks (HGCNs) to learn structural
representations of entities. Regarding the visual information, we generate
image embeddings using the densenet model, which are also projected into the
hyperbolic space using HGCNs. Finally, we combine the structure and visual
representations in the hyperbolic space and use the aggregated embeddings to
predict potential alignment results. Extensive experiments and ablation studies
demonstrate the effectiveness of our proposed model and its components.
- Abstract(参考訳): 多くのAI関連タスクは、複数のモードにおけるデータの相互作用を含む。
マルチモーダルな情報を知識グラフ(KG)にマージする新たなトレンドとなり,マルチモーダルな知識グラフ(MMKG)が誕生した。
しかし、MMKGは通常、カバーが低く不完全である。
この問題を緩和するために、他のMMKGからの補完的な知識を統合することが実行可能なアプローチである。
この目的のために、既存のエンティティアライメントアプローチを採用することができるが、それらはユークリッド空間で作用し、結果として生じるユークリッド実体表現はKGの階層構造に大きな歪みをもたらす。
さらに、視覚情報はまだ十分に活用されていない。
そこで本研究では, ユークリッド表現を双曲多様体へ拡張する, 新たな多様実体アライメントアプローチである双曲的多様実体アライメント(hmea)を提案する。
まず、ハイパーボリックグラフ畳み込みネットワーク(HGCN)を用いて、エンティティの構造表現を学習する。
視覚情報に関しては,HGCNを用いて双曲空間に投影される高密度ネットモデルを用いて画像埋め込みを生成する。
最後に、双曲空間の構造と視覚表現を結合し、集約埋め込みを用いて潜在的なアライメント結果を予測する。
広範な実験とアブレーション実験により,提案モデルとその構成成分の有効性が実証された。
関連論文リスト
- Hierarchical Aggregations for High-Dimensional Multiplex Graph Embedding [7.271256448682229]
HMGEは高次元多重グラフの階層的アグリゲーションに基づく新しい埋め込み手法である。
我々は、ローカルパッチとグローバルサマリー間の相互情報を活用して、監督なしにモデルを訓練する。
合成および実世界のデータに関する詳細な実験は、下流監視タスクに対する我々のアプローチの適合性を示している。
論文 参考訳(メタデータ) (2023-12-28T05:39:33Z) - What can knowledge graph alignment gain with Neuro-Symbolic learning
approaches? [1.8416014644193066]
知識グラフ(KG)は多くのデータ集約型アプリケーションのバックボーンである。
現在のアルゴリズムでは、論理的思考と推論を語彙的、構造的、意味的なデータ学習で表現することができない。
本稿では,KGAにおける最先端技術について検討し,ニューロシンボリック統合の可能性を探る。
論文 参考訳(メタデータ) (2023-10-11T12:03:19Z) - Recognizing Unseen Objects via Multimodal Intensive Knowledge Graph
Propagation [68.13453771001522]
画像の領域と対応するセマンティック埋め込みとをマッチングする多モード集中型ZSLフレームワークを提案する。
我々は、大規模な実世界のデータに基づいて、広範囲な実験を行い、そのモデルを評価する。
論文 参考訳(メタデータ) (2023-06-14T13:07:48Z) - Representation Learning for Person or Entity-centric Knowledge Graphs:
An Application in Healthcare [0.757843972001219]
本稿では、構造化データと非構造化データからエンティティ中心のKGを抽出するエンドツーエンド表現学習フレームワークを提案する。
我々は、人の複数の面を表す星型分類器を導入し、それをKG生成のガイドに利用する。
このアプローチにはいくつかの潜在的なアプリケーションがあり、オープンソースであることを強調します。
論文 参考訳(メタデータ) (2023-05-09T17:39:45Z) - FMGNN: Fused Manifold Graph Neural Network [102.61136611255593]
グラフ表現学習は、様々なグラフタスクにおいて広く研究され、効果が実証されている。
本稿では,異なるマニフォールドにグラフを埋め込む新しいGNNアーキテクチャであるFused Manifold Graph Neural Network (NN)を提案する。
提案実験により,NNはノード分類およびリンク予測タスクのベンチマークにおいて,強いベースラインよりも優れた性能が得られることを示した。
論文 参考訳(メタデータ) (2023-04-03T15:38:53Z) - Geometry Contrastive Learning on Heterogeneous Graphs [50.58523799455101]
本稿では,幾何学コントラスト学習(Geometry Contrastive Learning, GCL)と呼ばれる,新しい自己指導型学習手法を提案する。
GCLはユークリッドと双曲的な視点からヘテロジニアスグラフを同時に見ることができ、リッチな意味論と複雑な構造をモデル化する能力の強い融合を目指している。
4つのベンチマークデータセットの大規模な実験は、提案手法が強いベースラインよりも優れていることを示している。
論文 参考訳(メタデータ) (2022-06-25T03:54:53Z) - Geometry Interaction Knowledge Graph Embeddings [153.69745042757066]
ユークリッド空間,双曲空間,超球空間間の空間構造を対話的に学習する幾何学的相互作用知識グラフ埋め込み(GIE)を提案する。
提案したGIEは、よりリッチなリレーショナル情報、モデルキー推論パターンをキャプチャし、エンティティ間の表現的セマンティックマッチングを可能にする。
論文 参考訳(メタデータ) (2022-06-24T08:33:43Z) - A Self-supervised Mixed-curvature Graph Neural Network [76.3790248465522]
自己教師型混合曲率グラフニューラルネットワーク(SelfMGNN)を提案する。
我々は、SelfMGNNが現実の複雑なグラフ構造をキャプチャし、最先端のベースラインを上回っていることを示す。
論文 参考訳(メタデータ) (2021-12-10T08:56:55Z) - DyERNIE: Dynamic Evolution of Riemannian Manifold Embeddings for
Temporal Knowledge Graph Completion [39.076763522746354]
時間的知識グラフ(KG)は、時間とともに実体間の動的関係を記録する。
時間的KGに対する既存の埋め込みアプローチは、通常ユークリッド空間における実体表現とその動的進化を学習する。
本研究では,非ユークリッド埋め込み手法であるDy-ERNIEを提案する。
論文 参考訳(メタデータ) (2020-11-08T14:04:16Z) - Mix Dimension in Poincar\'{e} Geometry for 3D Skeleton-based Action
Recognition [57.98278794950759]
グラフ畳み込みネットワーク(GCN)はすでに、不規則なデータをモデル化する強力な能力を実証している。
本稿では,ポアンカー幾何学を用いて定義した空間時空間GCNアーキテクチャを提案する。
提案手法を,現在最大規模の2つの3次元データセット上で評価する。
論文 参考訳(メタデータ) (2020-07-30T18:23:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。