論文の概要: SARF: Aliasing Relation Assisted Self-Supervised Learning for Few-shot
Relation Reasoning
- arxiv url: http://arxiv.org/abs/2304.10297v1
- Date: Thu, 20 Apr 2023 13:24:59 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-21 13:13:22.849575
- Title: SARF: Aliasing Relation Assisted Self-Supervised Learning for Few-shot
Relation Reasoning
- Title(参考訳): SARF:Few-shot Relation Reasoningのための自己指導型学習支援システム
- Authors: Lingyuan Meng, Ke Liang, Bin Xiao, Sihang Zhou, Yue Liu, Meng Liu,
Xihong Yang, Xinwang Liu
- Abstract要約: 知識グラフ (FS-KGR) に基づく一括関係推論は, 長期データと不適切な関係を推定することを目的としている。
本稿では, Aliasing Relations を利用して, SARF と呼ばれる FS-KGR を支援する新しい自己教師付き学習モデルを提案する。
- 参考スコア(独自算出の注目度): 43.59319243928048
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Few-shot relation reasoning on knowledge graphs (FS-KGR) aims to infer
long-tail data-poor relations, which has drawn increasing attention these years
due to its practicalities. The pre-training of previous methods needs to
manually construct the meta-relation set, leading to numerous labor costs.
Self-supervised learning (SSL) is treated as a solution to tackle the issue,
but still at an early stage for FS-KGR task. Moreover, most of the existing
methods ignore leveraging the beneficial information from aliasing relations
(AR), i.e., data-rich relations with similar contextual semantics to the target
data-poor relation. Therefore, we proposed a novel Self-Supervised Learning
model by leveraging Aliasing Relations to assist FS-KGR, termed SARF.
Concretely, four main components are designed in our model, i.e., SSL reasoning
module, AR-assisted mechanism, fusion module, and scoring function. We first
generate the representation of the co-occurrence patterns in a generative
manner. Meanwhile, the representations of aliasing relations are learned to
enhance reasoning in the AR-assist mechanism. Besides, multiple strategies,
i.e., simple summation and learnable fusion, are offered for representation
fusion. Finally, the generated representation is used for scoring. Extensive
experiments on three few-shot benchmarks demonstrate that SARF achieves
state-of-the-art performance compared with other methods in most cases.
- Abstract(参考訳): 知識グラフ(FS-KGR)に基づく推論は,近年,その実用性から注目が集まっている,長い尾関係の推測を目的としている。
以前の方法の事前トレーニングは、手動でメタリレーショナルセットを構築する必要があり、多くの労働コストを発生させる。
自己教師付き学習(SSL)はこの問題に対処するためのソリューションとして扱われるが、FS-KGRタスクの初期段階にある。
さらに、既存の手法の多くは、アリアシング関係(AR)から有益な情報、すなわち、類似した文脈意味論とターゲットデータ-ポーア関係とのデータリッチな関係を活用することを無視している。
そこで本研究では,fs-kgr支援のためのエイリアシング関係を利用した自己教師付き学習モデルを提案する。
具体的には、SSL推論モジュール、ARアシスト機構、融合モジュール、スコアリング関数の4つの主要コンポーネントをモデルとして設計する。
まず,共起パターンの表現を生成的に生成する。
一方, Aliasing relations の表現はAR-assist 機構における推論を強化するために学習される。
さらに、複数の戦略、すなわち単純な総和と学習可能な融合が表現融合のために提供される。
最後に、生成した表現をスコアリングに使用する。
3つのベンチマークによる大規模な実験により、SARFは、ほとんどの場合において他の手法と比較して最先端のパフォーマンスを達成することが示された。
関連論文リスト
- High-Performance Few-Shot Segmentation with Foundation Models: An Empirical Study [64.06777376676513]
基礎モデルに基づく数ショットセグメンテーション(FSS)フレームワークを開発した。
具体的には、基礎モデルから暗黙的な知識を抽出し、粗い対応を構築するための簡単なアプローチを提案する。
2つの広く使われているデータセットの実験は、我々のアプローチの有効性を実証している。
論文 参考訳(メタデータ) (2024-09-10T08:04:11Z) - Relation Extraction with Fine-Tuned Large Language Models in Retrieval Augmented Generation Frameworks [0.0]
関係抽出(RE)は、構造化されていないデータを知識グラフ(KG)のような構造化形式に変換するために重要である
プレトレーニング言語モデル(PLM)を活用した最近の研究は、この分野で大きな成功を収めている。
本研究では、微調整LDMの性能と、Retrieval Augmented-based (RAG) REアプローチへの統合について検討する。
論文 参考訳(メタデータ) (2024-06-20T21:27:57Z) - Methods for Recovering Conditional Independence Graphs: A Survey [2.2721854258621064]
条件付き独立グラフ(CIグラフ)は、機能関係に関する洞察を得るために使用される。
異なる手法をリストアップし、CIグラフを復元する手法の進歩について研究する。
論文 参考訳(メタデータ) (2022-11-13T06:11:38Z) - Improving Long Tailed Document-Level Relation Extraction via Easy
Relation Augmentation and Contrastive Learning [66.83982926437547]
我々は,DocREが現実のシナリオにおいて,長期分布問題の緩和に不可欠であると主張する。
長期分布問題に動機付けられ,DocREを改善するための簡易関係拡張法(ERA)を提案する。
論文 参考訳(メタデータ) (2022-05-21T06:15:11Z) - SAIS: Supervising and Augmenting Intermediate Steps for Document-Level
Relation Extraction [51.27558374091491]
本稿では,関係抽出のための中間ステップ(SAIS)を監督し,拡張することにより,関連コンテキストやエンティティタイプをキャプチャするモデルを明示的に教えることを提案する。
そこで本提案手法は,より効果的な管理を行うため,より優れた品質の関係を抽出するだけでなく,それに対応する証拠をより正確に抽出する。
論文 参考訳(メタデータ) (2021-09-24T17:37:35Z) - Exploring Task Difficulty for Few-Shot Relation Extraction [22.585574542329677]
Few-shot Relation extract (FSRE) は、わずかに注釈付きインスタンスで学習することで、新しい関係を認識することに焦点を当てている。
本稿では,関係ラベル情報を活用することで,より良い表現を学習するコントラスト学習に基づく新しいアプローチを提案する。
論文 参考訳(メタデータ) (2021-09-12T09:40:33Z) - Generative Relation Linking for Question Answering over Knowledge Bases [12.778133758613773]
そこで本稿では, フレーミングを生成問題とする関係リンク手法を提案する。
このようなシーケンス・ツー・シーケンス・モデルを拡張して,対象とする知識ベースから構造化データを注入する。
我々は、議論-関係ペアのリストからなる構造化された出力を生成するためにモデルを訓練し、知識検証のステップを可能にする。
論文 参考訳(メタデータ) (2021-08-16T20:33:43Z) - S^3-Rec: Self-Supervised Learning for Sequential Recommendation with
Mutual Information Maximization [104.87483578308526]
本稿では,シーケンスレコメンデーションのための自己改善学習のためのモデルS3-Recを提案する。
そこで本稿では,属性,項目,サブシーケンス,シーケンス間の相関関係を学習するために,4つの補助的自己教師対象を考案する。
6つの実世界のデータセットで実施された大規模な実験は、既存の最先端手法よりも提案手法が優れていることを示す。
論文 参考訳(メタデータ) (2020-08-18T11:44:10Z) - Relation-Guided Representation Learning [53.60351496449232]
本稿では,サンプル関係を明示的にモデル化し,活用する表現学習手法を提案する。
私たちのフレームワークは、サンプル間の関係をよく保存します。
サンプルをサブスペースに埋め込むことにより,本手法が大規模なサンプル外問題に対処可能であることを示す。
論文 参考訳(メタデータ) (2020-07-11T10:57:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。