論文の概要: Learning from Semi-Factuals: A Debiased and Semantic-Aware Framework for
Generalized Relation Discovery
- arxiv url: http://arxiv.org/abs/2401.06327v1
- Date: Fri, 12 Jan 2024 02:38:55 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-15 20:30:42.720800
- Title: Learning from Semi-Factuals: A Debiased and Semantic-Aware Framework for
Generalized Relation Discovery
- Title(参考訳): 半事実から学ぶ:一般関係発見のための偏見と意味認識フレームワーク
- Authors: Jiaxin Wang, Lingling Zhang, Jun Liu, Tianlin Guo, Wenjun Wu
- Abstract要約: Generalized Relation Discovery (GRD) は、既存の事前定義された関係にある未ラベルのインスタンスを特定したり、新しい関係を発見することを目的としている。
本稿では,2段階の半実物から学習することで,この課題に対する新しいフレームワーク,SFGRDを提案する。
SFGRDの精度は2.36%$sim$5.78%、コサイン類似度は32.19%$sim$84.45%である。
- 参考スコア(独自算出の注目度): 12.716874398564482
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce a novel task, called Generalized Relation Discovery (GRD), for
open-world relation extraction. GRD aims to identify unlabeled instances in
existing pre-defined relations or discover novel relations by assigning
instances to clusters as well as providing specific meanings for these
clusters. The key challenges of GRD are how to mitigate the serious model
biases caused by labeled pre-defined relations to learn effective relational
representations and how to determine the specific semantics of novel relations
during classifying or clustering unlabeled instances. We then propose a novel
framework, SFGRD, for this task to solve the above issues by learning from
semi-factuals in two stages. The first stage is semi-factual generation
implemented by a tri-view debiased relation representation module, in which we
take each original sentence as the main view and design two debiased views to
generate semi-factual examples for this sentence. The second stage is
semi-factual thinking executed by a dual-space tri-view collaborative relation
learning module, where we design a cluster-semantic space and a class-index
space to learn relational semantics and relation label indices, respectively.
In addition, we devise alignment and selection strategies to integrate two
spaces and establish a self-supervised learning loop for unlabeled data by
doing semi-factual thinking across three views. Extensive experimental results
show that SFGRD surpasses state-of-the-art models in terms of accuracy by
2.36\% $\sim$5.78\% and cosine similarity by 32.19\%$\sim$ 84.45\% for relation
label index and relation semantic quality, respectively. To the best of our
knowledge, we are the first to exploit the efficacy of semi-factuals in
relation extraction.
- Abstract(参考訳): オープンワールド関係抽出のための新しいタスク「Generalized Relation Discovery (GRD)」を導入する。
GRDは、既存の事前定義された関係にある未ラベルのインスタンスを特定したり、クラスタにインスタンスを割り当てたり、クラスタに特定の意味を提供することによって、新しい関係を発見することを目的としている。
GRDの主な課題は、ラベル付き事前定義された関係によって引き起こされる真剣なモデルバイアスを緩和して効果的な関係表現を学ぶ方法と、ラベルなしインスタンスの分類やクラスタリングにおいて、新しい関係の特定の意味を決定する方法である。
次に,2段階の半実例から学習することで,上記の課題を解決するための新しいフレームワーク,SFGRDを提案する。
第1段階は,3次元縮退型関係表現モジュールによって実装された半実例生成であり,各原文を主観として2つの縮退型ビューを設計し,半実例を生成する。
第2段階は、二重空間のトリビュー協調関係学習モジュールによって実行され、クラスタ意味空間とクラスインデックス空間を設計し、関係意味論と関係ラベルの指標を学習する半実的思考である。
さらに,2つの空間を統合するためのアライメント戦略と選択戦略を考案し,ラベルなしデータの自己教師あり学習ループを3つの視点にまたがる半実的思考によって確立する。
実験結果から, SFGRDの精度は2.36\%$\sim$5.78\%, コサイン類似度は32.19\%$\sim$84.45\%, 相関ラベル指数と関係意味品質は84.45\%であった。
知識を最大限に活用するために,我々は,関係抽出における半実例の有効性を最初に活用する。
関連論文リスト
- Interpetable Target-Feature Aggregation for Multi-Task Learning based on Bias-Variance Analysis [53.38518232934096]
マルチタスク学習(MTL)は、タスク間の共有知識を活用し、一般化とパフォーマンスを改善するために設計された強力な機械学習パラダイムである。
本稿では,タスククラスタリングと特徴変換の交点におけるMTL手法を提案する。
両段階において、鍵となる側面は減った目標と特徴の解釈可能性を維持することである。
論文 参考訳(メタデータ) (2024-06-12T08:30:16Z) - Few-Shot Learning for Annotation-Efficient Nucleus Instance Segmentation [50.407071700154674]
少数ショット学習(FSL)の観点から、アノテーション効率の良い核インスタンスセグメンテーションを定式化することを提案する。
我々の研究は、計算病理学の隆盛とともに、多くの完全注釈付きデータセットが一般に公開されていることに動機づけられた。
いくつかの公開データセットに対する大規模な実験は、SGFSISが他のアノテーション効率のよい学習ベースラインより優れていることを示している。
論文 参考訳(メタデータ) (2024-02-26T03:49:18Z) - Grasping the Essentials: Tailoring Large Language Models for Zero-Shot Relation Extraction [33.528688487954454]
関係抽出(RE)は、テキスト内のエンティティ間の意味的関係を識別することを目的としている。
アノテーションの要求を減らすことを目的とした、ほとんどショットの学習は、通常、ターゲット関係に対する不完全で偏見のある監視を提供する。
1)大言語モデル(LLM)を利用して,関係定義とラベルなしコーパスから初期シードインスタンスを生成する。
論文 参考訳(メタデータ) (2024-02-17T00:20:06Z) - Synergistic Anchored Contrastive Pre-training for Few-Shot Relation
Extraction [4.7220779071424985]
Few-shot Relation extract (FSRE) は、ラベル付きコーパスのスパースセットから事実を抽出することを目的としている。
近年の研究では、事前学習言語モデルを用いたFSREの有望な結果が示されている。
本稿では,新しい相乗的アンカー付きコントラスト事前学習フレームワークを提案する。
論文 参考訳(メタデータ) (2023-12-19T10:16:24Z) - Co-guiding for Multi-intent Spoken Language Understanding [53.30511968323911]
本稿では,2つのタスク間の相互指導を実現するための2段階のフレームワークを実装した,コガイドネットと呼ばれる新しいモデルを提案する。
第1段階では,単一タスクによる教師付きコントラスト学習を提案し,第2段階ではコガイドによる教師付きコントラスト学習を提案する。
マルチインテリジェントSLU実験の結果,我々のモデルは既存のモデルよりも大きなマージンで優れていることがわかった。
論文 参考訳(メタデータ) (2023-11-22T08:06:22Z) - Jointprop: Joint Semi-supervised Learning for Entity and Relation
Extraction with Heterogeneous Graph-based Propagation [13.418617500641401]
共同半教師付きエンティティと関係抽出のための不均一グラフに基づく伝搬フレームワークであるJointpropを提案する。
我々は、エンティティと関係候補から統一されたスパンベースのヘテロジニアスグラフを構築し、信頼度スコアに基づいてクラスラベルを伝搬する。
我々はNERおよびREタスクにおける最先端の半教師付きアプローチよりも優れた性能を示す。
論文 参考訳(メタデータ) (2023-05-25T09:07:04Z) - Advancing Incremental Few-shot Semantic Segmentation via Semantic-guided
Relation Alignment and Adaptation [98.51938442785179]
増分的な数ショットセマンティックセマンティックセマンティクスは、セマンティクスセマンティクスモデルを新しいクラスに漸進的に拡張することを目的としている。
このタスクは、データ不均衡のため、ベースクラスと新しいクラスの間で深刻な意味認識の問題に直面します。
本稿では,従来の意味情報のガイダンスを完全に考慮した意味誘導型関係調整適応法を提案する。
論文 参考訳(メタデータ) (2023-05-18T10:40:52Z) - Prompt-based Zero-shot Relation Extraction with Semantic Knowledge
Augmentation [3.154631846975021]
関係3重項抽出では、トレーニングインスタンスが存在しない見知らぬ関係を認識することは難しい課題である。
ゼロショット設定下での未知の関係を認識するために,意味知識増強(ZS-SKA)を用いたプロンプトベースモデルを提案する。
論文 参考訳(メタデータ) (2021-12-08T19:34:27Z) - Deep Relational Metric Learning [84.95793654872399]
本稿では,画像クラスタリングと検索のためのディープリレーショナルメトリック学習フレームワークを提案する。
我々は、クラス間分布とクラス内分布の両方をモデル化するために、異なる側面から画像を特徴付ける特徴のアンサンブルを学ぶ。
広く使われているCUB-200-2011、Cars196、Stanford Online Productsデータセットの実験は、我々のフレームワークが既存の深層学習方法を改善し、非常に競争力のある結果をもたらすことを示した。
論文 参考訳(メタデータ) (2021-08-23T09:31:18Z) - R$^2$-Net: Relation of Relation Learning Network for Sentence Semantic
Matching [58.72111690643359]
文意味マッチングのための関係学習ネットワーク(R2-Net)を提案する。
最初にBERTを使用して、グローバルな視点から入力文をエンコードします。
次に、cnnベースのエンコーダは、ローカルな視点からキーワードやフレーズ情報をキャプチャするように設計されている。
関係情報抽出にラベルを十分に活用するために,関係分類タスクの自己教師付き関係性を導入する。
論文 参考訳(メタデータ) (2020-12-16T13:11:30Z) - Clustering-based Unsupervised Generative Relation Extraction [3.342376225738321]
クラスタリングに基づく教師なし生成関係抽出フレームワーク(CURE)を提案する。
我々は「エンコーダ・デコーダ」アーキテクチャを用いて自己教師付き学習を行い、エンコーダが関係情報を抽出できるようにする。
我々のモデルは、ニューヨーク・タイムズ(NYT)と国連並列コーパス(UNPC)の標準データセットにおいて、最先端モデルよりも優れている。
論文 参考訳(メタデータ) (2020-09-26T20:36:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。