論文の概要: Jointly Learning Clinical Entities and Relations with Contextual
Language Models and Explicit Context
- arxiv url: http://arxiv.org/abs/2102.11031v1
- Date: Wed, 17 Feb 2021 00:06:58 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-06 03:52:37.269561
- Title: Jointly Learning Clinical Entities and Relations with Contextual
Language Models and Explicit Context
- Title(参考訳): 臨床的実体の学習と文脈言語モデルと明示的文脈との関係
- Authors: Paul Barry, Sam Henry, Meliha Yetisgen, Bridget McInnes, Ozlem Uzuner
- Abstract要約: マルチタスク学習フレームワークへのコンテキスト情報の明示的な統合は、パフォーマンスを高めるためのコンテキストの重要性を強調します。
私たちの研究は、エンティティを周囲のコンテキストからセグメンテーションし、各独立したセグメントを使用してコンテキスト表現を構築することによって、この仮説を証明します。
この関係表現は、エンドツーエンドNER&REのSOTA REシステムを49.07 F1で破りながら、NERとREの両方のタスクで最先端の(SOTA)パフォーマンスを実現する共同NER/REシステムを可能にします。
- 参考スコア(独自算出の注目度): 1.6274397329511197
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We hypothesize that explicit integration of contextual information into an
Multi-task Learning framework would emphasize the significance of context for
boosting performance in jointly learning Named Entity Recognition (NER) and
Relation Extraction (RE). Our work proves this hypothesis by segmenting
entities from their surrounding context and by building contextual
representations using each independent segment. This relation representation
allows for a joint NER/RE system that achieves near state-of-the-art (SOTA)
performance on both NER and RE tasks while beating the SOTA RE system at
end-to-end NER & RE with a 49.07 F1.
- Abstract(参考訳): 我々は,コンテキスト情報の多タスク学習フレームワークへの明示的な統合が,名前付きエンティティ認識 (NER) と関係抽出 (RE) の併用学習における性能向上のための文脈の重要性を強調することを仮定する。
我々の研究は、エンティティを周囲のコンテキストから分割し、それぞれの独立したセグメントを使用してコンテキスト表現を構築することによって、この仮説を証明する。
この関係表現により、NERとREの両方のタスクにおいて、ほぼ最先端(SOTA)のパフォーマンスを達成し、49.07 F1でエンドツーエンドのNER & REでSOTA REシステムに打ち勝つことができる。
関連論文リスト
- AMR-RE: Abstract Meaning Representations for Retrieval-Based In-Context Learning in Relation Extraction [9.12646853282321]
関係抽出のためのAMR強化検索に基づくICL法を提案する。
本モデルでは,タスク入力とトレーニングサンプル間の意味的構造的類似性に基づいて,文脈内サンプルを検索する。
論文 参考訳(メタデータ) (2024-06-14T22:36:08Z) - In-Context Learning for Few-Shot Nested Named Entity Recognition [53.55310639969833]
数発のネストネストNERの設定に有効で革新的なICLフレームワークを導入する。
我々は、新しい実演選択機構であるEnDe retrieverを考案し、ICLプロンプトを改善する。
EnDe検索では,意味的類似性,境界類似性,ラベル類似性という3種類の表現学習を行うために,コントラスト学習を用いる。
論文 参考訳(メタデータ) (2024-02-02T06:57:53Z) - Prompt-based Logical Semantics Enhancement for Implicit Discourse
Relation Recognition [4.7938839332508945]
Inlicit Discourse Relation Recognition (IDRR) のための Prompt-based Logical Semantics Enhancement (PLSE) 法を提案する。
提案手法は,事前学習した言語モデルに対する対話関係に関する知識を,素早い接続予測によってシームレスに注入する。
PDTB 2.0 と CoNLL16 データセットによる実験結果から,本手法は現状の最先端モデルに対して優れた一貫した性能を発揮することが示された。
論文 参考訳(メタデータ) (2023-11-01T08:38:08Z) - elBERto: Self-supervised Commonsense Learning for Question Answering [131.51059870970616]
本稿では、市販QAモデルアーキテクチャと互換性のあるコモンセンスフレームワークの自己教師型双方向表現学習を提案する。
このフレームワークは5つの自己教師型タスクから構成されており、リッチコモンセンスを含むコンテキストから追加のトレーニング信号を完全に活用するようモデルに強制する。
elBERtoは、単純な語彙的類似性比較が役に立たないような、アウト・オブ・パラグラフや非エフェクトな問題に対して、大幅に改善されている。
論文 参考訳(メタデータ) (2022-03-17T16:23:45Z) - Towards Effective Multi-Task Interaction for Entity-Relation Extraction:
A Unified Framework with Selection Recurrent Network [4.477310325275069]
エンティティ関係抽出は、名前付きエンティティ認識(NER)と関係抽出(RE)を共同で解くことを目的とする
最近のアプローチでは、パイプライン方式で一方向のシーケンシャルな情報伝達を使用するか、共有エンコーダと二方向の暗黙的な相互作用を使用する。
本稿では,シーケンシャルな情報伝達と暗黙的な相互作用の両方の利点を組み合わせた,新規で統一されたカスケードフレームワークを提案する。
論文 参考訳(メタデータ) (2022-02-15T09:54:33Z) - Imposing Relation Structure in Language-Model Embeddings Using
Contrastive Learning [30.00047118880045]
グラフ構造における関係をエンコードするために文埋め込みを訓練する新しいコントラスト学習フレームワークを提案する。
結果として得られた関係認識文の埋め込みは、関係抽出タスクにおける最先端の結果を得る。
論文 参考訳(メタデータ) (2021-09-02T10:58:27Z) - Multi-view Inference for Relation Extraction with Uncertain Knowledge [8.064148591925932]
本論文では,未知の知識を利用して関係抽出を改善することを提案する。
対象エンティティが概念にどの程度属しているかを示す不確定なkgであるprobaseを紹介する。
次に、ローカルコンテキストとグローバル知識を体系的に統合する新しい多視点推論フレームワークを設計する。
論文 参考訳(メタデータ) (2021-04-28T05:56:33Z) - ERICA: Improving Entity and Relation Understanding for Pre-trained
Language Models via Contrastive Learning [97.10875695679499]
そこで本研究では, ERICA という新たなコントラスト学習フレームワークを提案し, エンティティとその関係をテキストでより深く理解する。
実験の結果,提案する erica フレームワークは文書レベルの言語理解タスクにおいて一貫した改善を実現することがわかった。
論文 参考訳(メタデータ) (2020-12-30T03:35:22Z) - Multidirectional Associative Optimization of Function-Specific Word
Representations [86.87082468226387]
本稿では,関係する単語群間の関連を学習するためのニューラルネットワークフレームワークを提案する。
我々のモデルは結合関数固有の単語ベクトル空間を誘導し、例えば可塑性SVO合成のベクトルが近接して配置される。
このモデルは、共同空間においても単語群のメンバーシップに関する情報を保持し、SVO構造を前提とした複数のタスクに効果的に適用することができる。
論文 参考訳(メタデータ) (2020-05-11T17:07:20Z) - Probing Linguistic Features of Sentence-Level Representations in Neural
Relation Extraction [80.38130122127882]
ニューラルリレーション抽出(RE)に関連する言語特性を対象とした14の探索タスクを導入する。
私たちは、40以上の異なるエンコーダアーキテクチャと2つのデータセットでトレーニングされた言語的特徴の組み合わせによって学習された表現を研究するためにそれらを使用します。
アーキテクチャによって引き起こされるバイアスと言語的特徴の含意は、探索タスクのパフォーマンスにおいて明らかに表現されている。
論文 参考訳(メタデータ) (2020-04-17T09:17:40Z) - A Dependency Syntactic Knowledge Augmented Interactive Architecture for
End-to-End Aspect-based Sentiment Analysis [73.74885246830611]
エンドツーエンドABSAのためのマルチタスク学習を用いた対話型アーキテクチャを新たに提案する。
このモデルは、よく設計された依存性関係埋め込みグラフ畳み込みネットワーク(DreGcn)を活用することで、構文知識(依存性関係と型)を完全に活用することができる。
3つのベンチマークデータセットの大規模な実験結果から,本手法の有効性が示された。
論文 参考訳(メタデータ) (2020-04-04T14:59:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。