論文の概要: Exploring Neural Entity Representations for Semantic Information
- arxiv url: http://arxiv.org/abs/2011.08951v1
- Date: Tue, 17 Nov 2020 21:21:37 GMT
- ステータス: 翻訳完了
- システム内更新日: 2022-09-24 16:38:47.799269
- Title: Exploring Neural Entity Representations for Semantic Information
- Title(参考訳): 意味情報のためのニューラルエンティティ表現の探索
- Authors: Andrew Runge and Eduard Hovy
- Abstract要約: 簡単な探索課題に対して,8つのニューラルネットワークを組み込む手法を評価した。
エンティティを記述し、タイプ、関係、事実情報を学習し、エンティティが言及される頻度を識別するために使用される単語を記憶できる方法を示す。
また、これらの手法を2つのエンティティリンクタスクの統一フレームワークで比較し、異なるモデルアーキテクチャやデータセットにどのように一般化するかについて議論する。
- 参考スコア(独自算出の注目度): 4.925619556605419
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Neural methods for embedding entities are typically extrinsically evaluated
on downstream tasks and, more recently, intrinsically using probing tasks.
Downstream task-based comparisons are often difficult to interpret due to
differences in task structure, while probing task evaluations often look at
only a few attributes and models. We address both of these issues by evaluating
a diverse set of eight neural entity embedding methods on a set of simple
probing tasks, demonstrating which methods are able to remember words used to
describe entities, learn type, relationship and factual information, and
identify how frequently an entity is mentioned. We also compare these methods
in a unified framework on two entity linking tasks and discuss how they
generalize to different model architectures and datasets.
- Abstract(参考訳): エンティティを埋め込むニューラルネットワークは通常、下流のタスクで外在的に評価され、最近では探索タスクで内在的に評価される。
下流のタスクベースの比較は、タスク構造の違いのために解釈が難しい場合が多いが、タスク評価を行う場合、いくつかの属性やモデルしか見ない。
これらの問題を,単純な探索タスクのセット上で8つのニューラルネットワーク埋め込みメソッドの多種多様な集合を評価し,どのメソッドがエンティティを記述するのに使用される単語を記憶し,タイプ,関係,事実情報を学習し,エンティティがどれだけ頻繁に言及されているかを特定することで解決する。
また、2つのエンティティリンクタスクでこれらのメソッドを統一したフレームワークで比較し、異なるモデルアーキテクチャとデータセットにどのように一般化するかについて議論した。
関連論文リスト
- Coarse-to-Fine: Hierarchical Multi-task Learning for Natural Language
Understanding [51.31622274823167]
本稿では,各タスクの下位レベルを全タスクに共有し,中間レベルを異なるグループに分割し,上位レベルを各タスクに割り当てる,粗大なパラダイムを持つ階層型フレームワークを提案する。
これにより、すべてのタスクから基本言語特性を学習し、関連するタスクのパフォーマンスを高め、無関係なタスクから負の影響を減らすことができる。
論文 参考訳(メタデータ) (2022-08-19T02:46:20Z) - InstructionNER: A Multi-Task Instruction-Based Generative Framework for
Few-shot NER [31.32381919473188]
InstructionNERというマルチタスク命令ベースの生成フレームワークを提案する。
具体的には、NERタスクを生成問題として再構成し、タスク固有の命令と回答オプションでソース文を豊かにし、自然言語のエンティティと型を推論する。
実験結果から,本手法は5つのデータセットのベースラインを数ショット設定で一貫的に上回っていることがわかった。
論文 参考訳(メタデータ) (2022-03-08T07:56:36Z) - On the relationship between disentanglement and multi-task learning [62.997667081978825]
ハードパラメータ共有に基づくマルチタスク学習と絡み合いの関係について,より詳しく検討する。
マルチタスクニューラルネットワークトレーニングの過程において, 絡み合いが自然に現れることを示す。
論文 参考訳(メタデータ) (2021-10-07T14:35:34Z) - Understanding Synonymous Referring Expressions via Contrastive Features [105.36814858748285]
画像とオブジェクトインスタンスレベルでのコントラスト機能を学ぶためのエンドツーエンドのトレーニング可能なフレームワークを開発しています。
提案アルゴリズムをいくつかのベンチマークデータセットで評価するための広範囲な実験を行った。
論文 参考訳(メタデータ) (2021-04-20T17:56:24Z) - Interpretable Multi-dataset Evaluation for Named Entity Recognition [110.64368106131062]
本稿では,名前付きエンティティ認識(NER)タスクに対する一般的な評価手法を提案する。
提案手法は,モデルとデータセットの違いと,それらの間の相互作用を解釈することを可能にする。
分析ツールを利用可能にすることで、将来の研究者が同様の分析を実行し、この分野の進歩を促進することができる。
論文 参考訳(メタデータ) (2020-11-13T10:53:27Z) - Towards a Flexible Embedding Learning Framework [15.604564543883122]
本稿では,学習表現に組み込むことができる関係性の観点から柔軟な埋め込み学習フレームワークを提案する。
サンプリング機構は、入力と出力埋め込みによって捕捉された情報との直接接続を確立するために慎重に設計される。
実験の結果,提案するフレームワークは,関連エンティティ・リレーショナル・マトリクスのセットと合わせて,様々なデータマイニングタスクにおける既存の最先端アプローチよりも優れていることが示された。
論文 参考訳(メタデータ) (2020-09-23T08:00:56Z) - Few-shot Visual Reasoning with Meta-analogical Contrastive Learning [141.2562447971]
本稿では,類似推論に頼って,数ショット(または低ショット)の視覚推論問題を解くことを提案する。
両領域の要素間の構造的関係を抽出し、類似学習と可能な限り類似するように強制する。
RAVENデータセット上での本手法の有効性を検証し, トレーニングデータが少ない場合, 最先端の手法より優れることを示す。
論文 参考訳(メタデータ) (2020-07-23T14:00:34Z) - Probing Linguistic Features of Sentence-Level Representations in Neural
Relation Extraction [80.38130122127882]
ニューラルリレーション抽出(RE)に関連する言語特性を対象とした14の探索タスクを導入する。
私たちは、40以上の異なるエンコーダアーキテクチャと2つのデータセットでトレーニングされた言語的特徴の組み合わせによって学習された表現を研究するためにそれらを使用します。
アーキテクチャによって引き起こされるバイアスと言語的特徴の含意は、探索タスクのパフォーマンスにおいて明らかに表現されている。
論文 参考訳(メタデータ) (2020-04-17T09:17:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。