論文の概要: Multilinguals at SemEval-2022 Task 11: Transformer Based Architecture
for Complex NER
- arxiv url: http://arxiv.org/abs/2204.02173v1
- Date: Tue, 5 Apr 2022 12:58:57 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-06 18:11:16.863433
- Title: Multilinguals at SemEval-2022 Task 11: Transformer Based Architecture
for Complex NER
- Title(参考訳): semeval-2022 タスク11: 複雑なnerのためのトランスフォーマーベースのアーキテクチャ
- Authors: Amit Pandey, Swayatta Daw and Vikram Pudi
- Abstract要約: 英語における複雑なNERの課題について検討する。
BERTのような事前訓練された言語モデルを用いて,この課題に対する競合性能を得る。
- 参考スコア(独自算出の注目度): 6.473762650914918
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: We investigate the task of complex NER for the English language. The task is
non-trivial due to the semantic ambiguity of the textual structure and the
rarity of occurrence of such entities in the prevalent literature. Using
pre-trained language models such as BERT, we obtain a competitive performance
on this task. We qualitatively analyze the performance of multiple
architectures for this task. All our models are able to outperform the baseline
by a significant margin. Our best performing model beats the baseline F1-score
by over 9%.
- Abstract(参考訳): 英語における複雑なNERの課題について検討する。
この課題は、テキスト構造の意味的曖昧さと、一般的な文献におけるそのような実体の発生の希少さのため、非自明である。
BERTのような事前学習言語モデルを用いて,本課題における競合性能を得る。
このタスクのために複数のアーキテクチャのパフォーマンスを質的に分析する。
当社のモデルはすべて,ベースラインをかなりのマージンで上回ることができるのです。
私たちの最高のパフォーマンスモデルは、ベースラインのF1スコアを9%以上上回ります。
関連論文リスト
- Neural Architecture Search for Sentence Classification with BERT [4.862490782515929]
計算コストが小さいだけで,現在の単一層よりも優れたアーキテクチャを見つけるために,AutoML検索を実行します。
GLUEデータセットから,様々なNLPベンチマークを用いて分類アーキテクチャを検証する。
論文 参考訳(メタデータ) (2024-03-27T13:25:43Z) - R\'esum\'e Parsing as Hierarchical Sequence Labeling: An Empirical Study [0.06817929337876494]
我々は、英語、フランス語、中国語、スペイン語、ドイツ語、ポルトガル語、スウェーデン語で高品質なR'esum'e parsing corporaを構築している。
本稿では,情報抽出作業における提案手法の有効性を示す実験結果について述べる。
論文 参考訳(メタデータ) (2023-09-13T15:17:29Z) - Extensive Evaluation of Transformer-based Architectures for Adverse Drug
Events Extraction [6.78974856327994]
逆イベント(ADE)抽出は、デジタル製薬における中核的なタスクの1つである。
我々は、非公式テキストを用いたADE抽出のための19のトランスフォーマーモデルを評価する。
分析の最後には、実験データから導出可能なテイクホームメッセージのリストを同定する。
論文 参考訳(メタデータ) (2023-06-08T15:25:24Z) - Strategies for improving low resource speech to text translation relying
on pre-trained ASR models [59.90106959717875]
本稿では,テキスト翻訳(ST)における低音源音声の性能向上のための技術と知見について述べる。
本研究は,英語とポルトガル語,タマシェク語とフランス語の2つの言語対について,シミュレーションおよび実低資源設定について実験を行った。
論文 参考訳(メタデータ) (2023-05-31T21:58:07Z) - Pre-Training to Learn in Context [138.0745138788142]
言語モデルが文脈で学習するために明示的に訓練されていないため、コンテキスト内学習の能力は十分に活用されていない。
In-Context Learning のための PICL (Pre-training for In-Context Learning) を提案する。
実験の結果,PICLはベースラインよりも効率が高く,タスクの汎用性が高く,約4倍のパラメータを持つ言語モデルよりも優れていた。
論文 参考訳(メタデータ) (2023-05-16T03:38:06Z) - CROP: Zero-shot Cross-lingual Named Entity Recognition with Multilingual
Labeled Sequence Translation [113.99145386490639]
言語間NERは、整列した言語間表現や機械翻訳結果を通じて、言語間で知識を伝達することができる。
ゼロショット言語間NERを実現するために,クロスランガル・エンティティ・プロジェクション・フレームワーク(CROP)を提案する。
多言語ラベル付きシーケンス翻訳モデルを用いて、タグ付けされたシーケンスをターゲット言語に投影し、ターゲットの原文にラベル付けする。
論文 参考訳(メタデータ) (2022-10-13T13:32:36Z) - Multilinguals at SemEval-2022 Task 11: Complex NER in Semantically
Ambiguous Settings for Low Resource Languages [5.9260305483266205]
我々は、中国語とスペイン語の2つの低リソース言語に対する複雑なNERの課題を解決するために、事前訓練された言語モデルを活用している。
我々はWWM(Whole Word Masking)の手法を用いて、マスク付き言語モデリング目標の性能を向上させる。
論文 参考訳(メタデータ) (2022-07-14T13:00:41Z) - X2Parser: Cross-Lingual and Cross-Domain Framework for Task-Oriented
Compositional Semantic Parsing [51.81533991497547]
タスク指向コンポジションセマンティックパーシング(TCSP)は複雑なネストされたユーザクエリを処理する。
本報告では,TCSPの変換可能なクロスランガルとクロスドメインを比較した。
本稿では,フラット化意図とスロット表現を別々に予測し,両方の予測タスクをシーケンスラベリング問題にキャストすることを提案する。
論文 参考訳(メタデータ) (2021-06-07T16:40:05Z) - Learning Better Sentence Representation with Syntax Information [0.0]
構文情報と予め訓練された言語モデルを組み合わせるための新しいアプローチを提案する。
本モデルは91.2%の精度を達成し, 文完成作業では37.8%の精度でベースラインモデルを上回った。
論文 参考訳(メタデータ) (2021-01-09T12:15:08Z) - DARTS-ASR: Differentiable Architecture Search for Multilingual Speech
Recognition and Adaptation [64.44349061520671]
本稿では,DARTS-ASRを用いたアーキテクチャ探索手法を提案する。
DARTS-ASRの一般化可能性を検討するために,本手法を多くの言語に応用し,単言語ASRを実行するだけでなく,多言語ASR設定にも適用する。
論文 参考訳(メタデータ) (2020-05-13T11:32:27Z) - Probing Linguistic Features of Sentence-Level Representations in Neural
Relation Extraction [80.38130122127882]
ニューラルリレーション抽出(RE)に関連する言語特性を対象とした14の探索タスクを導入する。
私たちは、40以上の異なるエンコーダアーキテクチャと2つのデータセットでトレーニングされた言語的特徴の組み合わせによって学習された表現を研究するためにそれらを使用します。
アーキテクチャによって引き起こされるバイアスと言語的特徴の含意は、探索タスクのパフォーマンスにおいて明らかに表現されている。
論文 参考訳(メタデータ) (2020-04-17T09:17:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。