論文の概要: On the Evaluation of Machine Translation for Terminology Consistency
- arxiv url: http://arxiv.org/abs/2106.11891v1
- Date: Tue, 22 Jun 2021 15:59:32 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-23 15:00:47.614748
- Title: On the Evaluation of Machine Translation for Terminology Consistency
- Title(参考訳): 用語一貫性のための機械翻訳の評価について
- Authors: Md Mahfuz ibn Alam, Antonios Anastasopoulos, Laurent Besacier, James
Cross, Matthias Gall\'e, Philipp Koehn, Vassilina Nikoulina
- Abstract要約: 本稿では,MT出力の整合性を測定するための指標を提案する。
我々は5言語以上の新型コロナウイルス領域の研究を行い、用語を対象とする人間の評価も行います。
- 参考スコア(独自算出の注目度): 31.67296249688388
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: As neural machine translation (NMT) systems become an important part of
professional translator pipelines, a growing body of work focuses on combining
NMT with terminologies. In many scenarios and particularly in cases of domain
adaptation, one expects the MT output to adhere to the constraints provided by
a terminology. In this work, we propose metrics to measure the consistency of
MT output with regards to a domain terminology. We perform studies on the
COVID-19 domain over 5 languages, also performing terminology-targeted human
evaluation. We open-source the code for computing all proposed metrics:
https://github.com/mahfuzibnalam/terminology_evaluation
- Abstract(参考訳): 神経機械翻訳(NMT)システムがプロの翻訳者パイプラインの重要な部分となるにつれ、NMTと用語の組み合わせに焦点が当てられている。
多くのシナリオ、特にドメイン適応の場合において、MT出力は用語によって提供される制約に従うことを期待する。
本稿では、ドメイン用語に関して、mt出力の一貫性を測定するためのメトリクスを提案する。
我々は,5言語以上にわたるcovid-19ドメインの研究を行い,用語を対象とした人格評価を行った。
https://github.com/mahfuzibnalam/terminology_evaluation。
関連論文リスト
- Efficient Technical Term Translation: A Knowledge Distillation Approach for Parenthetical Terminology Translation [0.0]
本稿では,専門分野におけるコミュニケーションの明確化に不可欠である専門用語を正確に翻訳することの課題に対処する。
本研究は, ペアレンテティカル・ターミノロジー・トランスフォーメーション (PTT) タスクを導入し, ペアレンテティカル・ターミノロジー・トランスフォーメーション(PTT)タスクの翻訳とともに, ペアレンテティカル・ターミノロジー・トランスフォーメーション(Parenthetical Terminology Translation, PTT)タスクを導入した。
そこで我々は,単語の全体的な翻訳精度と正しい括弧表現の両方を評価するための新しい評価指標を開発した。
論文 参考訳(メタデータ) (2024-10-01T13:40:28Z) - Towards Effective Disambiguation for Machine Translation with Large
Language Models [65.80775710657672]
我々は「あいまいな文」を翻訳する大規模言語モデルの能力について研究する。
実験の結果,提案手法はDeepLやNLLBといった最先端システムと5つの言語方向のうち4つで一致し,性能を向上できることがわかった。
論文 参考訳(メタデータ) (2023-09-20T22:22:52Z) - Discourse Centric Evaluation of Machine Translation with a Densely
Annotated Parallel Corpus [82.07304301996562]
本稿では,江らが導入した大規模並列コーパスBWBに基づいて,リッチな談話アノテーションを用いた新しいデータセットを提案する。
ソース言語とターゲット言語の談話構造と類似点と相違点について検討する。
我々はMT出力が人間の翻訳と基本的に異なることを発見した。
論文 参考訳(メタデータ) (2023-05-18T17:36:41Z) - Exploiting Language Relatedness in Machine Translation Through Domain
Adaptation Techniques [3.257358540764261]
文のスケール化類似度スコアを,特に5グラムのKenLM言語モデルに基づく関連言語に適用する手法を提案する。
提案手法は, マルチドメインアプローチでは2 BLEU点, NMTでは3 BLEU点, 反復的バックトランスレーションアプローチでは2 BLEU点の増加に成功している。
論文 参考訳(メタデータ) (2023-03-03T09:07:30Z) - HilMeMe: A Human-in-the-Loop Machine Translation Evaluation Metric
Looking into Multi-Word Expressions [6.85316573653194]
言語的に動機づけたHuman-in-the-loop評価尺度の設計と実装について,慣用的および用語的マルチワード表現(MWEs)について述べる。
MWEは、MWEを正確で意味のある等価な方法で認識・翻訳する能力を調べることで、異なるMTシステムを区別する主要な要因の1つである。
論文 参考訳(メタデータ) (2022-11-09T21:15:40Z) - DICTDIS: Dictionary Constrained Disambiguation for Improved NMT [50.888881348723295]
我々は辞書から派生した複数の候補翻訳の曖昧さを解消する語彙制約付きNMTシステムであるDictDisを提案する。
我々は、規制、金融、工学を含む様々な分野において、英語・ヒンディー語・英語・ドイツ語文に関する広範な実験を通じて、DictDisの有用性を実証する。
論文 参考訳(メタデータ) (2022-10-13T13:04:16Z) - Dynamic Terminology Integration for COVID-19 and other Emerging Domains [4.492630871726495]
本研究は、Tilde MTシステムにおいて、翻訳時の動的用語統合を可能としたWMT 2021共有タスク:ターミノロジーを用いた機械翻訳の一部である。
当システムでは、EN-FR言語ペアのテストセット上で、システムトレーニング中にドメイン内の情報にアクセスすることなく、最大94%の長期使用精度を達成している。
論文 参考訳(メタデータ) (2021-09-10T07:23:55Z) - Improving Lexically Constrained Neural Machine Translation with
Source-Conditioned Masked Span Prediction [6.46964825569749]
本稿では、より長いn-gramと高度に専門化された用語を持つドメイン固有コーパスからなるより困難なセットアップに取り組む。
生成におけるスパンレベルの表現を促進するため、デコーダにソース条件付きマスク付きスパン予測損失を付加する。
2つの言語対における3つのドメイン固有コーパスの実験結果から,提案手法が既存の語彙制約手法の性能を向上させることを示す。
論文 参考訳(メタデータ) (2021-05-12T08:11:33Z) - FDMT: A Benchmark Dataset for Fine-grained Domain Adaptation in Machine
Translation [53.87731008029645]
機械翻訳(FDMT)における実世界のきめ細かいドメイン適応タスクを提案する。
FDMTデータセットは、自動運転車、AI教育、リアルタイムネットワーク、スマートフォンの4つのサブドメインで構成されている。
この新しい設定で定量的な実験と深い分析を行い、きめ細かいドメイン適応タスクをベンチマークします。
論文 参考訳(メタデータ) (2020-12-31T17:15:09Z) - On the Limitations of Cross-lingual Encoders as Exposed by
Reference-Free Machine Translation Evaluation [55.02832094101173]
クロスランガルエンコーダの評価は通常、教師付き下流タスクにおけるゼロショットのクロスランガル転送または教師なしのクロスランガル類似性によって行われる。
本稿では、ソーステキストと(低品質な)システム翻訳を直接比較するMT(Reference-free Machine Translation)の評価について述べる。
事前学習したM-BERTとLASERで得られた最先端の言語間セマンティック表現に基づいて,様々なメトリクスを体系的に検討する。
参照なしMT評価において,セマンティックエンコーダとしての性能は低く,その2つの重要な限界を同定する。
論文 参考訳(メタデータ) (2020-05-03T22:10:23Z) - Neural Machine Translation: Challenges, Progress and Future [62.75523637241876]
機械翻訳(英: Machine translation, MT)は、コンピュータを利用して人間の言語を自動翻訳する技術である。
ニューラルマシン翻訳(NMT)は、ディープニューラルネットワークを用いたソース言語とターゲット言語間の直接マッピングをモデル化する。
この記事では、NMTフレームワークをレビューし、NMTの課題について論じ、最近のエキサイティングな進歩を紹介します。
論文 参考訳(メタデータ) (2020-04-13T07:53:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。