論文の概要: IMS at SemEval-2020 Task 1: How low can you go? Dimensionality in
Lexical Semantic Change Detection
- arxiv url: http://arxiv.org/abs/2008.03164v1
- Date: Fri, 7 Aug 2020 13:16:28 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-02 01:21:23.414590
- Title: IMS at SemEval-2020 Task 1: How low can you go? Dimensionality in
Lexical Semantic Change Detection
- Title(参考訳): IMS at SemEval-2020 Task 1: どれくらい低いのか?
語彙意味変化検出における次元性
- Authors: Jens Kaiser, Dominik Schlechtweg, Sean Papay, Sabine Schulte im Walde
- Abstract要約: 我々は,Ngative Smplingを用いたSkip-Gramに基づく語彙意味変化検出モデルを利用する。
本研究では,Vector Initialization (VI)アライメントに着目し,VectorをSubtask 2の上位モデルと比較し,Vectorの次元を最適化すれば性能が向上することを示した。
- 参考スコア(独自算出の注目度): 17.382892490756607
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We present the results of our system for SemEval-2020 Task 1 that exploits a
commonly used lexical semantic change detection model based on Skip-Gram with
Negative Sampling. Our system focuses on Vector Initialization (VI) alignment,
compares VI to the currently top-ranking models for Subtask 2 and demonstrates
that these can be outperformed if we optimize VI dimensionality. We demonstrate
that differences in performance can largely be attributed to model-specific
sources of noise, and we reveal a strong relationship between dimensionality
and frequency-induced noise in VI alignment. Our results suggest that lexical
semantic change models integrating vector space alignment should pay more
attention to the role of the dimensionality parameter.
- Abstract(参考訳): 本研究では,Skip-GramとNegative Smplingを併用した語彙意味変化検出モデルを用いたSemEval-2020 Task 1のシステムについて述べる。
本研究では,Vector Initialization (VI)アライメントに着目し,VectorをSubtask 2の上位モデルと比較し,Vectorの次元を最適化すれば性能が向上することを示した。
性能の違いは、主にモデル固有のノイズ源に起因することが示され、VIアライメントにおける次元と周波数依存性の強い関係が明らかになる。
この結果から,ベクトル空間アライメントを組み込んだ語彙意味変化モデルが次元パラメータの役割により多くの注意を払うことが示唆された。
関連論文リスト
- Recursive Learning of Asymptotic Variational Objectives [49.69399307452126]
一般状態空間モデル(英: General State-space Model, SSM)は、統計機械学習において広く用いられ、時系列データに対して最も古典的な生成モデルの一つである。
オンラインシーケンシャルIWAE(OSIWAE)は、潜在状態の推測のためのモデルパラメータとマルコフ認識モデルの両方のオンライン学習を可能にする。
このアプローチは、最近提案されたオンライン変分SMC法よりも理論的によく確立されている。
論文 参考訳(メタデータ) (2024-11-04T16:12:37Z) - Visual-Augmented Dynamic Semantic Prototype for Generative Zero-Shot Learning [56.16593809016167]
本稿では,視覚・視覚の正確なマッピングを学習するために,ジェネレータを高速化するビジュアル拡張動的セマンティックプロトタイプ(VADS)を提案する。
VADSは2つのモジュールから構成される:(1)視覚認識ドメイン知識学習モジュール(VDKL)は視覚特徴の局所バイアスとグローバル先行を学習し、純粋なガウス雑音を置き換え、よりリッチな事前ノイズ情報を提供する;(2)視覚指向セマンティックアップダクションモジュール(VOSU)は、サンプルの視覚表現に従ってセマンティックプロトタイプを更新する。
論文 参考訳(メタデータ) (2024-04-23T07:39:09Z) - S^2Former-OR: Single-Stage Bi-Modal Transformer for Scene Graph Generation in OR [50.435592120607815]
外科手術のシーングラフ生成(SGG)は、手術室(OR)におけるホモロジー認知知能の増強に不可欠である
これまでの研究は主に多段階学習に依存しており、生成したセマンティックシーングラフはポーズ推定とオブジェクト検出を伴う中間プロセスに依存している。
本研究では,S2Former-OR(S2Former-OR)と呼ばれるORにおけるSGGのための新しいシングルステージバイモーダルトランスフォーマフレームワークを提案する。
論文 参考訳(メタデータ) (2024-02-22T11:40:49Z) - Analyzing Local Representations of Self-supervised Vision Transformers [34.56680159632432]
各種自己監督型視覚変換器(ViT)の比較分析を行った。
大規模言語モデルに触発されて、微調整をほとんど行わずに様々なコンピュータビジョンタスクを実行するViTの能力について検討する。
論文 参考訳(メタデータ) (2023-12-31T11:38:50Z) - LC4SV: A Denoising Framework Learning to Compensate for Unseen Speaker
Verification Models [41.228425912671995]
音声強調(SE)モジュールは、フロントエンド戦略として使用できる。
既存のSEメソッドは、SEモデルの予測信号のアーチファクトのため、下流のSVシステムにパフォーマンス改善をもたらすことができない。
本稿では,未知の下流SVモデルのプリプロセッサとして機能するLC4SVという汎用デノベーションフレームワークを提案する。
論文 参考訳(メタデータ) (2023-11-28T08:44:04Z) - Segmenting Moving Objects via an Object-Centric Layered Representation [100.26138772664811]
深層表現を用いたオブジェクト中心セグメンテーションモデルを提案する。
複数のオブジェクトで合成トレーニングデータを生成するスケーラブルなパイプラインを導入する。
標準的なビデオセグメンテーションベンチマークでモデルを評価する。
論文 参考訳(メタデータ) (2022-07-05T17:59:43Z) - Smoothing Matters: Momentum Transformer for Domain Adaptive Semantic
Segmentation [48.7190017311309]
ドメイン適応型セマンティックセグメンテーションに局所的なViTを直接適用しても、期待できる改善は得られない。
これらの高周波成分は、局所的な ViT のトレーニングを極めて平滑なものにし、その伝達性を損なう。
本稿では,ローパスフィルタリング機構である運動量ネットワークを導入し,対象領域の特徴や擬似ラベルの学習ダイナミクスを円滑にする。
論文 参考訳(メタデータ) (2022-03-15T15:20:30Z) - SChME at SemEval-2020 Task 1: A Model Ensemble for Detecting Lexical
Semantic Change [58.87961226278285]
本稿では,SemEval-2020 Task 1における語彙意味変化の教師なし検出法であるSChMEについて述べる。
SChMEは、分布モデル(単語埋め込み)とワード周波数モデルの信号を組み合わせたモデルアンサンブルを使用し、各モデルは、その特徴に応じて単語が苦しむ確率を示す投票を行う。
論文 参考訳(メタデータ) (2020-12-02T23:56:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。