論文の概要: GMSS: Graph-Based Multi-Task Self-Supervised Learning for EEG Emotion
Recognition
- arxiv url: http://arxiv.org/abs/2205.01030v1
- Date: Tue, 12 Apr 2022 03:37:21 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-09 06:39:58.670566
- Title: GMSS: Graph-Based Multi-Task Self-Supervised Learning for EEG Emotion
Recognition
- Title(参考訳): GMSS:脳波認識のためのグラフベースのマルチタスク自己監視学習
- Authors: Yang Li, Ji Chen, Fu Li, Boxun Fu, Hao Wu, Youshuo Ji, Yijin Zhou, Yi
Niu, Guangming Shi, Wenming Zheng
- Abstract要約: 本稿では,脳波感情認識のためのグラフベースマルチタスク自己教師学習モデル(GMSS)を提案する。
複数のタスクから同時に学習することで、GMSSはすべてのタスクをキャプチャする表現を見つけることができる。
SEED、SEED-IV、MPEDデータセットの実験により、提案モデルが脳波の感情信号に対するより差別的で一般的な特徴を学習する際、顕著な利点があることが示されている。
- 参考スコア(独自算出の注目度): 48.02958969607864
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Previous electroencephalogram (EEG) emotion recognition relies on single-task
learning, which may lead to overfitting and learned emotion features lacking
generalization. In this paper, a graph-based multi-task self-supervised
learning model (GMSS) for EEG emotion recognition is proposed. GMSS has the
ability to learn more general representations by integrating multiple
self-supervised tasks, including spatial and frequency jigsaw puzzle tasks, and
contrastive learning tasks. By learning from multiple tasks simultaneously,
GMSS can find a representation that captures all of the tasks thereby
decreasing the chance of overfitting on the original task, i.e., emotion
recognition task. In particular, the spatial jigsaw puzzle task aims to capture
the intrinsic spatial relationships of different brain regions. Considering the
importance of frequency information in EEG emotional signals, the goal of the
frequency jigsaw puzzle task is to explore the crucial frequency bands for EEG
emotion recognition. To further regularize the learned features and encourage
the network to learn inherent representations, contrastive learning task is
adopted in this work by mapping the transformed data into a common feature
space. The performance of the proposed GMSS is compared with several popular
unsupervised and supervised methods. Experiments on SEED, SEED-IV, and MPED
datasets show that the proposed model has remarkable advantages in learning
more discriminative and general features for EEG emotional signals.
- Abstract(参考訳): 以前の脳波(EEG)の感情認識は単一タスク学習に依存しており、一般化に欠ける過度に適合し、学習された感情の特徴をもたらす可能性がある。
本稿では,脳波感情認識のためのグラフベースマルチタスク自己教師学習モデル(GMSS)を提案する。
GMSSは、空間的および周波数的なジグソーパズルタスクや対照的な学習タスクを含む複数の自己指導タスクを統合することで、より一般的な表現を学ぶことができる。
複数のタスクから同時に学習することで、GMSSはすべてのタスクをキャプチャして、元のタスク、すなわち感情認識タスクに過度に適合する機会を減らす表現を見つけることができる。
特に、空間ジグソーパズルタスクは、異なる脳領域の固有の空間関係を捉えることを目的としている。
脳波感情信号における周波数情報の重要性を考慮すると、周波数ジグソーパズルタスクの目的は脳波感情認識において重要な周波数帯域を探索することである。
学習した特徴をより規則化し、ネットワークに固有の表現を学習するよう促すために、変換されたデータを共通の特徴空間にマッピングすることで、コントラスト学習タスクを採用する。
提案したGMSSの性能は、一般的な教師なしおよび教師なしの手法と比較される。
SEED、SEED-IV、MPEDデータセットの実験により、提案モデルが脳波の感情信号に対するより差別的で一般的な特徴を学習する際、顕著な利点があることが示されている。
関連論文リスト
- Self-supervised Gait-based Emotion Representation Learning from Selective Strongly Augmented Skeleton Sequences [4.740624855896404]
自己教師型歩行に基づく感情表現のための選択的強強化を利用したコントラスト学習フレームワークを提案する。
提案手法はEmotion-Gait (E-Gait) と Emilya のデータセットで検証され, 異なる評価プロトコル下での最先端手法よりも優れている。
論文 参考訳(メタデータ) (2024-05-08T09:13:10Z) - GPT as Psychologist? Preliminary Evaluations for GPT-4V on Visual Affective Computing [74.68232970965595]
MLLM(Multimodal large language model)は、テキスト、音声、画像、ビデオなどの複数のソースからの情報を処理し、統合するように設計されている。
本稿では、視覚的情緒的タスクと推論タスクにまたがる5つの重要な能力を持つMLLMの適用性を評価する。
論文 参考訳(メタデータ) (2024-03-09T13:56:25Z) - EMERSK -- Explainable Multimodal Emotion Recognition with Situational
Knowledge [0.0]
状況知識を用いた説明可能なマルチモーダル感情認識(EMERSK)を提案する。
EMERSKは視覚情報を用いた人間の感情認識と説明のための汎用システムである。
本システムは, 表情, 姿勢, 歩行などの複数のモーダルを柔軟かつモジュラーな方法で処理することができる。
論文 参考訳(メタデータ) (2023-06-14T17:52:37Z) - EmotionIC: emotional inertia and contagion-driven dependency modeling for emotion recognition in conversation [34.24557248359872]
本稿では,ERCタスクに対する感情的慣性・伝染型依存性モデリング手法(EmotionIC)を提案する。
EmotionICは3つの主要コンポーネント、すなわちIDマスク付きマルチヘッド注意(IMMHA)、対話型Gated Recurrent Unit(DiaGRU)、Skip-chain Conditional Random Field(SkipCRF)から構成されている。
実験結果から,提案手法は4つのベンチマークデータセットにおいて,最先端のモデルよりも大幅に優れていることが示された。
論文 参考訳(メタデータ) (2023-03-20T13:58:35Z) - Self-Supervised Graph Neural Network for Multi-Source Domain Adaptation [51.21190751266442]
ドメイン適応(DA)は、テストデータがトレーニングデータの同じ分布に完全に従わない場合に、シナリオに取り組む。
大規模未ラベルサンプルから学習することで、自己教師型学習がディープラーニングの新しいトレンドとなっている。
我々は,より効果的なタスク間情報交換と知識共有を実現するために,新しい textbfSelf-textbf Supervised textbfGraph Neural Network (SSG) を提案する。
論文 参考訳(メタデータ) (2022-04-08T03:37:56Z) - Multimodal Emotion Recognition using Transfer Learning from Speaker
Recognition and BERT-based models [53.31917090073727]
本稿では,音声とテキストのモダリティから,伝達学習モデルと微調整モデルとを融合したニューラルネットワークによる感情認識フレームワークを提案する。
本稿では,対話型感情的モーションキャプチャー・データセットにおけるマルチモーダル・アプローチの有効性を評価する。
論文 参考訳(メタデータ) (2022-02-16T00:23:42Z) - Improved Speech Emotion Recognition using Transfer Learning and
Spectrogram Augmentation [56.264157127549446]
音声感情認識(SER)は、人間とコンピュータの相互作用において重要な役割を果たす課題である。
SERの主な課題の1つは、データの不足である。
本稿では,スペクトログラム拡張と併用した移動学習戦略を提案する。
論文 参考訳(メタデータ) (2021-08-05T10:39:39Z) - Distribution Matching for Heterogeneous Multi-Task Learning: a
Large-scale Face Study [75.42182503265056]
マルチタスク学習は、共有学習アルゴリズムによって複数のタスクを共同で学習する方法論として登場した。
我々は異種mtlに対処し,検出,分類,回帰問題を同時に解決する。
大規模な顔分析のための最初のフレームワークであるFaceBehaviorNetを構築し、すべての顔行動タスクを共同で学習する。
論文 参考訳(メタデータ) (2021-05-08T22:26:52Z) - Self-supervised ECG Representation Learning for Emotion Recognition [25.305949034527202]
我々は心電図に基づく感情認識のための自己教師型深層マルチタスク学習フレームワークを利用する。
提案手法は,完全教師付き学習を用いて学習したネットワークと比較して,性能が大幅に向上することを示す。
論文 参考訳(メタデータ) (2020-02-04T17:15:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。