論文の概要: Transferring Dual Stochastic Graph Convolutional Network for Facial
Micro-expression Recognition
- arxiv url: http://arxiv.org/abs/2203.05208v1
- Date: Thu, 10 Mar 2022 07:41:18 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-11 15:36:56.873131
- Title: Transferring Dual Stochastic Graph Convolutional Network for Facial
Micro-expression Recognition
- Title(参考訳): 顔マイクロ圧縮認識のためのデュアル確率グラフ畳み込みネットワークの転送
- Authors: Hui Tang, Li Chai, Wanli Lu
- Abstract要約: 本稿では,2つのグラフ畳み込みネットワーク(GCN)モデルについて述べる。
マイクロ圧縮画像からより識別性の高い特徴を抽出するグラフ構築法と二重グラフ畳み込みネットワークを提案する。
提案手法は,最近リリースされたMMEWベンチマークの最先端性能を実現する。
- 参考スコア(独自算出の注目度): 7.62031665958404
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Micro-expression recognition has drawn increasing attention due to its wide
application in lie detection, criminal detection and psychological
consultation. To improve the recognition performance of the small
micro-expression data, this paper presents a transferring dual stochastic Graph
Convolutional Network (TDSGCN) model. We propose a stochastic graph
construction method and dual graph convolutional network to extract more
discriminative features from the micro-expression images. We use transfer
learning to pre-train SGCNs from macro expression data. Optical flow algorithm
is also integrated to extract their temporal features. We fuse both spatial and
temporal features to improve the recognition performance. To the best of our
knowledge, this is the first attempt to utilize the transferring learning and
graph convolutional network in micro-expression recognition task. In addition,
to handle the class imbalance problem of dataset, we focus on the design of
focal loss function. Through extensive evaluation, our proposed method achieves
state-of-the-art performance on SAMM and recently released MMEW benchmarks. Our
code will be publicly available accompanying this paper.
- Abstract(参考訳): マイクロ表現認識は, 嘘の検出, 犯罪検出, 心理相談に広く応用され, 注目を集めている。
本稿では,マイクロ表現データの認識性能を向上させるため,tdsgcn(trans transfer dual stochastic graph convolutional network)モデルを提案する。
マイクロ圧縮画像からより識別性の高い特徴を抽出する確率グラフ構築法と二重グラフ畳み込みネットワークを提案する。
マクロ表現データからsgcnsを事前学習するために転送学習を用いる。
光流アルゴリズムも時間的特徴を抽出するために統合されている。
空間的特徴と時間的特徴を融合させて認識性能を向上させる。
我々の知る限り、これはマイクロ圧縮認識タスクにおいて、転送学習とグラフ畳み込みネットワークを利用するための最初の試みである。
さらに,データセットのクラス不均衡問題に対処するため,焦点損失関数の設計に注目する。
提案手法は,SAMM上での最先端性能と最近リリースされたMMEWベンチマークを実現する。
私たちのコードは、この論文と共に公開されます。
関連論文リスト
- From Macro to Micro: Boosting micro-expression recognition via pre-training on macro-expression videos [9.472210792839023]
マイクロ圧縮認識(MER)は、インテリジェント医療や嘘検出に応用される可能性があるため、近年注目を集めている。
我々は、textbfMAcro-expression textbfTO textbfMIcro-expression (MA2MI) と呼ばれる一般化トランスファー学習パラダイムを提案する。
我々のパラダイムでは、ネットワークは将来のフレームを再構築することで、微妙な顔の動きを表現する能力を学ぶことができる。
論文 参考訳(メタデータ) (2024-05-26T06:42:06Z) - Graph Neural Networks Provably Benefit from Structural Information: A
Feature Learning Perspective [53.999128831324576]
グラフニューラルネットワーク(GNN)は、グラフ表現学習の先駆けとなった。
本研究では,特徴学習理論の文脈におけるグラフ畳み込みの役割について検討する。
論文 参考訳(メタデータ) (2023-06-24T10:21:11Z) - AU-aware graph convolutional network for Macro- and Micro-expression
spotting [44.507747407072685]
我々はAUW-GCN(Action-Unit-aWare Graph Convolutional Network)と呼ばれるグラフ畳み込み型ネットワークを提案する。
先行情報を注入し、小さなデータセットの問題に対処するために、AU関連統計データをネットワークにエンコードする。
その結果, 2つのベンチマークデータセットにおいて, ベースライン手法を一貫して向上させ, 新たなSOTA性能を実現することができた。
論文 参考訳(メタデータ) (2023-03-16T07:00:36Z) - Affinity-Aware Graph Networks [9.888383815189176]
グラフニューラルネットワーク(GNN)は、リレーショナルデータを学ぶための強力なテクニックとして登場した。
グラフニューラルネットワークの特徴としてアフィニティ尺度の利用について検討する。
本稿では,これらの特徴に基づくメッセージパッシングネットワークを提案し,その性能を様々なノードおよびグラフ特性予測タスクで評価する。
論文 参考訳(メタデータ) (2022-06-23T18:51:35Z) - Interpolation-based Correlation Reduction Network for Semi-Supervised
Graph Learning [49.94816548023729]
補間型相関低減ネットワーク(ICRN)と呼ばれる新しいグラフコントラスト学習手法を提案する。
提案手法では,決定境界のマージンを大きくすることで,潜在特徴の識別能力を向上させる。
この2つの設定を組み合わせることで、豊富なラベル付きノードと稀に価値あるラベル付きノードから豊富な監視情報を抽出し、離散表現学習を行う。
論文 参考訳(メタデータ) (2022-06-06T14:26:34Z) - MGAE: Masked Autoencoders for Self-Supervised Learning on Graphs [55.66953093401889]
Masked Graph Autoencoder (MGAE) フレームワークは、グラフ構造データの効果的な学習を行う。
自己指導型学習から洞察を得て、私たちはランダムに大量のエッジを隠蔽し、トレーニング中に欠落したエッジを再構築しようとします。
論文 参考訳(メタデータ) (2022-01-07T16:48:07Z) - Deep Graph Clustering via Dual Correlation Reduction [37.973072977988494]
本稿では,Dual correlation Reduction Network (DCRN) と呼ばれる自己教師型ディープグラフクラスタリング手法を提案する。
提案手法では,まず,サンプルを符号化するシアムネットワークを設計する。次に,クロスビューサンプル相関行列とクロスビュー特徴相関行列をそれぞれ2つのアイデンティティ行列に近似させることで,二重レベルの情報相関を小さくする。
本稿では,GCNの過度なスムース化による表現の崩壊を軽減するために,ネットワークが長距離情報を得るための伝搬正則化項を導入する。
論文 参考訳(メタデータ) (2021-12-29T04:05:38Z) - Short and Long Range Relation Based Spatio-Temporal Transformer for
Micro-Expression Recognition [61.374467942519374]
我々は,マイクロ圧縮認識のための最初の純粋トランスフォーマーベースアプローチである,新しいアテンポ的トランスフォーマーアーキテクチャを提案する。
空間パターンを学習する空間エンコーダと、時間的分析のための時間的次元分類と、ヘッドとを備える。
広範に使用されている3つの自発的マイクロ圧縮データセットに対する総合的な評価は,提案手法が一貫して芸術の状態を上回っていることを示している。
論文 参考訳(メタデータ) (2021-12-10T22:10:31Z) - Progressive Spatio-Temporal Bilinear Network with Monte Carlo Dropout
for Landmark-based Facial Expression Recognition with Uncertainty Estimation [93.73198973454944]
提案手法の性能は, 広く使用されている3つのデータセットで評価される。
ビデオベースの最先端の手法に匹敵するが、複雑さははるかに少ない。
論文 参考訳(メタデータ) (2021-06-08T13:40:30Z) - Micro-Facial Expression Recognition Based on Deep-Rooted Learning
Algorithm [0.0]
本稿では,MFEDRL(Micro-Facial Expression Based Deep-Rooted Learning)分類器を提案する。
アルゴリズムの性能は認識率と偽測度を用いて評価する。
論文 参考訳(メタデータ) (2020-09-12T12:23:27Z) - Graph Representation Learning via Graphical Mutual Information
Maximization [86.32278001019854]
本稿では,入力グラフとハイレベルな隠蔽表現との相関を測る新しい概念であるGMIを提案する。
我々は,グラフニューラルエンコーダの入力と出力の間でGMIを最大化することで訓練された教師なし学習モデルを開発する。
論文 参考訳(メタデータ) (2020-02-04T08:33:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。