論文の概要: Self-similarity Prior Distillation for Unsupervised Remote Physiological
Measurement
- arxiv url: http://arxiv.org/abs/2311.05100v1
- Date: Thu, 9 Nov 2023 02:24:51 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-10 16:18:25.041921
- Title: Self-similarity Prior Distillation for Unsupervised Remote Physiological
Measurement
- Title(参考訳): 非教師付き遠隔生理計測のための自己相似性優先蒸留
- Authors: Xinyu Zhang, Weiyu Sun, Hao Lu, Ying Chen, Yun Ge, Xiaolin Huang, Jie
Yuan, Yingcong Chen
- Abstract要約: 教師なしr推定のための自己相似事前蒸留(SSPD)フレームワークを提案する。
SSPDは心活動の本質的な自己相似性に重点を置いている。
最先端の教師付き手法と比較すると、同等か、さらに優れたパフォーマンスを実現している。
- 参考スコア(独自算出の注目度): 40.68840376187229
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Remote photoplethysmography (rPPG) is a noninvasive technique that aims to
capture subtle variations in facial pixels caused by changes in blood volume
resulting from cardiac activities. Most existing unsupervised methods for rPPG
tasks focus on the contrastive learning between samples while neglecting the
inherent self-similar prior in physiological signals. In this paper, we propose
a Self-Similarity Prior Distillation (SSPD) framework for unsupervised rPPG
estimation, which capitalizes on the intrinsic self-similarity of cardiac
activities. Specifically, we first introduce a physical-prior embedded
augmentation technique to mitigate the effect of various types of noise. Then,
we tailor a self-similarity-aware network to extract more reliable self-similar
physiological features. Finally, we develop a hierarchical self-distillation
paradigm to assist the network in disentangling self-similar physiological
patterns from facial videos. Comprehensive experiments demonstrate that the
unsupervised SSPD framework achieves comparable or even superior performance
compared to the state-of-the-art supervised methods. Meanwhile, SSPD maintains
the lowest inference time and computation cost among end-to-end models. The
source codes are available at https://github.com/LinXi1C/SSPD.
- Abstract(参考訳): remote photoplethysmography(rppg)は、心臓活動による血液量の変化によって生じる顔面のピクセルの微妙な変化を捉えることを目的とした非侵襲的手法である。
既存のrPPGタスクの教師なし手法のほとんどは、生理的信号の前の自己相似性を無視しながら、サンプル間の対照的な学習に焦点を当てている。
本稿では,心活動の本質的な自己相似性に着目した,教師なしrPPG推定のための自己相似事前蒸留(SSPD)フレームワークを提案する。
具体的には,まず,様々なノイズの影響を緩和する物理優先組込み拡張手法を導入する。
そして,より信頼性の高い自己相似生理的特徴を抽出するために,自己相似性認識ネットワークを調整した。
最後に,ネットワークが顔ビデオから自己相似する生理的パターンを分離するのを支援する階層的自己蒸留パラダイムを開発した。
包括的実験により、教師なしのSSPDフレームワークは、最先端の教師付き手法と比較して、同等またはそれ以上のパフォーマンスを達成することが示された。
一方、SSPDはエンドツーエンドモデルの中で最も低い推論時間と計算コストを維持している。
ソースコードはhttps://github.com/LinXi1C/SSPDで入手できる。
関連論文リスト
- Decomposing the Neurons: Activation Sparsity via Mixture of Experts for Continual Test Time Adaptation [37.79819260918366]
継続的なテスト時間適応(CTTA)は、トレーニング済みのモデルを進化し続けるターゲットドメインに適応させることを目的としている。
我々はCTTAタスクのアダプタとしてMixture-of-Activation-Sparsity-Experts (MoASE)の統合について検討する。
論文 参考訳(メタデータ) (2024-05-26T08:51:39Z) - rPPG-MAE: Self-supervised Pre-training with Masked Autoencoders for
Remote Physiological Measurement [36.54109704201048]
リモート光胸腺撮影(r-MAE)はヒトのバイタルサインを知覚する重要な技術である。
本稿では,生理的信号に先行する自己相似性を抽出する自己教師型フレームワークを開発する。
また,提案手法をPUREとUBFC-rという2つの公開データセット上で評価した。
論文 参考訳(メタデータ) (2023-06-04T08:53:28Z) - Benchmarking Joint Face Spoofing and Forgery Detection with Visual and
Physiological Cues [81.15465149555864]
視覚的外観と生理的rcuesを用いた第1回関節スプーフィングおよび検出ベンチマークを作成した。
r周期性判別を強化するために,顔の強信号マップと連続ウェーブレットを入力として変換した2分岐生理ネットワークを設計した。
論文 参考訳(メタデータ) (2022-08-10T15:41:48Z) - The Way to my Heart is through Contrastive Learning: Remote
Photoplethysmography from Unlabelled Video [10.479541955106328]
ビデオから生理的信号を確実に推定する能力は、低コストで臨床前の健康モニタリングにおいて強力なツールである。
本稿では, 人の顔や皮膚の観察から血液量の変化を計測するリモート光胸腺造影法(r)の新たなアプローチを提案する。
論文 参考訳(メタデータ) (2021-11-18T15:21:33Z) - On the Robustness of Pretraining and Self-Supervision for a Deep
Learning-based Analysis of Diabetic Retinopathy [70.71457102672545]
糖尿病網膜症における訓練方法の違いによる影響を比較検討した。
本稿では,定量的性能,学習した特徴表現の統計,解釈可能性,画像歪みに対する頑健性など,さまざまな側面について検討する。
以上の結果から,ImageNet事前学習モデルでは,画像歪みに対する性能,一般化,堅牢性が著しく向上していることが示唆された。
論文 参考訳(メタデータ) (2021-06-25T08:32:45Z) - A Deep Drift-Diffusion Model for Image Aesthetic Score Distribution
Prediction [68.76594695163386]
画像から美的スコアの分布を予測するために,心理学者から着想を得たディープドリフト拡散モデルを提案する。
DDDモデルは、評価結果の伝統的なモデリングではなく、美的知覚の心理的プロセスを記述することができる。
私たちの新しいDDDモデルはシンプルだが効率的であり、美的スコア分布予測における最先端の手法よりも優れています。
論文 参考訳(メタデータ) (2020-10-15T11:01:46Z) - autoTICI: Automatic Brain Tissue Reperfusion Scoring on 2D DSA Images of
Acute Ischemic Stroke Patients [7.239126951855493]
脳梗塞の血栓溶解は急性期脳梗塞再灌流療法における重要な指標である。
既存のTICIスコアは、視覚検査に基づいて粗い順序付けで定義され、サーバ間およびサーバ内変動を引き起こす。
本稿では,自動的かつ定量的なTICIスコアリング手法であるAutoTICIを提案する。
論文 参考訳(メタデータ) (2020-10-03T22:06:55Z) - Detecting Parkinsonian Tremor from IMU Data Collected In-The-Wild using
Deep Multiple-Instance Learning [59.74684475991192]
パーキンソン病(英: Parkinson's Disease、PD)は、60歳以上の人口の約1%に影響を与える徐々に進化する神経学的疾患である。
PD症状には、震動、剛性、ブレイキネジアがある。
本稿では,スマートフォン端末から受信したIMU信号に基づいて,PDに関連するトレモラスなエピソードを自動的に識別する手法を提案する。
論文 参考訳(メタデータ) (2020-05-06T09:02:30Z) - Retinopathy of Prematurity Stage Diagnosis Using Object Segmentation and
Convolutional Neural Networks [68.96150598294072]
未熟児網膜症(英: Retinopathy of Prematurity、ROP)は、主に体重の低い未熟児に影響を及ぼす眼疾患である。
網膜の血管の増殖を招き、視力喪失を招き、最終的には網膜剥離を招き、失明を引き起こす。
近年,ディープラーニングを用いて診断を自動化する試みが盛んに行われている。
本稿では,従来のモデルの成功を基盤として,オブジェクトセグメンテーションと畳み込みニューラルネットワーク(CNN)を組み合わせた新しいアーキテクチャを開発する。
提案システムでは,まず対象分割モデルを訓練し,画素レベルでの区切り線を識別し,その結果のマスクを追加の"カラー"チャネルとして付加する。
論文 参考訳(メタデータ) (2020-04-03T14:07:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。