論文の概要: Identifying Rhythmic Patterns for Face Forgery Detection and
Categorization
- arxiv url: http://arxiv.org/abs/2207.01199v1
- Date: Mon, 4 Jul 2022 04:57:06 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-05 15:20:06.629776
- Title: Identifying Rhythmic Patterns for Face Forgery Detection and
Categorization
- Title(参考訳): 顔偽造検出・分類のためのリズムパターンの同定
- Authors: Jiahao Liang, Weihong Deng
- Abstract要約: 本研究では, PPG信号に対する空間時間フィルタリングネットワーク (STFNet) と, PPG信号の制約と相互作用のための空間時間インタラクションネットワーク (STINet) からなる顔偽造検出と分類のためのフレームワークを提案する。
フォージェリーメソッドの生成に関する知見を得て,フレームワークの性能を高めるために,イントラソースとイントラソースのブレンディングを提案する。
- 参考スコア(独自算出の注目度): 46.21354355137544
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: With the emergence of GAN, face forgery technologies have been heavily
abused. Achieving accurate face forgery detection is imminent. Inspired by
remote photoplethysmography (rPPG) that PPG signal corresponds to the periodic
change of skin color caused by heartbeat in face videos, we observe that
despite the inevitable loss of PPG signal during the forgery process, there is
still a mixture of PPG signals in the forgery video with a unique rhythmic
pattern depending on its generation method. Motivated by this key observation,
we propose a framework for face forgery detection and categorization consisting
of: 1) a Spatial-Temporal Filtering Network (STFNet) for PPG signals filtering,
and 2) a Spatial-Temporal Interaction Network (STINet) for constraint and
interaction of PPG signals. Moreover, with insight into the generation of
forgery methods, we further propose intra-source and inter-source blending to
boost the performance of the framework. Overall, extensive experiments have
proved the superiority of our method.
- Abstract(参考訳): GANの出現に伴い、顔偽造技術は乱用されている。
正確な顔偽造検出は差し迫っている。
リモート光胸腺造影(rPPG)により, PPG信号は顔面ビデオにおける心拍による皮膚色の周期的変化に対応し, 偽造過程中にPSG信号が失われることは避けられないものの, 偽造ビデオにPPG信号と独自のリズムパターンが混在していることが観察された。
そこで本研究では, 顔の偽造検出と分類のための枠組みを提案する。
1)ppg信号フィルタリングのための空間時空間フィルタリングネットワーク(stfnet)
2) PPG信号の制約と相互作用のための時空間相互作用ネットワーク(STINet)。
さらに,フォージェリー手法の生成について考察し,フレームワークの性能を高めるために,イントラソースおよびイントラソースブレンディングを提案する。
概して,本手法の優位性は広範な実験によって証明されている。
関連論文リスト
- CodePhys: Robust Video-based Remote Physiological Measurement through Latent Codebook Querying [26.97093819822487]
リモート光胸腺撮影は、顔の映像から非接触的な生理的信号を測定することを目的としている。
既存のほとんどの方法は、心拍推定のためにニューラルネットワークを設計することで、ビデオベースのr特徴を直接抽出する。
近年の手法は、干渉や劣化の影響を受けやすいため、ノイズのあるr信号が生じる。
我々は、ノイズフリープロキシ空間におけるコードタスクとしてrの測定を革新的に扱うCodePhysという新しい手法を提案する。
論文 参考訳(メタデータ) (2025-02-11T13:05:42Z) - Partitioning Message Passing for Graph Fraud Detection [57.928658584067556]
グラフフラッド検出(GFD)タスクにグラフニューラルネットワーク(GNN)を適用する場合、ラベルの不均衡とホモフィリー・ヘテロフィリー混合が直面する根本的な問題である。
既存のGNNベースのGFDモデルは、GNNのホモフィリーへの帰納バイアスに対応するためにグラフ構造を拡張するように設計されている。
我々の研究では、GFDにGNNを適用する鍵は除外するのではなく、異なるラベルを持つ隣人を区別することにあると論じている。
論文 参考訳(メタデータ) (2024-11-16T11:30:53Z) - DD-rPPGNet: De-interfering and Descriptive Feature Learning for Unsupervised rPPG Estimation [8.901227918730562]
Photoplethysvolution (rmography)は、顔の映像から生理的信号と心拍数を測定することを目的としている。
近年の非教師なしr推定法は、真理r信号に頼ることなく、顔領域からr信号を推定する有望な可能性を示している。
本稿では,真の r 信号の学習のための r 機能内干渉を取り除くために,新しい Deinterfered and Descriptive r Estimation Network (DD-rNet) を提案する。
論文 参考訳(メタデータ) (2024-07-31T07:43:58Z) - UniForensics: Face Forgery Detection via General Facial Representation [60.5421627990707]
高レベルの意味的特徴は摂動の影響を受けにくく、フォージェリー固有の人工物に限らないため、より強い一般化がある。
我々は、トランスフォーマーベースのビデオネットワークを活用する新しいディープフェイク検出フレームワークUniForensicsを導入し、顔の豊かな表現のためのメタファンクショナルな顔分類を行う。
論文 参考訳(メタデータ) (2024-07-26T20:51:54Z) - rFaceNet: An End-to-End Network for Enhanced Physiological Signal Extraction through Identity-Specific Facial Contours [11.050311824021733]
リモート光胸腺撮影(r)技術は、ビデオフレームの微妙なピクセル変化から血液体積パルス(BVP)信号を抽出する。
本稿では,顔の輪郭に着目して顔BVP信号の抽出を促進するrFaceNet法を紹介する。
論文 参考訳(メタデータ) (2024-03-14T02:11:16Z) - Mask Attack Detection Using Vascular-weighted Motion-robust rPPG Signals [21.884783786547782]
R-based face anti-spoofing method は、しばしばビデオシーケンスの不安定な顔アライメントによる性能劣化に悩まされる。
SIFTキーポイントと顔ランドマークの両方を用いて, 顔の鮮明かつ正確に画素レベルで整列するランドマークアンコール顔縫合法を提案する。
Gated Recurrent Unit (GRU) を備えた軽量なEfficientNetは、分類のための空間的特徴と時間的特徴の両方を抽出するように設計されている。
論文 参考訳(メタデータ) (2023-05-25T11:22:17Z) - Benchmarking Joint Face Spoofing and Forgery Detection with Visual and
Physiological Cues [81.15465149555864]
視覚的外観と生理的rcuesを用いた第1回関節スプーフィングおよび検出ベンチマークを作成した。
r周期性判別を強化するために,顔の強信号マップと連続ウェーブレットを入力として変換した2分岐生理ネットワークを設計した。
論文 参考訳(メタデータ) (2022-08-10T15:41:48Z) - Consistency Regularization for Deep Face Anti-Spoofing [69.70647782777051]
顔認証システムでは、顔認証(FAS)が重要な役割を担っている。
このエキサイティングな観察によって、異なる視点の特徴整合性を促進することが、FASモデルを促進するための有望な方法かもしれないと推測する。
FASにおけるEPCR(Embeddding-level and Prediction-level Consistency Regularization)とEPCR(Embeddding-level Consistency Regularization)を併用した。
論文 参考訳(メタデータ) (2021-11-24T08:03:48Z) - Heterogeneous Face Frontalization via Domain Agnostic Learning [74.86585699909459]
本研究では, 視覚領域における正面視を, ポーズのバリエーションで合成できるドメイン非依存学習型生成逆数ネットワーク(DAL-GAN)を提案する。
DAL-GANは、補助分類器を備えたジェネレータと、より優れた合成のために局所的およびグローバルなテクスチャ識別をキャプチャする2つの識別器から構成される。
論文 参考訳(メタデータ) (2021-07-17T20:41:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。