論文の概要: Dual Contrastive Learning for General Face Forgery Detection
- arxiv url: http://arxiv.org/abs/2112.13522v1
- Date: Mon, 27 Dec 2021 05:44:40 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-28 15:58:05.537658
- Title: Dual Contrastive Learning for General Face Forgery Detection
- Title(参考訳): 顔偽検出のための二重コントラスト学習
- Authors: Ke Sun, Taiping Yao, Shen Chen, Shouhong Ding, Jilin L, Rongrong Ji
- Abstract要約: 本稿では,正と負のペアデータを構成するDCL (Dual Contrastive Learning) という新しい顔偽造検出フレームワークを提案する。
本研究は, 事例内コントラスト学習(Intra-ICL)において, 偽造顔における局所的内容の不整合に焦点をあてる。
- 参考スコア(独自算出の注目度): 64.41970626226221
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: With various facial manipulation techniques arising, face forgery detection
has drawn growing attention due to security concerns. Previous works always
formulate face forgery detection as a classification problem based on
cross-entropy loss, which emphasizes category-level differences rather than the
essential discrepancies between real and fake faces, limiting model
generalization in unseen domains. To address this issue, we propose a novel
face forgery detection framework, named Dual Contrastive Learning (DCL), which
specially constructs positive and negative paired data and performs designed
contrastive learning at different granularities to learn generalized feature
representation. Concretely, combined with the hard sample selection strategy,
Inter-Instance Contrastive Learning (Inter-ICL) is first proposed to promote
task-related discriminative features learning by especially constructing
instance pairs. Moreover, to further explore the essential discrepancies,
Intra-Instance Contrastive Learning (Intra-ICL) is introduced to focus on the
local content inconsistencies prevalent in the forged faces by constructing
local-region pairs inside instances. Extensive experiments and visualizations
on several datasets demonstrate the generalization of our method against the
state-of-the-art competitors.
- Abstract(参考訳): 様々な顔操作技術が生まれ、顔偽造検出はセキュリティ上の懸念から注目を集めている。
従来の研究は常に、クロスエントロピー損失に基づく分類問題として顔偽造検出を定式化しており、これは、実在の顔と偽の顔の本質的な相違よりもカテゴリーレベルの差異を強調し、目に見えない領域におけるモデル一般化を制限する。
そこで本研究では, 正と負のペアデータを構築し, 異なる粒度で設計したコントラスト学習を行い, 一般化した特徴表現を学習する, デュアルコントラスト学習 (dcl) という新しい顔偽造検出フレームワークを提案する。
具体的には,厳密なサンプル選択戦略と組み合わせて,特にインスタンスペアの構築によるタスク関連識別特徴学習を促進するために,Inter-ICL(Inter-Instance Contrastive Learning)を提案する。
さらに、本質的な相違点をさらに探求するため、インスタンス内の局所領域ペアを構築して、偽顔で広く見られる局所的内容の不整合に焦点を合わせるために、イントラインスタンスコントラストラーニング(Intra-ICL)を導入している。
いくつかのデータセットにおける広範囲な実験と可視化は、最先端の競合相手に対する手法の一般化を示している。
関連論文リスト
- UniForensics: Face Forgery Detection via General Facial Representation [60.5421627990707]
高レベルの意味的特徴は摂動の影響を受けにくく、フォージェリー固有の人工物に限らないため、より強い一般化がある。
我々は、トランスフォーマーベースのビデオネットワークを活用する新しいディープフェイク検出フレームワークUniForensicsを導入し、顔の豊かな表現のためのメタファンクショナルな顔分類を行う。
論文 参考訳(メタデータ) (2024-07-26T20:51:54Z) - Appearance Debiased Gaze Estimation via Stochastic Subject-Wise
Adversarial Learning [33.55397868171977]
外観に基づく視線推定はコンピュータビジョンにおいて注目されており、様々な深層学習技術を用いて顕著な改善が達成されている。
本稿では,被験者の外観を一般化するネットワークを訓練する,SAZE学習という新しい枠組みを提案する。
実験の結果,MPIIGazeデータセットとEyeDiapデータセットの3.89と4.42をそれぞれ達成した。
論文 参考訳(メタデータ) (2024-01-25T00:23:21Z) - COMICS: End-to-end Bi-grained Contrastive Learning for Multi-face Forgery Detection [56.7599217711363]
顔偽造認識法は一度に1つの顔しか処理できない。
ほとんどの顔偽造認識法は一度に1つの顔しか処理できない。
マルチフェイスフォージェリ検出のためのエンドツーエンドフレームワークであるCOMICSを提案する。
論文 参考訳(メタデータ) (2023-08-03T03:37:13Z) - Learning Common Rationale to Improve Self-Supervised Representation for
Fine-Grained Visual Recognition Problems [61.11799513362704]
我々は、インスタンスやクラスでよく見られる差別的手がかりを識別するための、追加のスクリーニングメカニズムの学習を提案する。
SSL目標から誘導されるGradCAMを単純に利用することで、共通な有理性検出器が学習可能であることを示す。
論文 参考訳(メタデータ) (2023-03-03T02:07:40Z) - Towards Intrinsic Common Discriminative Features Learning for Face
Forgery Detection using Adversarial Learning [59.548960057358435]
本稿では, 対人学習を利用して, 異なる偽造法と顔の同一性による負の効果を除去する手法を提案する。
我々の顔偽造検出モデルは、偽造法や顔の同一性の影響を排除し、共通の識別的特徴を抽出することを学ぶ。
論文 参考訳(メタデータ) (2022-07-08T09:23:59Z) - Real-centric Consistency Learning for Deepfake Detection [8.313889744011933]
両クラスの不変表現を学習することで深度検出問題に取り組む。
本稿では,潜在世代関連特徴を抽出するための,意味論的ペアリング手法を提案する。
特徴レベルでは、表現空間における自然面の中心に基づいて、潜在的な限界特徴をシミュレートする強正のマイニングと合成法を設計する。
論文 参考訳(メタデータ) (2022-05-15T07:01:28Z) - MC-LCR: Multi-modal contrastive classification by locally correlated
representations for effective face forgery detection [11.124150983521158]
局所的関連表現を用いたマルチモーダルコントラスト分類法を提案する。
我々のMC-LCRは、空間領域と周波数領域の両方から真偽顔と偽顔の暗黙の局所的不一致を増幅することを目的としている。
我々は最先端の性能を達成し,本手法の堅牢性と一般化を実証する。
論文 参考訳(メタデータ) (2021-10-07T09:24:12Z) - Semantics-Guided Contrastive Network for Zero-Shot Object detection [67.61512036994458]
ゼロショット物体検出(ZSD)はコンピュータビジョンにおける新しい課題である。
ゼロショット検出の領域にコントラスト学習機構をもたらすフレームワークであるContrastZSDを開発した。
本手法は,ZSDタスクと一般化ZSDタスクの両方において,従来の最先端技術よりも優れていた。
論文 参考訳(メタデータ) (2021-09-04T03:32:15Z) - Modeling Discriminative Representations for Out-of-Domain Detection with
Supervised Contrastive Learning [16.77134235390429]
OOD検出の主な課題は、識別的セマンティックな特徴を学習することである。
クラス内分散を最小限に抑えるための教師付きコントラスト学習目標を提案する。
我々は,サンプルの擬似多様なビューを得るために,対角的拡張機構を用いる。
論文 参考訳(メタデータ) (2021-05-29T12:54:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。