論文の概要: Exploring Disentangled Content Information for Face Forgery Detection
- arxiv url: http://arxiv.org/abs/2207.09202v1
- Date: Tue, 19 Jul 2022 11:22:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-20 14:02:57.137213
- Title: Exploring Disentangled Content Information for Face Forgery Detection
- Title(参考訳): 顔偽造検出のための異種コンテンツ情報の探索
- Authors: Jiahao Liang, Huafeng Shi, and Weihong Deng
- Abstract要約: 畳み込みニューラルネットワークに基づく顔偽造検出法は、トレーニング中に顕著な結果を得たが、テスト中に同等のパフォーマンスを維持するのに苦労した。
我々は,検出者が人工的トレースよりも内容情報に注目する傾向があることを観察し,検出者がデータセットの本質的バイアスに敏感であることを示唆した。
このキーとなる観察により、コンテンツ情報削除のための容易に組込み可能なゆがみフレームワークを設計する。
- 参考スコア(独自算出の注目度): 34.806203326686614
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Convolutional neural network based face forgery detection methods have
achieved remarkable results during training, but struggled to maintain
comparable performance during testing. We observe that the detector is prone to
focus more on content information than artifact traces, suggesting that the
detector is sensitive to the intrinsic bias of the dataset, which leads to
severe overfitting. Motivated by this key observation, we design an easily
embeddable disentanglement framework for content information removal, and
further propose a Content Consistency Constraint (C2C) and a Global
Representation Contrastive Constraint (GRCC) to enhance the independence of
disentangled features. Furthermore, we cleverly construct two unbalanced
datasets to investigate the impact of the content bias. Extensive
visualizations and experiments demonstrate that our framework can not only
ignore the interference of content information, but also guide the detector to
mine suspicious artifact traces and achieve competitive performance.
- Abstract(参考訳): 畳み込みニューラルネットワークに基づく顔偽造検出手法は、トレーニング中に顕著な結果を得たが、テスト中に同等のパフォーマンスを維持するのに苦労した。
我々は,検出器がアーチファクトトレースよりもコンテンツ情報に焦点を合わせやすいことを観察し,検出器がデータセットの固有バイアスに敏感であり,過度な過フィッティングにつながることを示唆する。
本研究の目的は,コンテンツ情報削除のための組込み型アンタングル化フレームワークを設計し,コンテンツ一貫性制約(C2C)とグローバル表現コントラスト制約(GRCC)を提案し,アンタングル化特徴の独立性を高めることである。
さらに,コンテンツバイアスの影響を調べるために,二つの不均衡データセットを巧みに構築する。
広範囲にわたる可視化と実験により,本フレームワークはコンテンツ情報の干渉を無視するだけでなく,不審な遺物跡を発掘し,競争性能を発揮できることを示した。
関連論文リスト
- SUMI-IFL: An Information-Theoretic Framework for Image Forgery Localization with Sufficiency and Minimality Constraints [66.85363924364628]
イメージフォージェリーローカライゼーション (IFL) は, 改ざん画像誤用を防止し, 社会安全を守るための重要な技術である。
本稿では,情報理論IFL フレームワーク SUMI-IFL について紹介する。
論文 参考訳(メタデータ) (2024-12-13T09:08:02Z) - Understanding and Improving Training-Free AI-Generated Image Detections with Vision Foundation Models [68.90917438865078]
顔合成と編集のためのディープフェイク技術は、生成モデルに重大なリスクをもたらす。
本稿では,モデルバックボーン,タイプ,データセット間で検出性能がどう変化するかを検討する。
本稿では、顔画像のパフォーマンスを向上させるContrastive Blurと、ノイズタイプのバイアスに対処し、ドメイン間のパフォーマンスのバランスをとるMINDERを紹介する。
論文 参考訳(メタデータ) (2024-11-28T13:04:45Z) - ED$^4$: Explicit Data-level Debiasing for Deepfake Detection [24.695989108814018]
限られたデータから固有のバイアスを学習することは、一般化可能なディープフェイク検出の失敗の主な原因と考えられている。
データレベルで上記のバイアスに明示的に対処するためのシンプルで効果的な戦略であるED$4$を提示します。
我々は,既存のディープフェイク検出手法よりも有効性と優位性を示すため,広範囲な実験を行った。
論文 参考訳(メタデータ) (2024-08-13T10:05:20Z) - D2SP: Dynamic Dual-Stage Purification Framework for Dual Noise Mitigation in Vision-based Affective Recognition [32.74206402632733]
ノイズは、論理的なラベル付けを損なう低品質なキャプチャや、アノテーションのバイアスによる誤ラベルに悩まされるインスタンスから生じます。
textbfSeeking textbfCertain data textbfIn extensive textbfUncertain data (SCIU)
このイニシアチブは、これらの不確実性のDFERデータセットを浄化することを目的としており、トレーニングプロセスでクリーンで検証されたデータのみが使用されることを保証する。
論文 参考訳(メタデータ) (2024-06-24T09:25:02Z) - Self-Supervised Graph Transformer for Deepfake Detection [1.8133635752982105]
ディープフェイク検出手法は、与えられたデータセット内の偽造を認識できる有望な結果を示している。
ディープフェイク検出システムは、一般的な検出性能を保証するために、偽造タイプ、外観、品質に欠かせないままでいなければならない。
本研究では、自己教師付き事前学習モデルを利用して、例外的な一般化能力を実現するディープフェイク検出フレームワークを提案する。
論文 参考訳(メタデータ) (2023-07-27T17:22:41Z) - Uncertainty-Aware Deep Co-training for Semi-supervised Medical Image
Segmentation [4.935055133266873]
本研究では,モデルが意図的に領域を学習するための新しい不確実性認識方式を提案する。
具体的には,不確実性マップを得るためにモンテカルロサンプリングを推定法として利用する。
後ろ向きのプロセスでは、ネットワークの収束を加速するために、教師なしの損失と教師なしの損失を共同で処理する。
論文 参考訳(メタデータ) (2021-11-23T03:26:24Z) - Towards Real-World Prohibited Item Detection: A Large-Scale X-ray
Benchmark [53.9819155669618]
本稿では,PIDrayと命名された大規模データセットについて述べる。
大量の努力を払って、私たちのデータセットには、高品質な注釈付きセグメンテーションマスクとバウンディングボックスを備えた47,677ドルのX線画像に、禁止アイテムの12ドルカテゴリが含まれています。
提案手法は最先端の手法に対して,特に故意に隠された項目を検出するために好適に機能する。
論文 参考訳(メタデータ) (2021-08-16T11:14:16Z) - WSSOD: A New Pipeline for Weakly- and Semi-Supervised Object Detection [75.80075054706079]
弱機能および半教師付きオブジェクト検出フレームワーク(WSSOD)を提案する。
エージェント検出器は、まず関節データセット上でトレーニングされ、弱注釈画像上で擬似境界ボックスを予測するために使用される。
提案フレームワークはPASCAL-VOC と MSCOCO のベンチマークで顕著な性能を示し,完全教師付き環境で得られたものと同等の性能を達成している。
論文 参考訳(メタデータ) (2021-05-21T11:58:50Z) - Uncertainty-aware Joint Salient Object and Camouflaged Object Detection [43.01556978979627]
本論文では, 相反する情報を活用し, 対流物体検出と迷彩物体検出の両方の検出能力を高めるパラダイムを提案する。
この2つのタスクの矛盾する属性を明示的にモデル化する類似度測度モジュールを導入する。
両タスクのデータセットにおけるラベル付けの不確実性を考慮して,高次類似度測定とネットワーク信頼度推定を両立させる逆学習ネットワークを提案する。
論文 参考訳(メタデータ) (2021-04-06T16:05:10Z) - Generative Partial Visual-Tactile Fused Object Clustering [81.17645983141773]
オブジェクトクラスタリングのためのGenerative Partial Visual-Tactile Fused(GPVTF)フレームワークを提案する。
条件付きクロスモーダルクラスタリング生成逆ネットワークを開発し、一方のモダリティ条件を他方のモダリティ上で合成する。
最後に、擬似ラベルに基づく2つのKL分割損失を用いて、対応するモダリティ固有エンコーダを更新する。
論文 参考訳(メタデータ) (2020-12-28T02:37:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。