論文の概要: Towards Discovery and Attribution of Open-world GAN Generated Images
- arxiv url: http://arxiv.org/abs/2105.04580v1
- Date: Mon, 10 May 2021 18:00:13 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-12 14:04:18.268723
- Title: Towards Discovery and Attribution of Open-world GAN Generated Images
- Title(参考訳): オープンワールドGAN生成画像の発見と貢献に向けて
- Authors: Sharath Girish, Saksham Suri, Saketh Rambhatla, Abhinav Shrivastava
- Abstract要約: 本稿では,未確認のGANから生成した画像の反復的探索アルゴリズムを提案する。
アルゴリズムはネットワークトレーニング,分散検出,クラスタリング,マージ,洗練といった複数のコンポーネントで構成されている。
私たちの実験は、新しいganを発見し、オープンワールドのセットアップで使用できるアプローチの有効性を示しています。
- 参考スコア(独自算出の注目度): 18.10496076534083
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: With the recent progress in Generative Adversarial Networks (GANs), it is
imperative for media and visual forensics to develop detectors which can
identify and attribute images to the model generating them. Existing works have
shown to attribute images to their corresponding GAN sources with high
accuracy. However, these works are limited to a closed set scenario, failing to
generalize to GANs unseen during train time and are therefore, not scalable
with a steady influx of new GANs. We present an iterative algorithm for
discovering images generated from previously unseen GANs by exploiting the fact
that all GANs leave distinct fingerprints on their generated images. Our
algorithm consists of multiple components including network training,
out-of-distribution detection, clustering, merge and refine steps. Through
extensive experiments, we show that our algorithm discovers unseen GANs with
high accuracy and also generalizes to GANs trained on unseen real datasets. We
additionally apply our algorithm to attribution and discovery of GANs in an
online fashion as well as to the more standard task of real/fake detection. Our
experiments demonstrate the effectiveness of our approach to discover new GANs
and can be used in an open-world setup.
- Abstract(参考訳): GAN(Generative Adversarial Networks)の最近の進歩により、メディアと視覚の法医学は、それらを生成するモデルに画像を特定し、属性付けできる検出器を開発することが不可欠である。
既存の作品では、画像を対応するganソースに高い精度でアトリビュートすることが示されている。
しかし、これらの作品はクローズド・セットのシナリオに限られており、列車の時間帯に見つからないGANに一般化できないため、新しいGANが定常的に流入しても拡張性がない。
我々は,すべてのganが生成した画像に異なる指紋を残しているという事実を生かして,これまで見つからなかったganから生成した画像を検出する反復アルゴリズムを提案する。
アルゴリズムはネットワークトレーニング,分散検出,クラスタリング,マージ,洗練といった複数のコンポーネントで構成されている。
広範にわたる実験により,我々のアルゴリズムは,未知のGANを高精度に発見し,実データに基づいて訓練されたGANに一般化することを示した。
さらに,このアルゴリズムを,オンライン形式でのganの帰属と発見に加えて,より標準的なリアル/フェイク検出タスクにも適用する。
私たちの実験は、新しいganを発見し、オープンワールドのセットアップで使用できるアプローチの有効性を示しています。
関連論文リスト
- Contrasting Deepfakes Diffusion via Contrastive Learning and Global-Local Similarities [88.398085358514]
Contrastive Deepfake Embeddings (CoDE)は、ディープフェイク検出に特化した新しい埋め込み空間である。
CoDEは、グローバルローカルな類似性をさらに強化することで、対照的な学習を通じて訓練される。
論文 参考訳(メタデータ) (2024-07-29T18:00:10Z) - GenFace: A Large-Scale Fine-Grained Face Forgery Benchmark and Cross Appearance-Edge Learning [50.7702397913573]
フォトリアリスティック・ジェネレータの急速な進歩は、真の画像と操作された画像の相違がますます不明瞭になっている臨界点に達している。
公開されている顔の偽造データセットはいくつかあるが、偽造顔は主にGANベースの合成技術を用いて生成される。
我々は,大規模で多様できめ細かな高忠実度データセットであるGenFaceを提案し,ディープフェイク検出の進展を促進する。
論文 参考訳(メタデータ) (2024-02-03T03:13:50Z) - Rethinking the Up-Sampling Operations in CNN-based Generative Network
for Generalizable Deepfake Detection [86.97062579515833]
我々は、アップサンプリング操作から生じる一般化された構造的アーティファクトをキャプチャし、特徴付ける手段として、NPR(Neighboring Pixel Relationships)の概念を紹介した。
tft28の異なる生成モデルによって生成されたサンプルを含む、オープンワールドデータセット上で包括的な分析を行う。
この分析は、新しい最先端のパフォーマンスを確立し、既存の手法よりも優れたtft11.6%の向上を示している。
論文 参考訳(メタデータ) (2023-12-16T14:27:06Z) - Spider GAN: Leveraging Friendly Neighbors to Accelerate GAN Training [20.03447539784024]
本稿では,画像を入力とするGANの学習手法を提案する。
このプロセスは、密接に関連するデータセットや、ターゲット分布のフレンドリーな近所'を識別することで、効率的に行うことができる。
我々は、スパイダーガンの定式化がより高速な収束をもたらすことを示し、ジェネレータは、一見無関係なデータセットでさえ対応を発見できることを示した。
論文 参考訳(メタデータ) (2023-05-12T17:03:18Z) - Extracting Semantic Knowledge from GANs with Unsupervised Learning [65.32631025780631]
GAN(Generative Adversarial Networks)は、特徴写像のセマンティクスを線形に分離可能な形でエンコードする。
本稿では,線形分離性を利用してGANの特徴をクラスタリングする新しいクラスタリングアルゴリズムKLiSHを提案する。
KLiSHは、さまざまなオブジェクトのデータセットに基づいてトレーニングされたGANのきめ細かいセマンティクスの抽出に成功している。
論文 参考訳(メタデータ) (2022-11-30T03:18:16Z) - Distilling Representations from GAN Generator via Squeeze and Span [55.76208869775715]
本稿では,GANジェネレータから知識を抽出し,その表現を抽出する手法を提案する。
我々は,合成ドメインの蒸留された表現を実領域に分散し,実際のトレーニングデータを用いてGANのモード崩壊を緩和する。
論文 参考訳(メタデータ) (2022-11-06T01:10:28Z) - GAN-Supervised Dense Visual Alignment [95.37027391102684]
本稿では,識別モデル学習のためのフレームワークであるGAN-Supervised Learningと,GAN生成した学習データをエンドツーエンドで共同で学習する手法を提案する。
従来のCongealing法にインスパイアされた我々のGANgealingアルゴリズムは、Spatial Transformerを訓練し、不整合データに基づいて訓練されたGANのランダムなサンプルを共通の目標モードにマッピングする。
論文 参考訳(メタデータ) (2021-12-09T18:59:58Z) - T-GD: Transferable GAN-generated Images Detection Framework [16.725880610265378]
本稿では,Transferable GAN-images Detection framework T-GDを提案する。
T-GDは教師と学生モデルから構成されており、相互に反復的に教え、評価し、検出性能を向上させることができる。
学生モデルを訓練するために、音源とターゲットデータセットを混合してノイズを注入し、ウェイト変動を制約して開始点を保存する。
論文 参考訳(メタデータ) (2020-08-10T13:20:19Z) - Detection, Attribution and Localization of GAN Generated Images [24.430919035100317]
本稿では,GAN生成画像の検出,属性化,ローカライズを行う新しい手法を提案する。
深層学習ネットワークはこれらの特徴に基づいてトレーニングされ、これらのGAN生成/操作された画像を検出し、属性付けし、ローカライズする。
5つのGANデータセットに対するアプローチを大規模に評価した結果,GAN生成画像の検出には有望な結果が得られた。
論文 参考訳(メタデータ) (2020-07-20T20:49:34Z) - DeepFake Detection by Analyzing Convolutional Traces [0.0]
我々は,人間の顔のディープフェイクの分析に着目し,新しい検出方法を提案する。
提案手法は, 予測最大化(EM)アルゴリズムを用いて, 基礎となる畳み込み生成過程をモデル化するための局所的特徴の集合を抽出する。
その結果、異なるアーキテクチャと対応する生成過程を区別する手法の有効性が示された。
論文 参考訳(メタデータ) (2020-04-22T09:02:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。