論文の概要: Understanding and Improving Adversarial Attacks on Latent Diffusion
Model
- arxiv url: http://arxiv.org/abs/2310.04687v2
- Date: Fri, 15 Dec 2023 06:42:15 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-18 18:44:58.493412
- Title: Understanding and Improving Adversarial Attacks on Latent Diffusion
Model
- Title(参考訳): 潜伏拡散モデルによる敵攻撃の理解と改善
- Authors: Boyang Zheng, Chumeng Liang, Xiaoyu Wu, Yan Liu
- Abstract要約: 遅延拡散モデル(LDM)は、画像生成において最先端のパフォーマンスを達成するが、著作権とプライバシの懸念を高める。
LDMに対する敵対的な攻撃は、LDM駆動の少ショット生成において、許可されていない画像が使用されるのを防ぐために生まれる。
本稿では,現在最先端の複数ショット生成パイプラインに対して優れた性能を示すLCMに対する効果的な敵攻撃を提案する。
- 参考スコア(独自算出の注目度): 8.268827963476317
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Latent Diffusion Model (LDM) achieves state-of-the-art performances in image
generation yet raising copyright and privacy concerns. Adversarial attacks on
LDM are then born to protect unauthorized images from being used in LDM-driven
few-shot generation. However, these attacks suffer from moderate performance
and excessive computational cost, especially in GPU memory. In this paper, we
propose an effective adversarial attack on LDM that shows superior performance
against state-of-the-art few-shot generation pipeline of LDM, for example,
LoRA. We implement the attack with memory efficiency by introducing several
mechanisms and decrease the memory cost of the attack to less than 6GB, which
allows individual users to run the attack on a majority of consumer GPUs. Our
proposed attack can be a practical tool for people facing the copyright and
privacy risk brought by LDM to protect themselves.
- Abstract(参考訳): latent diffusion model (ldm) は画像生成における最先端のパフォーマンスを実現し、著作権やプライバシーの懸念も高めている。
ldmに対する敵対的な攻撃は、ldm駆動の少数ショット生成で不正な画像が使用されるのを防ぐために生まれます。
しかし、これらの攻撃は、特にgpuメモリにおいて、適度なパフォーマンスと過剰な計算コストに苦しむ。
本稿では, LDMの現時点の複数ショット生成パイプライン(例えばLoRA)に対して優れた性能を示す, LDMに対する効果的な対向攻撃を提案する。
我々は、いくつかのメカニズムを導入し、攻撃のメモリコストを6GB未満に削減することで、メモリ効率で攻撃を実行する。
提案した攻撃は、LDMが自己保護のためにもたらした著作権とプライバシーのリスクに直面する人々にとって、実用的なツールとなり得る。
関連論文リスト
- DiffusionGuard: A Robust Defense Against Malicious Diffusion-based Image Editing [93.45507533317405]
DiffusionGuardは、拡散ベースの画像編集モデルによる不正な編集に対する堅牢で効果的な防御方法である。
拡散過程の初期段階をターゲットとした対向雑音を発生させる新しい目的を提案する。
また,テスト期間中の各種マスクに対するロバスト性を高めるマスク強化手法も導入した。
論文 参考訳(メタデータ) (2024-10-08T05:19:19Z) - Watch the Watcher! Backdoor Attacks on Security-Enhancing Diffusion Models [65.30406788716104]
本研究では,セキュリティ強化拡散モデルの脆弱性について検討する。
これらのモデルは、シンプルで効果的なバックドア攻撃であるDIFF2に非常に感受性があることを実証する。
ケーススタディでは、DIFF2は、ベンチマークデータセットとモデル間で、パーフィケーション後の精度と認定精度の両方を著しく削減できることを示している。
論文 参考訳(メタデータ) (2024-06-14T02:39:43Z) - Pixel is a Barrier: Diffusion Models Are More Adversarially Robust Than We Think [14.583181596370386]
拡散モデルの逆例は、安全上の問題に対する解決策として広く使われている。
このことは、拡散モデルがほとんどの深層モデルのような敵攻撃に対して脆弱であると考えることを誤解させるかもしれない。
本稿では, 勾配をベースとしたホワイトボックス攻撃がLDM攻撃に有効であっても, PDM攻撃に失敗する,という新たな知見を示す。
論文 参考訳(メタデータ) (2024-04-20T08:28:43Z) - Impart: An Imperceptible and Effective Label-Specific Backdoor Attack [15.859650783567103]
我々は,攻撃者が被害者モデルにアクセスできないシナリオにおいて,Impartという新たな非知覚的なバックドア攻撃フレームワークを提案する。
具体的には、オール・ツー・オール・セッティングの攻撃能力を高めるために、まずラベル固有の攻撃を提案する。
論文 参考訳(メタデータ) (2024-03-18T07:22:56Z) - Revealing Vulnerabilities in Stable Diffusion via Targeted Attacks [41.531913152661296]
本稿では,安定拡散に対する標的対向攻撃の問題を定式化し,対向的プロンプトを生成するための枠組みを提案する。
具体的には、安定した拡散を誘導し、特定の画像を生成するための信頼性の高い逆プロンプトを構築するために、勾配に基づく埋め込み最適化を設計する。
逆方向のプロンプトを成功させた後、モデルの脆弱性を引き起こすメカニズムを明らかにする。
論文 参考訳(メタデータ) (2024-01-16T12:15:39Z) - Mutual-modality Adversarial Attack with Semantic Perturbation [81.66172089175346]
本稿では,相互モダリティ最適化スキームにおける敵攻撃を生成する新しい手法を提案する。
我々の手法は最先端の攻撃方法より優れており、プラグイン・アンド・プレイ・ソリューションとして容易にデプロイできる。
論文 参考訳(メタデータ) (2023-12-20T05:06:01Z) - DiffProtect: Generate Adversarial Examples with Diffusion Models for
Facial Privacy Protection [64.77548539959501]
DiffProtectは最先端の方法よりも自然に見える暗号化画像を生成する。
例えば、CelebA-HQとFFHQのデータセットで24.5%と25.1%の絶対的な改善が達成されている。
論文 参考訳(メタデータ) (2023-05-23T02:45:49Z) - Diffusion Models for Imperceptible and Transferable Adversarial Attack [23.991194050494396]
本稿では,拡散モデルの生成的および識別的パワーを両立させることにより,新たな非受容的かつ伝達可能な攻撃を提案する。
提案手法であるDiffAttackは,対向攻撃場に拡散モデルを導入する最初の方法である。
論文 参考訳(メタデータ) (2023-05-14T16:02:36Z) - Guided Adversarial Attack for Evaluating and Enhancing Adversarial
Defenses [59.58128343334556]
我々は、より適切な勾配方向を見つけ、攻撃効果を高め、より効率的な対人訓練をもたらす標準損失に緩和項を導入する。
本稿では, クリーン画像の関数マッピングを用いて, 敵生成を誘導するGAMA ( Guided Adversarial Margin Attack) を提案する。
また,一段防衛における最先端性能を実現するためのGAT ( Guided Adversarial Training) を提案する。
論文 参考訳(メタデータ) (2020-11-30T16:39:39Z) - Deflecting Adversarial Attacks [94.85315681223702]
我々は、攻撃者が攻撃対象クラスに似た入力を生成することによって、敵攻撃を「防御」するこのサイクルを終わらせる新しいアプローチを提案する。
本稿ではまず,3つの検出機構を組み合わせたカプセルネットワークに基づくより強力な防御手法を提案する。
論文 参考訳(メタデータ) (2020-02-18T06:59:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。