論文の概要: Obliviator Reveals the Cost of Nonlinear Guardedness in Concept Erasure
- arxiv url: http://arxiv.org/abs/2603.07529v1
- Date: Sun, 08 Mar 2026 08:35:43 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-10 15:13:14.718066
- Title: Obliviator Reveals the Cost of Nonlinear Guardedness in Concept Erasure
- Title(参考訳): Obliviatorが概念消去における非線形ガードネスのコストを公表
- Abstract要約: 概念消去は、学習された表現から社会的・人口的要因などの望ましくない属性を取り除くことを目的としている。
従来の手法では、学習された表現と望ましくない属性の間の複雑で非線形な統計的依存関係を完全に把握できなかった。
Obliviatorは,非線形統計的依存関係を完全に捕捉するポストホック消去法である。
- 参考スコア(独自算出の注目度): 15.574717738100725
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Concept erasure aims to remove unwanted attributes, such as social or demographic factors, from learned representations, while preserving their task-relevant utility. While the goal of concept erasure is protection against all adversaries, existing methods remain vulnerable to nonlinear ones. This vulnerability arises from their failure to fully capture the complex, nonlinear statistical dependencies between learned representations and unwanted attributes. Moreover, although the existence of a trade-off between utility and erasure is expected, its progression during the erasure process, i.e., the cost of erasure, remains unstudied. In this work, we introduce Obliviator, a post-hoc erasure method designed to fully capture nonlinear statistical dependencies. We formulate erasure from a functional perspective, leading to an optimization problem involving a composition of kernels that lacks a closed-form solution. Instead of solving this problem in a single shot, we adopt an iterative approach that gradually morphs the feature space to achieve a more utility-preserving erasure. Unlike prior methods, Obliviator guards unwanted attribute against nonlinear adversaries. Our gradual approach quantifies the cost of nonlinear guardedness and reveals the dynamics between attribute protection and utility-preservation over the course of erasure. The utility-erasure trade-off curves obtained by Obliviator outperform the baselines and demonstrate its strong generalizability: its erasure becomes more utility-preserving when applied to the better-disentangled representations learned by more capable models.
- Abstract(参考訳): 概念消去は、社会的・人口的要因などの望ましくない属性を学習された表現から取り除き、タスク関連ユーティリティを保存することを目的としている。
概念消去の目標は、全ての敵に対する保護であるが、既存の手法は、非線形に弱いままである。
この脆弱性は、学習された表現と望ましくない属性の間の複雑で非線形な統計的依存関係を完全に把握できなかったことから生じる。
また、実用性と消去のトレードオフの存在が期待されるが、消去の過程での進歩、すなわち消去コストは未検討のままである。
そこで本研究では,非線形統計的依存関係を完全に把握するポストホック消去法であるObliviatorを紹介する。
我々は機能の観点から消去を定式化し、閉形式解に欠けるカーネルの構成を含む最適化問題に繋がる。
この問題を1ショットで解決するのではなく,機能空間を徐々に変化させて,より実用性のある消去を実現する,反復的なアプローチを採用しています。
従来の方法とは異なり、Obliviatorは非線形敵に対する望ましくない属性を保護している。
我々の漸進的なアプローチは、非線形ガードネスのコストを定量化し、消去過程における属性保護とユーティリティ保存のダイナミクスを明らかにする。
Obliviatorによって得られたユーティリティ・エミッションのトレードオフ曲線はベースラインを上回り、その強力な一般化性を示す。
関連論文リスト
- Non-Parametric Rehearsal Learning via Conditional Mean Embeddings [88.89267783967263]
本研究では,不必要な未来(AUF)問題をテキスト化するための非パラメトリックリハーサル学習手法を提案する。
具体的には、カーネル機械を用いてAUFの目的を、動作誘起分布変化から所望性モデリングを遠ざける統一表現に再構成する。
論文 参考訳(メタデータ) (2026-05-09T15:30:52Z) - AEGIS: Adversarial Target-Guided Retention-Data-Free Robust Concept Erasure from Diffusion Models [36.91937453334139]
概念消去は、拡散モデル(DM)が有害なコンテンツを生成するのを防ぐのに役立ちますが、現在の手法は保持のトレードオフに直面します。
本稿では,頑健性と保持性の両方を向上する保持データフリーフレームワークであるAdversarial Erasure with Gradient Informed Synergy (AEGIS)を紹介する。
論文 参考訳(メタデータ) (2026-02-06T15:27:42Z) - Beyond Memorization: Gradient Projection Enables Selective Learning in Diffusion Models [3.4064487905075294]
大規模テキスト・画像拡散モデルの記憶化は、セキュリティと知的財産権の重大なリスクをもたらす。
概念レベルの機能排除の厳格な要件を強制するために設計されたグラディエント・プロジェクション・フレームワークを導入する。
我々のアプローチは、IPセーフでプライバシ保護された生成AIのための新しいパラダイムを確立します。
論文 参考訳(メタデータ) (2025-12-12T00:50:38Z) - CURE: Concept Unlearning via Orthogonal Representation Editing in Diffusion Models [7.68494752148263]
CUREは、事前訓練された拡散モデルの重み空間で直接動作する、トレーニング不要の概念未学習フレームワークである。
スペクトル消去器は、安全な属性を保持しながら、望ましくない概念に特有の特徴を特定し、分離する。
CUREは、対象とする芸術スタイル、オブジェクト、アイデンティティ、明示的なコンテンツに対して、より効率的で徹底的な除去を実現する。
論文 参考訳(メタデータ) (2025-05-19T03:53:06Z) - Continual Unlearning for Foundational Text-to-Image Models without Generalization Erosion [56.35484513848296]
本研究は,基本生成モデルから複数の特定の概念を対象とする除去を可能にする新しいパラダイムである連続的アンラーニングを導入する。
本稿では,望ましくない概念の生成を選択的に解き放つような一般化エロージョン(DUGE)アルゴリズムを提案する。
論文 参考訳(メタデータ) (2025-03-17T23:17:16Z) - TaCo: Targeted Concept Erasure Prevents Non-Linear Classifiers From Detecting Protected Attributes [4.2560452339165895]
Targeted Concept Erasure (TaCo)は、最後の潜伏表現から機密情報を除去する新しいアプローチである。
実験の結果,TaCoは最先端の手法よりも優れていた。
論文 参考訳(メタデータ) (2023-12-11T16:22:37Z) - Log-linear Guardedness and its Implications [116.87322784046926]
線形性を仮定する神経表現から人間の解釈可能な概念を消去する方法は、抽出可能で有用であることが判明した。
この研究は、対数線ガードネスの概念を、敵が表現から直接その概念を予測することができないものとして正式に定義している。
バイナリの場合、ある仮定の下では、下流の対数線形モデルでは消去された概念を復元できないことを示す。
論文 参考訳(メタデータ) (2022-10-18T17:30:02Z) - Near-optimal Offline Reinforcement Learning with Linear Representation:
Leveraging Variance Information with Pessimism [65.46524775457928]
オフライン強化学習は、オフライン/歴史的データを活用して、シーケンシャルな意思決定戦略を最適化しようとしている。
線形モデル表現を用いたオフライン強化学習の統計的限界について検討する。
論文 参考訳(メタデータ) (2022-03-11T09:00:12Z) - Linear Adversarial Concept Erasure [108.37226654006153]
与えられた概念に対応する線形部分空間の同定と消去の問題を定式化する。
提案手法は, トラクタビリティと解釈性を維持しつつ, 深い非線形分類器のバイアスを効果的に軽減し, 高い表現性を有することを示す。
論文 参考訳(メタデータ) (2022-01-28T13:00:17Z) - On dissipative symplectic integration with applications to
gradient-based optimization [77.34726150561087]
本稿では,離散化を体系的に実現する幾何学的枠組みを提案する。
我々は、シンプレクティックな非保守的、特に散逸的なハミルトン系への一般化が、制御された誤差まで収束率を維持することができることを示す。
論文 参考訳(メタデータ) (2020-04-15T00:36:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。