論文の概要: BRACE: Differential Privacy for Dense Associative Memory with LSR Energy
- arxiv url: http://arxiv.org/abs/2610.11218v1
- Date: Thu, 08 Oct 2026 04:13:58 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:53.798136
- Title: BRACE: Differential Privacy for Dense Associative Memory with LSR Energy
- Title(参考訳): BRACE:LSRエネルギーを用いた高密度連想記憶のための微分プライバシー
- Abstract要約: AIの差分プライバシへの関心が高まっているにもかかわらず、DAM検索ダイナミクスのプライバシはいまだに探索されていない。
対数sum-ReLU高密度連想記憶のための差分プライバシーフレームワークを開発した。
本研究は,エネルギーベースの連想記憶システムにおける最適プライバシー保護検索と不確実性定量化のための理論的基盤を提供する。
- 参考スコア(独自算出の注目度): 0.9453554184019107
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Dense associative memory (DAM) provides an energy-based framework for memory retrieval with close connections to attention mechanisms in modern artificial intelligence. Despite growing interest in differential privacy for AI, the privacy of DAM retrieval dynamics remains relatively unexplored. In this paper, we develop a differential privacy framework for log-sum-ReLU (LSR) dense associative memory, whose finite-support retrieval dynamics pose distinctive challenges for privacy-preserving computation. We propose the Boundary-Responsive Adaptive Correction Evolution (BRACE) algorithm, a differentially private retrieval mechanism for LSR-DAM that adaptively corrects boundary-sensitive perturbations to control their cumulative effect over the retrieval trajectory. In theory, we prove that our method is minimax optimal by deriving dimension-independent terminal and full-trajectory retrieval error rates, with optimal dependence on the inverse temperature and, in the growing-horizon regime, the retrieval horizon. We further establish central limit theorems that enable uncertainty quantification for private retrieval by characterizing its asymptotic distribution and the additional variability introduced by privacy. Numerical experiments compare our proposed method with baseline differential privacy approaches and evaluate its retrieval accuracy. Together, our results provide a theoretical foundation for optimal privacy-preserving retrieval and uncertainty quantification in energy-based associative memory systems.
- Abstract(参考訳): DAM(Dense AssociativeMemory)は、現代の人工知能における注意機構に密接に接続したメモリ検索のためのエネルギーベースのフレームワークである。
AIの差分プライバシへの関心が高まっているにもかかわらず、DAM検索ダイナミクスのプライバシはいまだに探索されていない。
本稿では,log-sum-ReLU(LSR)高密度連想メモリのための差分プライバシーフレームワークを開発する。
本研究では,LSR-DAMにおいて,境界感応性摂動を適応的に補正し,その累積効果を制御する手法として,境界感応性適応補正法(BRACE)アルゴリズムを提案する。
理論上,本手法は次元非依存端末と全軌跡検索誤差率の導出により,逆温度および成長水平状態において最適であることを示す。
さらに、その漸近分布とプライバシーによってもたらされる追加変数を特徴付けることにより、プライベート検索のための不確実性定量化を可能にする中心極限定理を確立する。
数値実験により,提案手法をベースライン差分プライバシーアプローチと比較し,その精度を評価する。
本研究は,エネルギーベースの連想記憶システムにおける最適プライバシー保護検索と不確実性定量化のための理論的基盤を提供する。
関連論文リスト
- ADKO: Agentic Decentralized Knowledge Optimization [21.537388090124196]
Agentic Decentralized Knowledge Optimization (ADKO)は、自律エージェント間の協調的なブラックボックス最適化のためのフレームワークである。
各エージェントは、ローカルデータに基づいて訓練されたプライベートガウスプロセス(GP)を保持し、知識トークンを通してのみ通信する。
トークン圧縮は相互情報に基づく忠実度によって定量化され、LM近似はバイアスとノイズに分解される。
論文 参考訳(メタデータ) (2026-05-08T15:23:53Z) - Synthetic Cardiac MRI Image Generation using Deep Generative Models [0.4733942082447995]
人工心臓MRI(CMRI)は, 注記医用画像データの不足を克服するための有望な戦略として浮上している。
GAN、VAE、拡散確率モデル、フローマッチング技術の最近の進歩は、解剖学的に正確な画像を生成することを目的としている。
このレビューは、忠実度、実用性、プライバシのレンズによる既存のCMRI生成アプローチを比較することを目的としている。
論文 参考訳(メタデータ) (2026-03-25T19:37:05Z) - ImprovDML: Improved Trade-off in Private Byzantine-Resilient Distributed Machine Learning [22.85986751447643]
一般的な戦略は、Byzantine-Resilientアグリゲーションルールと差分プライバシーメカニズムの統合である。
そこで我々は,プライバシ保護を同時に確保しつつ,モデルの精度を向上する ImprovDML を提案する。
モデル精度と差分プライバシーの間のトレードオフを改善することを実証する。
論文 参考訳(メタデータ) (2025-06-18T06:53:52Z) - TernaryVote: Differentially Private, Communication Efficient, and
Byzantine Resilient Distributed Optimization on Heterogeneous Data [50.797729676285876]
本稿では, 3次圧縮機と多数決機構を組み合わせて, 差分プライバシー, 勾配圧縮, ビザンチンレジリエンスを同時に実現するternaryVoteを提案する。
提案アルゴリズムのF差分プライバシー(DP)とビザンチンレジリエンスのレンズによるプライバシー保証を理論的に定量化する。
論文 参考訳(メタデータ) (2024-02-16T16:41:14Z) - Theoretically Principled Federated Learning for Balancing Privacy and
Utility [61.03993520243198]
モデルパラメータを歪ませることでプライバシを保護する保護機構の一般学習フレームワークを提案する。
フェデレートされた学習における各コミュニケーションラウンドにおいて、各クライアント上の各モデルパラメータに対して、パーソナライズされたユーティリティプライバシトレードオフを実現することができる。
論文 参考訳(メタデータ) (2023-05-24T13:44:02Z) - Breaking the Communication-Privacy-Accuracy Tradeoff with
$f$-Differential Privacy [51.11280118806893]
サーバが複数のユーザの協調的なデータ分析を,プライバシの懸念と限られた通信能力で調整する,フェデレートされたデータ分析問題を考える。
有限出力空間を有する離散値機構の局所的差分プライバシー保証を$f$-differential privacy (DP) レンズを用いて検討する。
より具体的には、様々な離散的評価機構の厳密な$f$-DP保証を導出することにより、既存の文献を前進させる。
論文 参考訳(メタデータ) (2023-02-19T16:58:53Z) - Differentially Private Stochastic Gradient Descent with Low-Noise [49.981789906200035]
現代の機械学習アルゴリズムは、データからきめ細かい情報を抽出して正確な予測を提供することを目的としており、プライバシー保護の目標と矛盾することが多い。
本稿では、プライバシを保ちながら優れたパフォーマンスを確保するために、プライバシを保存する機械学習アルゴリズムを開発することの実践的および理論的重要性について論じる。
論文 参考訳(メタデータ) (2022-09-09T08:54:13Z) - Decentralized Stochastic Optimization with Inherent Privacy Protection [103.62463469366557]
分散最適化は、現代の協調機械学習、分散推定と制御、大規模センシングの基本的な構成要素である。
データが関与して以降、分散最適化アルゴリズムの実装において、プライバシ保護がますます重要になっている。
論文 参考訳(メタデータ) (2022-05-08T14:38:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。