論文の概要: Projection-Based Federated Learning on Compact Submanifolds with Geometry-Independent Differential Privacy
- arxiv url: http://arxiv.org/abs/2610.33712v1
- Date: Sat, 24 Oct 2026 14:52:22 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-27 22:27:13.426073
- Title: Projection-Based Federated Learning on Compact Submanifolds with Geometry-Independent Differential Privacy
- Title(参考訳): 幾何学非依存微分プライバシーを用いたコンパクト部分多様体の投影型フェデレーション学習
- Abstract要約: フェデレーション学習は、データを交換することなく、クライアント間で共有モデルをトレーニングする。
既存の手法は、各新しいイテレートのジオメトリで、プライバシーのために追加されたノイズを再構築する。
DP-RFedProjは,コンパクトな部分多様体のためのレコードレベルの微分プライベート学習手法である。
- 参考スコア(独自算出の注目度): 19.8374401690036
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Federated learning trains a shared model across clients without exchanging their data, yet the updates they transmit still leak information about individual records. Enforcing differential privacy is harder still when the model parameters lie on a Riemannian manifold. Existing methods rebuild the noise added for privacy in the geometry of each new iterate, aggregate through intrinsic maps that often lack a closed form, and prove convergence only in restricted regimes. We introduce DP-RFedProj, a record-level differentially private federated learning method for compact submanifolds that aggregates through closed-form projections and privatises gradients in a fixed ambient geometry. Each client may run any stochastic first-order optimiser, take several local steps, and participate only intermittently. An explicit record-level $f$-DP guarantee holds for the entire training transcript, independently of the manifold, the aggregation scheme and the local optimiser. We establish convergence of DP-RFedProj when each client runs Riemannian SGD locally and the server aggregates by projected averaging, and show that privacy enters the rate through a term scaling with the manifold's intrinsic dimension rather than the ambient one. Synthetic experiments on federated PCA over the Grassmann manifold corroborate these findings. On EEG motor-imagery classification with SPDNet, whose weights lie on the Stiefel manifold, the method outperforms a Euclidean baseline at every privacy budget considered. In both experimental settings, our accounting requires five to six times less noise than that of the closest prior method for the same budget, which translates into higher utility.
- Abstract(参考訳): フェデレーション学習は、データを交換することなく、クライアント間で共有モデルをトレーニングする。
微分プライバシーの強制は、モデルパラメータがリーマン多様体上にあるときでも難しい。
既存の手法は、各新しいイテレートの幾何学においてプライバシーのために付加されたノイズを再構築し、しばしば閉じた形式を欠く固有の地図を通して集約し、制限された体制でのみ収束を証明している。
DP-RFedProjは、コンパクトな部分多様体に対して、閉形式の射影と、固定された周囲幾何における偏差勾配を集約する、レコードレベルの微分プライベートなフェデレーション学習手法である。
各クライアントは、任意の確率的な1次オプティマイザを実行し、いくつかのローカルステップを取り、断続的にのみ参加することができる。
明示的なレコードレベルの$f$-DP保証は、多様体、アグリゲーションスキーム、局所オプティマイザとは独立に、トレーニングの書き起こし全体に対して保持する。
我々は,各クライアントがリーマン SGD をローカルに実行し,サーバが平均化して集約すると,DP-RFedProj の収束性を確立する。
グラスマン多様体上の連合PCAの合成実験はこれらの発見を裏付ける。
スティフェル多様体上に重みを持つSPDNetを用いた脳波画像分類では、この手法は、考慮されたプライバシー予算のすべてにおいてユークリッドベースラインを上回っている。
両方の実験的な設定において、我々の会計は、同じ予算に最も近い手法よりも5倍から6倍のノイズを必要とする。
関連論文リスト
- Geodesic-SVDD Latent Mixup for One-Shot Distributed Tabular Learning [5.950100626442648]
本稿では,各クライアントのタスクを超球面上の一級密度推定として再キャストする分散球型プロトタイプ学習フレームワークを提案する。
また,反復同期を伴わずにプライバシ保護アグリゲーションを可能にする新しいワンショット「エキスパートの製品」プロトコルを提案する。
論文 参考訳(メタデータ) (2026-10-24T11:50:59Z) - Private and Distributionally Robust Federated Multiclass Classification [1.8473619121333151]
資産集約型産業における故障診断には、地理的に分散したクライアントサイト全体で収集されたノイズの多い機密性の高いデータに基づいて訓練されたマルチクラスモデルが必要である。
我々は,各クライアントに格納されたレコードに対して,サンプルレベルのプライバシを提供する,フェデレートされたマルチクラス分類のためのフレームワークを開発する。
サンプル単位の$(,)$-差分プライバシ保証と,すべてのトレーニングラウンドで総合的なプライバシ保証を提供しています。
論文 参考訳(メタデータ) (2026-10-09T14:13:47Z) - RIPPLE in Still Water: Zero-Shot Clustering in Federated Learning with Wavelet Scattering Transform [51.56484100374058]
クラスタ化されたフェデレートラーニング(FL)は、クライアントを同じローカル分布のグループに分割し、クラスタ毎に1つの特別なモデルを訓練する。
本稿では、各クライアントのローカルデータのスペクトル特性からクラスタ割り当てを完全にオフラインで計算するクラスタリングFLフレームワークであるRIPPLEを提案する。
論文 参考訳(メタデータ) (2026-10-02T09:35:39Z) - RAPTOR: Role-Aware Private Training for Mixture-of-Experts [68.5626338219096]
RAPTORはRole-Aware Private Trainingフレームワークである。
RAPTORは共有と専門家の最適化を交互に行い、各障害を直接ターゲットする。
GLUEタスク間でのSwitch TransformerとOLMoEの微調整およびDeepSeek-VL2-Tinyの実験では、標準のDPベースラインよりも一貫した利得を示している。
論文 参考訳(メタデータ) (2026-09-04T23:16:12Z) - Differentially Private Clustered Federated Learning with Privacy-Preserving Initialization and Normality-Driven Aggregation [25.94292199187493]
フェデレートラーニング(FL)は、エンドデバイスに生データを保存しながら、グローバルモデルのトレーニングを可能にする。
これにもかかわらず、FLはプライベートなユーザー情報を漏洩していることを示しており、実際には、ディファレンシャルプライバシ(DP)やセキュアなベクトル和といった手法と組み合わせて、参加者に正式なプライバシ保証を提供することが多い。
PINAは、各クライアントが軽量なローランク適応(LoRA)アダプタを微調整し、更新の圧縮スケッチをプライベートに共有できる2段階フレームワークである。
第2段階では、PINAは収束と堅牢性を改善する正規性駆動の凝集機構を導入する。
論文 参考訳(メタデータ) (2026-04-22T14:12:18Z) - Differentially Private Decentralized Dataset Synthesis Through Randomized Mixing with Correlated Noise [0.0]
分散データ設定における差分プライベートな合成データ生成について検討する。
我々は最近提案された微分プライベートなクラス中心データアグリゲーションに基づいて構築する。
論文 参考訳(メタデータ) (2025-09-12T16:18:35Z) - Perfectly-Private Analog Secure Aggregation in Federated Learning [51.61616734974475]
連合学習では、複数のパーティがモデルをローカルにトレーニングし、パラメータを中央サーバと共有する。
本稿では,有限場ではなくトーラスを用いた新しいセキュアパラメータアグリゲーション法を提案する。
論文 参考訳(メタデータ) (2025-09-10T15:22:40Z) - Decentralized Differentially Private Power Method [4.58112062523768]
ネットワーク化されたマルチエージェント設定において主成分分析(PCA)を行うための分散分散微分プライベート・パワー・メソッド(D-DP-PM)を提案する。
本手法は,ネットワーク全体の固有ベクトルを協調的に推定しながら,$(epsilon,delta)$-Differential Privacy (DP)を保証する。
実世界のデータセット実験により、D-DP-PMは、単純で局所的なDPアプローチに比べて、優れたプライバシーとユーティリティのトレードオフを実現することが示された。
論文 参考訳(メタデータ) (2025-07-30T17:15:50Z) - FedLAP-DP: Federated Learning by Sharing Differentially Private Loss Approximations [53.268801169075836]
我々は,フェデレーション学習のための新しいプライバシ保護手法であるFedLAP-DPを提案する。
公式なプライバシー分析は、FedLAP-DPが典型的な勾配共有方式と同じプライバシーコストを発生させることを示している。
提案手法は, 通常の勾配共有法に比べて高速な収束速度を示す。
論文 参考訳(メタデータ) (2023-02-02T12:56:46Z) - Differentially Private Federated Learning with Laplacian Smoothing [72.85272874099644]
フェデレートラーニングは、ユーザ間でプライベートデータを共有せずに、協調的にモデルを学習することで、データのプライバシを保護することを目的としている。
敵は、リリースしたモデルを攻撃することによって、プライベートトレーニングデータを推測することができる。
差別化プライバシは、トレーニングされたモデルの正確性や実用性を著しく低下させる価格で、このような攻撃に対する統計的保護を提供する。
論文 参考訳(メタデータ) (2020-05-01T04:28:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。