論文の概要: A Privacy Study of Sparse Collaborative Inference
- arxiv url: http://arxiv.org/abs/2608.16236v1
- Date: Mon, 17 Aug 2026 08:14:05 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-18 19:59:03.587029
- Title: A Privacy Study of Sparse Collaborative Inference
- Title(参考訳): スパース協調推論のプライバシスタディ
- Abstract要約: 協調推論は、エッジデバイスとサーバの間でモデルを分割し、クライアントが中間的なアクティベーションを計算し、それを送信し、サーバが計算を完了する。
近年の作業では、活性化とエントロピー符号化によってこのコストを削減している。
スパシフィケーションは伝送コストを下げるよりも漏れをはるかに少なくし、残りのリスクは位置に移ることが判明した。
- 参考スコア(独自算出の注目度): 16.981834481629885
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Collaborative inference (CI) splits a model between an edge device and a server, whereby the client computes an intermediate activation, transmits it, and the server completes the computation. This raises two concerns, the communication cost of the transmission and the risk that it reveals private information about the input. Recent work reduces this cost by sparsifying activations and entropy-coding the result. Sparsity has also been argued to improve privacy, on the intuition that transmitting fewer values reveals less about the input. We test this claim by decomposing the sparse activation into the retained values and the set of positions they occupy, and by reconstructing inputs from each component in isolation. We find that sparsification reduces the leakage far less than it reduces the transmission cost, and that the remaining risk shifts to the positions, which prior analyses treat as side information for decoding. Across natural-image and face datasets, the positions alone constitute a serious privacy risk, enabling high-fidelity reconstructions and re-identification of individuals. The leakage from the positions persists even when both the transmission cost and the task utility are low. We conclude that the positions of sparse activations should be treated as sensitive transmitted data and audited carefully in the context of collaborative inference. Code is available at https://github.com/an7123/Privacy-Study-Sparse-CI.
- Abstract(参考訳): 協調推論(CI)は、エッジデバイスとサーバの間でモデルを分割し、クライアントが中間活性化を計算して送信し、サーバが計算を完了する。
これにより、送信の通信コストと、入力に関するプライベート情報を明らかにするリスクの2つの懸念が生じる。
近年の作業では、活性化とエントロピー符号化によってこのコストを削減している。
スポーザリティはまた、少ない値の送信で入力に関する情報がより少ないという直感に基づいて、プライバシーの改善も主張されている。
我々は、スパースアクティベーションを保持値とそれらが占める位置の集合に分解し、各コンポーネントからの入力を分離して再構成することで、このクレームをテストする。
スパシフィケーションは伝送コストを低減させるよりもリークをはるかに少なくし、残余のリスクは位置へとシフトし、それ以前の分析ではデコードのためのサイド情報として扱われていた。
自然画像と顔のデータセット全体にわたって、位置だけでは深刻なプライバシーリスクを形成し、高忠実度再構築と個人の再識別を可能にしている。
送信コストとタスクユーティリティの両方が低い場合でも、位置からのリークは持続する。
我々は,スパースアクティベーションの位置を機密送信データとして扱い,協調的推論の文脈で注意深く監査するべきであると結論付けた。
コードはhttps://github.com/an7123/Privacy-Study-Sparse-CIで公開されている。
関連論文リスト
- Defense Against Prompt Inversion Attacks: An Information-Theoretic Approach for LLM Collaborative Inference [5.218013327284395]
協調的なエッジクラウド推論により、リソース制約のあるデバイスは、クラウドサーバに部分計算をオフロードすることで、大きな言語モデル(LLM)を活用することができる。
中間的アクティベーションの送信は、インバージョンアタックを誘導する機密性の高いユーザープロンプトを公開する。
協調LLM推論におけるインバージョンを迅速に行うための情報理論防衛フレームワークを提案する。
論文 参考訳(メタデータ) (2026-06-10T02:36:26Z) - What Does the Server See? Understanding Privacy Leakage from Large Language Models in Split Inference [13.194874392306085]
本稿では、クライアントの入力を再構築するために、中間的なアクティベーションマッチング問題を解決するActInvを紹介する。
この脆弱性を理解するために、我々は、層固有の復元抵抗を定量化する指標である摂動増幅係数(PAF)を開発した。
私たちの分析によると、プライバシーの脆弱性はレイヤ間で均一ではなく、いくつかのレイヤはリークの影響を受けやすいが、他のレイヤは自然な抵抗を提供する。
論文 参考訳(メタデータ) (2026-05-22T02:14:16Z) - LightSplit: Practical Privacy-Preserving Split Learning via Orthogonal Projections [54.51153206716027]
Split Learning(SL)は、ニューラルネットワークをクライアントと中央サーバに分割することで、協調的なトレーニングを可能にする。
カット層に軽量な固定ランダムプロジェクションを適用することにより,情報露出を制限し,通信オーバーヘッドを低減するLightSplitを提案する。
提案手法は, 伝送次元の最大32倍の精度で, 95%以上の精度を維持できることを示した。
論文 参考訳(メタデータ) (2026-05-13T09:45:49Z) - Keeping a Secret Requires a Good Memory: Space Lower-Bounds for Private Algorithms [67.94856074923571]
本稿では,マルチプレイヤー通信ゲームに基づく新しい証明手法を提案する。
本稿では,このコミュニケーションゲームに勝つためには,過剰なユーザ数に比例した情報伝達が必要であることを示す。
このコミュニケーション理論の手法は幅広い問題のクラスに一般化し、プライベートな中央値、量子化値、最大選択値の下位境界を導出することを示す。
論文 参考訳(メタデータ) (2026-02-12T17:49:07Z) - NeuroFilter: Privacy Guardrails for Conversational LLM Agents [50.75206727081996]
本研究は,エージェント型大規模言語モデル(LLM)のプライバシを強制する際の計算上の課題に対処する。
NeuroFilterは、標準違反をモデルのアクティベーション空間における単純な方向にマッピングすることで、コンテキスト整合性を運用するガードレールフレームワークである。
7Bから70Bパラメータのモデルをカバーする15万以上のインタラクションに対する包括的な評価は、NeuroFilterの強力なパフォーマンスを示している。
論文 参考訳(メタデータ) (2026-01-21T05:16:50Z) - Privacy Preserving Semi-Decentralized Mean Estimation over Intermittently-Connected Networks [59.43433767253956]
信頼できない無線ネットワークの異なるノードに分散するベクトルの平均をプライベートに推定する問題を考える。
半分散的なセットアップでは、ノードは隣人と協力してローカルコンセンサスを計算し、中央サーバにリレーする。
ノード間のデータ共有による協調中継とプライバシー漏洩のトレードオフについて検討する。
論文 参考訳(メタデータ) (2024-06-06T06:12:15Z) - Efficient and Secure Federated Learning for Financial Applications [15.04345368582332]
本稿では,フェデレート学習における通信コスト削減のための2つのスペーシング手法を提案する。
1つは、モデルパラメータ更新のための時間変化の階層的スペーシフィケーション法であり、高比のスペーシリティ後のモデル精度を維持する問題の解決である。
もう1つは、セキュアアグリゲーションフレームワークにスパシフィケーション手法を適用することである。
論文 参考訳(メタデータ) (2023-03-15T04:15:51Z) - Breaking the Communication-Privacy-Accuracy Tradeoff with
$f$-Differential Privacy [51.11280118806893]
サーバが複数のユーザの協調的なデータ分析を,プライバシの懸念と限られた通信能力で調整する,フェデレートされたデータ分析問題を考える。
有限出力空間を有する離散値機構の局所的差分プライバシー保証を$f$-differential privacy (DP) レンズを用いて検討する。
より具体的には、様々な離散的評価機構の厳密な$f$-DP保証を導出することにより、既存の文献を前進させる。
論文 参考訳(メタデータ) (2023-02-19T16:58:53Z) - Over-the-Air Federated Learning with Privacy Protection via Correlated
Additive Perturbations [57.20885629270732]
我々は、複数のユーザ/エージェントからエッジサーバへの勾配更新をOtA(Over-the-Air)で送信することで、無線フェデレーション学習のプライバシー面を考察する。
従来の摂動に基づく手法は、トレーニングの精度を犠牲にしてプライバシー保護を提供する。
本研究では,エッジサーバにおけるプライバシリークの最小化とモデル精度の低下を目標とする。
論文 参考訳(メタデータ) (2022-10-05T13:13:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。