論文の概要: Federated Calibration and Evaluation of Binary Classifiers
- arxiv url: http://arxiv.org/abs/2210.12526v1
- Date: Sat, 22 Oct 2022 18:58:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-25 21:37:28.053676
- Title: Federated Calibration and Evaluation of Binary Classifiers
- Title(参考訳): バイナリ分類器の連成校正と評価
- Authors: Graham Cormode and Igor Markov
- Abstract要約: 本稿では, キャリブレーションと計算精度, リコール, 精度, ROC-AUC をフェデレーション設定で行う方法を示す。
私たちの定理と実験は、プライバシ、正確性、データ効率のトレードオフを明らかにします。
- 参考スコア(独自算出の注目度): 7.218667909146977
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We address two major obstacles to practical use of supervised classifiers on
distributed private data. Whether a classifier was trained by a federation of
cooperating clients or trained centrally out of distribution, (1) the output
scores must be calibrated, and (2) performance metrics must be evaluated -- all
without assembling labels in one place. In particular, we show how to perform
calibration and compute precision, recall, accuracy and ROC-AUC in the
federated setting under three privacy models (i) secure aggregation, (ii)
distributed differential privacy, (iii) local differential privacy. Our
theorems and experiments clarify tradeoffs between privacy, accuracy, and data
efficiency. They also help decide whether a given application has sufficient
data to support federated calibration and evaluation.
- Abstract(参考訳): 分散プライベートデータに対する教師付き分類器の実用化における2つの大きな障害に対処する。
分類器は、協調するクライアントのフェデレーションによってトレーニングされたか、あるいは中央からトレーニングされた配布から除外されたかに関わらず、(1)出力スコアを校正し、(2)パフォーマンスメトリクスを評価する必要がある。
特に,3つのプライバシモデルによるフェデレーション環境での校正と精度,リコール,精度,roc-aucの計算方法を示す。
(i)アグリゲーションの確保。
(ii)分散差分プライバシー。
(三)局所的な差分プライバシー。
当社の定理と実験により,プライバシ,正確性,データ効率のトレードオフが明確となった。
また、あるアプリケーションがフェデレートされたキャリブレーションと評価をサポートする十分なデータを持っているかどうかを決定するのにも役立ちます。
関連論文リスト
- Distributed, communication-efficient, and differentially private estimation of KL divergence [15.294136011320433]
分散された機密性の高いデータを管理する上で重要なタスクは、分散の変化の度合いを測定することである。
差分プライバシの下で,計算のフェデレーションモデル間でのKL分散を推定するための新しいアルゴリズムアプローチについて述べる。
論文 参考訳(メタデータ) (2024-11-25T15:20:40Z) - Provably Reliable Conformal Prediction Sets in the Presence of Data Poisoning [53.42244686183879]
コンフォーマル予測は、モデルに依存しない、分布のない不確実性定量化を提供する。
しかし、敵が訓練データと校正データを操作した場合の毒殺攻撃では、共形予測は信頼性が低い。
信頼性予測セット (RPS): 汚染下での信頼性保証を証明可能な共形予測セットを構築するための最初の効率的な方法を提案する。
論文 参考訳(メタデータ) (2024-10-13T15:37:11Z) - Binary Classification with Confidence Difference [100.08818204756093]
本稿では,信頼性差分法 (ConfDiff) という,弱教師付き二項分類問題について考察する。
本稿では,この問題に対処するためのリスク一貫性のあるアプローチを提案し,推定誤差が最適収束率と一致することを示す。
また,整合性や収束率も証明されたオーバーフィッティング問題を緩和するためのリスク補正手法も導入する。
論文 参考訳(メタデータ) (2023-10-09T11:44:50Z) - Federated Two Stage Decoupling With Adaptive Personalization Layers [5.69361786082969]
フェデレーション学習は、プライバシ制約を維持しながら分散学習を可能にする能力によって、大きな注目を集めている。
本質的には、学習の劣化と収束速度の低下を経験する。
等質なクライアントを同じ群にクラスタリングするという概念を採用することは自然であり、各群内のモデル重みのみを集約することができる。
論文 参考訳(メタデータ) (2023-08-30T07:46:32Z) - Tight Auditing of Differentially Private Machine Learning [77.38590306275877]
プライベート機械学習では、既存の監査メカニズムは厳格である。
彼らは不確実な最悪の仮定の下でのみ厳密な見積もりを行う。
我々は、自然(逆向きではない)データセットの厳密なプライバシー推定を得られる改善された監査スキームを設計する。
論文 参考訳(メタデータ) (2023-02-15T21:40:33Z) - Differentially Private Vertical Federated Clustering [13.27934054846057]
多くのアプリケーションでは、複数のパーティが同じユーザのセットに関するプライベートデータを持っているが、非結合な属性のセットについてである。
データ対象者のプライバシーを保護しながらモデル学習を可能にするためには、垂直連合学習(VFL)技術が必要である。
本論文で提案するアルゴリズムは, 個人用垂直結合型K平均クラスタリングのための最初の実用的な解法である。
論文 参考訳(メタデータ) (2022-08-02T19:23:48Z) - Cali3F: Calibrated Fast Fair Federated Recommendation System [25.388324221293203]
提案手法は,推薦性能の公平性を改善するために,パーソナライズされた推薦システムトレーニングアルゴリズムを提案する。
次に、トレーニングプロセスの高速化のためにクラスタリングベースのアグリゲーション手法を採用する。
Cali3Fは、キャリブレーションされた高速かつ公正なフェデレーションレコメンデーションフレームワークである。
論文 参考訳(メタデータ) (2022-05-26T03:05:26Z) - Data-SUITE: Data-centric identification of in-distribution incongruous
examples [81.21462458089142]
Data-SUITEは、ID(In-distriion)データの不連続領域を特定するためのデータ中心のフレームワークである。
我々は,Data-SUITEの性能保証とカバレッジ保証を実証的に検証する。
論文 参考訳(メタデータ) (2022-02-17T18:58:31Z) - Federated Unsupervised Representation Learning [56.715917111878106]
フェデレート非教師表現学習(FURL)と呼ばれるフェデレーション学習における新しい問題を定式化し、教師なしの共通表現モデルを学習する。
FedCAは2つの主要なモジュールで構成されている: 辞書モジュールは、各クライアントからのサンプルの表現を集約し、表現空間の整合性のためにすべてのクライアントと共有し、アライメントモジュールは、公開データに基づいてトレーニングされたベースモデル上で各クライアントの表現を整合させる。
論文 参考訳(メタデータ) (2020-10-18T13:28:30Z) - Distribution-free binary classification: prediction sets, confidence
intervals and calibration [106.50279469344937]
分布自由条件における二項分類のための不確実性定量化(キャリブレーション、信頼区間、予測セット)の3つの概念について検討する。
固定幅と一様質量の両双対の双対確率に対する信頼区間を導出する。
我々の「三脚」定理の結果として、双有理確率に対するこれらの信頼区間は分布自由キャリブレーションに繋がる。
論文 参考訳(メタデータ) (2020-06-18T14:17:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。