論文の概要: Prune Responsibly
- arxiv url: http://arxiv.org/abs/2009.09936v1
- Date: Thu, 10 Sep 2020 04:43:11 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-20 03:18:24.236528
- Title: Prune Responsibly
- Title(参考訳): 責任を負う
- Authors: Michela Paganini
- Abstract要約: 機械学習アプリケーションにおける特定の公正性の定義を無視すると、基礎となるモデルを刈り取ることがそれに影響を及ぼす。
本研究では,100万以上の画像分類モデルを対象としたタスクやアーキテクチャにおいて,望ましくない性能不均衡の出現と悪化を調査・記録する。
ニューラルネットワークプルーニングに関する実際のエンジニアリング意思決定において、バイアス、公平性、包括的メトリクスを含む透過的なレポートの必要性を実証する。
- 参考スコア(独自算出の注目度): 0.913755431537592
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Irrespective of the specific definition of fairness in a machine learning
application, pruning the underlying model affects it. We investigate and
document the emergence and exacerbation of undesirable per-class performance
imbalances, across tasks and architectures, for almost one million categories
considered across over 100K image classification models that undergo a pruning
process.We demonstrate the need for transparent reporting, inclusive of bias,
fairness, and inclusion metrics, in real-life engineering decision-making
around neural network pruning. In response to the calls for quantitative
evaluation of AI models to be population-aware, we present neural network
pruning as a tangible application domain where the ways in which
accuracy-efficiency trade-offs disproportionately affect underrepresented or
outlier groups have historically been overlooked. We provide a simple,
Pareto-based framework to insert fairness considerations into value-based
operating point selection processes, and to re-evaluate pruning technique
choices.
- Abstract(参考訳): 機械学習アプリケーションにおける特定の公正性の定義を無視すると、基礎となるモデルを刈り取ることが影響します。
我々は、ニューラルネットワークのプルーニングに関する実生活工学的な意思決定において、プルーニングプロセスを実行する100万以上の画像分類モデルにおいて、タスクやアーキテクチャ全体にわたって、望ましくないパフォーマンス不均衡の出現と悪化について調査および文書化を行い、透明なレポート、バイアス、公正性、包括的メトリクスの必要性を実証する。
人口を意識したAIモデルの定量的評価を求める中で,我々は,精度と効率のトレードオフが非表現的あるいは非表現的グループに与える影響を歴史的に見落としている,有形アプリケーションドメインとしてニューラルネットワークプルーニングを提案する。
我々は,価値に基づく操作点選択プロセスに公平性を考慮した簡単なParetoベースのフレームワークを提供し,プルーニング手法の選択を再評価する。
関連論文リスト
- Fairness Evaluation for Uplift Modeling in the Absence of Ground Truth [2.946562343070891]
本稿では,サロゲートを発生させることにより,真理の欠如を克服する枠組みを提案する。
実際のマーケティングキャンペーンの総合的な研究にどのようにアプローチを適用するかを示す。
論文 参考訳(メタデータ) (2024-02-12T06:13:24Z) - Evaluating the Fairness of Discriminative Foundation Models in Computer
Vision [51.176061115977774]
本稿では,CLIP (Contrastive Language-Pretraining) などの差別基盤モデルのバイアス評価のための新しい分類法を提案する。
そして、これらのモデルにおけるバイアスを緩和するための既存の手法を分類学に関して体系的に評価する。
具体的には,ゼロショット分類,画像検索,画像キャプションなど,OpenAIのCLIPとOpenCLIPモデルをキーアプリケーションとして評価する。
論文 参考訳(メタデータ) (2023-10-18T10:32:39Z) - Investigating the Limitation of CLIP Models: The Worst-Performing
Categories [53.360239882501325]
コントラスト言語-画像事前学習(CLIP)は、自然言語を視覚概念に統合する基礎モデルを提供する。
通常、十分に設計されたテキストプロンプトによって、多くの領域で満足な全体的な精度が達成できると期待されている。
しかし、最悪のカテゴリにおけるパフォーマンスは、全体的なパフォーマンスよりも著しく劣っていることがわかった。
論文 参考訳(メタデータ) (2023-10-05T05:37:33Z) - Model Debiasing via Gradient-based Explanation on Representation [14.673988027271388]
本稿では,デリケートな属性やプロキシな属性に関して,デバイアスを行う新しいフェアネスフレームワークを提案する。
我々のフレームワークは、過去の最先端のアプローチよりも、構造化されていないデータセットと構造化されたデータセットの公平性と正確なトレードオフを達成しています。
論文 参考訳(メタデータ) (2023-05-20T11:57:57Z) - DualFair: Fair Representation Learning at Both Group and Individual
Levels via Contrastive Self-supervision [73.80009454050858]
この研究は、DualFairと呼ばれる自己教師型モデルを提示し、学習された表現から性別や人種などのセンシティブな属性をデバイアスすることができる。
我々のモデルは、グループフェアネスと対実フェアネスという2つのフェアネス基準を共同で最適化する。
論文 参考訳(メタデータ) (2023-03-15T07:13:54Z) - FairAdaBN: Mitigating unfairness with adaptive batch normalization and
its application to dermatological disease classification [14.589159162086926]
バッチ正規化をセンシティブ属性に適応させるFairAdaBNを提案する。
本研究では,FATE(Fairness-Accuracy Trade-off efficiency)と呼ばれる新しい指標を提案する。
2つの皮膚科学データセットを用いた実験により,提案手法はフェアネス基準とFATEの他の手法よりも優れていた。
論文 参考訳(メタデータ) (2023-03-15T02:22:07Z) - Fair Infinitesimal Jackknife: Mitigating the Influence of Biased
Training Data Points Without Refitting [41.96570350954332]
本稿では、慎重に選択されたトレーニングデータポイントをドロップするだけで、事前学習した分類器の公平性を向上するアルゴリズムを提案する。
このような介入はモデルの予測性能を大幅に低下させるものではないが、公正度基準を大幅に改善する。
論文 参考訳(メタデータ) (2022-12-13T18:36:19Z) - Contrastive Learning for Fair Representations [50.95604482330149]
訓練された分類モデルは、意図せずバイアスのある表現や予測につながる可能性がある。
対戦訓練のような既存の分類モデルのデバイアス化手法は、訓練に高価であり、最適化が困難であることが多い。
比較学習を取り入れたバイアス軽減手法を提案し、同じクラスラベルを共有するインスタンスに類似した表現を推奨する。
論文 参考訳(メタデータ) (2021-09-22T10:47:51Z) - Characterizing Fairness Over the Set of Good Models Under Selective
Labels [69.64662540443162]
同様の性能を実現するモデルセットに対して,予測公正性を特徴付けるフレームワークを開発する。
到達可能なグループレベルの予測格差の範囲を計算するためのトラクタブルアルゴリズムを提供します。
選択ラベル付きデータの実証的な課題に対処するために、我々のフレームワークを拡張します。
論文 参考訳(メタデータ) (2021-01-02T02:11:37Z) - Estimating Generalization under Distribution Shifts via Domain-Invariant
Representations [75.74928159249225]
未知の真のターゲットラベルのプロキシとして、ドメイン不変の予測器のセットを使用します。
結果として生じるリスク見積の誤差は、プロキシモデルのターゲットリスクに依存する。
論文 参考訳(メタデータ) (2020-07-06T17:21:24Z) - Towards Threshold Invariant Fair Classification [10.317169065327546]
本稿では、決定しきい値とは無関係に、異なるグループ間で公平な性能を強制する、しきい値不変公平性の概念を紹介する。
実験結果から,提案手法は,公平性を実現するために設計された機械学習モデルの閾値感度を緩和するために有効であることが示された。
論文 参考訳(メタデータ) (2020-06-18T16:49:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。