論文の概要: Enhanced Principal Component Analysis under A Collaborative-Robust
Framework
- arxiv url: http://arxiv.org/abs/2103.11931v1
- Date: Mon, 22 Mar 2021 15:17:37 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-23 14:23:01.765573
- Title: Enhanced Principal Component Analysis under A Collaborative-Robust
Framework
- Title(参考訳): 協調ロバストフレームワークによる主成分分析の高度化
- Authors: Rui Zhang, Hongyuan Zhang, Xuelong Li
- Abstract要約: 重み学習とロバストな損失を非自明な方法で組み合わせる,一般的な協調ロバスト重み学習フレームワークを提案する。
提案されたフレームワークでは、トレーニング中の重要度を示す適切なサンプルの一部のみがアクティブになり、エラーが大きい他のサンプルは無視されません。
特に、不活性化試料の負の効果はロバスト損失関数によって軽減される。
- 参考スコア(独自算出の注目度): 89.28334359066258
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Principal component analysis (PCA) frequently suffers from the disturbance of
outliers and thus a spectrum of robust extensions and variations of PCA have
been developed. However, existing extensions of PCA treat all samples equally
even those with large noise. In this paper, we first introduce a general
collaborative-robust weight learning framework that combines weight learning
and robust loss in a non-trivial way. More significantly, under the proposed
framework, only a part of well-fitting samples are activated which indicates
more importance during training, and others, whose errors are large, will not
be ignored. In particular, the negative effects of inactivated samples are
alleviated by the robust loss function. Then we furthermore develop an enhanced
PCA which adopts a point-wise sigma-loss function that interpolates between
L_2,1-norm and squared Frobenius-norm and meanwhile retains the rotational
invariance property. Extensive experiments are conducted on occluded datasets
from two aspects including reconstructed errors and clustering accuracy. The
experimental results prove the superiority and effectiveness of our model.
- Abstract(参考訳): 主成分分析(PCA)は外れ値の乱れにしばしば悩まされるため、頑健な拡張とPCAの変動のスペクトルが発達している。
しかし、PCAの既存の拡張は、大きなノイズを持つものでさえ、全てのサンプルを等しく扱う。
本稿では,まず,重み学習とロバストな損失を非自明な方法で組み合わせる,一般的な協調ロバスト重み学習フレームワークを提案する。
より重要なことに、提案されたフレームワークの下では、トレーニング中により重要になることを示す、適合のよいサンプルの一部のみがアクティベートされ、エラーが大きい他のサンプルは無視されない。
特に、不活性化試料の負の効果はロバスト損失関数によって軽減される。
さらに,L_2,1-ノルムと2乗フロベニウス-ノルムの間を補間し,かつ回転不変性を保った点次シグマロス関数を用いた拡張PCAを開発した。
再構成されたエラーとクラスタリング精度という2つの側面から、occludedデータセットに関する広範な実験が行われた。
実験の結果,本モデルの有効性が証明された。
関連論文リスト
- Double Machine Learning meets Panel Data -- Promises, Pitfalls, and Potential Solutions [0.0]
機械学習(ML)アルゴリズムを用いた因果効果の推定は、適切なフレームワークで使用すれば、機能的なフォーム仮定を緩和するのに役立ちます。
我々は、観測されていない異種性の存在下で、パネルデータに機械学習(DML)を適用する方法を示す。
また、観測された共同設立者に対する観測されていない異種性の影響が、ほとんどの代替手法の性能に重要な役割を担っていることも示している。
論文 参考訳(メタデータ) (2024-09-02T13:59:54Z) - The Risk of Federated Learning to Skew Fine-Tuning Features and
Underperform Out-of-Distribution Robustness [50.52507648690234]
フェデレートされた学習は、微調整された特徴をスキイングし、モデルの堅牢性を損なうリスクがある。
3つのロバスト性指標を導入し、多様なロバストデータセットで実験を行う。
提案手法は,パラメータ効率のよい微調整手法を含む多種多様なシナリオにまたがるロバスト性を著しく向上させる。
論文 参考訳(メタデータ) (2024-01-25T09:18:51Z) - Boosting Differentiable Causal Discovery via Adaptive Sample Reweighting [62.23057729112182]
異なるスコアに基づく因果探索法は観測データから有向非巡回グラフを学習する。
本稿では,Reweighted Score関数ReScoreの適応重みを動的に学習することにより因果発見性能を向上させるためのモデルに依存しないフレームワークを提案する。
論文 参考訳(メタデータ) (2023-03-06T14:49:59Z) - Leveraging Heteroscedastic Uncertainty in Learning Complex Spectral
Mapping for Single-channel Speech Enhancement [20.823177372464414]
ほとんどの音声強調(SE)モデルは、ポイント推定を学習し、学習過程における不確実性推定を利用しない。
本研究では,多変量ガウス陰性ログ類似度 (NLL) を最小化することにより,SE性能を余分なコストで向上させることにより,ヘテロスセダスティック不確実性をモデル化できることを示す。
論文 参考訳(メタデータ) (2022-11-16T02:29:05Z) - Scale-Equivalent Distillation for Semi-Supervised Object Detection [57.59525453301374]
近年のSemi-Supervised Object Detection (SS-OD) 法は主に自己学習に基づいており、教師モデルにより、ラベルなしデータを監視信号としてハードな擬似ラベルを生成する。
実験結果から,これらの手法が直面する課題を分析した。
本稿では,大規模オブジェクトサイズの分散とクラス不均衡に頑健な簡易かつ効果的なエンド・ツー・エンド知識蒸留フレームワークであるSED(Scale-Equivalent Distillation)を提案する。
論文 参考訳(メタデータ) (2022-03-23T07:33:37Z) - Shared Independent Component Analysis for Multi-Subject Neuroimaging [107.29179765643042]
本稿では,ShICA (Shared Independent Component Analysis) を導入し,各ビューを加法ガウス雑音によって汚染された共有独立成分の線形変換としてモデル化する。
このモデルは、成分がガウス的でないか、あるいはノイズ分散に十分な多様性がある場合、同定可能であることを示す。
我々は,fMRIおよびMEGデータセットの実証的証拠として,ShICAが代替品よりも正確な成分推定を行うことを示す。
論文 参考訳(メタデータ) (2021-10-26T08:54:41Z) - Self-paced Principal Component Analysis [17.333976289539457]
本稿では,SPCA (Self-paced PCA) と呼ばれる新しい手法を提案する。
各サンプルの複雑さは、単純からより複雑なサンプルをトレーニングに統合するために、各イテレーションの開始時に計算されます。
論文 参考訳(メタデータ) (2021-06-25T20:50:45Z) - Examining and Combating Spurious Features under Distribution Shift [94.31956965507085]
我々は、最小限の統計量という情報理論の概念を用いて、ロバストで刺激的な表現を定義し、分析する。
入力分布のバイアスしか持たない場合でも、モデルはトレーニングデータから急激な特徴を拾い上げることができることを証明しています。
分析から着想を得た結果,グループDROは,グループ同士の相関関係を直接考慮しない場合に失敗する可能性が示唆された。
論文 参考訳(メタデータ) (2021-06-14T05:39:09Z) - A Distributionally Robust Area Under Curve Maximization Model [1.370633147306388]
我々は2つの新しい分散ロバストなAUCモデル(DR-AUC)を提案する。
DR-AUCモデルは関東ロビッチ計量に依存し、AUCとヒンジ損失関数を近似する。
数値実験により,提案したDR-AUCモデルは一般に性能が向上し,特に最悪のアウト・オブ・サンプル性能が向上することが示された。
論文 参考訳(メタデータ) (2020-02-18T02:50:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。