論文の概要: Cluster-Based Dimensionality Reduction by Nonparametric Distributional Screening
- arxiv url: http://arxiv.org/abs/2609.06854v1
- Date: Sun, 06 Sep 2026 21:58:59 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-12 04:24:21.509298
- Title: Cluster-Based Dimensionality Reduction by Nonparametric Distributional Screening
- Title(参考訳): 非パラメトリック分布スクリーニングによるクラスタベース次元化
- Abstract要約: 我々は,2つ以上のクラスタに供給された分割を伴う高次元観測における次元の低減について検討する。
提案手法は,数サンプルのコルモゴロフ-スミルノフ分離統計量を用いて,クラスタ固有の経験分布関数を比較する。
得られた限界クラスタのサポートを形式化し、全ての座標に対して一貫した有限サンプル濃度を確立する。
- 参考スコア(独自算出の注目度): 1.4773309126683776
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We consider dimensionality reduction for high-dimensional observations accompanied by a supplied partition into two or more clusters. The objective is not to construct a low-rank projection, but to retain an interpretable subset of the original coordinates that preserves the distributional information distinguishing the clusters. For each coordinate, the proposed procedure compares the cluster-specific empirical distribution functions through a several-sample Kolmogorov-Smirnov separation statistic. We formalize the resulting marginal cluster support and establish simultaneous finite-sample concentration over all coordinates, explicit bounds for false inclusions and omissions, and exact support recovery when the minimum distributional separation dominates the high-dimensional stochastic error. We also quantify the dimension inflation induced by using an unadjusted testing level and give a familywise-error-controlled version. Under a conditional sufficiency condition, sure screening preserves the full-data posterior cluster probabilities, mutual information, and Bayes risk; an additional result characterizes robustness to imperfectly estimated cluster labels. The procedure is invariant to strictly increasing coordinate transformations and can retain low-variance cluster signals that principal components may discard. We further develop average dual information, a criterion combining partition agreement after transformation with structural coverage of cluster-relevant coordinates, and derive its basic properties and consistency. Simulations illustrate the theory, the interpretability of the selected coordinates, and the distinction between cluster-directed screening and variance-directed projection.
- Abstract(参考訳): 我々は,2つ以上のクラスタに供給された分割を伴う高次元観測における次元性低減について検討する。
目的は、低ランク射影を構成するのではなく、クラスタを区別する分布情報を保持する元の座標の解釈可能な部分集合を保持することである。
各座標について、提案手法は、数サンプルのコルモゴロフ-スミルノフ分離統計量を用いてクラスタ固有の経験分布関数を比較する。
最小分布分離が高次元確率誤差を支配下にある場合, 得られた限界クラスタのサポートを形式化し, 全座標に対して一貫した有限サンプル濃度, 疑似包摂および省略に対する明示的境界, 正確なサポート回復を定式化する。
また、調整されていないテストレベルを用いて誘導される次元のインフレーションを定量化し、家庭的にエラー制御されたバージョンを提供する。
条件付き充足条件下では、スクリーニングは完全なデータ後部クラスタの確率、相互情報、ベイズリスクを保存する。
この手順は座標変換を厳密に増加させるには不変であり、主成分が破棄される可能性のある低分散クラスタ信号を保持することができる。
さらに,クラスタ関連座標の構造的カバレッジと変換後の分割合意を組み合わした平均双対情報,基本的特性と一貫性を導出する。
シミュレーションでは、選択された座標の理論、解釈可能性、クラスタ指向のスクリーニングと分散指向の投影の区別が説明される。
関連論文リスト
- Semi-Supervised Conditional Generative Learning through Stochastic Interpolation and Sufficient Representations [12.299177496689621]
条件固有項と低次元潜在表現を組み合わせた半教師付きフレームワークを提案する。
RepGは生成をラベル依存の潜伏サンプリングと高次元再構成の2段階に分解する。
論文 参考訳(メタデータ) (2026-07-18T09:21:53Z) - Counterfactuals for Feature-Weighted Clustering [0.7734726150561086]
本稿では,機能重み付き$k$-meansクラスタリングのためのVoronoiによって誘導される対実的説明可能性フレームワークであるVoICEを紹介する。
クラスタの変化を1対のセンチロイド境界の交差として扱うのではなく、VoICEはターゲットクラスタの全重み付きボロノイ領域への射影として反実生成を定式化する。
論文 参考訳(メタデータ) (2026-07-16T08:36:04Z) - Seed-Guided Semi-Supervised Clustering by A-Contrario Anomaly Detection [0.0]
本稿では,グループ化原理と異常検出の統計的双対性に基づく半教師付きクラスタリングフレームワークを提案する。
我々は、クラスタを、一様ランダム性のヌル仮説に対する異常のないデータポイントの最大部分集合として定義する。
本手法は, 生, 線形再生, 近傍排他的埋め込みによって表現される画像とテキストのデータセットを含む, 合成および実世界のベンチマークで評価する。
論文 参考訳(メタデータ) (2026-06-17T09:08:02Z) - SEED: Targeted Data Selection by Weighted Independent Set [76.68391670109433]
我々はSEEDと呼ばれる堅牢でスケーラブルなデータ選択パイプラインを開発した。
SEEDは、命令チューニング、視覚的命令チューニング、セマンティックセグメンテーションにおける最先端の手法を一貫して上回っている。
論文 参考訳(メタデータ) (2026-05-15T07:26:54Z) - Distributionally Robust K-Means Clustering [18.037323759791658]
K平均のクラスタリングは、異常値、分布シフト、サンプルサイズに制限があることで知られている。
我々はそのような病態から保護する分布的に堅牢な変種を開発する。
トラクタブル双対は、ハード割り当てを滑らかに重み付けされたものに置き換えるソフトクラスタリングスキームを得る。
論文 参考訳(メタデータ) (2026-04-13T07:32:36Z) - Weight-Informed Self-Explaining Clustering for Mixed-Type Tabular Data [63.62853416081748]
WISEは表現、特徴重み付け、クラスタリング、解釈を統一するフレームワークである。
クラスタリングを駆動する同じプリミティブに根ざした、忠実で人間解釈可能な説明を生成する。
論文 参考訳(メタデータ) (2026-04-07T13:18:31Z) - Enhanced High-Dimensional Data Visualization through Adaptive Multi-Scale Manifold Embedding [0.7705234721762716]
本稿では,適応型マルチスケールマニフォールド埋め込み (AMSME) アルゴリズムを提案する。
順序距離を導入することで、高次元空間における次元性の呪いの制約を克服できることが示される。
実験により,AMSMEはクラスタ内トポロジ構造を著しく保存し,クラスタ間分離を改善した。
論文 参考訳(メタデータ) (2025-03-18T06:46:53Z) - Benign Overfitting and the Geometry of the Ridge Regression Solution in Binary Classification [75.01389991485098]
リッジ回帰はクラスタ平均ベクトルのスケールによって定性的に異なる挙動を示す。
スケールが非常に大きいレジームでは、良心過剰を許容する条件は回帰タスクと同一であることが判明した。
論文 参考訳(メタデータ) (2025-03-11T01:45:42Z) - Self-Supervised Graph Embedding Clustering [70.36328717683297]
K-means 1-step dimensionality reduction clustering method は,クラスタリングタスクにおける次元性の呪いに対処する上で,いくつかの進歩をもたらした。
本稿では,K-meansに多様体学習を統合する統一フレームワークを提案する。
論文 参考訳(メタデータ) (2024-09-24T08:59:51Z) - Collaborative Heterogeneous Causal Inference Beyond Meta-analysis [68.4474531911361]
異種データを用いた因果推論のための協調的逆確率スコア推定器を提案する。
異質性の増加に伴うメタアナリシスに基づく手法に対して,本手法は有意な改善を示した。
論文 参考訳(メタデータ) (2024-04-24T09:04:36Z) - Distributional Reduction: Unifying Dimensionality Reduction and Clustering with Gromov-Wasserstein [56.62376364594194]
教師なし学習は、潜在的に大きな高次元データセットの基盤構造を捉えることを目的としている。
本研究では、最適輸送のレンズの下でこれらのアプローチを再検討し、Gromov-Wasserstein問題と関係を示す。
これにより、分散還元と呼ばれる新しい一般的なフレームワークが公開され、DRとクラスタリングを特別なケースとして回復し、単一の最適化問題内でそれらに共同で対処することができる。
論文 参考訳(メタデータ) (2024-02-03T19:00:19Z) - Distribution-free binary classification: prediction sets, confidence
intervals and calibration [106.50279469344937]
分布自由条件における二項分類のための不確実性定量化(キャリブレーション、信頼区間、予測セット)の3つの概念について検討する。
固定幅と一様質量の両双対の双対確率に対する信頼区間を導出する。
我々の「三脚」定理の結果として、双有理確率に対するこれらの信頼区間は分布自由キャリブレーションに繋がる。
論文 参考訳(メタデータ) (2020-06-18T14:17:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。