論文の概要: Vertical Consensus Inference for High-Dimensional Random Partition
- arxiv url: http://arxiv.org/abs/2603.27864v1
- Date: Sun, 29 Mar 2026 20:46:55 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-31 23:18:45.148597
- Title: Vertical Consensus Inference for High-Dimensional Random Partition
- Title(参考訳): 高次元ランダム分割のための垂直コンセンサス推論
- Authors: Khai Nguyen, Yang Ni, Peter Mueller,
- Abstract要約: 本稿では,高次元クラスタリングにおける次元の呪いを軽減するために,垂直コンセンサス推論(VCI)に基づく代替フレームワークを提案する。
VCIはデータを垂直に分割し、同じ数の観測しか持たないが次元が低い垂直のシャードを生成する。
高次元データに対して、VCIはランダムパーティションに対するモデルベースおよび原則推論のための新しいフレームワークを導入している。
- 参考スコア(独自算出の注目度): 25.35298354797079
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We review recently proposed Bayesian approaches for clustering high-dimensional data. After identifying the main limitations of available approaches, we introduce an alternative framework based on vertical consensus inference (VCI) to mitigate the curse of dimensionality in high-dimensional Bayesian clustering. VCI builds on the idea of consensus Monte Carlo by dividing the data into multiple shards (smaller subsets of variables), performing posterior inference on each shard, and then combining the shard-level posteriors to obtain a consensus posterior. The key distinction is that VCI splits the data vertically, producing vertical shards that retain the same number of observations but have lower dimensionality. We use an entropic regularized Wasserstein barycenter to define a consensus posterior. The shard-specific barycenter weights are constructed to favor shards that provide meaningful partitions, distinct from a trivial single cluster or all singleton clusters, favoring balanced cluster sizes and precise shard-specific posterior random partitions. We show that VCI can be interpreted as a variational approximation to the posterior under a hierarchical model with a generalized Bayes prior. For relatively low-dimensional problems, experiments suggest that VCI closely approximates inference based on clustering the entire multivariate data. For high-dimensional data and in the presence of many noninformative dimensions, VCI introduces a new framework for model-based and principled inference on random partitions. Although our focus here is on random partitions, VCI can be applied to any dimension-independent parameters and serves as a bridge to emerging areas in statistics such as consensus Monte Carlo, optimal transport, variational inference, and generalized Bayes.
- Abstract(参考訳): 我々は最近,高次元データをクラスタリングするためのベイズ的手法を提案する。
利用可能なアプローチの主な制限を特定した後、高次元ベイズクラスタリングにおける次元の呪いを軽減するために、垂直コンセンサス推論(VCI)に基づく代替フレームワークを導入する。
VCIは、データを複数のシャード(変数のより小さな部分集合)に分割し、それぞれのシャードに対して後続の推論を行い、シャードレベルの後続を結合してコンセンサス後続を得る、コンセンサスモンテカルロの概念に基づいている。
重要な違いは、VCIがデータを垂直に分割し、同じ数の観測を保持しているが次元が低い垂直のシャードを生成することである。
エントロピック正規化ワッサーシュタインバリセンタを用いてコンセンサス後部を定義する。
シャード固有のバリセンター重みは、自明な単一クラスタまたは全てのシングルトンクラスタとは異なる意味のあるパーティションを提供するシャードを好んで構成され、バランスの取れたクラスタサイズと正確なシャード固有の後方ランダムパーティションを好んでいる。
VCI は階層モデルの下で後方への変分近似として解釈できることを示す。
比較的低次元の問題に対して、VCIは多変量データのクラスタリングに基づく推論を密接に近似することを実験は示唆している。
高次元データと多くの非形式的次元の存在下で、VCIはランダムパーティションに対するモデルベースおよび原則推論のための新しいフレームワークを導入した。
ここではランダムな分割に焦点を当てているが、VCIは任意の次元に依存しないパラメータに適用することができ、コンセンサスモンテカルロ、最適輸送、変分推論、一般化ベイズなどの統計分野へのブリッジとして機能する。
関連論文リスト
- Adaptive Bayesian Multivariate Spline Knot Inference with Prior Specifications on Model Complexity [7.142818102750932]
本稿では,多変量スプライン回帰における結び目推論のための完全ベイズ的手法を提案する。
実験は、特にジャンプ不連続性に適合する関数において、アルゴリズムの素晴らしい能力を示す。
論文 参考訳(メタデータ) (2024-05-22T05:14:52Z) - Distributional Reduction: Unifying Dimensionality Reduction and Clustering with Gromov-Wasserstein [56.62376364594194]
教師なし学習は、潜在的に大きな高次元データセットの基盤構造を捉えることを目的としている。
本研究では、最適輸送のレンズの下でこれらのアプローチを再検討し、Gromov-Wasserstein問題と関係を示す。
これにより、分散還元と呼ばれる新しい一般的なフレームワークが公開され、DRとクラスタリングを特別なケースとして回復し、単一の最適化問題内でそれらに共同で対処することができる。
論文 参考訳(メタデータ) (2024-02-03T19:00:19Z) - Federated Classification in Hyperbolic Spaces via Secure Aggregation of
Convex Hulls [35.327709607897944]
我々は,Poincareディスク用の凸SVM分類器の分散バージョンを開発した。
双曲空間における凸殻の複雑さを計算し,データ漏洩の程度を評価する。
本手法は, 階層的な単一細胞RNA-seqデータを含む, 多様なデータ集合を用いて, 異なるレポジトリに分散した患者から抽出した。
論文 参考訳(メタデータ) (2023-08-14T02:25:48Z) - Adaptively-weighted Integral Space for Fast Multiview Clustering [54.177846260063966]
線形複雑度に近い高速マルチビュークラスタリングのための適応重み付き積分空間(AIMC)を提案する。
特に、ビュー生成モデルは、潜在積分空間からのビュー観測を再構成するために設計されている。
いくつかの実世界のデータセットで実施された実験は、提案したAIMC法の優位性を確認した。
論文 参考訳(メタデータ) (2022-08-25T05:47:39Z) - Deep Conditional Gaussian Mixture Model for Constrained Clustering [7.070883800886882]
制約付きクラスタリングは、部分的にラベル付けされたデータの増加量に関する事前情報を利用することができる。
本稿では、直感的で解釈可能で、勾配変動推論の枠組みで効率的に訓練できる制約付きクラスタリングのための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2021-06-11T13:38:09Z) - Determinantal consensus clustering [77.34726150561087]
本稿では,クラスタリングアルゴリズムのランダム再起動における決定点プロセス (DPP) の利用を提案する。
DPPは部分集合内の中心点の多様性を好んでいる。
DPPとは対照的に、この手法は多様性の確保と、すべてのデータフェースについて良好なカバレッジを得るために失敗することを示す。
論文 参考訳(メタデータ) (2021-02-07T23:48:24Z) - DyCo3D: Robust Instance Segmentation of 3D Point Clouds through Dynamic
Convolution [136.7261709896713]
本稿では,インスタンスの性質に応じて適切な畳み込みカーネルを生成するデータ駆動型アプローチを提案する。
提案手法はScanetNetV2とS3DISの両方で有望な結果が得られる。
また、現在の最先端よりも推論速度を25%以上向上させる。
論文 参考訳(メタデータ) (2020-11-26T14:56:57Z) - Bayesian Sparse Factor Analysis with Kernelized Observations [67.60224656603823]
多視点問題は潜在変数モデルに直面することができる。
高次元問題と非線形問題は伝統的にカーネルメソッドによって扱われる。
両アプローチを単一モデルにマージすることを提案する。
論文 参考訳(メタデータ) (2020-06-01T14:25:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。