論文の概要: Search Dimension in Unlabeled Projection Pursuit: A Scaling Law for Subspace Restriction
- arxiv url: http://arxiv.org/abs/2609.37917v1
- Date: Tue, 29 Sep 2026 16:11:51 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-30 21:28:47.727604
- Title: Search Dimension in Unlabeled Projection Pursuit: A Scaling Law for Subspace Restriction
- Title(参考訳): 未ラベルプロジェクション・スーツにおける探索次元:部分空間制限のスケーリング法則
- Abstract要約: 投影追跡は、データが最小のガウス的に見える方向を探索する。
観測空間がガウス補数が大きい場合、信号を持たない方向によって経験的目的を最小化することができる。
既知のフォワード演算子の列空間への探索の制限は、負の曲率分岐上の失敗を正確に除去する。
- 参考スコア(独自算出の注目度): 4.579039730086138
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Projection pursuit searches for a direction along which the data look least Gaussian. When the observation space contains a large Gaussian complement, the empirical objective can be minimized by a direction that carries no signal, with empirical kurtosis as low as at the truth. Sample splitting exposes rather than repairs this failure. Appending coordinates independent of the latent regime degrades the search while leaving Bayes recoverability unchanged. Restricting the search to the column space of a known forward operator removes the failure exactly on the negative-kurtosis branch. Estimating a principal subspace from the data is the alternative. In a controlled two-component model, the leading sufficient scalings differ in the gain with which the operator transmits the discriminant: $ς^{-4}$ for covariance-spike estimation and $ς^{-8}$ for fourth-moment search. At fixed search dimension, the measured threshold ratio collapses onto $n/p^2$ with exponent $0.156$, close to the predicted $1/8$. This is an empirically supported scaling motivated by sufficient bounds, not a proved asymptotically tight law. When the search dimension is varied, the measured exponent is $0.325$, substantially larger than $1/8$, and the tested range does not identify its functional form. The crossing location also depends on calibration and model configuration. Under a downstream excess-error criterion, the scaling largely disappears.
- Abstract(参考訳): 投影追跡は、データが最小のガウス的に見える方向を探索する。
観測空間がガウス補数が大きい場合、経験的目的は信号を持たない方向によって最小化することができ、経験的カルトーシスは真実のように低い。
サンプル分割は、この失敗を修復するよりはむしろ露呈する。
潜伏状態とは無関係に座標を適用することは、ベイズを回復させることなく探索を劣化させる。
既知のフォワード演算子の列空間への探索の制限は、負の曲率分岐上の失敗を正確に除去する。
データから主部分空間を推定するのが代替手段である。
制御された2成分モデルでは、先行する十分なスケーリングは、演算子が判別式を送信するゲインに異なる:$ς^{-4}$ 共分散スパイク推定と$ς^{-8}$ 第四モーメント探索である。
一定の探索次元では、測定された閾値比は、予測された1/8$に近い0.156$の指数で$n/p^2$に崩壊する。
これは十分な境界によって動機付けられた経験的に支持されたスケーリングであり、漸近的に厳密な法則ではない。
探索次元が変化すると、測定された指数は0.325$で、1/8$よりもかなり大きい。
交差位置はキャリブレーションとモデル構成にも依存する。
下流の過度なエラー基準の下では、スケーリングはほぼ消滅する。
関連論文リスト
- Symmetry without a manifold: intrinsic dimension on orbits [0.0]
対称性をスケールで破ると$$が返り、スケールフリーな高原なしで$/$をトラックする。
L(h)=L_infty+Aexp(-c,h)$,$R2$ 0.982 - 0.995 に対して 0.857 - 0.906 の電力法則は、同じフロアを認めて同じプロトコルに適合する。
論文 参考訳(メタデータ) (2026-09-15T23:34:18Z) - Coarsening Latent-Class Probabilities: Directional Distortion and Coverage Loss [1.14219428942199]
結果が、観測されていないクラスメンバーシップの確率ベクトル上でますます後退していることが示される。
定数係数構造平均と条件キャリブレーションの下では、観測データ問題は確率ベクトル上の結果の部分的に線形回帰である。
粗い場合、プラグイン推定器は$mathcalA$に収束し、粗い演算子は$mathcalA$と$u$の廃信号を満たす。
論文 参考訳(メタデータ) (2026-08-12T08:26:33Z) - Detecting and Discriminating Operator Misspecification in Hybrid PDE-Parameter Learning: a Reference-Free Instrument, with Discrimination Bounded In Sample [0.0]
私たちは1つのフィットから読み取る楽器を作り、オラクルは持っていません。
回復時に神経推定器がTikhonov-regularized inversionに負ける、事前登録された負の機器である、装置の盲点を報告する。
論文 参考訳(メタデータ) (2026-08-04T21:20:44Z) - When and Why Do Linear Bias Probes Fail? A Geometric and Statistical Theory of Bias Detectability in Large Language Model Representations [1.7545090618311434]
線形探索は、大きな言語モデルにおける社会的バイアスを検出する標準的な手段である。
しかし、報告された調査のアキュラシーは、ほとんど事実評価から来ている。
私たちはこの曖昧さを解決する理論を発展させる。
論文 参考訳(メタデータ) (2026-07-21T06:53:19Z) - Level-Crossing Density as a Mesh-Free High-Frequency Auxiliary Loss for Implicit Neural Representations [0.0]
格子も複雑も永続性もない連続神経場に対するスムーズなモンテカルロ推定器を導出する。
推定器は2Dと3Dの正確なトポロジーに対して1-3%の精度で、1イテレーションあたり約3ミリ秒の費用がかかる。
しかし、3Dニューラル-SDFフィッティングでは、任意のサンプルソフトトポロジーの目的に対して一般的な障害モードが現れると信じている。
論文 参考訳(メタデータ) (2026-07-07T04:23:23Z) - Is Spurious Correlation Removal Always Learnable? [56.28155520961125]
不変学習は、構造が統計的に識別可能であっても失敗することがある。
ブラックボックスサンプリング可能な教師付きスパースリカバリプリミティブの下では、実証可能な多次元環境が存在する。
合成および実際のデータセットは、予測されたギャップと遷移を示し、単純な多様性診断を動機付ける。
論文 参考訳(メタデータ) (2026-06-11T05:49:43Z) - How Neural Reward Models Learn Features for Policy Optimization: A Single-Index Analysis [53.063298916923976]
r*(x) = *(langle *, xrangle)$ と $x sim N(0, I_d)$ でガウスの単一インデックスモデルでフィードバックを研究する。
まず、報酬重み付きサンプルから隠れた方向を*$で学習し、次に重み付きリッジ回帰により読み出し層に適合する2段階のニューラル報酬モデルを分析する。
論文 参考訳(メタデータ) (2026-05-23T22:00:38Z) - Scaling Laws in Linear Regression: Compute, Parameters, and Data [86.48154162485712]
無限次元線形回帰セットアップにおけるスケーリング法則の理論について検討する。
テストエラーの再現可能な部分は$Theta(-(a-1) + N-(a-1)/a)$であることを示す。
我々の理論は経験的ニューラルスケーリング法則と一致し、数値シミュレーションによって検証される。
論文 参考訳(メタデータ) (2024-06-12T17:53:29Z) - The Generalized Lasso with Nonlinear Observations and Generative Priors [63.541900026673055]
我々は、幅広い測定モデルで満たされるガウス下測度を仮定する。
この結果から, 局所埋込特性を仮定して, 均一回復保証まで拡張できることが示唆された。
論文 参考訳(メタデータ) (2020-06-22T16:43:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。