論文の概要: Tail-Weight Control and Localized Generalization in Nearly Low-Rank Adversarial Classification
- arxiv url: http://arxiv.org/abs/2609.23688v2
- Date: Sat, 26 Sep 2026 11:42:48 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-29 21:31:51.573526
- Title: Tail-Weight Control and Localized Generalization in Nearly Low-Rank Adversarial Classification
- Title(参考訳): ほぼ低ランクの逆分類における重み制御と局所一般化
- Abstract要約: ガウスモデルにおける逆摂動下でのノルム制約線形分類について検討する。
境界の傾斜損失については、主空間の目撃者が、ほぼ最適の予測値のほぼ半分以下で、尾の重量が小さいことを証明している。
20対の反復実験では、サンプルサイズの過剰なリスクとテールの使用が減少し、テール次元が固定された総エネルギーで大きくなるとほとんど変化しない。
- 参考スコア(独自算出の注目度): 8.110061989547228
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We study norm-constrained linear classification under Eu clidean adversarial perturbations in a Gaussian model with a low-dimen sional informative subspace and an independent noise tail. For bounded ramp loss, we prove that a principal-space witness with risk below one half forces every near-optimal predictor to have small tail weight. A path-specific density bound yields constants without requiring positive tail variance. Under isotropic principal covariance, we establish a unique population minimizer and joint local growth. Boundary normalization then removes the common attack penalty from centered margins, giving localized finite-sample guarantees governed by principal dimension and total tail energy. Globalized growth removes the entrance condition at weaker constants; a model-aware comparison retains local guarantees. Experiments with twenty paired repetitions show decreasing excess risk and tail use with sample size, and nearly unchanged behavior when tail dimension grows at fixed total energy. Pure-noise controls and optimizer diagnostics clarify the scope and limitations of these conclusions.
- Abstract(参考訳): 低次元のsional情報部分空間と独立ノイズテールを持つガウスモデルにおいて,ユークリッド対向摂動の下でのノルム制約線形分類について検討した。
境界の傾斜損失については、主空間の目撃者が、ほぼ最適の予測器のほぼ半分以下の力で、尾の重量が小さいことを証明している。
経路固有密度境界は正の尾分散を必要としない定数を生じる。
等方的主共分散の下では、一意な人口最小化と共同的な局所的な成長を確立する。
境界正規化は、中央の辺縁から共通の攻撃ペナルティを取り除き、主次元と全尾エネルギーによって支配される局所的な有限サンプル保証を与える。
グローバリゼーションされた成長は、より弱い定数での入り口条件を排除し、モデル認識比較は局所的な保証を保持する。
20対の反復実験では、サンプルサイズの過剰なリスクとテールの使用が減少し、テール次元が固定された総エネルギーで大きくなるとほとんど変化しない。
純粋ノイズ制御とオプティマイザ診断は、これらの結論の範囲と限界を明確にする。
関連論文リスト
- Characterizing Heterogeneous Rates in Finite Mixture Estimation via Partial Optimal Transport [88.55403215843967]
改良された局所および大域収束保証を得るためのボロノイ系部分最適輸送(VPOT)は、混合測定の最大極大推定器である。
結果は、混合比例が真の混合成分の数についてのゼロまたは以前の知識から一様に制限されることなく、任意の固定次元で保持される。
論文 参考訳(メタデータ) (2026-09-15T04:32:53Z) - Explaining f-Divergence-Based Regularization via Local Curvature and Sharpness-Aware Minimization [7.792020418343022]
多様性に基づく正規化とシャープネス認識最小化(SAM)は、ディープラーニングの一般化を改善するための2つの重要なアプローチである。
この2つの手法はパラメータ空間の摂動の下で局所的に一致していることを示す。
また、分岐に基づく正規化は入力の変換によって定義されることを示す。
論文 参考訳(メタデータ) (2026-09-08T19:01:05Z) - Across the Loss Landscape with Progressive Growth [51.366966420881646]
成長を漸進的緩和と見なして、より平坦な地域に向けての訓練戦略がいかに成長・最適化されるかを示す。
制御されたおもちゃの流域や現実的なResNet/CI-100環境でこれらの予測を実証的に検証する。
プログレッシブな部分空間成長は、より平坦な解を確実に生成するが、曲率の低減は、普遍的にテスト性能の向上に変換されず、平坦性一般化接続における微妙さを強調している。
論文 参考訳(メタデータ) (2026-08-25T13:50:48Z) - High-dimensional ridgeless least squares interpolation under spiked covariance structures [3.656751299156262]
本稿では,高次元のリッジレス最小二乗推定器において,特徴量$p$とサンプルサイズ$n$が比例的に大きくなる場合のサンプル外予測リスクについて検討する。
遅延スパイク方向に沿って分布する信号エネルギーは、過適合が良性、誘惑的、破滅的な過適合につながるか否かを決定する。
論文 参考訳(メタデータ) (2026-08-07T14:40:44Z) - Generalized nonparametric regression in reproducing kernel Hilbert spaces: Consistency and rates of convergence [0.0]
我々は再生空間におけるM-levの包括的理論を開発する。
ソボ空間に対しては、混合滑らか性関数を持つ滑らか性空間に接続する新たなレートを得る。
論文 参考訳(メタデータ) (2026-06-22T08:12:31Z) - Beyond Consistency: Inference for the Relative risk functional in Deep Nonparametric Cox Models [7.2275111013288535]
Coxをベースとした最適化誤差が、部分的可能性の下で集団リスクにどのように伝播するかは明らかでない。
また、ポイントワイドバイアスがどのように制御できるのか、またアンサンブルに基づく不確実性が現実的な分散体制の下でどのように振る舞うのかも不明である。
これらの問題に対処するディープコックス推定器の分布理論を開発する。
論文 参考訳(メタデータ) (2026-03-25T01:43:12Z) - From Local Nonclassicality to Entanglement: A Convexity Law for Single-Excitation Dynamics [0.5541461456285174]
我々は励起保存相互作用に対する単純な力学則を証明した。
局所的なウィグナー負の和は、初期励起状態によって設定された固定予算によって上界される。
要約された局所負性率の予測軌道は、実用的なハードウェア計量を提供する。
論文 参考訳(メタデータ) (2025-11-13T16:40:44Z) - Instance-Dependent Generalization Bounds via Optimal Transport [51.71650746285469]
既存の一般化境界は、現代のニューラルネットワークの一般化を促進する重要な要因を説明することができない。
データ空間における学習予測関数の局所リプシッツ正則性に依存するインスタンス依存の一般化境界を導出する。
ニューラルネットワークに対する一般化境界を実験的に解析し、有界値が有意義であることを示し、トレーニング中の一般的な正規化方法の効果を捉える。
論文 参考訳(メタデータ) (2022-11-02T16:39:42Z) - Benign Overfitting of Constant-Stepsize SGD for Linear Regression [122.70478935214128]
帰納バイアスは 経験的に過剰フィットを防げる中心的存在です
この研究は、この問題を最も基本的な設定として考慮している: 線形回帰に対する定数ステップサイズ SGD。
我々は、(正規化されていない)SGDで得られるアルゴリズム正則化と、通常の最小二乗よりも多くの顕著な違いを反映する。
論文 参考訳(メタデータ) (2021-03-23T17:15:53Z) - Log-Likelihood Ratio Minimizing Flows: Towards Robust and Quantifiable
Neural Distribution Alignment [52.02794488304448]
そこで本研究では,対数様比統計量と正規化フローに基づく新しい分布アライメント手法を提案する。
入力領域の局所構造を保存する領域アライメントにおいて,結果の最小化を実験的に検証する。
論文 参考訳(メタデータ) (2020-03-26T22:10:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。