論文の概要: Fast Rates for Semi-Supervised Learning via Data-Augmentation Graph Regularization
- arxiv url: http://arxiv.org/abs/2607.07513v2
- Date: Wed, 15 Jul 2026 17:32:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-16 14:31:40.665143
- Title: Fast Rates for Semi-Supervised Learning via Data-Augmentation Graph Regularization
- Title(参考訳): データ拡張グラフ規則化による半教師付き学習の高速化
- Authors: Adam M. Oberman,
- Abstract要約: 自己教師付き学習はラベルのごく一部から精度を指示するが、その背景にあるラベル付きサンプルの効率は理論的な説明に欠けていた。
データ拡張はラベルのないデータに類似性グラフを誘導するので、そのグラフ上の下流での学習はグラフ-ラプラシア正規化学習である。
- 参考スコア(独自算出の注目度): 1.0762008415887194
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Self-supervised learning matches supervised accuracy from a fraction of the labels, but the labeled-sample efficiency behind this has lacked a theoretical explanation. We provide one. Data augmentation induces a similarity graph on the unlabeled data, so downstream learning on that graph is graph-Laplacian-regularized learning. We prove a fast transductive rate, $O(1/n_L)$ in the number of labels, in place of the supervised $O(1/\sqrt{n_L})$, by carrying the leave-one-out stability apparatus of Johnson and Zhang (JMLR 2007) over to the augmentation graph, and without the unrealistic assumptions of limit-based analyses (exact kernel, generalizing features). The bound makes augmentation quality explicit: the expected error is at most $C/n_L + R_{\mathrm{DA}}(y)$, where the data-augmentation alignment error $R_{\mathrm{DA}}(y)$ is proportional to the graph-cut mass of augmentations that cross a label boundary, so good augmentations let few labels suffice. The analysis uses a streamlined loss that drops the projector, negative-sample, and orthogonality overhead of standard objectives yet still recovers the top-$K$ ideal features in the infinite-data limit, the augmentation-kernel eigenspace studied by Zhai et al. The bound gives a mechanistic account of the accuracy-versus-label-count curve through augmentation quality, verified in a controlled model where the constants are known.
- Abstract(参考訳): 自己教師付き学習はラベルのごく一部から精度を指示するが、その背景にあるラベル付きサンプルの効率は理論的な説明に欠けていた。
私たちは1つを提供します。
データ拡張はラベルのないデータに類似性グラフを誘導するので、そのグラフ上の下流での学習はグラフ-ラプラシア正規化学習である。
保証された$O(1/\sqrt{n_L})$の代わりに、高速なトランスダクティブレートである$O(1/n_L)$を、ジョンソンと張(JMLR 2007)の独立安定装置を拡張グラフに移動させることにより証明し、極限に基づく解析の非現実的な仮定(実測カーネル、一般化特徴)を含まない。
期待されるエラーは、最大$C/n_L + R_{\mathrm{DA}}(y)$で、データ拡張アライメントエラー$R_{\mathrm{DA}}(y)$はラベル境界を越える拡張のグラフカット質量に比例する。
この分析では、プロジェクター、負のサンプル、直交性のオーバーヘッドを下げる合理化損失を使用し、標準目標の上限値であるK$の理想的特徴を回復するが、Zhaiらによって研究された拡張カーネル固有空間は、その定数が知られている制御モデルで検証される精度とラベル数曲線のメカニカルな説明を与える。
関連論文リスト
- Robust Graph-Based Semi-Supervised Learning via $p$-Conductances [49.0776396776252]
本研究では,データラベルが不足している,あるいは破損しているような状況下でのグラフに対する半教師付き学習の課題について検討する。
我々は、$p$-laplace と Poisson の学習方法を一般化した $p$-conductance learning という手法を提案する。
コンピュータビジョンと引用データセットの実証実験結果から,本手法が低ラベルレート, 劣化ラベル, 部分ラベルレジームにおける最先端の精度を実現することを示す。
論文 参考訳(メタデータ) (2025-02-13T01:11:25Z) - Convergence Rate Analysis of LION [54.28350823319057]
LION は、勾配カルシュ=クーン=T (sqrtdK-)$で測定された $cal(sqrtdK-)$ の反復を収束する。
従来のSGDと比較して,LIONは損失が小さく,性能も高いことを示す。
論文 参考訳(メタデータ) (2024-11-12T11:30:53Z) - Towards Self-Interpretable Graph-Level Anomaly Detection [73.1152604947837]
グラフレベルの異常検出(GLAD)は、コレクションの大多数と比べて顕著な相違を示すグラフを識別することを目的としている。
本稿では,異常なグラフを検出し,同時に情報的説明を生成する自己解釈グラフaNomaly dETectionモデル(SIGNET)を提案する。
論文 参考訳(メタデータ) (2023-10-25T10:10:07Z) - How Does Pseudo-Labeling Affect the Generalization Error of the
Semi-Supervised Gibbs Algorithm? [73.80001705134147]
擬似ラベル付き半教師付き学習(SSL)におけるGibsアルゴリズムによる予測一般化誤差(ゲンエラー)を正確に評価する。
ゲンエラーは、出力仮説、擬ラベルデータセット、ラベル付きデータセットの間の対称性付きKL情報によって表現される。
論文 参考訳(メタデータ) (2022-10-15T04:11:56Z) - Efficient Signed Graph Sampling via Balancing & Gershgorin Disc Perfect
Alignment [51.74913666829224]
強い反相関を持つデータセットに対して、適切なグラフは正および負のエッジ重みの両方を含むことを示す。
本稿では,平衡符号グラフの概念に着目した線形時間符号グラフサンプリング手法を提案する。
実験結果から, 署名付きグラフサンプリング手法は, 各種データセットにおいて, 既存の高速サンプリング方式よりも優れた性能を示した。
論文 参考訳(メタデータ) (2022-08-18T09:19:01Z) - Bi-stochastically normalized graph Laplacian: convergence to manifold Laplacian and robustness to outlier noise [10.418647759223965]
双確率正規化 (bi-stochastic normalization) はグラフベースのデータ解析においてグラフラプラシアンの代替正規化を提供する。
両階層正規化グラフ Laplacian から (重み付き) Laplacian への収束を速度で証明する。
多様体データが外乱ノイズによって破損した場合、理論的にはラプラシア点の整合性を証明する。
論文 参考訳(メタデータ) (2022-06-22T21:08:24Z) - Does the $\ell_1$-norm Learn a Sparse Graph under Laplacian Constrained
Graphical Models? [13.572602792770288]
ラプラシアン制約ガウス図形モデルの下でグラフを学習する問題を考察する。
我々は、大きな正規化パラメータが驚くほど完全なグラフ、すなわちエッジで接続されたすべてのエッジにつながることを示した。
論文 参考訳(メタデータ) (2020-06-26T12:06:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。