論文の概要: Active Regression for Single-Index Models with Unknown Link Functions
- arxiv url: http://arxiv.org/abs/2608.01287v1
- Date: Sun, 02 Aug 2026 14:53:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-04 15:07:25.149142
- Title: Active Regression for Single-Index Models with Unknown Link Functions
- Title(参考訳): 未知リンク関数を持つ単一インデックスモデルに対するアクティブ回帰
- Authors: Chansophea Wathanak In, Yi Li, Wai Ming Tai, Xuan Wu,
- Abstract要約: 本稿では,一般$ell_p$-lossと未知の$$1-Lipschitzリンク関数$f$の下での単一インデックスモデルの能動的回帰について検討する。
結果は、シングルインデックスモデルに対する活性$ell_p$-regressionの残りのギャップの多くを埋める。
- 参考スコア(独自算出の注目度): 9.93804255192388
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper studies active regression for single-index models under general $\ell_p$-loss with an unknown $1$-Lipschitz link function $f$, formulated as $\min_{f,x} \|f(Ax)-b\|_p^p$ with full access to $A$ but coordinate-query access to $b$. Prior work established upper bounds for known link functions for all $p\geq 1$ and for unknown link functions only in the $p=2$ case, together with lower bounds for $p\leq 2$. This work addresses the more challenging setting of unknown link functions and general $p \geq 1$. A non-adaptive sampling algorithm is presented that achieves a $(1+ε)$-approximation using $O(d^{p/2\vee 1}/ε^{p\vee 2}\operatorname{poly}\log(n/ε))$ queries. Nearly tight lower bounds are also established for $p>2$. These results close much of the remaining gap in active $\ell_p$-regression for single-index models.
- Abstract(参考訳): 本稿では,一般の$\ell_p$-lossと未知の$$$-Lipschitz リンク関数 $f$, $\min_{f,x} \|f(Ax)-b\|_p^p$ の下での単一インデックスモデルのアクティブ回帰について検討する。
以前の研究は、すべての$p\geq 1$に対する既知のリンク関数と未知のリンク関数について、$p=2$の場合のみ、および$p\leq 2$に対する低いバウンダリを定めていた。
この作業は、未知のリンク関数と一般的な$p \geq 1$のより困難な設定に対処する。
非適応サンプリングアルゴリズムは$O(d^{p/2\vee 1}/ε^{p\vee 2}\operatorname{poly}\log(n/ε))$クエリを使って$(1+ε)$-approximationを達成する。
ほぼ狭い下限も$p>2$で設定されている。
これらの結果は、シングルインデックスモデルに対する活性$\ell_p$-regressionの残りのギャップの多くを埋める。
関連論文リスト
- Covering a Few Submodular Constraints and Applications [2.243805796685295]
複数の部分モジュラー制約を網羅する問題を考察する。
任意の整数に対して$alpha ge 1$ が集合 $S$ を出力し、$f_i(S) ge$ 1-1/ealpha -epsilon)b_i$ が [r]$ と $mathbbE[c(S)] le (1+epsilon)alpha cdot sfOPT$ に対して$1-1/ealpha -epsilon)b_i$ が成り立つ。
論文 参考訳(メタデータ) (2025-07-14T03:32:42Z) - Near-optimal Active Regression of Single-Index Models [5.081060114892763]
この研究は、$tildeO(dfracp2vee 1/varepsilonpvee 2)$エントリを$b$にクエリすることで、$(1+varepsilon)$-approximationソリューションを提供する最初のアルゴリズムを示す。
論文 参考訳(メタデータ) (2025-02-25T13:58:06Z) - LevAttention: Time, Space, and Streaming Efficient Algorithm for Heavy Attentions [54.54897832889028]
任意の$K$に対して、$n$とは独立に「普遍集合」$Uサブセット[n]$が存在し、任意の$Q$と任意の行$i$に対して、大きな注目スコアが$A_i,j$ in row $i$ of $A$は全て$jin U$を持つことを示す。
我々は、視覚変換器のスキームの利点を実証的に示し、トレーニング中に我々の普遍的なセットを使用する新しいモデルのトレーニング方法を示した。
論文 参考訳(メタデータ) (2024-10-07T19:47:13Z) - Coresets for Multiple $\ell_p$ Regression [47.790126028106734]
サイズ $tilde O(varepsilon-2d)$ for $p2$ と $tilde O(varepsilon-pdp/2)$ for $p>2$ のコアセットを構築します。
1p2$の場合、すべての行列は$tilde O(varepsilon-1k)$行のサブセットを持ち、$(varepsilon-1k)$-a optimal $k$-dimensional subspace for $ell_p$ subspace approximationである。
論文 参考訳(メタデータ) (2024-06-04T15:50:42Z) - $\ell_p$-Regression in the Arbitrary Partition Model of Communication [59.89387020011663]
コーディネータモデルにおける分散$ell_p$-regression問題のランダム化通信複雑性について考察する。
p = 2$、すなわち最小二乗回帰の場合、$tildeTheta(sd2 + sd/epsilon)$ bitsの最初の最適境界を与える。
p in (1,2)$ に対して、$tildeO(sd2/epsilon + sd/mathrmpoly(epsilon)$ upper bound を得る。
論文 参考訳(メタデータ) (2023-07-11T08:51:53Z) - Online Lewis Weight Sampling [62.38157566916501]
コーエンとペンはルイスの重量サンプリングを理論計算機科学コミュニティに導入した。
この重要なプリミティブを、オンラインコアセット、スライディングウィンドウ、対向ストリーミングモデルなど、他の設定に拡張した作品もいくつかある。
オンラインコアセット,スライディングウィンドウ,および逆ストリーミングモデルにおいて,すべての$pin(0,infty)$に対して,ほぼ最適に近い$ell_p$サブスペース埋め込みを設計する。
論文 参考訳(メタデータ) (2022-07-17T19:40:51Z) - Active Sampling for Linear Regression Beyond the $\ell_2$ Norm [70.49273459706546]
対象ベクトルの少数のエントリのみを問合せすることを目的とした線形回帰のためのアクティブサンプリングアルゴリズムについて検討する。
我々はこの$d$への依存が対数的要因まで最適であることを示す。
また、損失関数に対して最初の全感度上界$O(dmax1,p/2log2 n)$を提供し、最大で$p$成長する。
論文 参考訳(メタデータ) (2021-11-09T00:20:01Z) - Compressed Deep Networks: Goodbye SVD, Hello Robust Low-Rank
Approximation [23.06440095688755]
ニューラルネットワークを圧縮する一般的な手法は、完全に接続された層(または埋め込み層)に対応する行列$AinmathbbRntimes d$の$k$-rank $ell$近似$A_k,2$を計算することである。
ここで$d$は層内のニューロンの数、$n$は次のニューロンの数、$A_k,2$は$O(n+d)k)$メモリに格納できる。
これ
論文 参考訳(メタデータ) (2020-09-11T20:21:42Z) - Model-Free Reinforcement Learning: from Clipped Pseudo-Regret to Sample
Complexity [59.34067736545355]
S$状態、$A$アクション、割引係数$gamma in (0,1)$、近似しきい値$epsilon > 0$の MDP が与えられた場合、$epsilon$-Optimal Policy を学ぶためのモデルなしアルゴリズムを提供する。
十分小さな$epsilon$の場合、サンプルの複雑さで改良されたアルゴリズムを示す。
論文 参考訳(メタデータ) (2020-06-06T13:34:41Z) - Agnostic Q-learning with Function Approximation in Deterministic
Systems: Tight Bounds on Approximation Error and Sample Complexity [94.37110094442136]
本稿では,決定論的システムにおける関数近似を用いたQ$学習の問題について検討する。
もし$delta = Oleft(rho/sqrtdim_Eright)$なら、$Oleft(dim_Eright)$を使って最適なポリシーを見つけることができる。
論文 参考訳(メタデータ) (2020-02-17T18:41:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。