論文の概要: Reducibility and Statistical-Computational Gaps from Secret Leakage
- arxiv url: http://arxiv.org/abs/2005.08099v2
- Date: Sun, 28 Jun 2020 21:59:41 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-02 13:14:31.096739
- Title: Reducibility and Statistical-Computational Gaps from Secret Leakage
- Title(参考訳): シークレットリークからの低減性と統計的計算ギャップ
- Authors: Matthew Brennan, Guy Bresler
- Abstract要約: 我々は, 秘密リークドライドドライド・ドライド(秘密リークドライド・ドライド・ドライド)の若干の一般化が, 様々な新しい平均ケース・リダクション技術をもたらすことを示した。
特定の種類の秘密漏れクランプに対する植込みクランプ予想の変種を用いて、厳密な統計計算トレードオフを導出する。
- 参考スコア(独自算出の注目度): 19.25775832101647
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Inference problems with conjectured statistical-computational gaps are
ubiquitous throughout modern statistics, computer science and statistical
physics. While there has been success evidencing these gaps from the failure of
restricted classes of algorithms, progress towards a more traditional
reduction-based approach to computational complexity in statistical inference
has been limited. Existing reductions have largely been limited to inference
problems with similar structure -- primarily mapping among problems
representable as a sparse submatrix signal plus a noise matrix, which are
similar to the common hardness assumption of planted clique.
The insight in this work is that a slight generalization of the planted
clique conjecture -- secret leakage planted clique -- gives rise to a variety
of new average-case reduction techniques, yielding a web of reductions among
problems with very different structure. Using variants of the planted clique
conjecture for specific forms of secret leakage planted clique, we deduce tight
statistical-computational tradeoffs for a diverse range of problems including
robust sparse mean estimation, mixtures of sparse linear regressions, robust
sparse linear regression, tensor PCA, variants of dense $k$-block stochastic
block models, negatively correlated sparse PCA, semirandom planted dense
subgraph, detection in hidden partition models and a universality principle for
learning sparse mixtures. In particular, a $k$-partite hypergraph variant of
the planted clique conjecture is sufficient to establish all of our
computational lower bounds. Our techniques also reveal novel connections to
combinatorial designs and to random matrix theory. This work gives the first
evidence that an expanded set of hardness assumptions, such as for secret
leakage planted clique, may be a key first step towards a more complete theory
of reductions among statistical problems.
- Abstract(参考訳): 推測された統計計算ギャップを持つ推論問題は、現代の統計学、計算機科学、統計物理学において普遍的である。
制限されたアルゴリズムのクラスからこれらのギャップを導き出すことに成功したが、統計的推論における計算複雑性に対するより伝統的な還元に基づくアプローチへの進歩は限られている。
Existing reductions have largely been limited to inference problems with similar structure -- primarily mapping among problems representable as a sparse submatrix signal plus a noise matrix, which are similar to the common hardness assumption of planted clique. The insight in this work is that a slight generalization of the planted clique conjecture -- secret leakage planted clique -- gives rise to a variety of new average-case reduction techniques, yielding a web of reductions among problems with very different structure.
Using variants of the planted clique conjecture for specific forms of secret leakage planted clique, we deduce tight statistical-computational tradeoffs for a diverse range of problems including robust sparse mean estimation, mixtures of sparse linear regressions, robust sparse linear regression, tensor PCA, variants of dense $k$-block stochastic block models, negatively correlated sparse PCA, semirandom planted dense subgraph, detection in hidden partition models and a universality principle for learning sparse mixtures.
特に、植込みクリッド予想の$k$-partite ハイパーグラフ変種は、我々の計算下界の全てを確立するのに十分である。
また, 組合せ設計とランダム行列理論との新たな関係を明らかにする。
この研究は、秘密漏洩(secret leak planted clique)のような拡張されたハードネス仮定が、統計問題間の還元のより完全な理論への重要な第一歩であることを示す最初の証拠を与える。
関連論文リスト
- Tensor cumulants for statistical inference on invariant distributions [49.80012009682584]
我々は,PCAが信号の大きさの臨界値で計算的に困難になることを示す。
我々は、与えられた次数の不変量に対して明示的でほぼ直交的な基底を与える新しい対象の集合を定義する。
また、異なるアンサンブルを区別する新しい問題も分析できます。
論文 参考訳(メタデータ) (2024-04-29T14:33:24Z) - Fine-grained analysis of non-parametric estimation for pairwise learning [9.676007573960383]
ペアワイズ学習における非パラメトリック推定の一般化性能について検討する。
我々の結果は、ランキング、AUC、ペアワイズ回帰、メートル法、類似性学習など、幅広いペアワイズ学習問題に対処するために利用できる。
論文 参考訳(メタデータ) (2023-05-31T08:13:14Z) - Privacy Induces Robustness: Information-Computation Gaps and Sparse Mean
Estimation [8.9598796481325]
本稿では, アルゴリズムと計算複雑性の両面において, 異なる統計問題に対する観測結果について検討する。
プライベートスパース平均推定のための情報計算ギャップを確立する。
また、プライバシーによって引き起こされる情報計算のギャップを、いくつかの統計や学習問題に対して証明する。
論文 参考訳(メタデータ) (2022-11-01T20:03:41Z) - Lattice-Based Methods Surpass Sum-of-Squares in Clustering [98.46302040220395]
クラスタリングは教師なし学習における基本的なプリミティブである。
最近の研究は、低次手法のクラスに対する低い境界を確立している。
意外なことに、この特定のクラスタリングモデルのtextitdoesは、統計的-計算的ギャップを示さない。
論文 参考訳(メタデータ) (2021-12-07T18:50:17Z) - Average-Case Communication Complexity of Statistical Problems [48.03761288397421]
通信の複雑さは、ストリーミング、スケッチ、クエリベースのモデルにおける下位境界を証明する主要なツールである。
本稿では,ランダムグラフやマトリクスに植木構造を組み込んだ問題に対して,入力分布を保存する一般還元法を提案する。
我々は,植林した傾斜地を検知・発見するために,二者間・多者間通信の下限を導出する。
論文 参考訳(メタデータ) (2021-07-03T03:31:37Z) - Probabilistic Simplex Component Analysis [66.30587591100566]
PRISMは、データ循環記述のシンプルさの頂点をデータから識別する確率論的シンプルコンポーネント分析手法である。
この問題には多様な応用があり、最も注目すべきはリモートセンシングにおけるハイパースペクトルアンミックスと機械学習における非負行列分解である。
論文 参考訳(メタデータ) (2021-03-18T05:39:00Z) - Statistical and computational thresholds for the planted $k$-densest
sub-hypergraph problem [13.808053718325635]
我々は,$d$-uniform ハイパーグラフ上に$k$-densest サブハイパーグラフを植え付けることで回復する問題を考察する。
この根本的な問題は、例えば、コミュニティの検出、平均ケースの複雑さ、神経科学の応用など、様々な文脈に現れる。
論文 参考訳(メタデータ) (2020-11-23T16:02:12Z) - Learning, compression, and leakage: Minimising classification error via
meta-universal compression principles [87.054014983402]
学習シナリオのための圧縮技法の有望なグループは、正規化極大(NML)符号化である。
ここでは,教師付き分類問題に対するNMLに基づく意思決定戦略を検討し,多種多様なモデルに適用した場合にPAC学習を実現することを示す。
本手法の誤分類率は,プライバシに敏感なシナリオにおいて,データ漏洩の可能性を定量化するための指標である最大リークによって上限づけられていることを示す。
論文 参考訳(メタデータ) (2020-10-14T20:03:58Z) - Computational Barriers to Estimation from Low-Degree Polynomials [81.67886161671379]
本研究では,隠れ構造物の存在を検知する作業において,低次構造物のパワーについて検討する。
大規模な「信号+雑音」問題に対して、任意の程度に達成可能な最良の平均二乗誤差に対して、ユーザフレンドリな下界を与える。
応用として,植込みサブマトリクスに対する低次平均2乗誤差の厳密な評価と高密度サブグラフ問題について述べる。
論文 参考訳(メタデータ) (2020-08-05T17:52:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。