論文の概要: Optimizing Orthogonalized Tensor Deflation via Random Tensor Theory
- arxiv url: http://arxiv.org/abs/2302.05798v1
- Date: Sat, 11 Feb 2023 22:23:27 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-14 18:23:37.093100
- Title: Optimizing Orthogonalized Tensor Deflation via Random Tensor Theory
- Title(参考訳): ランダムテンソル理論による直交テンソルデフレの最適化
- Authors: Mohamed El Amine Seddik, Mohammed Mahfoud, Merouane Debbah
- Abstract要約: 本稿では、ランダムノイズテンソルから相関成分を持つ低ランク信号テンソルを復元する問題に取り組む。
非直交成分はテンソルデフレレーション機構を変化させ、効率的に回復するのを防ぐことができる。
デフレレーション機構で導入されたパラメータを最適化することにより、効率的なテンソルデフレレーションアルゴリズムを提案する。
- 参考スコア(独自算出の注目度): 5.124256074746721
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper tackles the problem of recovering a low-rank signal tensor with
possibly correlated components from a random noisy tensor, or so-called spiked
tensor model. When the underlying components are orthogonal, they can be
recovered efficiently using tensor deflation which consists of successive
rank-one approximations, while non-orthogonal components may alter the tensor
deflation mechanism, thereby preventing efficient recovery. Relying on recently
developed random tensor tools, this paper deals precisely with the
non-orthogonal case by deriving an asymptotic analysis of a parameterized
deflation procedure performed on an order-three and rank-two spiked tensor.
Based on this analysis, an efficient tensor deflation algorithm is proposed by
optimizing the parameter introduced in the deflation mechanism, which in turn
is proven to be optimal by construction for the studied tensor model. The same
ideas could be extended to more general low-rank tensor models, e.g., higher
ranks and orders, leading to more efficient tensor methods with a broader
impact on machine learning and beyond.
- Abstract(参考訳): 本稿では、ランダムノイズテンソルやいわゆるスパイクテンソルモデルから相関成分を持つ低ランク信号テンソルを復元する問題に取り組む。
基底成分が直交する場合には、次数 1 の近似からなるテンソルデフレレーションを用いて効率的に回復することができるが、非直交成分はテンソルデフレ機構を変化させて効率のよい回復を防止することができる。
本稿では,最近開発されたランダムテンソルツールを用いて,次数3および階数2のスパイクテンソル上で行うパラメータ化デフレ手順の漸近解析を導出することにより,非直交の場合を正確に扱う。
この解析に基づき、デフレ機構に導入されたパラメータを最適化することにより、効率的なテンソルデフレ化アルゴリズムが提案され、解析されたテンソルモデルの構成により最適であることが証明された。
同じ考え方はより一般的な低ランクテンソルモデル(例えば、より高いランクと順序)にまで拡張され、より効率的なテンソル手法となり、機械学習などに大きな影響を及ぼす。
関連論文リスト
- Tensor cumulants for statistical inference on invariant distributions [49.80012009682584]
我々は,PCAが信号の大きさの臨界値で計算的に困難になることを示す。
我々は、与えられた次数の不変量に対して明示的でほぼ直交的な基底を与える新しい対象の集合を定義する。
また、異なるアンサンブルを区別する新しい問題も分析できます。
論文 参考訳(メタデータ) (2024-04-29T14:33:24Z) - Provable Tensor Completion with Graph Information [49.08648842312456]
本稿では,動的グラフ正規化テンソル完備問題の解法として,新しいモデル,理論,アルゴリズムを提案する。
我々はテンソルの低ランクおよび類似度構造を同時に捉える包括的モデルを開発する。
理論の観点からは、提案したグラフの滑らか度正規化と重み付きテンソル核ノルムとの整合性を示す。
論文 参考訳(メタデータ) (2023-10-04T02:55:10Z) - Decomposable Sparse Tensor on Tensor Regression [1.370633147306388]
テンソル回帰のスパースローランクテンソルを考えると、予測子 $mathcalX$ とレスポンス $mathcalY$ はどちらも高次元テンソルである。
本稿では,契約部と生成部から構成されるステージワイド探索に基づく高速解を提案する。
論文 参考訳(メタデータ) (2022-12-09T18:16:41Z) - Error Analysis of Tensor-Train Cross Approximation [88.83467216606778]
我々は, テンソル全体の精度保証を行う。
結果は数値実験により検証され、高次テンソルに対するクロス近似の有用性に重要な意味を持つ可能性がある。
論文 参考訳(メタデータ) (2022-07-09T19:33:59Z) - When Random Tensors meet Random Matrices [50.568841545067144]
本稿では,ガウス雑音を伴う非対称次数-$d$スパイクテンソルモデルについて検討する。
検討したモデルの解析は、等価なスパイクされた対称テクシットブロック-ワイドランダム行列の解析に起因していることを示す。
論文 参考訳(メタデータ) (2021-12-23T04:05:01Z) - Understanding Deflation Process in Over-parametrized Tensor
Decomposition [17.28303004783945]
過度にパラメータ化されたテンソル分解問題における勾配流のトレーニング力学について検討する。
経験的に、このようなトレーニングプロセスは、まず大きなコンポーネントに適合し、次に小さなコンポーネントを発見する。
論文 参考訳(メタデータ) (2021-06-11T18:51:36Z) - Scaling and Scalability: Provable Nonconvex Low-Rank Tensor Estimation
from Incomplete Measurements [30.395874385570007]
基本的な課題は、高度に不完全な測定からテンソルを忠実に回収することである。
タッカー分解におけるテンソル因子を直接回復するアルゴリズムを開発した。
2つの正準問題に対する基底真理テンソルの線形独立率で確実に収束することを示す。
論文 参考訳(メタデータ) (2021-04-29T17:44:49Z) - Robust Tensor Principal Component Analysis: Exact Recovery via
Deterministic Model [5.414544833902815]
本稿では,ロバストテンソル主成分分析法(RTPCA)を提案する。
これは最近開発されたテンソルテンソル積とテンソル特異値分解(t-SVD)に基づいている。
論文 参考訳(メタデータ) (2020-08-05T16:26:10Z) - Uncertainty quantification for nonconvex tensor completion: Confidence
intervals, heteroscedasticity and optimality [92.35257908210316]
本研究では,不完全かつ破損した観測によって与えられる低ランクテンソルを推定する問題について検討する。
改善不可能なレートをell-2$の精度で達成できることが分かりました。
論文 参考訳(メタデータ) (2020-06-15T17:47:13Z) - Supervised Learning for Non-Sequential Data: A Canonical Polyadic
Decomposition Approach [85.12934750565971]
特徴相互作用の効率的なモデリングは、非順序的タスクに対する教師あり学習の基盤となる。
この問題を緩和するため、モデルパラメータをテンソルとして暗黙的に表現することが提案されている。
表現性を向上するため,任意の高次元特徴ベクトルに特徴写像を適用できるようにフレームワークを一般化する。
論文 参考訳(メタデータ) (2020-01-27T22:38:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。