論文の概要: Generalized Canonical Polyadic Tensor Decompositions with General Symmetry
- arxiv url: http://arxiv.org/abs/2601.05335v1
- Date: Thu, 08 Jan 2026 19:27:52 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-12 17:41:49.751407
- Title: Generalized Canonical Polyadic Tensor Decompositions with General Symmetry
- Title(参考訳): 一般対称性を持つ一般カノニカルポリアディックテンソル分解
- Authors: Alex Mulrooney, David Hong,
- Abstract要約: 一般化CP(GCP)分解は、一般損失関数を許容することによってこのアプローチを一般化する。
我々は、一般的な対称性の形式を可能にする対称GCP(SymGCP)分解を開発する。
合成データと実データの両方について様々な実験を行い,提案したSymGCPアルゴリズムの有用性を実証する。
- 参考スコア(独自算出の注目度): 1.9766522384767224
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Canonical Polyadic (CP) tensor decomposition is a workhorse algorithm for discovering underlying low-dimensional structure in tensor data. This is accomplished in conventional CP decomposition by fitting a low-rank tensor to data with respect to the least-squares loss. Generalized CP (GCP) decompositions generalize this approach by allowing general loss functions that can be more appropriate, e.g., to model binary and count data or to improve robustness to outliers. However, GCP decompositions do not explicitly account for any symmetry in the tensors, which commonly arises in modern applications. For example, a tensor formed by stacking the adjacency matrices of a dynamic graph over time will naturally exhibit symmetry along the two modes corresponding to the graph nodes. In this paper, we develop a symmetric GCP (SymGCP) decomposition that allows for general forms of symmetry, i.e., symmetry along any subset of the modes. SymGCP accounts for symmetry by enforcing the corresponding symmetry in the decomposition. We derive gradients for SymGCP that enable its efficient computation via all-at-once optimization with existing tensor kernels. The form of the gradients also leads to various stochastic approximations that enable us to develop stochastic SymGCP algorithms that can scale to large tensors. We demonstrate the utility of the proposed SymGCP algorithms with a variety of experiments on both synthetic and real data.
- Abstract(参考訳): カノニカルポリアディクス(CP)テンソル分解(英: Canonical Polyadic tensor decomposition)は、テンソルデータ中の下層の低次元構造を発見するためのワークホースアルゴリズムである。
これは、最小二乗損失に関するデータに低ランクテンソルを組み込むことにより、従来のCP分解において達成される。
一般化されたCP(GCP)分解は、例えば、バイナリをモデル化してデータをカウントしたり、外れ値に対する堅牢性を改善するなど、より適切な一般的な損失関数を許容することによって、このアプローチを一般化する。
しかし、GCP分解はテンソルの対称性を明示的に説明していない。
例えば、動的グラフの隣接行列を時間をかけて積み重ねたテンソルは、グラフノードに対応する2つのモードに沿って自然に対称性を示す。
本稿では、対称性の一般的な形式、すなわち、モードの任意の部分集合に沿った対称性を可能にする対称GCP(SymGCP)分解を開発する。
SymGCPは、分解において対応する対称性を強制することによって対称性を説明できる。
既存のテンソルカーネルを用いたオール・アット・オンス最適化による効率的な計算を可能にするSymGCPの勾配を導出する。
勾配の形式はまた、様々な確率近似をもたらし、大きなテンソルにスケール可能な確率的SymGCPアルゴリズムの開発を可能にします。
合成データと実データの両方について様々な実験を行い,提案したSymGCPアルゴリズムの有用性を実証する。
関連論文リスト
- Low-Rank Tensor Recovery via Variational Schatten-p Quasi-Norm and Jacobian Regularization [49.85875869048434]
暗黙的神経表現のためのニューラルネットワークによりパラメータ化されたCPベースの低ランクテンソル関数を提案する。
本研究では、スペーサーCP分解を実現するために、冗長なランク1成分に変分Schatten-p quasi-normを導入する。
滑らか性のために、ヤコビアンとハッチンソンのトレース推定器のスペクトルノルムに基づく正規化項を提案する。
論文 参考訳(メタデータ) (2025-06-27T11:23:10Z) - sparseGeoHOPCA: A Geometric Solution to Sparse Higher-Order PCA Without Covariance Estimation [8.802387139798808]
本稿では,高次主成分分析(SHOPCA)のための新しいフレームワークを提案する。
本稿では,SparseGeoHOPが高次元画像設定とImageNet上でサポートされていることを示す。
論文 参考訳(メタデータ) (2025-06-10T10:30:48Z) - Deep Learning Symmetries and Their Lie Groups, Algebras, and Subalgebras
from First Principles [55.41644538483948]
ラベル付きデータセットに存在する連続した対称性群の検出と同定のためのディープラーニングアルゴリズムを設計する。
完全に接続されたニューラルネットワークを用いて、変換対称性と対応するジェネレータをモデル化する。
また,Lie群とその性質の数学的研究に機械学習アプローチを使うための扉を開く。
論文 参考訳(メタデータ) (2023-01-13T16:25:25Z) - Learning Graphical Factor Models with Riemannian Optimization [70.13748170371889]
本稿では,低ランク構造制約下でのグラフ学習のためのフレキシブルなアルゴリズムフレームワークを提案する。
この問題は楕円分布のペナルティ化された最大推定値として表される。
楕円モデルによく適合する正定行列と定ランクの正半定行列のジオメトリを利用する。
論文 参考訳(メタデータ) (2022-10-21T13:19:45Z) - NAG-GS: Semi-Implicit, Accelerated and Robust Stochastic Optimizer [45.47667026025716]
2つの重要な要素に依存した、新しく、堅牢で、加速された反復を提案する。
NAG-GSと呼ばれる手法の収束と安定性は、まず広範に研究されている。
我々は、NAG-arityが、重量減衰を伴う運動量SGDや機械学習モデルのトレーニングのためのAdamWといった最先端の手法と競合していることを示す。
論文 参考訳(メタデータ) (2022-09-29T16:54:53Z) - Hybrid Model-based / Data-driven Graph Transform for Image Coding [54.31406300524195]
予測内残差ブロックを符号化するハイブリッドモデルベース/データ駆動方式を提案する。
変換行列の最初の$K$固有ベクトルは、安定性のための非対称離散正弦変換(ADST)のような統計モデルから導かれる。
WebPをベースライン画像として使用することにより、我々のハイブリッドグラフ変換は、デフォルトの離散コサイン変換(DCT)よりもエネルギーの圧縮が良く、KLTよりも安定性がよいことを示す。
論文 参考訳(メタデータ) (2022-03-02T15:36:44Z) - 2D+3D facial expression recognition via embedded tensor manifold
regularization [16.98176664818354]
2D+3次元表情認識(FERETMR)のための埋め込みテンソル多様体正規化による新しい手法を提案する。
定常点の観点から一階最適条件を確立し、収束解析によるブロック座標降下(BCD)アルゴリズムを設計する。
BU-3DFEデータベースとBosphorusデータベースの数値計算結果から,提案手法の有効性が示された。
論文 参考訳(メタデータ) (2022-01-29T06:11:00Z) - Streaming Generalized Canonical Polyadic Tensor Decompositions [0.0]
我々は、ストリーミングデータの一般化正準ポリアディックテンソル分解を計算するために、オンラインGCPと呼ぶ方法を開発した。
ストリーミングの場合、テンソルデータは時間とともに徐々に観察され、アルゴリズムは事前データへの限られたアクセスでGCPの分解を漸進的に更新する必要がある。
論文 参考訳(メタデータ) (2021-10-27T15:26:24Z) - Tensor Principal Component Analysis in High Dimensional CP Models [3.553493344868413]
軽度不整合条件下での理論的保証を考慮したテンソルCP分解のための新しいアルゴリズムを提案する。
複合PCAは、主成分又は特異値分解を2回施し、まずテンソルデータの展開行列に施して特異ベクトルを得る。
提案手法は, 既存の手法に比べて, 提案手法の実用的優位性を示すものである。
論文 参考訳(メタデータ) (2021-08-10T03:24:32Z) - Alternating minimization algorithms for graph regularized tensor
completion [8.26185178671935]
我々は、低ランクテンソル完備化(LRTC)に対するカノニカルポリアディック(CP)分解法を考える。
グラフ正規化の使用にはLRTCの学習精度のメリットが伴うが、同時に結合グラフラプラシア語を誘導する。
基礎となるCP分解モデルにおけるブロック構造を利用して, 効率の良い同期最小化アルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-08-28T23:20:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。