論文の概要: Spectral Analysis for Sparse Matrix Computation: Insights and Potential
- arxiv url: http://arxiv.org/abs/2608.29362v1
- Date: Sat, 29 Aug 2026 16:50:03 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-01 18:31:30.943351
- Title: Spectral Analysis for Sparse Matrix Computation: Insights and Potential
- Title(参考訳): スパース行列計算のためのスペクトル解析:洞察とポテンシャル
- Abstract要約: 従来の空間統計学では捉えられないグローバルな構造的特徴をスペクトルシグネチャが明らかにする。
機械学習に基づくSpMVフォーマット選択にスペクトル特徴を取り入れた実験は、最先端の空間限定モデル上でのスペクトル分析の有用性を示す。
- 参考スコア(独自算出の注目度): 8.047900710704837
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Sparse computations are fundamental to scientific computing, graph analytics, and machine learning, yet their performance is highly sensitive to the diverse sparsity and patterns. This is because cache reuse, memory coalescing, and load balancing depend critically on the sparsity patterns. This work gives the first known exploration of the connections between sparse matrix computation and spectral analysis by treating sparse matrices as two-dimensional signals and analyzing their frequency-domain representations through Fast Fourier Transform. We show that spectral signatures uncover global structural characteristics that are not sufficiently captured by conventional spatial statistics and provide complementary information for understanding sparse computation performance. Experiments on incorporating spectral features into machine-learning-based SpMV format selection demonstrate the usefulness of such spectral analysis over a state-of-the-art spatial-only model. By uncovering the principled connections between spectral characteristics and sparse matrix computations, this work introduces a novel analytical perspective into sparse computation, and provides a new approach to enhancing the current sparse structure characterization and optimization. On pruned LLM decoding, adding spectral features improves kernel selection and yields 1.035--1.245$\times$ kernel speedups.
- Abstract(参考訳): スパース計算は科学計算、グラフ解析、機械学習の基本であるが、その性能は多様なスパース性やパターンに非常に敏感である。
これは、キャッシュの再利用、メモリの合体、ロードバランシングがスパーシティパターンに大きく依存するためです。
本研究は,スパース行列を二次元信号として扱い,その周波数領域表現を高速フーリエ変換により解析することにより,スパース行列計算とスペクトル解析の関連性を初めて明らかにするものである。
スペクトルシグネチャは,従来の空間統計学では十分に捉えられていないグローバルな構造特性を明らかにし,スパース計算性能を理解するための補完情報を提供する。
機械学習に基づくSpMVフォーマット選択にスペクトル特徴を取り入れた実験は、最先端の空間限定モデル上でのスペクトル分析の有用性を示す。
スペクトル特性とスパース行列計算の原理的関係を明らかにすることにより、スパース計算に新たな解析的視点を導入し、スパース構造のキャラクタリゼーションと最適化を強化する新しいアプローチを提供する。
プルーニングLDMデコーディングでは、スペクトル機能を追加することでカーネルの選択が改善し、1.035-1.245$\times$カーネルのスピードアップが得られる。
関連論文リスト
- Improved large-scale graph learning through ridge spectral sparsification [65.84577791298442]
分散ストリーミング環境におけるラプラシアンLの学習問題を考察する。
この設定では、L の分散表現を維持しながら、素早く、あるいはほぼ学習することは困難である。
本稿では, 有効抵抗の小さなサブセットを維持することにより, ラプラシアンを効率的に分散させる新しいアルゴリズムGSQUEAKを提案する。
論文 参考訳(メタデータ) (2026-04-22T00:49:31Z) - Learning to Discover Iterative Spectral Algorithms [46.39331984989963]
AutoSpecは、大規模数値線形代数の反復スペクトルアルゴリズムを発見するニューラルネットワークフレームワークである。
代用数値線形代数タスクの探索アルゴリズムにAutoSpecを適用した。
実世界の解法では、学習された手順は精度および/またはカウントの減少のオーダー・オブ・マグニチュードの改善をもたらす。
論文 参考訳(メタデータ) (2026-02-10T08:39:59Z) - Amortized Spectral Kernel Discovery via Prior-Data Fitted Network [0.0]
本稿では,事前学習したPFNのスペクトル発見を非結合的に行うための解釈可能性駆動型フレームワークを提案する。
我々は、PFNラプタントを明示的なスペクトル密度推定と対応する定常カーネルにマッピングするデコーダアーキテクチャを提案する。
これにより、最適化ベースのベースラインと比較して、推論時間のオーダー・オブ・マグニチュードが減少する。
論文 参考訳(メタデータ) (2026-01-29T13:51:26Z) - Spectral Geometry for Deep Learning: Compression and Hallucination Detection via Random Matrix Theory [0.0]
この論文は、両問題に対処するためにスペクトル幾何学とランダム行列理論に基づく統一的な枠組みを提案する。
最初のコントリビューションであるEigenTrackは、言語および視覚言語モデルにおける幻覚とアウト・オブ・ディストリビューションの振る舞いをリアルタイムに検出する手法である。
第2のコントリビューションであるRTT-KDは、情報的スペクトル成分を識別する原理的圧縮法である。
論文 参考訳(メタデータ) (2026-01-24T08:07:22Z) - Spectral Estimators for Multi-Index Models: Precise Asymptotics and Optimal Weak Recovery [21.414505380263016]
スペクトル推定器を用いて信号が分散する部分空間の復元に焦点をあてる。
我々の主な技術的貢献はスペクトル法の性能を正確に評価することである。
分析の結果,サンプルの複雑さが増大するにつれて固有値がスペクトルの大部分から逃れる相転移現象が明らかになった。
論文 参考訳(メタデータ) (2025-02-03T18:08:30Z) - Holistic Physics Solver: Learning PDEs in a Unified Spectral-Physical Space [54.13671100638092]
Holistic Physics Mixer (HPM) は、スペクトルと物理情報を統一された空間に統合するためのフレームワークである。
我々はHPMが精度と計算効率の両面で最先端の手法より一貫して優れていることを示す。
論文 参考訳(メタデータ) (2024-10-15T08:19:39Z) - Datacube segmentation via Deep Spectral Clustering [76.48544221010424]
拡張ビジョン技術は、しばしばその解釈に挑戦する。
データ立方体スペクトルの巨大な次元性は、その統計的解釈において複雑なタスクを生じさせる。
本稿では,符号化空間における教師なしクラスタリング手法の適用の可能性について検討する。
統計的次元削減はアドホック訓練(可変)オートエンコーダで行い、クラスタリング処理は(学習可能な)反復K-Meansクラスタリングアルゴリズムで行う。
論文 参考訳(メタデータ) (2024-01-31T09:31:28Z) - Hodge-Aware Contrastive Learning [101.56637264703058]
単純コンプレックスは、マルチウェイ依存によるデータのモデリングに有効である。
我々は、単純なデータを処理するための対照的な自己教師付き学習手法を開発した。
論文 参考訳(メタデータ) (2023-09-14T00:40:07Z) - ESSAformer: Efficient Transformer for Hyperspectral Image
Super-resolution [76.7408734079706]
単一ハイパースペクトル像超解像(単一HSI-SR)は、低分解能観測から高分解能ハイパースペクトル像を復元することを目的としている。
本稿では,1つのHSI-SRの繰り返し精製構造を持つESSA注目組込みトランスフォーマネットワークであるESSAformerを提案する。
論文 参考訳(メタデータ) (2023-07-26T07:45:14Z) - Quantum Algorithms for Data Representation and Analysis [68.754953879193]
機械学習におけるデータ表現のための固有problemsの解を高速化する量子手続きを提供する。
これらのサブルーチンのパワーと実用性は、主成分分析、対応解析、潜在意味解析のための入力行列の大きさのサブ線形量子アルゴリズムによって示される。
その結果、入力のサイズに依存しない実行時のパラメータは妥当であり、計算モデル上の誤差が小さいことが示され、競合的な分類性能が得られる。
論文 参考訳(メタデータ) (2021-04-19T00:41:43Z) - SF-GRASS: Solver-Free Graph Spectral Sparsification [16.313489255657203]
本研究では,新しいスペクトルグラフ粗化技術とグラフ信号処理技術を活用することで,スペクトルグラフスカラー化のための解法フリーアプローチ(SF-GRASS)を提案する。
提案手法は,様々な実世界の大規模グラフや回路網に対して,ほぼ直線時間で高品質なスペクトルスペーサーの階層を生成することができることを示す。
論文 参考訳(メタデータ) (2020-08-17T21:37:19Z) - Scalable Spectral Clustering with Nystrom Approximation: Practical and
Theoretical Aspects [1.6752182911522515]
本研究は、サンプリングされた点に関連付けられた類似度行列のスペクトル特性を利用して、精度と効率のトレードオフを制御したスペクトルクラスタリングアルゴリズムを提案する。
この研究の包括的な目標は、スペクトルクラスタリングを加速する将来の研究方向のための改善されたベースラインを提供することである。
論文 参考訳(メタデータ) (2020-06-25T15:10:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。