論文の概要: Quantum-inspired algorithm applied to extreme learning
- arxiv url: http://arxiv.org/abs/2209.12452v1
- Date: Mon, 26 Sep 2022 06:49:53 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-25 03:10:36.341824
- Title: Quantum-inspired algorithm applied to extreme learning
- Title(参考訳): 量子インスパイアアルゴリズムのエクストリームラーニングへの応用
- Authors: Iori Takeda, Souichi Takahira, Kosuke Mitarai, Keisuke Fujii
- Abstract要約: 量子インスパイアされた特異値分解を極端な学習フレームワークに適用する。
スピードアップは、それらのノルムに従って行列要素の効率的なサンプリングによって可能である。
この研究は量子インスパイアされたアルゴリズムの実用化に向けた第一歩である。
- 参考スコア(独自算出の注目度): 0.6181093777643575
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Quantum-inspired singular value decomposition (SVD) is a technique to perform
SVD in logarithmic time with respect to the dimension of a matrix, given access
to the matrix embedded in a segment-tree data structure. The speedup is
possible through the efficient sampling of matrix elements according to their
norms. Here, we apply it to extreme learning which is a machine learning
framework that performs linear regression using random feature vectors
generated through a random neural network. The extreme learning is suited for
the application of quantum-inspired SVD in that it first requires transforming
each data to a random feature during which we can construct the data structure
with a logarithmic overhead with respect to the number of data. We implement
the algorithm and observe that it works order-of-magnitude faster than the
exact SVD when we use high-dimensional feature vectors. However, we also
observe that, for random features generated by random neural networks, we can
replace the norm-based sampling in the quantum-inspired algorithm with uniform
sampling to obtain the same level of test accuracy due to the uniformity of the
matrix in this case. The norm-based sampling becomes effective for more
non-uniform matrices obtained by optimizing the feature mapping. It implies the
non-uniformity of matrix elements is a key property of the quantum-inspired
SVD. This work is a first step toward the practical application of the
quantum-inspired algorithm.
- Abstract(参考訳): SVD(Quantum-inspired singular value decomposition)は、セグメントツリーデータ構造に埋め込まれた行列へのアクセスを前提として、行列の次元に関する対数時間でSVDを実行する技術である。
スピードアップは、行列要素のノルムに従って効率的なサンプリングによって可能となる。
本稿では,ランダムニューラルネットワークによって生成されたランダム特徴ベクトルを用いて線形回帰を行う機械学習フレームワークであるextreme learningに適用する。
極端な学習は、量子インスパイアされたsvdの応用に適しており、まず各データをランダムな特徴に変換し、データ数に関して対数的なオーバーヘッドを持つデータ構造を構築する必要がある。
提案アルゴリズムは,高次元特徴ベクトルを用いた場合,精度の高いSVDよりも高速に動作することを示す。
しかし,ランダムニューラルネットワークが生成するランダムな特徴に対して,量子インスパイアされたアルゴリズムのノルムベースサンプリングを一様サンプリングで置き換えることで,行列の均一性によって同じレベルのテスト精度が得られることを観測した。
ノルムに基づくサンプリングは、特徴写像を最適化したより一様でない行列に対して有効である。
これは行列要素の非一様性が量子に着想を得たSVDの重要な性質であることを意味する。
この研究は量子インスパイアされたアルゴリズムの実用化に向けた第一歩である。
関連論文リスト
- Tensor networks based quantum optimization algorithm [0.0]
最適化において、よく知られた古典的アルゴリズムの1つは電力反復である。
我々はこの落とし穴を回避するために量子化を提案する。
我々の手法はインスタンス非依存となり、量子コンピューティングの枠組みの中でブラックボックス最適化に対処することができる。
論文 参考訳(メタデータ) (2024-04-23T13:49:11Z) - An Efficient Algorithm for Clustered Multi-Task Compressive Sensing [60.70532293880842]
クラスタ化マルチタスク圧縮センシングは、複数の圧縮センシングタスクを解決する階層モデルである。
このモデルに対する既存の推論アルゴリズムは計算コストが高く、高次元ではうまくスケールしない。
本稿では,これらの共分散行列を明示的に計算する必要をなくし,モデル推論を大幅に高速化するアルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-09-30T15:57:14Z) - Qubit-Efficient Randomized Quantum Algorithms for Linear Algebra [3.4137115855910767]
本稿では,行列関数からのサンプリング作業のためのランダム化量子アルゴリズムのクラスを提案する。
量子ビットの使用は純粋にアルゴリズムであり、量子データ構造には追加の量子ビットは必要ない。
論文 参考訳(メタデータ) (2023-02-03T17:22:49Z) - Quantum Semi-Supervised Kernel Learning [4.726777092009554]
本稿では,セミスーパービジョンカーネル支援ベクトルマシンを学習するための量子機械学習アルゴリズムを提案する。
完全教師付き量子LS-SVMと同じスピードアップを維持していることを示す。
論文 参考訳(メタデータ) (2022-04-22T13:39:55Z) - A quantum algorithm for solving eigenproblem of the Laplacian matrix of
a fully connected weighted graph [4.045204834863644]
完全連結重み付きグラフのラプラシア行列の固有確率を解くための効率的な量子アルゴリズムを提案する。
具体的には,ブロック符号化フレームワークに基づく最適ハミルトンシミュレーション手法を採用する。
また、このアルゴリズムは対称(非対称)正規化ラプラス行列の固有確率を解くために拡張可能であることを示す。
論文 参考訳(メタデータ) (2022-03-28T02:24:08Z) - Learning in High-Dimensional Feature Spaces Using ANOVA-Based Fast
Matrix-Vector Multiplication [0.0]
カーネル行列は一般に密度が高く大規模である。特徴空間の次元によっては、合理的な時間における全てのエントリの計算さえも難しい課題となる。
そこで我々は,ANOVAカーネルを用いて低次元の特徴空間に基づいて複数のカーネルを構築し,行列ベクトル積を実現する高速アルゴリズムを提案する。
特徴グループ化アプローチに基づいて,カーネルリッジ回帰と事前条件付き共役勾配解法を選択する学習手法に,高速な行列ベクトル積を組み込む方法を示す。
論文 参考訳(メタデータ) (2021-11-19T10:29:39Z) - Unfolding Projection-free SDP Relaxation of Binary Graph Classifier via
GDPA Linearization [59.87663954467815]
アルゴリズムの展開は、モデルベースのアルゴリズムの各イテレーションをニューラルネットワーク層として実装することにより、解釈可能で類似のニューラルネットワークアーキテクチャを生成する。
本稿では、Gershgorin disc perfect alignment (GDPA)と呼ばれる最近の線形代数定理を利用して、二進グラフの半定値プログラミング緩和(SDR)のためのプロジェクションフリーアルゴリズムをアンロールする。
実験結果から,我々の未学習ネットワークは純粋モデルベースグラフ分類器よりも優れ,純粋データ駆動ネットワークに匹敵する性能を示したが,パラメータははるかに少なかった。
論文 参考訳(メタデータ) (2021-09-10T07:01:15Z) - Robust 1-bit Compressive Sensing with Partial Gaussian Circulant
Matrices and Generative Priors [54.936314353063494]
我々は,ロバストな1ビット圧縮センシングのための相関に基づく最適化アルゴリズムのリカバリ保証を提供する。
我々は,実用的な反復アルゴリズムを用いて,画像データセットの数値実験を行い,結果の相関付けを行う。
論文 参考訳(メタデータ) (2021-08-08T05:28:06Z) - A quantum algorithm for training wide and deep classical neural networks [72.2614468437919]
勾配勾配勾配による古典的トレーサビリティに寄与する条件は、量子線形系を効率的に解くために必要な条件と一致することを示す。
MNIST画像データセットがそのような条件を満たすことを数値的に示す。
我々は、プールを用いた畳み込みニューラルネットワークのトレーニングに$O(log n)$の実証的証拠を提供する。
論文 参考訳(メタデータ) (2021-07-19T23:41:03Z) - Sparse PCA via $l_{2,p}$-Norm Regularization for Unsupervised Feature
Selection [138.97647716793333]
再構成誤差を$l_2,p$ノルム正規化と組み合わせることで,単純かつ効率的な特徴選択手法を提案する。
提案する非教師付きモデルを解くための効率的な最適化アルゴリズムを提案し,アルゴリズムの収束と計算の複雑さを理論的に解析する。
論文 参考訳(メタデータ) (2020-12-29T04:08:38Z) - Optimal Iterative Sketching with the Subsampled Randomized Hadamard
Transform [64.90148466525754]
最小二乗問題に対する反復スケッチの性能について検討する。
本研究では、Haar行列とランダム化されたHadamard行列の収束速度が同一であることを示し、ランダムなプロジェクションを経時的に改善することを示した。
これらの手法は、ランダム化次元還元を用いた他のアルゴリズムにも適用することができる。
論文 参考訳(メタデータ) (2020-02-03T16:17:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。