論文の概要: Discrete-time signatures and randomness in reservoir computing
- arxiv url: http://arxiv.org/abs/2010.14615v1
- Date: Thu, 17 Sep 2020 10:55:59 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-17 08:00:02.028812
- Title: Discrete-time signatures and randomness in reservoir computing
- Title(参考訳): 貯水池計算における離散時間符号とランダム性
- Authors: Christa Cuchiero, Lukas Gonon, Lyudmila Grigoryeva, Juan-Pablo Ortega,
and Josef Teichmann
- Abstract要約: 貯留層計算は、ランダムに選択されたリカレントニューラルネットワークと訓練された線形読み出し層で入出力系を近似する可能性である。
強い普遍的な貯水池システム(英語版)と呼ばれるものを構築することで、この現象に光が当たっている。
投射された貯水池システムの生成に必要な確率分布の明示表現を記述し、コミット近似誤差のバウンダリを提供する。
- 参考スコア(独自算出の注目度): 8.579665234755478
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: A new explanation of geometric nature of the reservoir computing phenomenon
is presented. Reservoir computing is understood in the literature as the
possibility of approximating input/output systems with randomly chosen
recurrent neural systems and a trained linear readout layer. Light is shed on
this phenomenon by constructing what is called strongly universal reservoir
systems as random projections of a family of state-space systems that generate
Volterra series expansions. This procedure yields a state-affine reservoir
system with randomly generated coefficients in a dimension that is
logarithmically reduced with respect to the original system. This reservoir
system is able to approximate any element in the fading memory filters class
just by training a different linear readout for each different filter. Explicit
expressions for the probability distributions needed in the generation of the
projected reservoir system are stated and bounds for the committed
approximation error are provided.
- Abstract(参考訳): 貯留層計算現象の幾何学的性質に関する新たな説明を行った。
貯留層計算は、ランダムに選択されたリカレントニューラルネットワークと訓練された線形読み出し層で入出力系を近似する可能性として文献で理解されている。
光は、ボルテラ級数展開を生成する状態空間系のランダム射影として強普遍的貯水池系と呼ばれるものを構築することでこの現象に当てはまる。
この方法では、元のシステムに対して対数的に減少する次元でランダムに生成された係数を持つ状態-アフィン貯水池系が得られる。
この貯水池システムは、異なるフィルタごとに異なる線形読み出しを訓練するだけで、フェージングメモリフィルタクラスの任意の要素を近似することができる。
投射された貯水池システムの生成に必要な確率分布の明示表現を記述し、コミット近似誤差のバウンダリを提供する。
関連論文リスト
- Stochastic Reservoir Computers [0.0]
貯水池計算では、貯水池のコンピュータ全体の異なる状態の数は、貯水池のハードウェアのサイズに比例して指数関数的にスケールすることができる。
ショットノイズは貯水池計算の性能に限界があるが,ノイズの影響が小さい場合,類似のハードウェアを持つ貯水池コンピュータに比べて性能が大幅に向上した。
論文 参考訳(メタデータ) (2024-05-20T21:26:00Z) - Universality of reservoir systems with recurrent neural networks [2.812750563066397]
貯水池システムは、貯水池が固定されている間、その線形読み出しを調整するだけで関数の集合を近似する。
ある種の関数を近似するために、RNN貯水池系の一様強普遍性と呼ぶものを示す。
論文 参考訳(メタデータ) (2024-03-04T09:59:11Z) - Reservoir computing with logistic map [0.0]
本稿では,仮想ノードを貯水池計算の貯水池として構築し,時間的・非時間的タスクを予測する手法を示す。
時間的タスクに対してはLorenz, Rossler, Hindmarsh-Roseの3つの非線形系を予測し, 高精度な非時間的タスクに対しては7位とした。
注目すべきは、ロジスティックマップがうまく機能し、実際の値や対象値に近いものを予測することである。
論文 参考訳(メタデータ) (2024-01-17T09:22:15Z) - Iterative Sketching for Secure Coded Regression [66.53950020718021]
分散線形回帰を高速化する手法を提案する。
具体的には、方程式の系の基礎をランダムに回転させ、次にサブサンプルブロックを回転させ、情報を同時に確保し、回帰問題の次元を小さくする。
論文 参考訳(メタデータ) (2023-08-08T11:10:42Z) - Machine learning in and out of equilibrium [58.88325379746631]
我々の研究は、統計物理学から適応したフォッカー・プランク法を用いて、これらの平行線を探索する。
我々は特に、従来のSGDでは平衡が切れている長期的限界におけるシステムの定常状態に焦点を当てる。
本稿では,ミニバッチの置き換えを伴わない新しいランゲヴィンダイナミクス(SGLD)を提案する。
論文 参考訳(メタデータ) (2023-06-06T09:12:49Z) - Bayesian Renormalization [68.8204255655161]
ベイズ統計的推論にインスパイアされた再正規化に対する完全情報理論的アプローチを提案する。
ベイズ再正規化の主な洞察は、フィッシャー計量が創発的RGスケールの役割を担う相関長を定義することである。
本研究では,ベイズ正規化方式が既存のデータ圧縮法やデータ生成法とどのように関係しているかを考察する。
論文 参考訳(メタデータ) (2023-05-17T18:00:28Z) - Optimization of a Hydrodynamic Computational Reservoir through Evolution [58.720142291102135]
我々は,スタートアップが開発中の流体力学系のモデルと,計算貯水池としてインターフェースする。
我々は、進化探索アルゴリズムを用いて、読み出し時間と入力を波の振幅や周波数にどのようにマッピングするかを最適化した。
この貯水池システムに進化的手法を適用することで、手作業パラメータを用いた実装と比較して、XNORタスクの分離性が大幅に向上した。
論文 参考訳(メタデータ) (2023-04-20T19:15:02Z) - Infinite-dimensional reservoir computing [9.152759278163954]
インプット/アウトプットシステムの新しい概念クラスに対して,貯留層計算の近似と一般化境界が証明された。
本研究の結果は,完全実装可能なリカレントニューラルネットワークに基づく学習アルゴリズムであり,コンバージェンス保証が保証されている。
論文 参考訳(メタデータ) (2023-04-02T08:59:12Z) - Dealing with Collinearity in Large-Scale Linear System Identification
Using Gaussian Regression [3.04585143845864]
複数の相互接続型動的システムからなるネットワークの推定について検討する。
我々は、任意のインパルス応答をゼロ平均ガウス過程の実現と見なすベイズ正規化フレームワークにキャストされた戦略を開発する。
我々はマルコフ連鎖モンテカルロスキームを設計し、コリナリティを効率的に扱うことでインパルス応答を後方に再構築する。
論文 参考訳(メタデータ) (2023-02-21T19:35:47Z) - The Separation Capacity of Random Neural Networks [78.25060223808936]
標準ガウス重みと一様分布バイアスを持つ十分に大きな2層ReLUネットワークは、この問題を高い確率で解くことができることを示す。
我々は、相互複雑性という新しい概念の観点から、データの関連構造を定量化する。
論文 参考訳(メタデータ) (2021-07-31T10:25:26Z) - Linear embedding of nonlinear dynamical systems and prospects for
efficient quantum algorithms [74.17312533172291]
有限非線形力学系を無限線型力学系(埋め込み)にマッピングする方法を述べる。
次に、有限線型系 (truncation) による結果の無限線型系を近似するアプローチを検討する。
論文 参考訳(メタデータ) (2020-12-12T00:01:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。