論文の概要: Multi-Step Prediction in Linearized Latent State Spaces for
Representation Learning
- arxiv url: http://arxiv.org/abs/2209.01127v1
- Date: Fri, 2 Sep 2022 15:37:04 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-05 12:01:50.846830
- Title: Multi-Step Prediction in Linearized Latent State Spaces for
Representation Learning
- Title(参考訳): 表現学習のための線形潜在状態空間のマルチステップ予測
- Authors: A. Tytarenko
- Abstract要約: 本手法は, 劇的なモデル変化を伴わずにE2Cより優れていることを示す。
実験的なエビデンスとして, ms-E2C法を多段階予測することで, より優れた潜在状態空間を学習できることが示唆された。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, we derive a novel method as a generalization over LCEs such as
E2C. The method develops the idea of learning a locally linear state space, by
adding a multi-step prediction, thus allowing for more explicit control over
the curvature. We show, that the method outperforms E2C without drastic model
changes which come with other works, such as PCC and P3C. We discuss the
relation between E2C and the presented method and derived update equations. We
provide empirical evidence, which suggests that by considering the multi-step
prediction our method - ms-E2C - allows to learn much better latent state
spaces in terms of curvature and next state predictability. Finally, we also
discuss certain stability challenges we encounter with multi-step predictions
and the ways to mitigate them.
- Abstract(参考訳): 本稿では,E2C などの LCE に対する一般化として,新しい手法を導出する。
本手法は,多段階予測を付加することで局所線形状態空間を学習し,曲率をより明示的に制御する手法である。
提案手法はPCCやP3Cといった他の研究にともなう劇的なモデル変化を伴わずにE2Cより優れていることを示す。
本稿では,E2Cと提案手法の関係と得られた更新方程式について述べる。
我々は,マルチステップ予測を考えることで,曲率と次の状態予測可能性の観点から,より優れた潜在状態空間を学習できることを示唆する実証的証拠を提供する。
最後に,マルチステップ予測に遭遇する安定性の課題と対策について考察する。
関連論文リスト
- Guaranteed Conservation of Momentum for Learning Particle-based Fluid
Dynamics [96.9177297872723]
本稿では,学習物理シミュレーションにおける線形運動量を保証する新しい手法を提案する。
我々は、強い制約で運動量の保存を強制し、反対称的な連続的な畳み込み層を通して実現する。
提案手法により,学習シミュレータの物理的精度を大幅に向上させることができる。
論文 参考訳(メタデータ) (2022-10-12T09:12:59Z) - Primal-dual regression approach for Markov decision processes with
general state and action space [0.30458514384586394]
我々は,有限時間MDPを一般状態と行動空間で解くための回帰に基づく原始双対マーチンゲールアプローチを開発した。
その結果,提案手法は値関数の高次および低次偏差近似の構築を可能にし,最適ポリシに対する厳密な近似を提供する。
論文 参考訳(メタデータ) (2022-10-01T11:48:22Z) - Embed to Control Partially Observed Systems: Representation Learning
with Provable Sample Efficiency [133.16370011229776]
部分的に観察されたマルコフ決定過程(POMDP)における強化学習は2つの課題に直面している。
しばしば、未来を予測するのに完全な歴史を要し、地平線と指数関数的にスケールするサンプルの複雑さを誘導する。
本稿では,2段階の表現を最適化しながら学習するETC(Embed to Control)という強化学習アルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-05-26T16:34:46Z) - Time varying regression with hidden linear dynamics [74.9914602730208]
線形力学系に従って未知のパラメータが進化することを前提とした時間変化線形回帰モデルを再検討する。
反対に、基礎となる力学が安定である場合、このモデルのパラメータは2つの通常の最小二乗推定と組み合わせることで、データから推定できることが示される。
論文 参考訳(メタデータ) (2021-12-29T23:37:06Z) - Likelihood-Free Inference in State-Space Models with Unknown Dynamics [71.94716503075645]
本研究では、状態空間モデルにおいて、観測をシミュレートすることしかできず、遷移ダイナミクスが不明な潜在状態の推測と予測を行う手法を提案する。
本研究では,限られた数のシミュレーションで状態予測と状態予測を行う手法を提案する。
論文 参考訳(メタデータ) (2021-11-02T12:33:42Z) - Self-Supervised Hybrid Inference in State-Space Models [0.0]
我々は、潜在空間における非線形高階マルコフ連鎖を許容する状態空間モデルにおいて近似推論を行う。
生成モデルや監督のパラメータ化を、未破損の観測や真理潜伏状態による追加のパラメータ化に頼ってはいない。
カオスロレンツシステムにおいて,完全教師付きアプローチと比較して競合的な結果を得るとともに,変分推論に基づく手法よりも優れることを示す。
論文 参考訳(メタデータ) (2021-07-28T13:26:14Z) - On projection methods for functional time series forecasting [0.0]
関数時系列(FTS)予測のための2つの非パラメトリック手法
一段階の予測と動的更新の両方に対処する。
これらの方法は、シミュレーションデータ、日々の電力需要、NOx排出に適用される。
論文 参考訳(メタデータ) (2021-05-10T14:24:38Z) - Reservoir Computing as a Tool for Climate Predictability Studies [0.0]
我々は、Reservoir Computingが線形逆モデリングアプローチの予測スキルを改善する代替非線形アプローチを提供することを示す。
RC手法の幅広い条件に対する予測能力の向上は、この機械学習技術が気候予測可能性研究に有効である可能性を示唆している。
論文 参考訳(メタデータ) (2021-02-24T22:22:59Z) - GELATO: Geometrically Enriched Latent Model for Offline Reinforcement
Learning [54.291331971813364]
オフライン強化学習アプローチは、近近法と不確実性認識法に分けられる。
本研究では,この2つを潜在変動モデルに組み合わせることのメリットを実証する。
提案したメトリクスは、分布サンプルのアウトの品質と、データ内のサンプルの不一致の両方を測定します。
論文 参考訳(メタデータ) (2021-02-22T19:42:40Z) - Reintroducing Straight-Through Estimators as Principled Methods for
Stochastic Binary Networks [85.94999581306827]
2重みとアクティベーションを持つニューラルネットワークのトレーニングは、勾配の欠如と離散重みよりも最適化が難しいため、難しい問題である。
多くの実験結果が経験的ストレートスルー(ST)アプローチで達成されている。
同時に、ST法はベルヌーイ重みを持つバイナリネットワーク(SBN)モデルにおける推定子として真に導出することができる。
論文 参考訳(メタデータ) (2020-06-11T23:58:18Z) - Bayesian inference of chaotic dynamics by merging data assimilation,
machine learning and expectation-maximization [0.0]
我々は、高次元カオス力学を再構築するために、データ同化と機械学習を組み合わせる方法を示す。
我々は,異なる識別可能性を持つ2つの関連する低次カオスモデルに対して,そのアプローチを数値的および成功裏に検証した。
論文 参考訳(メタデータ) (2020-01-17T12:46:26Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。