論文の概要: Reinforcement Learning of Musculoskeletal Control from Functional
Simulations
- arxiv url: http://arxiv.org/abs/2007.06669v1
- Date: Mon, 13 Jul 2020 20:20:01 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-11 00:54:26.583022
- Title: Reinforcement Learning of Musculoskeletal Control from Functional
Simulations
- Title(参考訳): 機能シミュレーションによる筋骨格制御の強化学習
- Authors: Emanuel Joos, Fabien P\'ean, Orcun Goksel
- Abstract要約: 本研究は、深部強化学習(DRL)に基づく逆動力学制御器を用いて、人間の肩の生体力学的モデルによる筋活動の制御を訓練する。
その結果,無作為に発生する角軌道に追従する作業に対して,肩下降の単一軸運動制御を行うことができた。
- 参考スコア(独自算出の注目度): 3.94716580540538
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: To diagnose, plan, and treat musculoskeletal pathologies, understanding and
reproducing muscle recruitment for complex movements is essential. With muscle
activations for movements often being highly redundant, nonlinear, and time
dependent, machine learning can provide a solution for their modeling and
control for anatomy-specific musculoskeletal simulations. Sophisticated
biomechanical simulations often require specialized computational environments,
being numerically complex and slow, hindering their integration with typical
deep learning frameworks. In this work, a deep reinforcement learning (DRL)
based inverse dynamics controller is trained to control muscle activations of a
biomechanical model of the human shoulder. In a generalizable end-to-end
fashion, muscle activations are learned given current and desired
position-velocity pairs. A customized reward functions for trajectory control
is introduced, enabling straightforward extension to additional muscles and
higher degrees of freedom. Using the biomechanical model, multiple episodes are
simulated on a cluster simultaneously using the evolving neural models of the
DRL being trained. Results are presented for a single-axis motion control of
shoulder abduction for the task of following randomly generated angular
trajectories.
- Abstract(参考訳): 筋骨格病理を診断、計画、治療するためには、複雑な運動に対する筋リクルートの理解、再生が不可欠である。
運動に対する筋肉の活性化は、しばしば非常に冗長で非線形で時間に依存するため、機械学習は解剖学固有の筋骨格シミュレーションのモデリングと制御のためのソリューションを提供することができる。
高度な生体力学的シミュレーションは、数値的に複雑で遅く、典型的なディープラーニングフレームワークとの統合を妨げる、特別な計算環境を必要とすることが多い。
本研究は、深部強化学習(DRL)に基づく逆動力学制御器を用いて、人間の肩の生体力学的モデルによる筋活動の制御を訓練する。
一般化可能なエンド・ツー・エンドの手法では、電流と所望の位置速度対から筋肉の活性化が学習される。
軌道制御のためのカスタマイズされた報酬関数を導入し、筋肉への直接的な拡張とより高い自由度を可能にした。
生体力学モデルを用いて、訓練中のDRLの進化的ニューラルモデルを用いて、複数のエピソードをクラスタ上で同時にシミュレーションする。
その結果,無作為に発生する角軌道に追従する作業に対して,肩下降の単一軸運動制御を行うことができた。
関連論文リスト
- Muscles in Time: Learning to Understand Human Motion by Simulating Muscle Activations [64.98299559470503]
マッスル・イン・タイム (MinT) は、大規模な人工筋肉活性化データセットである。
227名の被験者と402名の模擬筋骨格をカバーする9時間以上のシミュレーションデータを含んでいる。
ヒトのポーズ配列からニューラルネットワークを用いた筋活動量推定の結果を示す。
論文 参考訳(メタデータ) (2024-10-31T18:28:53Z) - MS-MANO: Enabling Hand Pose Tracking with Biomechanical Constraints [50.61346764110482]
筋骨格系と学習可能なパラメトリックハンドモデルMANOを統合し,MS-MANOを作成する。
このモデルは骨格系を駆動する筋肉と腱の力学をエミュレートし、結果として生じるトルク軌跡に生理学的に現実的な制約を与える。
また,マルチ層パーセプトロンネットワークによる初期推定ポーズを改良する,ループ式ポーズ改善フレームワークBioPRを提案する。
論文 参考訳(メタデータ) (2024-04-16T02:18:18Z) - A Multi-Grained Symmetric Differential Equation Model for Learning Protein-Ligand Binding Dynamics [73.35846234413611]
薬物発見において、分子動力学(MD)シミュレーションは、結合親和性を予測し、輸送特性を推定し、ポケットサイトを探索する強力なツールを提供する。
我々は,数値MDを容易にし,タンパク質-リガンド結合ダイナミクスの正確なシミュレーションを提供する,最初の機械学習サロゲートであるNeuralMDを提案する。
従来の数値MDシミュレーションと比較して1K$times$ Speedupを実現することにより,NeuralMDの有効性と有効性を示す。
論文 参考訳(メタデータ) (2024-01-26T09:35:17Z) - Natural and Robust Walking using Reinforcement Learning without
Demonstrations in High-Dimensional Musculoskeletal Models [29.592874007260342]
人間は複雑な自然環境の中を歩く頑丈な二足歩行で運動します。
神経系が筋骨格の冗長性をどのように解決し、多目的制御問題を解決するかは、まだ完全には分かっていない。
論文 参考訳(メタデータ) (2023-09-06T13:20:31Z) - MyoSuite -- A contact-rich simulation suite for musculoskeletal motor
control [7.856809409051587]
myoSuiteは、生理学的に正確な肘、手首、手首の生体力学的モデルで、物理的な接触機能を備えている。
簡単な姿勢制御から熟練した手-物体間相互作用まで、さまざまな運動制御課題を提供する。
論文 参考訳(メタデータ) (2022-05-26T20:11:23Z) - From Motion to Muscle [0.0]
筋活動は, 位置, 速度, 加速度などの運動特徴に基づいて人工的に生成できることを示す。
このモデルは、以前に訓練された運動に対して顕著な精度を達成し、これまで訓練されていない新しい運動に対して非常に高い精度を維持している。
論文 参考訳(メタデータ) (2022-01-27T13:30:17Z) - OstrichRL: A Musculoskeletal Ostrich Simulation to Study Bio-mechanical
Locomotion [8.849771760994273]
MuJoCoシミュレータに基づくオストリッチの3次元筋骨格シミュレーションを作成した。
このモデルは、実際の筋肉データを集めるために使用されるCTスキャンと解剖に基づいている。
また,レファレンス・モーション・トラッキングや,ネック付きリーチ・タスクなど,一連の強化学習タスクも提供する。
論文 参考訳(メタデータ) (2021-12-11T19:58:11Z) - Deep Bayesian Active Learning for Accelerating Stochastic Simulation [74.58219903138301]
Interactive Neural Process(INP)は、シミュレーションとアクティブな学習アプローチのためのディープラーニングフレームワークである。
能動的学習のために,NPベースモデルの潜時空間で計算された新しい取得関数Latent Information Gain (LIG)を提案する。
その結果,STNPは学習環境のベースラインを上回り,LIGは能動学習の最先端を達成していることがわかった。
論文 参考訳(メタデータ) (2021-06-05T01:31:51Z) - Learning Control Policies for Imitating Human Gaits [2.28438857884398]
人間はウォーキング、ランニング、ジャンプといった運動を最も効率的な方法で行っており、このプロジェクトの動機の源となっている。
骨格と筋骨格の人間モデルは,矢状面の運動に対して考慮された。
モデルフリー強化学習アルゴリズムは、逆ダイナミクス制御動作の最適化に用いられた。
論文 参考訳(メタデータ) (2021-05-15T16:33:24Z) - Continuous Learning and Adaptation with Membrane Potential and
Activation Threshold Homeostasis [91.3755431537592]
本稿では,MPATH(Membrane Potential and Activation Threshold Homeostasis)ニューロンモデルを提案する。
このモデルにより、ニューロンは入力が提示されたときに自動的に活性を調節することで動的平衡の形式を維持することができる。
実験は、モデルがその入力から適応し、継続的に学習する能力を示す。
論文 参考訳(メタデータ) (2021-04-22T04:01:32Z) - GEM: Group Enhanced Model for Learning Dynamical Control Systems [78.56159072162103]
サンプルベースの学習が可能な効果的なダイナミクスモデルを構築します。
リー代数ベクトル空間上のダイナミクスの学習は、直接状態遷移モデルを学ぶよりも効果的であることを示す。
この研究は、ダイナミクスの学習とリー群の性質の関連性を明らかにし、新たな研究の方向への扉を開く。
論文 参考訳(メタデータ) (2021-04-07T01:08:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。