論文の概要: TMR-VLA:Vision-Language-Action Model for Magnetic Motion Control of Tri-leg Silicone-based Soft Robot
- arxiv url: http://arxiv.org/abs/2603.00420v1
- Date: Sat, 28 Feb 2026 02:39:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-03 19:50:56.182302
- Title: TMR-VLA:Vision-Language-Action Model for Magnetic Motion Control of Tri-leg Silicone-based Soft Robot
- Title(参考訳): TMR-VLA:三脚シリコーン型ソフトロボットの磁気運動制御のためのビジョン・ランゲージ・アクションモデル
- Authors: Ruijie Tang, Chi Kit Ng, Kaixuan Wu, Long Bai, Guankun Wang, Yiming Huang, Yupeng Wang, Hongliang Ren,
- Abstract要約: 我々は、より柔軟な歩行と多様な動きパターンを実現するために、多脚設計が可能な三脚磁気駆動型ソフトロボット(TMR)を開発した。
再構成可能なソフトロボットで作られたシリコンでは、ナビゲーション能力はシーケンシャルな動作に分けることができる。
TMR-VLAは,ハイブリッドモーションタイプを動作可能なトリグレッグ型磁気ソフトロボットのエンドツーエンドマルチモーダルシステムである。
- 参考スコア(独自算出の注目度): 16.083189520931363
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In-vivo environments, magnetically actuated soft robots offer advantages such as wireless operation and precise control, showing promising potential for painless detection and therapeutic procedures. We developed a trileg magnetically driven soft robot (TMR) whose multi-legged design enables more flexible gaits and diverse motion patterns. For the silicone made of reconfigurable soft robots, its navigation ability can be separated into sequential motions, namely squatting, rotation, lifting a leg, walking and so on. Its motion and behavior depend on its bending shapes. To bridge motion type description and specific low-level voltage control, we introduced TMR-VLA, an end-to-end multi-modal system for a trileg magnetic soft robot capable of performing hybrid motion types, which is promising for developing a navigation ability by adapting its shape to language-constrained motion types. The TMR-VLA deploys embodied endoluminal localization ability from EndoVLA, and fuses sequential frames and natural language commands as input. Low-level voltage output is generated based on the current observation state and specific motion type description. The result shows the TMR-VLA can predict how the voltage applied to TMR will change the dynamics of a silicon-made soft robot. The TMR-VLA reached a 74% average success rate.
- Abstract(参考訳): 生体内環境において、磁気駆動型ソフトロボットは、ワイヤレス操作や精密制御などの利点を提供し、痛みのない検出と治療の可能性を秘めている。
我々は、より柔軟な歩行と多様な動きパターンを実現するために、多脚設計が可能な三脚磁気駆動型ソフトロボット(TMR)を開発した。
再構成可能なソフトロボット製のシリコンでは、ナビゲーション能力はしゃがんだり回転したり、脚を持ち上げたり、歩いたりといったシーケンシャルな動作に分けることができる。
その動きと振舞は曲がりくねった形状に依存する。
動作型記述と特定の低レベル電圧制御を橋渡しするために,3脚型磁気ソフトロボットのエンドツーエンドマルチモーダルシステムであるTMR-VLAを導入し,その形状を言語制約された動作型に適応させることで,ナビゲーション能力の向上を約束する。
TMR-VLAは、EndoVLAから組み込みの内的ローカライゼーション機能をデプロイし、シーケンシャルフレームと自然言語コマンドを入力として融合する。
電流観察状態と特定動作型記述とに基づいて低レベル電圧出力を生成する。
その結果、TMR-VLAは、TMRに印加される電圧がシリコン製ソフトロボットのダイナミクスをどのように変化させるかを予測することができる。
TMR-VLAの平均成功率は74%に達した。
関連論文リスト
- EchoMotion: Unified Human Video and Motion Generation via Dual-Modality Diffusion Transformer [64.69014756863331]
本研究では,外見と人間の動作の同時分布をモデル化するフレームワークであるEchoMotionを紹介する。
また,ビデオトークンとモーショントークンの両方に3次元位置符号化を統一したMVS-RoPEを提案する。
以上の結果から,人間の動きを明示的に表現することは出現することであり,人間中心のビデオ生成のコヒーレンスと妥当性を著しく向上させることが判明した。
論文 参考訳(メタデータ) (2025-12-21T17:08:14Z) - MiVLA: Towards Generalizable Vision-Language-Action Model with Human-Robot Mutual Imitation Pre-training [102.850162490626]
人間のロボットによる相互模倣事前学習による視覚-言語-行動モデルであるMiVLAを提案する。
MiVLAは、最先端のVLAよりも優れた、強力な改良された一般化能力を実現する。
論文 参考訳(メタデータ) (2025-12-17T12:59:41Z) - MagBotSim: Physics-Based Simulation and Reinforcement Learning Environments for Magnetic Robotics [0.0]
MagBotSim(マグボットシム)は磁気浮上系の物理シミュレーションである。
この研究は、磁気ロボティクスを動力とする次世代製造システムの基礎を築いた。
論文 参考訳(メタデータ) (2025-11-20T08:53:54Z) - FreeAction: Training-Free Techniques for Enhanced Fidelity of Trajectory-to-Video Generation [50.39748673817223]
本稿では,ロボットビデオ生成における明示的な動作パラメータを完全に活用する2つのトレーニング不要な推論時間手法を提案する。
第一に、アクションスケールの分類器フリーガイダンスは、動作の大きさに比例して誘導強度を動的に調整し、運動強度に対する制御性を高める。
第二に、アクションスケールノイズトランケーションは、初期サンプルノイズの分布を調整し、所望の運動力学とよりよく一致させる。
論文 参考訳(メタデータ) (2025-09-29T03:30:40Z) - VimoRAG: Video-based Retrieval-augmented 3D Motion Generation for Motion Language Models [110.32291962407078]
VimoRAG(ヴィモラグ)は、動画に基づく大規模言語モデルのためのモーション生成フレームワークである。
動作中心の効果的なビデオ検索モデルを開発し、最適下検索結果による誤り伝播の問題を緩和する。
実験結果から,VimoRAGはテキストのみの入力に制約された動きLLMの性能を大幅に向上させることがわかった。
論文 参考訳(メタデータ) (2025-08-16T15:31:14Z) - Phoenix: A Motion-based Self-Reflection Framework for Fine-grained Robotic Action Correction [10.38090975412416]
ロボットが障害から回復するためには、一般化可能な自己補正システムの構築が不可欠である。
我々は,高レベルな意味的反射と低レベルなロボット動作補正を接続するブリッジとして動作指示を利用するPhoenixフレームワークを構築した。
RoboMimicシミュレーションと実世界のシナリオの両方で実施された実験は、我々のフレームワークのより優れた一般化とロバスト性を証明する。
論文 参考訳(メタデータ) (2025-04-20T12:30:43Z) - Moto: Latent Motion Token as the Bridging Language for Learning Robot Manipulation from Videos [101.26467307473638]
我々はMotoを紹介する。Motoは、映像コンテンツをラテントモーションTokenizerでラテントモーションTokenシーケンスに変換する。
我々は、モーショントークンによるMoto-GPTの事前学習を行い、多様な視覚的動きの知識を捉えることができる。
実際のロボット動作に先立って学習した動きを転送するために、潜伏した動きのトークン予測と実際のロボット制御をシームレスにブリッジするコファインチューニング戦略を実装した。
論文 参考訳(メタデータ) (2024-12-05T18:57:04Z) - Astrocyte Regulated Neuromorphic Central Pattern Generator Control of Legged Robotic Locomotion [7.828170373014957]
本稿では,四足歩行ロボットの移動歩行を学習するためのアストロサイト制御スパイキングニューラルネットワーク(SNN)を用いた CPG を提案する。
SNNベースのCPGは、多目的物理シミュレーションプラットフォーム上でシミュレーションされ、平地でロボットを走らせながらトロッティング歩行が出現する。
最先端の強化学習に基づくロボット制御アルゴリズムと比較して、23.3Times$計算パワーセーブが観測される。
論文 参考訳(メタデータ) (2023-12-25T20:33:16Z) - Automated Gait Generation For Walking, Soft Robotic Quadrupeds [6.005998680766498]
ソフトアクチュエータの非線形ダイナミクスと高次元入力空間のため,ソフトロボットの歩行生成は困難である。
本稿では, 自己生成型ソフトロボット歩行のためのサンプル効率, シミュレーションフリーの手法を提案する。
これはソフトロボットにおける完全に自律的な歩行生成の最初のデモンストレーションである。
論文 参考訳(メタデータ) (2023-09-30T21:31:30Z) - MotionGPT: Finetuned LLMs Are General-Purpose Motion Generators [108.67006263044772]
本稿では,マルチモーダル制御信号を利用するMotionGPT(Motion General-Purpose generaTor)を提案する。
まず,マルチモーダル制御信号を離散符号に量子化し,それらを統一的なプロンプト命令で定式化する。
我々のMotionGPTは、LLMパラメータのわずか0.4%をチューニングすることで、マルチモーダル制御信号を用いた統一された人の動き生成モデルを示す。
論文 参考訳(メタデータ) (2023-06-19T12:58:17Z) - Learning Low-Frequency Motion Control for Robust and Dynamic Robot
Locomotion [10.838285018473725]
実ANYmal C四重極上で8Hzの低速動作を行う学習モーションコントローラを用いて,ロバストでダイナミックな移動を実演する。
このロボットは、1.5m/sの高速度を頑健かつ反復的に達成し、不均一な地形を横切ることができ、予期せぬ外乱に抵抗することができる。
論文 参考訳(メタデータ) (2022-09-29T15:55:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。