論文の概要: Autonomous Laparoscope Control through Unified Mechanics-Based Representation of Multimodal Intraoperative Information
- arxiv url: http://arxiv.org/abs/2605.04408v1
- Date: Wed, 06 May 2026 02:01:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-07 18:41:07.601937
- Title: Autonomous Laparoscope Control through Unified Mechanics-Based Representation of Multimodal Intraoperative Information
- Title(参考訳): 統一力学に基づくマルチモーダル術中情報の表現による自律腹腔鏡制御
- Abstract要約: 腹腔鏡ロボットは、外科医に安定した腹腔鏡視野(FOV)を提供し、人間のアシスタントの負担を軽減することができる。
位置、力/トルク、画像などのマルチモーダル信号は、物理的意味や単位によって著しく異なる。
マルチモーダル情報の統一力学モデリングに基づく腹腔鏡保持型ロボット制御法を提案する。
- 参考スコア(独自算出の注目度): 13.527135413058856
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Laparoscope-holding robots can provide surgeons with a stable laparoscopic field of view (FOV) and reduce the burden on human assistants. To maintain an ideal intraoperative FOV, the robot must continuously adjust the laparoscope pose according to intraoperative information. However, intraoperative multimodal signals, such as position, force/torque, and images, differ markedly in physical meaning and units, making it difficult to build a unified representation and to generate control commands that can be used directly for laparoscope control. To address this issue, we propose a laparoscope-holding robot control method based on unified mechanics modeling of multimodal information. First, we design mapping strategies for multiple intraoperative sources, including position, force/torque, and images, and unify them into an equivalent-wrench representation in the operational space. Then, using a task-priority scheme, we inject the wrenches into the task space and the null space, respectively, and synthesize laparoscope control commands via task-priority projection, thereby achieving consistent representation and coordinated fusion of multimodal information within a single framework. Finally, taking the intraoperative remote center of motion (RCM) position, force/torque sensor readings, and laparoscopic images as examples, we construct an RCM-constraint wrench to enforce the RCM geometric constraint and reduce the contact force at the trocar site, a laparoscope-manipulation wrench to enable compliant dragging, and an instrument-tracking wrench to achieve autonomous visual tracking of the instruments. Experiments on a surgical phantom and in vivo porcine trials demonstrate that the proposed method supports multi-task operation, including compliant laparoscope manipulation and autonomous instrument tracking, while maintaining the RCM constraint and reducing sustained trocar-site loading.
- Abstract(参考訳): 腹腔鏡ロボットは、外科医に安定した腹腔鏡視野(FOV)を提供し、人間のアシスタントの負担を軽減することができる。
理想的な術中FOVを維持するためには,術中情報に応じて腹腔鏡のポーズを連続的に調整する必要がある。
しかし、位置、力/トルク、画像などの術中マルチモーダル信号は、物理的意味や単位によって著しく異なるため、統一された表現の構築や、腹腔鏡直接的に使用可能な制御コマンドの生成が困難である。
この問題に対処するために,マルチモーダル情報の統一力学モデリングに基づく腹腔鏡保持型ロボット制御手法を提案する。
まず、位置、力/トルク、画像を含む複数の術中源のマッピング戦略を設計し、それらを操作空間における等価レンチ表現に統一する。
そこで,タスクプライオリティ・スキームを用いて,タスク空間とヌル空間にレンチを注入し,タスクプライオリティ・プロジェクションを介して腹腔鏡制御コマンドを合成することにより,単一のフレームワーク内でのマルチモーダル情報の一貫した表現とコーディネート融合を実現する。
最後に, 術中リモートセンターの位置, 力・トルクセンサ, 腹腔鏡像を例に, RCMの幾何学的制約を強制し, トロカル部位の接触力を低減するためのRCM拘束レンチ, コンプライアンス・ドラッグングを可能にする腹腔鏡操作レンチ, 機器の自律的な視覚的トラッキングを実現するための計器追跡レンチを構築した。
外科的幻覚とin vivoにおけるブタの試験実験では,RCM制約を維持しながら,腹腔鏡手術や自律的な計器追跡を含むマルチタスク操作を支援する方法が実証された。
関連論文リスト
- SurgLAT: Surgical Latent Attention Tracking for Depth-Aware Robotic Laparoscope Control [32.598197128759146]
SurgLAT(SurgLAT)は遅発性手術注意モデルと自律腹腔鏡視下視力制御のための因果的オンラインフレームワークである。
SurgLATは、凍結したDINOv3エンコーダと状態条件の空間トークンミキサーを使用して、メモリ誘導された空間的事前の操作証拠を抽出する。
さらに,仮想軸の定式化に基づくラパロスコープ・リモート・センター・オブ・モーション(RCM)制約によるロボット配置フレームワークを導入する。
論文 参考訳(メタデータ) (2026-08-08T03:04:01Z) - OpenRC: An Open-Source Robotic Colonoscopy Framework for Multimodal Data Acquisition and Autonomy Research [36.65725257567292]
オープンソースのモジュール型ロボット大腸内視鏡フレームワークOpenRCについて紹介する。
ビデオ、オペレーターコマンド、アクティベーション状態、遠位端ポーズの同時記録をサポートする。
遠隔操作型エピソード1,894回からなるマルチモーダルデータセットを10種類のタスクバリエーションで収集した。
論文 参考訳(メタデータ) (2026-04-04T16:07:33Z) - An Open-Source Robotics Research Platform for Autonomous Laparoscopic Surgery [1.801618662867143]
本稿では,クローズドフォーム解析速度解法に基づくオープンソースのロボット非依存型リモート・センター・オブ・モーション(RCM)コントローラを提案する。
コントローラーはカルテシア空間で作動し、あらゆる産業用マニピュレータが手術ロボットとして機能する。
ロボットコントロールをフルスタックのROSベースの手術ロボットプラットフォームに統合し、遠隔操作、デモ記録、学習ポリシーの展開をサポートする。
論文 参考訳(メタデータ) (2026-03-09T15:26:27Z) - Learning Surgical Robotic Manipulation with 3D Spatial Priors [73.00031539525202]
本稿では,3次元空間認識を持つ手術ロボットを支援する,終端から終端までのバイスモータポリシーであるSSTを紹介した。
立体内視鏡画像から頑健な3次元潜伏表現を抽出するために、手術3Dに基づいて強力な幾何学変換器を微調整する。
SSTは、複雑な外科手術における最先端性能と強力な空間一般化を実現する。
論文 参考訳(メタデータ) (2026-03-04T07:19:56Z) - ULTRA: Unified Multimodal Control for Autonomous Humanoid Whole-Body Loco-Manipulation [55.467742403416175]
本稿では,大規模モーションキャプチャをヒューマノイドに変換する物理駆動型ニューラルネットワークを提案する。
我々は高密度参照とスパースタスク仕様の両方をサポートする統合マルチモーダルコントローラを学習する。
その結果,ULTRAは自我中心の知覚から,自律的,目標条件付き全体ロコ操作に一般化することが示された。
論文 参考訳(メタデータ) (2026-03-03T18:59:29Z) - Dexplore: Scalable Neural Control for Dexterous Manipulation from Reference-Scoped Exploration [58.4036440289082]
ハンドオブジェクトモーションキャプチャ(MoCap)は、大規模でコンタクトに富んだデモと、器用なロボットスコープの約束を提供する。
Dexploreは、リポジトリとトラッキングを実行し、MoCapから直接ロボット制御ポリシーを学習する、統一された単一ループ最適化である。
論文 参考訳(メタデータ) (2025-09-11T17:59:07Z) - Open-Source Multi-Viewpoint Surgical Telerobotics [6.763309989418208]
腹腔内に1つ以上の調整可能な視点を導入することで,外科医の新たな可視化・協調戦略を開拓できると推測した。
我々は,ハイパフォーマンスビジョンコンポーネントを統合し,da Vinci Research Kit制御ロジックを改良することにより,マルチビューポイント・マルチセンサーロボット手術システムを構築している。
論文 参考訳(メタデータ) (2025-05-16T11:41:27Z) - Robotic Constrained Imitation Learning for the Peg Transfer Task in Fundamentals of Laparoscopic Surgery [18.64205729932939]
腹腔鏡下手術の基礎(FLS)におけるペグ伝達タスクを模倣学習で行うロボットの実装戦略を提案する。
本研究では,単眼画像のみを用いて,より正確な模倣学習を実現する。
2台のフランカ・エミカ・パンダ・ロボットアームを用いて全体システムを実装し,その有効性を検証した。
論文 参考訳(メタデータ) (2024-05-06T13:12:25Z) - Multi-Scale Control Signal-Aware Transformer for Motion Synthesis
without Phase [72.01862340497314]
マルチスケール制御信号認識変換器(MCS-T)を提案する。
MCS-Tは補助情報を用いてメソッドが生成した動作に匹敵する動作をうまく生成できる。
論文 参考訳(メタデータ) (2023-03-03T02:56:44Z) - Continuous Decoding of Daily-Life Hand Movements from Forearm Muscle
Activity for Enhanced Myoelectric Control of Hand Prostheses [78.120734120667]
本研究では,前腕のEMG活性をハンドキネマティクスに連続的にマップする,長期記憶(LSTM)ネットワークに基づく新しい手法を提案する。
私たちの研究は、この困難なデータセットを使用するハンドキネマティクスの予測に関する最初の報告です。
提案手法は, 人工手指の複数のDOFの独立的, 比例的アクティベーションのための制御信号の生成に適していることが示唆された。
論文 参考訳(メタデータ) (2021-04-29T00:11:32Z) - Domain Adaptive Robotic Gesture Recognition with Unsupervised
Kinematic-Visual Data Alignment [60.31418655784291]
本稿では,マルチモダリティ知識,すなわちキネマティックデータとビジュアルデータを同時にシミュレータから実ロボットに伝達できる,教師なしドメイン適応フレームワークを提案する。
ビデオの時間的手がかりと、ジェスチャー認識に対するマルチモーダル固有の相関を用いて、トランスファー可能な機能を強化したドメインギャップを修復する。
その結果, 本手法は, ACCでは最大12.91%, F1scoreでは20.16%と, 実際のロボットではアノテーションを使わずに性能を回復する。
論文 参考訳(メタデータ) (2021-03-06T09:10:03Z) - Real-time Surgical Environment Enhancement for Robot-Assisted Minimally
Invasive Surgery Based on Super-Resolution [18.696539908774454]
本稿では,GAN(Generative Adversarial Network)に基づくビデオ超解像法を提案し,自動ズーム比調整のためのフレームワークを構築する。
外科手術中の関心領域(ROI)の高品質な可視化のために、自動リアルタイムズームを提供する。
論文 参考訳(メタデータ) (2020-11-08T15:40:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。