論文の概要: Mapping Surgeon's Hand/Finger Motion During Conventional Microsurgery to
Enhance Intuitive Surgical Robot Teleoperation
- arxiv url: http://arxiv.org/abs/2102.10585v1
- Date: Sun, 21 Feb 2021 11:21:30 GMT
- ステータス: 処理完了
- システム内更新日: 2021-02-23 15:08:00.446778
- Title: Mapping Surgeon's Hand/Finger Motion During Conventional Microsurgery to
Enhance Intuitive Surgical Robot Teleoperation
- Title(参考訳): 直観的な手術ロボット遠隔操作を強化するためのマイクロ外科手術時の手指運動のマッピング
- Authors: Mohammad Fattahi Sani, Raimondo Ascione, Sanja Dogramadzi
- Abstract要約: 現在の人間とロボットのインターフェイスは直感的な遠隔操作がなく、外科医の手や指の動きを模倣することはできない。
本研究は, 心臓微小外科手術における外科医の総手の動きと微細なシナジー運動を直感的に記録し, マッピングする方法を示すパイロット研究である。
- 参考スコア(独自算出の注目度): 0.5635300481123077
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Purpose: Recent developments in robotics and artificial intelligence (AI)
have led to significant advances in healthcare technologies enhancing
robot-assisted minimally invasive surgery (RAMIS) in some surgical specialties.
However, current human-robot interfaces lack intuitive teleoperation and cannot
mimic surgeon's hand/finger sensing and fine motion. These limitations make
tele-operated robotic surgery not suitable for micro-surgery and difficult to
learn for established surgeons. We report a pilot study showing an intuitive
way of recording and mapping surgeon's gross hand motion and the fine synergic
motion during cardiac micro-surgery as a way to enhance future intuitive
teleoperation. Methods: We set to develop a prototype system able to train a
Deep Neural Net-work (DNN) by mapping wrist, hand and surgical tool real-time
data acquisition(RTDA) inputs during mock-up heart micro-surgery procedures.
The trained network was used to estimate the tools poses from refined hand
joint angles. Results: Based on surgeon's feedback during mock micro-surgery,
the developed wearable system with light-weight sensors for motion tracking did
not interfere with the surgery and instrument handling. The wearable motion
tracking system used 15 finger-thumb-wrist joint angle sensors to generate
meaningful data-sets representing inputs of the DNN network with new hand joint
angles added as necessary based on comparing the estimated tool poses against
measured tool pose. The DNN architecture was optimized for the highest
estimation accuracy and the ability to determine the tool pose with the least
mean squared error. This novel approach showed that the surgical instrument's
pose, an essential requirement for teleoperation, can be accurately estimated
from recorded surgeon's hand/finger movements with a mean squared error (MSE)
less than 0.3%
- Abstract(参考訳): 目的: ロボットと人工知能(AI)の最近の進歩は、いくつかの外科専門分野でロボット支援最小侵襲手術(RAMIS)を強化する医療技術の大幅な進歩をもたらしました。
しかし、現在の人間ロボットインタフェースは直感的な遠隔操作を欠いているため、外科医の手指の感覚や微妙な動きを模倣することはできない。
これらの制限により、遠隔操作のロボット手術はマイクロ手術には適せず、確立した外科医には学習が困難になる。
本研究では,心臓微小手術における術者の手の動きと相乗的運動を直感的に記録・マッピングし,今後の直感的遠隔手術を改善するパイロット研究を報告する。
方法: モックアップ心臓マイクロ手術中に手首,手指,手術用具のリアルタイムデータ取得(rtda)入力をマッピングすることで,深層神経ネットワーク(dnn)を訓練できるプロトタイプシステムの開発に取り組んだ。
トレーニングされたネットワークは、洗練された手関節角度からツールのポーズを推定するために使用された。
結果: 模擬マイクロサージにおける外科医のフィードバックに基づき, 運動追跡のための軽量センサを備えたウェアラブルシステムは, 手術や器具のハンドリングに干渉しなかった。
このウェアラブルモーショントラッキングシステムは、推定ツールポーズと測定ツールポーズを比較して、DNNネットワークの入力を表す有意義なデータセットを必要に応じて追加した15個の指先関節角度センサを用いて生成する。
DNNアーキテクチャは高い推定精度と最小二乗誤差でツールのポーズを決定する能力に最適化された。
本手法は, 平均2乗誤差(MSE)が0.3%未満である記録外科医の手指の動きから, 遠隔操作に必要な手術器具のポーズを正確に推定できることを示した。
関連論文リスト
- Creating a Digital Twin of Spinal Surgery: A Proof of Concept [68.37190859183663]
手術デジタル化は、現実世界の手術の仮想レプリカを作成するプロセスである。
脊椎外科手術に応用した手術デジタル化のための概念実証(PoC)を提案する。
5台のRGB-Dカメラを外科医の動的3D再構成に、ハイエンドカメラを解剖学の3D再構成に、赤外線ステレオカメラを手術器具追跡に、レーザースキャナーを手術室の3D再構成とデータ融合に使用した。
論文 参考訳(メタデータ) (2024-03-25T13:09:40Z) - Surgical tool classification and localization: results and methods from
the MICCAI 2022 SurgToolLoc challenge [69.91670788430162]
SurgLoc 2022 チャレンジの結果を示す。
目標は、ツール検出のためにトレーニングされた機械学習モデルにおいて、ツールの存在データを弱いラベルとして活用することだった。
これらの結果を機械学習と手術データ科学の幅広い文脈で論じることで結論付ける。
論文 参考訳(メタデータ) (2023-05-11T21:44:39Z) - Next-generation Surgical Navigation: Marker-less Multi-view 6DoF Pose
Estimation of Surgical Instruments [66.74633676595889]
静止カメラとヘッドマウントカメラを組み合わせたマルチカメラ・キャプチャー・セットアップを提案する。
第2に,手術用ウェットラボと実際の手術用劇場で撮影された元脊椎手術のマルチビューRGB-Dビデオデータセットを公表した。
第3に,手術器具の6DoFポーズ推定の課題に対して,最先端のシングルビューとマルチビューの3つの手法を評価した。
論文 参考訳(メタデータ) (2023-05-05T13:42:19Z) - Live image-based neurosurgical guidance and roadmap generation using
unsupervised embedding [53.992124594124896]
本稿では,注釈付き脳外科ビデオの大規模なデータセットを活用するライブ画像のみのガイダンスを提案する。
生成されたロードマップは、トレーニングセットの手術で取られた一般的な解剖学的パスをエンコードする。
166例の腹腔鏡下腺摘出術を施行し,本法の有効性について検討した。
論文 参考訳(メタデータ) (2023-03-31T12:52:24Z) - Robotic Navigation Autonomy for Subretinal Injection via Intelligent
Real-Time Virtual iOCT Volume Slicing [88.99939660183881]
網膜下注射のための自律型ロボットナビゲーションの枠組みを提案する。
提案手法は,機器のポーズ推定方法,ロボットとi OCTシステム間のオンライン登録,およびインジェクションターゲットへのナビゲーションに適した軌道計画から構成される。
ブタ前眼の精度と再現性について実験を行った。
論文 参考訳(メタデータ) (2023-01-17T21:41:21Z) - Using Hand Pose Estimation To Automate Open Surgery Training Feedback [0.0]
本研究は,外科医の自動訓練における最先端のコンピュータビジョンアルゴリズムの利用を促進することを目的としている。
2次元手のポーズを推定することにより,手の動きをモデル化し,手術器具との相互作用をモデル化する。
論文 参考訳(メタデータ) (2022-11-13T21:47:31Z) - Using Computer Vision to Automate Hand Detection and Tracking of Surgeon
Movements in Videos of Open Surgery [8.095095522269352]
コンピュータビジョンの進歩を活かし,外科手術の映像解析に自動的アプローチを導入する。
オブジェクト検出のための最先端の畳み込みニューラルネットワークアーキテクチャを使用して、開手術ビデオの操作手を検出する。
本モデルの操作手の空間的検出は、既存の手検出データセットを用いて達成した検出を大幅に上回る。
論文 参考訳(メタデータ) (2020-12-13T03:10:09Z) - Using Conditional Generative Adversarial Networks to Reduce the Effects
of Latency in Robotic Telesurgery [0.0]
手術では、どんなマイクロ遅延でも重傷を負い、場合によっては致命傷を負うことがある。
現在の外科用ロボットは、腕や道具の位置を測定するために校正されたセンサーを使用している。
本研究は、患者の組織に関するツール位置を測定するための、純粋に光学的なアプローチを提案する。
論文 参考訳(メタデータ) (2020-10-07T13:40:44Z) - Real-Time Instrument Segmentation in Robotic Surgery using Auxiliary
Supervised Deep Adversarial Learning [15.490603884631764]
ロボット機器と組織のリアルタイムセマンティックセグメンテーションは、ロボット支援手術において重要なステップである。
我々は,高解像度ビデオから手術器具を分割する軽量カスケード畳み込みニューラルネットワーク(CNN)を開発した。
高解像度ビデオの予測精度とセグメンテーション時間の両方において,術具の画素単位のセグメンテーションのための既存のアルゴリズムを超越していることを示す。
論文 参考訳(メタデータ) (2020-07-22T10:16:07Z) - Searching for Efficient Architecture for Instrument Segmentation in
Robotic Surgery [58.63306322525082]
ほとんどのアプリケーションは、高解像度の外科画像の正確なリアルタイムセグメンテーションに依存している。
我々は,高解像度画像のリアルタイム推論を行うために調整された,軽量で高効率なディープ残差アーキテクチャを設計する。
論文 参考訳(メタデータ) (2020-07-08T21:38:29Z) - Recurrent and Spiking Modeling of Sparse Surgical Kinematics [0.8458020117487898]
ますます多くの研究が、手術ロボットが捉えたビデオやキネマティックなデータを機械学習で分析している。
本研究では,同様のスキルレベルの外科医を予測するために,キネマティックデータのみを用いることの可能性を検討する。
本報告では, 運動特性のみに基づいて, シミュレーションエクササイズにおいて, ほぼ完全スコアの手術者を特定することが可能である。
論文 参考訳(メタデータ) (2020-05-12T15:41:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。