論文の概要: Multi-Camera AR Guidance System for Surgical Instrument Handling and Assembly: Investigating Workload and Efficiency
- arxiv url: http://arxiv.org/abs/2606.04992v1
- Date: Wed, 03 Jun 2026 15:13:05 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-04 20:44:18.850119
- Title: Multi-Camera AR Guidance System for Surgical Instrument Handling and Assembly: Investigating Workload and Efficiency
- Title(参考訳): 手術機器ハンドリングと組み立てのための多カメラAR誘導システム:作業負荷と効率性の検討
- Authors: Shiyu Li, Julian Kreimeier, Hannah Schieber, Dirk Müller, Bernhard Kainz, Rüdiger von Eisenhart-Rothe, Daniel Roth,
- Abstract要約: 本稿では,マルチカメラの6Dポーズ推定と,ヘッドマウントディスプレイ上での拡張現実のin-situビジュアライゼーションを併用した手術機器支援システムを提案する。
手術膝シミュレーションにおいて,29名のスクラブ看護師によるユーザスタディを行い,本システムと紙マニュアルとの比較を行った。
ARガイダンスは、手作業と比較して、認識された作業負荷を著しく削減した。
特に、スクラブ看護師は、システムを使用する際に利益を得た楽器セットをあまり経験していない。
- 参考スコア(独自算出の注目度): 11.355262860203878
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The handling and assembly of instruments during surgery imposes high cognitive demands on scrub nurses, particularly when instruments are unfamiliar. We present a supporting guidance system for surgical instrumentation that combines multi-camera 6D pose estimation with augmented reality in-situ visualization on a head-mounted display without the requirement for additional markers. Pose estimation and consecutive camera calibration are achieved through known objects. The 6D pose estimation network is trained purely on synthetic data, aiming for better generalizability and real-world applicability. The AR guidance displays tooltip localization cues and step-wise assembly animations. Via gaze-based selection and a foot pedal, users can switch between assembly steps in intraoperative use. In a technical evaluation, our approach outperforms state-of-art 6D pose estimation. A user study with 29 scrub nurses was conducted in a surgical simulation of knee arthroplasty, comparing the system against a paper manual. AR guidance significantly reduced the perceived workload compared. Objectively, AR guidance reduced task completion time by 21.3\% (4.76 minutes). Specifically, scrub nurses less experienced with the instrument set benefited when using the system. Error frequencies were comparable between conditions. Qualitative feedback highlighted improved process clarity, reduced information overload, and perceived independence. To summarize, our marker-free multi-camera AR guidance approach for surgical instruments can, subjectively and objectively, improve intraoperative instrumentation performance, particularly for untrained scrub nurses.
- Abstract(参考訳): 手術中の器具の取り扱いと組み立ては、特に楽器が馴染みのない場合、スクラブ看護師に高い認知的要求を課す。
本稿では,マルチカメラの6Dポーズ推定と拡張現実のin-situビジュアライゼーションを併用して,付加マーカーを必要とせずにヘッドマウントディスプレイ上に表示する手術器具支援システムを提案する。
ポス推定と連続カメラキャリブレーションは既知のオブジェクトを通して達成される。
6Dポーズ推定ネットワークは、より優れた一般化性と実世界の応用性を目指して、純粋に合成データに基づいて訓練されている。
ARガイダンスはツールチップのローカライゼーションキューとステップワイドなアセンブリアニメーションを表示する。
視線に基づく選択と足のペダルにより、ユーザーは術中使用時に組立ステップを切り替えることができる。
技術的評価において,本手法は最先端の6次元ポーズ推定よりも優れている。
人工膝関節置換術の手術シミュレーションにおいて,29名のスクラブ看護師を用いたユーザスタディを行い,本システムと紙マニュアルとの比較を行った。
AR誘導は、認識された作業負荷を有意に削減した。
AR誘導はタスク完了時間を21.3\%(4.76分)短縮した。
特に、スクラブ看護師は、システムを使用する際に利益を得た楽器セットをあまり経験していない。
エラー周波数は条件間で同等であった。
質的なフィードバックは、プロセスの明確性の向上、情報の過負荷の低減、独立性の認識を強調した。
まとめると,手術器具のマーカーレス多カメラAR誘導アプローチは,特に訓練を受けていないスクラブ看護師の術中インスツルメンテーション性能を,主観的かつ客観的に向上させることができる。
関連論文リスト
- Extend Your Horizon: A Device-Agnostic Surgical Tool Tracking Framework with Multi-View Optimization for Augmented Reality [40.023882327049684]
手術ナビゲーションは、患者の解剖学と手術器具のポーズを推定することでリアルタイムのガイダンスを提供する。
既存のアプローチのほとんどは明確な視線に依存しており、動的な手術室環境では維持が困難である。
本研究は,動的なシーングラフ表現内に複数の感覚モーダルを融合させることにより,閉塞下での手術器具の追跡を行う枠組みを導入する。
論文 参考訳(メタデータ) (2026-03-09T05:37:49Z) - Multimodal Feedback for Handheld Tool Guidance: Combining Wrist-Based Haptics with Augmented Reality [6.984082653739313]
光シースルー拡張現実(AR)における視覚的手首フィードバックがハンドヘルドツール運動の空間的誘導をいかに向上させるかを検討する。
以上の結果から,手首をベースとした触覚をARシステムに統合し,手術指導などの視覚的タスクを高精度で複雑化する可能性が示唆された。
論文 参考訳(メタデータ) (2026-01-17T12:49:00Z) - AR Surgical Navigation with Surface Tracing: Comparing In-Situ Visualization with Tool-Tracking Guidance for Neurosurgical Applications [0.0]
本研究では,AR誘導を利用して解剖学的目標を登録し,リアルタイムな計器ナビゲーションを行う新しい手法を提案する。
新規な表面追跡法により標的位置を患者に登録し、リアルタイム赤外線ツールトラッキングを用いてカテーテル配置を支援する。
論文 参考訳(メタデータ) (2025-08-14T11:46:30Z) - Surgical Foundation Model Leveraging Compression and Entropy Maximization for Image-Guided Surgical Assistance [50.486523249499115]
低侵襲手術(MIS)におけるリアルタイム映像理解の重要性
手術ビデオからコンパクトで情報的表現を学習するための,新しい自己教師型フレームワークであるCompress-to-Explore (C2E)を提案する。
C2Eは、エントロピー最大化デコーダを使用して、臨床的に関連する詳細を保持しながら画像を圧縮し、ラベル付きデータなしでエンコーダのパフォーマンスを向上させる。
論文 参考訳(メタデータ) (2025-05-16T14:02:24Z) - Surgeons vs. Computer Vision: A comparative analysis on surgical phase recognition capabilities [65.66373425605278]
自動手術相認識(SPR)は、人工知能(AI)を使用して、手術ワークフローをその重要なイベントに分割する。
従来の研究は、短い外科手術と直線的な外科手術に焦点を合わせており、時間的文脈が手術の段階をよりよく分類する専門家の能力に影響を与えるかどうかを探索していない。
本研究は,ロボットによる部分腎切除(RAPN)を高度に非直線的に行うことに焦点を当て,これらのギャップに対処する。
論文 参考訳(メタデータ) (2025-04-26T15:37:22Z) - Setup-Invariant Augmented Reality for Teaching by Demonstration with Surgical Robots [49.26692555627371]
本稿では,dV-STEARというオープンソースのシステムについて紹介する。
dV-STEARは腹腔鏡下手術の基本課題の初級成績を有意に改善した。
両課題とも,dV-STEARを用いた被験者では,手指使用のバランスが有意に改善し,フラストレーションの低下が報告された。
論文 参考訳(メタデータ) (2025-04-09T08:34:25Z) - Next-generation Surgical Navigation: Marker-less Multi-view 6DoF Pose Estimation of Surgical Instruments [64.59698930334012]
静止カメラとヘッドマウントカメラを組み合わせたマルチカメラ・キャプチャー・セットアップを提案する。
第2に,手術用ウェットラボと実際の手術用劇場で撮影された元脊椎手術のマルチビューRGB-Dビデオデータセットを公表した。
第3に,手術器具の6DoFポーズ推定の課題に対して,最先端のシングルビューとマルチビューの3つの手法を評価した。
論文 参考訳(メタデータ) (2023-05-05T13:42:19Z) - Using Hand Pose Estimation To Automate Open Surgery Training Feedback [0.0]
本研究は,外科医の自動訓練における最先端のコンピュータビジョンアルゴリズムの利用を促進することを目的としている。
2次元手のポーズを推定することにより,手の動きをモデル化し,手術器具との相互作用をモデル化する。
論文 参考訳(メタデータ) (2022-11-13T21:47:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。