論文の概要: Automatic Calibration of a Multi-Camera System with Limited Overlapping Fields of View for 3D Surgical Scene Reconstruction
- arxiv url: http://arxiv.org/abs/2501.16221v2
- Date: Tue, 28 Jan 2025 20:10:17 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-01-30 12:31:29.722854
- Title: Automatic Calibration of a Multi-Camera System with Limited Overlapping Fields of View for 3D Surgical Scene Reconstruction
- Title（参考訳）: 3次元手術シーン再構築のための視野を限定したマルチカメラシステムの自動校正
- Authors: Tim Flückiger, Jonas Hein, Valery Fischer, Philipp Fürnstahl, Lilian Calvet,
- Abstract要約: 本研究の目的は3次元手術シーン再構築のための自動かつ正確な外部カメラキャリブレーション手法を開発することである(3D-SSR)。
天井搭載プロジェクタを用いたマルチスケールマーカー(MSM)の投影に基づく,新しい,高速かつ完全自動キャリブレーション手法を提案する。
- 参考スコア（独自算出の注目度）: 0.7165255458140439
- License:
- Abstract: The purpose of this study is to develop an automated and accurate external camera calibration method for multi-camera systems used in 3D surgical scene reconstruction (3D-SSR), eliminating the need for operator intervention or specialized expertise. The method specifically addresses the problem of limited overlapping fields of view caused by significant variations in optical zoom levels and camera locations. We contribute a novel, fast, and fully automatic calibration method based on the projection of multi-scale markers (MSMs) using a ceiling-mounted projector. MSMs consist of 2D patterns projected at varying scales, ensuring accurate extraction of well distributed point correspondences across significantly different viewpoints and zoom levels. Validation is performed using both synthetic and real data captured in a mock-up OR, with comparisons to traditional manual marker-based methods as well as markerless calibration methods. The method achieves accuracy comparable to manual, operator-dependent calibration methods while exhibiting higher robustness under conditions of significant differences in zoom levels. Additionally, we show that state-of-the-art Structure-from-Motion (SfM) pipelines are ineffective in 3D-SSR settings, even when additional texture is projected onto the OR floor. The use of a ceiling-mounted entry-level projector proves to be an effective alternative to operator-dependent, traditional marker-based methods, paving the way for fully automated 3D-SSR.
- Abstract（参考訳）: 本研究の目的は,3次元手術シーン再構成(3D-SSR)に使用されるマルチカメラシステムにおいて,操作者の介入や専門知識の必要をなくし,自動かつ正確な外部カメラキャリブレーション手法を開発することである。
この方法は、光学ズームレベルとカメラ位置の大幅な変化に起因する、限られた重なり合う視野の問題に特に対処する。
天井搭載プロジェクタを用いたマルチスケールマーカー(MSM)の投影に基づく,新しい,高速かつ完全自動キャリブレーション手法を提案する。
MSMは、様々なスケールで投影される2Dパターンで構成され、かなり異なる視点とズームレベルにわたるよく分散された点対応の正確な抽出を保証する。
モックアップORでキャプチャした合成データと実データの両方を用いてバリデーションを行い、従来の手動マーカー法とマーカーレス校正法との比較を行う。
この方法は、ズームレベルの大きな差がある条件下で高いロバスト性を示しながら、手動の演算子依存キャリブレーション法に匹敵する精度を実現する。
さらに, ORフロアにテクスチャを追加投影しても, 3次元SSR設定では, 最先端のStructure-from-Motion(SfM)パイプラインが有効でないことを示す。
天井に搭載されたエントリーレベルのプロジェクターは、オペレータ依存の従来のマーカーベースの手法に代わる効果的な代替手段であることが証明され、完全に自動化された3D-SSRへの道が開かれた。
関連論文リスト
- Discovering an Image-Adaptive Coordinate System for Photography Processing [51.164345878060956]
曲線演算を行う前にRGB色空間における画像適応座標系を学習するための新しいアルゴリズム IAC を提案する。
このエンドツーエンドのトレーニング可能なアプローチにより、共同で学習した画像適応座標系と曲線を用いて、画像の効率よく調整できる。
論文 参考訳（メタデータ） (2025-01-11T06:20:07Z) - Neural Real-Time Recalibration for Infrared Multi-Camera Systems [2.249916681499244]
赤外線マルチカメラシステムのリアルタイム再校正には、学習のない、あるいはニューラルネットワーク技術は存在しない。
動的リアルタイムキャリブレーションが可能なニューラルネットワークに基づく手法を提案する。
論文 参考訳（メタデータ） (2024-10-18T14:37:37Z) - Kalib: Markerless Hand-Eye Calibration with Keypoint Tracking [52.4190876409222]
ハンドアイキャリブレーションでは、カメラとロボット間の変換を推定する。
ディープラーニングの最近の進歩は、マーカーレス技術を提供するが、それらは課題を提示している。
自動的かつ普遍的なマーカーレスハンドアイキャリブレーションパイプラインであるKalibを提案する。
論文 参考訳（メタデータ） (2024-08-20T06:03:40Z) - A Minimal Set of Parameters Based Depth-Dependent Distortion Model and Its Calibration Method for Stereo Vision Systems [6.486261075483768]
パラメータに基づく深さ依存歪みモデル(MDM)を提案する。
MDMは、立体視システムの精度を向上させるために、レンズの半径歪みとまとまり歪みを考慮する。
平面パターンを用いた立体視システムのMDMの簡易かつ柔軟な校正法を提案する。
論文 参考訳（メタデータ） (2024-04-30T03:58:19Z) - MM3DGS SLAM: Multi-modal 3D Gaussian Splatting for SLAM Using Vision, Depth, and Inertial Measurements [59.70107451308687]
カメラ画像と慣性測定による地図表現に3Dガウスアンを用いることで、精度の高いSLAMが実現できることを示す。
我々の手法であるMM3DGSは、より高速なスケール認識と軌道追跡の改善により、事前レンダリングの限界に対処する。
また,カメラと慣性測定ユニットを備えた移動ロボットから収集したマルチモーダルデータセットUT-MMもリリースした。
論文 参考訳（メタデータ） (2024-04-01T04:57:41Z) - W-HMR: Monocular Human Mesh Recovery in World Space with Weak-Supervised Calibration [57.37135310143126]
モノクロ画像からの3次元運動回復のための従来の手法は、カメラ座標に依存するため、しばしば不足する。
W-HMRは、身体の歪み情報に基づいて「適切な」焦点長を予測する弱教師付き校正法である。
また,世界空間における可視的再構築のために,身体の向きを補正する OrientCorrect モジュールを提案する。
論文 参考訳（メタデータ） (2023-11-29T09:02:07Z) - P2O-Calib: Camera-LiDAR Calibration Using Point-Pair Spatial Occlusion
Relationship [1.6921147361216515]
本研究では,3次元空間における閉塞関係を用いた2次元3次元エッジポイント抽出に基づく新たなターゲットレスキャリブレーション手法を提案する。
本手法は,高画質カメラ-LiDARキャリブレーションによる実用的応用に寄与する,低誤差かつ高ロバスト性を実現する。
論文 参考訳（メタデータ） (2023-11-04T14:32:55Z) - EasyHeC: Accurate and Automatic Hand-eye Calibration via Differentiable
Rendering and Space Exploration [49.90228618894857]
我々は、マーカーレスでホワイトボックスであり、より優れた精度とロバスト性を提供するEasyHeCと呼ばれる手眼校正の新しいアプローチを導入する。
我々は,2つの重要な技術 – レンダリングベースのカメラポーズの最適化と整合性に基づく共同空間探索 – を利用することを提案する。
本評価は,合成および実世界のデータセットにおいて優れた性能を示す。
論文 参考訳（メタデータ） (2023-05-02T03:49:54Z) - Stereo camera system calibration: the need of two sets of parameters [0.0]
ステレオカメラシステムによるシーンの再構築は2段階のプロセスである。
最初は、異なるカメラの画像が一致して、実際に現実世界で再構築されるポイント・ツー・ポイント対応のセットを特定します。
2つの異なるパラメータを推定するためにシステムを2回校正することを提案する。
論文 参考訳（メタデータ） (2021-01-14T17:03:17Z) - Lightweight Multi-View 3D Pose Estimation through Camera-Disentangled
Representation [57.11299763566534]
空間校正カメラで撮影した多視点画像から3次元ポーズを復元する手法を提案する。
我々は3次元形状を利用して、入力画像をカメラ視点から切り離したポーズの潜在表現に融合する。
アーキテクチャは、カメラプロジェクション演算子に学習した表現を条件付け、ビュー当たりの正確な2次元検出を生成する。
論文 参考訳（メタデータ） (2020-04-05T12:52:29Z) - Spatiotemporal Camera-LiDAR Calibration: A Targetless and Structureless
Approach [32.15405927679048]
ターゲットレスで構造のないカメラ-DARキャリブレーション法を提案する。
本手法は, 時間的パラメータの初期調整を必要としないような, 閉形式解と非構造束を結合する。
提案手法の精度とロバスト性をシミュレーションおよび実データ実験により実証する。
論文 参考訳（メタデータ） (2020-01-17T07:25:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。