論文の概要: X-RAFT: Cross-Modal Non-Rigid Registration of Blue and White Light Neurosurgical Hyperspectral Images
- arxiv url: http://arxiv.org/abs/2507.07747v1
- Date: Thu, 10 Jul 2025 13:25:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-07-11 16:40:15.416891
- Title: X-RAFT: Cross-Modal Non-Rigid Registration of Blue and White Light Neurosurgical Hyperspectral Images
- Title(参考訳): X-RAFT : 青と白の脳神経外科用ハイパースペクトル画像のクロスモード非デジタルレジストレーション
- Authors: Charlie Budd, Silvère Ségaud, Matthew Elliot, Graeme Stasiuk, Yijing Xie, Jonathan Shapey, Tom Vercauteren,
- Abstract要約: 蛍光誘導神経外科へのハイパースペクトルイメージングの統合は、外科的意思決定を改善する可能性がある。
本稿では,各モダリティペアに対して異なる画像エンコーダを用いて,脳神経外科的ハイパースペクトルデータに対するフローサイクル整合性を用いて,これらを自己監督的に微調整する手法を提案する。
- 参考スコア(独自算出の注目度): 2.4461177743588265
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Integration of hyperspectral imaging into fluorescence-guided neurosurgery has the potential to improve surgical decision making by providing quantitative fluorescence measurements in real-time. Quantitative fluorescence requires paired spectral data in fluorescence (blue light) and reflectance (white light) mode. Blue and white image acquisition needs to be performed sequentially in a potentially dynamic surgical environment. A key component to the fluorescence quantification process is therefore the ability to find dense cross-modal image correspondences between two hyperspectral images taken under these drastically different lighting conditions. We address this challenge with the introduction of X-RAFT, a Recurrent All-Pairs Field Transforms (RAFT) optical flow model modified for cross-modal inputs. We propose using distinct image encoders for each modality pair, and fine-tune these in a self-supervised manner using flow-cycle-consistency on our neurosurgical hyperspectral data. We show an error reduction of 36.6% across our evaluation metrics when comparing to a naive baseline and 27.83% reduction compared to an existing cross-modal optical flow method (CrossRAFT). Our code and models will be made publicly available after the review process.
- Abstract(参考訳): 蛍光誘導神経外科へのハイパースペクトルイメージングの統合は、リアルタイムに定量的蛍光測定を提供することで、外科的意思決定を改善する可能性がある。
定量的蛍光は、蛍光(青色の光)と反射(白色の光)モードでペア化されたスペクトルデータを必要とする。
青と白の画像取得は、潜在的にダイナミックな手術環境で順次実行される必要がある。
したがって、蛍光量子化プロセスの鍵となる要素は、これらの大きく異なる照明条件下で撮影された2つのハイパースペクトル画像間の密接なクロスモーダル画像対応を見つける能力である。
X-RAFT(Recurrent All-Pairs Field Transforms, RAFT)光フローモデル)を導入し, この課題に対処する。
本稿では,各モダリティペアに対して異なる画像エンコーダを用いて,脳神経外科的ハイパースペクトルデータに対するフローサイクル整合性を用いて,これらを自己監督的に微調整する手法を提案する。
従来のクロスモーダル光流法 (CrossRAFT) と比較すると, 評価指標の誤差を36.6%削減し, 27.83%低減した。
私たちのコードとモデルは、レビュープロセスの後に公開されます。
関連論文リスト
- Quantum-inspired super-resolution of fluorescent point-like sources [0.0]
画像反転干渉顕微鏡を用いた点状蛍光光源の超解像実験を行った。
この技術は、量子パラメータ推定理論を半古典的イメージング問題に適用する最近の発展に着想を得たものである。
論文 参考訳(メタデータ) (2024-12-22T02:58:40Z) - Step-Calibrated Diffusion for Biomedical Optical Image Restoration [47.191704042917394]
再生ステップ校正拡散(Resorative Step-Calibrated Diffusion、RSCD)は、拡散に基づく画像復元法である。
RSCDは、画像品質と知覚評価の両方において、他の広く使われている未使用画像復元方法よりも優れている。
RSCDは、自動脳腫瘍診断や深部組織イメージングなど、下流の臨床画像タスクのパフォーマンスを改善する。
論文 参考訳(メタデータ) (2024-03-20T15:38:53Z) - Spatial super-resolution in nanosensing with blinking emitters [79.16635054977068]
本稿では,蛍光ナノセンサを点滅させたメソロジー(サーモメトリー,マグネティックメソメトリー,pH推定など)における空間分解能向上手法を提案する。
我々は, 生活科学分野において, 画像解析技術に補完される点滅蛍光センシング剤を日常的に活用できると考えている。
論文 参考訳(メタデータ) (2024-02-27T10:38:05Z) - Fluctuation-based deconvolution in fluorescence microscopy using
plug-and-play denoisers [2.236663830879273]
蛍光顕微鏡で得られた生きた試料の画像の空間分解能は、可視光の回折により物理的に制限される。
この制限を克服するために、いくつかのデコンボリューションと超解像技術が提案されている。
論文 参考訳(メタデータ) (2023-03-20T15:43:52Z) - OADAT: Experimental and Synthetic Clinical Optoacoustic Data for
Standardized Image Processing [62.993663757843464]
オプトアコースティック(OA)イメージングは、ナノ秒レーザーパルスによる生体組織の励起と、光吸収による熱弾性膨張によって発生する超音波の検出に基づいている。
OAイメージングは、深部組織における豊富な光学コントラストと高分解能の強力な組み合わせを特徴としている。
臨床環境でのOAの幅広い応用を促進するために、異なるタイプの実験的なセットアップと関連する処理手法で生成される標準化データセットは存在しない。
論文 参考訳(メタデータ) (2022-06-17T08:11:26Z) - Quantum Optical Coherence Tomography using two photon joint spectrum
detection (JS-Q-OCT) [0.0]
量子光コヒーレンス・トモグラフィ(Q-OCT)は白色光干渉法に基づく高分解能3次元イメージング技術である。
本稿では,イメージスクランブルなアーティファクトと遅い取得時間のない新しい手法の理論的解析を行う。
対象物の内部構造に関する全ての情報は、ジョイントスペクトルに符号化されており、フーリエ変換により容易に検索可能であることを示す。
論文 参考訳(メタデータ) (2020-05-27T04:02:10Z) - Hyperspectral-Multispectral Image Fusion with Weighted LASSO [68.04032419397677]
本稿では,高スペクトル像と多スペクトル像を融合させて高画質な高スペクトル出力を実現する手法を提案する。
提案したスパース融合と再構成は,既存の公開画像の手法と比較して,定量的に優れた結果が得られることを示す。
論文 参考訳(メタデータ) (2020-03-15T23:07:56Z) - Multifold Acceleration of Diffusion MRI via Slice-Interleaved Diffusion
Encoding (SIDE) [50.65891535040752]
本稿では,Slice-Interleaved Diffusionと呼ばれる拡散符号化方式を提案する。
SIDEは、拡散重み付き(DW)画像ボリュームを異なる拡散勾配で符号化したスライスでインターリーブする。
また,高いスライスアンサンプデータからDW画像を効果的に再構成するためのディープラーニングに基づく手法を提案する。
論文 参考訳(メタデータ) (2020-02-25T14:48:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。