論文の概要: Spatio-Temporal Deep Learning Methods for Motion Estimation Using 4D OCT
Image Data
- arxiv url: http://arxiv.org/abs/2004.10114v1
- Date: Tue, 21 Apr 2020 15:43:01 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-11 07:32:33.310913
- Title: Spatio-Temporal Deep Learning Methods for Motion Estimation Using 4D OCT
Image Data
- Title(参考訳): 4次元OCT画像データを用いた運動推定のための時空間深度学習法
- Authors: Marcel Bengs and Nils Gessert and Matthias Schl\"uter and Alexander
Schlaefer
- Abstract要約: 特定の対象領域の局所化と運動の推定は、外科的介入の際のナビゲーションの一般的な問題である。
OCT画像ボリュームの時間的ストリームを用いることで、深層学習に基づく動き推定性能が向上するかどうかを検討する。
モデル入力に4D情報を使用すると、合理的な推論時間を維持しながら性能が向上する。
- 参考スコア(独自算出の注目度): 63.73263986460191
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Purpose. Localizing structures and estimating the motion of a specific target
region are common problems for navigation during surgical interventions.
Optical coherence tomography (OCT) is an imaging modality with a high spatial
and temporal resolution that has been used for intraoperative imaging and also
for motion estimation, for example, in the context of ophthalmic surgery or
cochleostomy. Recently, motion estimation between a template and a moving OCT
image has been studied with deep learning methods to overcome the shortcomings
of conventional, feature-based methods.
Methods. We investigate whether using a temporal stream of OCT image volumes
can improve deep learning-based motion estimation performance. For this
purpose, we design and evaluate several 3D and 4D deep learning methods and we
propose a new deep learning approach. Also, we propose a temporal
regularization strategy at the model output.
Results. Using a tissue dataset without additional markers, our deep learning
methods using 4D data outperform previous approaches. The best performing 4D
architecture achieves an correlation coefficient (aCC) of 98.58% compared to
85.0% of a previous 3D deep learning method. Also, our temporal regularization
strategy at the output further improves 4D model performance to an aCC of
99.06%. In particular, our 4D method works well for larger motion and is robust
towards image rotations and motion distortions.
Conclusions. We propose 4D spatio-temporal deep learning for OCT-based motion
estimation. On a tissue dataset, we find that using 4D information for the
model input improves performance while maintaining reasonable inference times.
Our regularization strategy demonstrates that additional temporal information
is also beneficial at the model output.
- Abstract(参考訳): 目的
外科手術中のナビゲーションにおいて,局所構造と特定の目標領域の動きを推定することが一般的な問題である。
光コヒーレンス断層撮影(OCT)は、特に眼科手術や人工内耳術の文脈において、術中画像撮影や運動推定に用いられている空間的・時間的解像度の高い画像モダリティである。
近年,従来の特徴量に基づく手法の欠点を克服するために,テンプレートと移動OCT画像間の動作推定を深層学習法を用いて研究している。
メソッド。
OCT画像ボリュームの時間的ストリームを用いることで、深層学習に基づく動き推定性能が向上するかどうかを検討する。
本研究では,3次元および4次元の深層学習手法の設計と評価を行い,新しい深層学習手法を提案する。
また,モデル出力における時間的正規化戦略を提案する。
結果だ
追加マーカーのない組織データセットを使用することで、4dデータを用いたディープラーニング手法が従来のアプローチを上回っています。
最も優れた4Dアーキテクチャは、従来の3Dディープラーニング手法の85.0%に比べて98.58%の相関係数(aCC)を達成する。
また,出力における時間的正規化戦略により,4次元モデルの性能は99.06%に向上した。
特に、4d法は大きな動きに対してうまく動作し,画像の回転や歪みに対して頑健である。
結論だ
OCTに基づく動き推定のための4次元時空間深度学習を提案する。
組織データセットでは、モデル入力に4D情報を使用することで、合理的な推論時間を維持しながら、性能が向上することがわかった。
我々の正規化戦略は、モデル出力において追加の時間情報も有益であることを示す。
関連論文リスト
- Diffusion4D: Fast Spatial-temporal Consistent 4D Generation via Video Diffusion Models [116.31344506738816]
高速でスケーラブルな4Dコンテンツ生成のための新しいフレームワーク textbfDiffusion4D を提案する。
ダイナミックな3Dアセットの軌道ビューを合成できる4D対応ビデオ拡散モデルを開発した。
提案手法は, 生成効率と4次元幾何整合性の観点から, 従来の最先端技術を超えている。
論文 参考訳(メタデータ) (2024-05-26T17:47:34Z) - CPT-Interp: Continuous sPatial and Temporal Motion Modeling for 4D Medical Image Interpolation [22.886841531680567]
4D医療画像からの運動情報は、臨床評価と放射線治療計画のための患者解剖学の動的変化に関する重要な洞察を提供する。
しかし、画像ハードウェアの物理的および技術的な制約は、時間分解能と画質の妥協を必要とすることが多い。
暗黙的神経表現を用いた患者解剖運動を連続的にモデル化するための新しい手法を提案する。
論文 参考訳(メタデータ) (2024-05-24T09:35:42Z) - Artifact Reduction in 3D and 4D Cone-beam Computed Tomography Images with Deep Learning -- A Review [0.0]
コーンビームCT(CBCT)における画像品質向上のための深層学習技術
本稿では,3次元のアーティファクトの削減に成功している深層学習技術の概要と,時間分解(4D)CBCTについて概説する。
この研究の重要な発見の1つは、GANやスコアベース、拡散モデルを含む生成モデルの利用に向けた観測傾向である。
論文 参考訳(メタデータ) (2024-03-27T13:46:01Z) - H4D: Human 4D Modeling by Learning Neural Compositional Representation [75.34798886466311]
この研究は、動的人間に対するコンパクトで構成的な表現を効果的に学習できる新しい枠組みを提示する。
単純で効果的な線形運動モデルを提案し, 粗く規則化された動き推定を行う。
本手法は, 高精度な動作と詳細な形状を持つ動的ヒトの回復に有効であるだけでなく, 様々な4次元人間関連タスクにも有効であることを示す。
論文 参考訳(メタデータ) (2022-03-02T17:10:49Z) - 4D Spatio-Temporal Convolutional Networks for Object Position Estimation
in OCT Volumes [69.62333053044712]
3次元畳み込みニューラルネットワーク(CNN)は、単一のOCT画像を用いたマーカーオブジェクトのポーズ推定に有望な性能を示した。
我々は3次元CNNを4次元時間CNNに拡張し、マーカーオブジェクト追跡のための追加の時間情報の影響を評価する。
論文 参考訳(メタデータ) (2020-07-02T12:02:20Z) - Deep learning with 4D spatio-temporal data representations for OCT-based
force estimation [59.405210617831656]
深層学習に基づく力推定の問題を,3D OCTボリュームのストリームを用いた4次元体積時間データに拡張する。
平均絶対誤差は10.7mNで, 4Dterm-temporalデータを用いた場合, 従来使用されていたデータ表現よりも優れていた。
論文 参考訳(メタデータ) (2020-05-20T13:30:36Z) - A Deep Learning Approach for Motion Forecasting Using 4D OCT Data [69.62333053044712]
我々は,OCTボリュームのストリームを用いたエンド・ツー・エンド動作予測と推定のための4次元時間深度学習を提案する。
提案手法は,全体の平均相関97.41%の動作予測を実現するとともに,従来の3D手法と比較して2.5倍の動作推定性能を向上する。
論文 参考訳(メタデータ) (2020-04-21T15:59:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。