論文の概要: A Vessel-Segmentation-Based CycleGAN for Unpaired Multi-modal Retinal
Image Synthesis
- arxiv url: http://arxiv.org/abs/2306.02901v1
- Date: Mon, 5 Jun 2023 14:06:43 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-06 14:44:40.645411
- Title: A Vessel-Segmentation-Based CycleGAN for Unpaired Multi-modal Retinal
Image Synthesis
- Title(参考訳): 血管分離型多モード網膜画像合成用サイクロンGAN
- Authors: Aline Sindel, Andreas Maier, Vincent Christlein
- Abstract要約: 網膜画像の非対位画像変換は、ディープラーニングベースの網膜登録方法のトレーニングデータセットを効率的に増加させることができる。
そこで本手法では,CycleGANフレームワークを拡張して,画像から画像への変換作業にコンテナセグメンテーションネットワークを組み込む。
- 参考スコア(独自算出の注目度): 11.225641274591101
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unpaired image-to-image translation of retinal images can efficiently
increase the training dataset for deep-learning-based multi-modal retinal
registration methods. Our method integrates a vessel segmentation network into
the image-to-image translation task by extending the CycleGAN framework. The
segmentation network is inserted prior to a UNet vision transformer generator
network and serves as a shared representation between both domains. We
reformulate the original identity loss to learn the direct mapping between the
vessel segmentation and the real image. Additionally, we add a segmentation
loss term to ensure shared vessel locations between fake and real images. In
the experiments, our method shows a visually realistic look and preserves the
vessel structures, which is a prerequisite for generating multi-modal training
data for image registration.
- Abstract(参考訳): 深層学習に基づくマルチモーダル網膜登録手法のトレーニングデータセットを効率よく向上させることができる。
提案手法は,CycleGANフレームワークを拡張して,画像から画像への変換タスクにコンテナセグメンテーションネットワークを統合する。
セグメンテーションネットワークは、unet vision transformer generator networkの前に挿入され、両方のドメイン間で共有表現として機能する。
本研究は,血管分割と実画像との直接マッピングを学習するために,元のアイデンティティ損失を再構成する。
さらに,偽画像と実画像との容器位置の共有を保証するセグメンテーション損失項を追加する。
実験では,画像登録のためのマルチモーダルトレーニングデータを生成するための前提条件である容器構造を視覚的にリアルに表現し,保存する。
関連論文リスト
- Distillation Learning Guided by Image Reconstruction for One-Shot Medical Image Segmentation [12.33442990188044]
1ショットの医用画像分割法(MIS)は、しばしば登録エラーや低品質の合成画像に悩まされる。
知識蒸留に基づく新しいワンショットMISフレームワークを提案する。
これは、画像再構成によって導かれる蒸留プロセスを通じて、ネットワークが実際の画像を直接「見る」ことを可能にする。
論文 参考訳(メタデータ) (2024-08-07T08:17:34Z) - Deep Domain Adaptation: A Sim2Real Neural Approach for Improving Eye-Tracking Systems [80.62854148838359]
眼球画像のセグメンテーションは、最終視線推定に大きな影響を及ぼす眼球追跡の重要なステップである。
対象視線画像と合成訓練データとの重なり合いを測定するために,次元還元法を用いている。
提案手法は,シミュレーションと実世界のデータサンプルの相違に対処する際の頑健で,性能が向上する。
論文 参考訳(メタデータ) (2024-03-23T22:32:06Z) - Unsupervised Segmentation of Fetal Brain MRI using Deep Learning
Cascaded Registration [2.494736313545503]
従来の深層学習に基づく自動セグメンテーションは、グランドトラストラベルによる広範なトレーニングデータを必要とする。
ラベル付きデータに頼らずに複数の組織を正確にセグメンテーションするマルチアトラスセグメンテーションに基づく新しい手法を提案する。
提案手法では,3次元画像登録のためのカスケード深層学習ネットワークを用いて,移動画像への小さなインクリメンタルな変形を計算し,それを固定画像と正確に整合させる。
論文 参考訳(メタデータ) (2023-07-07T13:17:12Z) - VesselMorph: Domain-Generalized Retinal Vessel Segmentation via
Shape-Aware Representation [12.194439938007672]
ドメインシフトは医療画像の本質的な特性であり、学習ベースのアルゴリズムを大規模に展開する上で大きな障害となっている。
形状認識表現を合成することにより2次元網膜血管セグメンテーションタスクを一般化するVesselMorphという手法を提案する。
VesselMorphは、異なるドメインシフトシナリオの競合するメソッドと比較して、優れた一般化性能を実現する。
論文 参考訳(メタデータ) (2023-07-01T06:02:22Z) - Unsupervised Domain Transfer with Conditional Invertible Neural Networks [83.90291882730925]
条件付き可逆ニューラルネットワーク(cINN)に基づくドメイン転送手法を提案する。
提案手法は本質的に,その可逆的アーキテクチャによるサイクル一貫性を保証し,ネットワークトレーニングを最大限効率的に行うことができる。
提案手法は,2つの下流分類タスクにおいて,現実的なスペクトルデータの生成を可能にし,その性能を向上する。
論文 参考訳(メタデータ) (2023-03-17T18:00:27Z) - Self-Supervised Correction Learning for Semi-Supervised Biomedical Image
Segmentation [84.58210297703714]
半教師付きバイオメディカルイメージセグメンテーションのための自己教師付き補正学習パラダイムを提案する。
共有エンコーダと2つの独立デコーダを含むデュアルタスクネットワークを設計する。
異なるタスクのための3つの医用画像分割データセットの実験により,本手法の優れた性能が示された。
論文 参考訳(メタデータ) (2023-01-12T08:19:46Z) - Cross-Modal Fusion Distillation for Fine-Grained Sketch-Based Image
Retrieval [55.21569389894215]
本稿では,視覚変換器(XModalViT)のクロスアテンションフレームワークを提案する。
我々のフレームワークはまず、個々の写真からペア化されたデータポイントをマッピングし、両方のモダリティから情報を統一する融合表現にスケッチする。
次に、上記のモダリティ融合ネットワークの入力空間を、コントラストおよびリレーショナルなクロスモーダル知識蒸留により個々のモダリティの独立エンコーダに分離する。
論文 参考訳(メタデータ) (2022-10-19T11:50:14Z) - Unsupervised Multi-Modal Medical Image Registration via
Discriminator-Free Image-to-Image Translation [4.43142018105102]
本稿では,複数モーダル登録問題をモノモーダル画像に変換するための,新しい翻訳に基づく教師なしデフォルマブル画像登録手法を提案する。
提案手法では,登録ネットワークのトレーニングを容易にするために,識別不要な翻訳ネットワークと,オブジェクトの形状を保たせるためのパッチワイドなコントラスト損失が組み込まれている。
論文 参考訳(メタデータ) (2022-04-28T17:18:21Z) - Unsupervised Domain Adaptation with Contrastive Learning for OCT
Segmentation [49.59567529191423]
本稿では,新しい未ラベル領域からのボリューム画像のセグメンテーションのための,新しい半教師付き学習フレームワークを提案する。
教師付き学習とコントラスト学習を併用し、3次元の近傍スライス間の類似性を利用したコントラストペア方式を導入する。
論文 参考訳(メタデータ) (2022-03-07T19:02:26Z) - Image-to-image Mapping with Many Domains by Sparse Attribute Transfer [71.28847881318013]
教師なし画像と画像の変換は、2つの領域間の一対のマッピングを、ポイント間の既知のペアワイズ対応なしで学習することで構成される。
現在の慣例は、サイクル一貫性のあるGANでこのタスクにアプローチすることです。
そこで本研究では,ジェネレータを直接,潜在層における単純なスパース変換に制限する代替手法を提案する。
論文 参考訳(メタデータ) (2020-06-23T19:52:23Z) - Image Embedded Segmentation: Uniting Supervised and Unsupervised
Objectives for Segmenting Histopathological Images [0.0]
本稿では,意味組織分割のための完全畳み込みネットワークを学習するための新しい正規化手法を提案する。
これは教師なし学習(イメージ再構成)の利点をネットワークトレーニングに頼っている。
我々の実験は、これらのデータセットのセグメンテーション結果が、データセットのセグメンテーション結果よりも優れていることを示した。
論文 参考訳(メタデータ) (2020-01-30T08:09:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。