論文の概要: LC-GAN: Image-to-image Translation Based on Generative Adversarial
Network for Endoscopic Images
- arxiv url: http://arxiv.org/abs/2003.04949v2
- Date: Thu, 13 Aug 2020 21:24:33 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-24 21:38:03.323088
- Title: LC-GAN: Image-to-image Translation Based on Generative Adversarial
Network for Endoscopic Images
- Title(参考訳): LC-GAN:画像から画像への変換による内視鏡画像の生成
- Authors: Shan Lin, Fangbo Qin, Yangming Li, Randall A. Bly, Kris S. Moe, Blake
Hannaford
- Abstract要約: 本稿では,GAN(Generative Adversarial Network)に基づくイメージ・ツー・イメージ翻訳モデルLive-cadaver GAN(LC-GAN)を提案する。
実写画像セグメンテーションでは,まずLC-GANを用いて,実写画像から実写画像に変換し,実写画像データセットで訓練したモデルを用いて偽写画像のセグメンテーションを行う。
提案手法は画像から画像への変換性が向上し,領域間セグメンテーションタスクにおけるセグメンテーション性能が向上する。
- 参考スコア(独自算出の注目度): 22.253074722129053
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Intelligent vision is appealing in computer-assisted and robotic surgeries.
Vision-based analysis with deep learning usually requires large labeled
datasets, but manual data labeling is expensive and time-consuming in medical
problems. We investigate a novel cross-domain strategy to reduce the need for
manual data labeling by proposing an image-to-image translation model
live-cadaver GAN (LC-GAN) based on generative adversarial networks (GANs). We
consider a situation when a labeled cadaveric surgery dataset is available
while the task is instrument segmentation on an unlabeled live surgery dataset.
We train LC-GAN to learn the mappings between the cadaveric and live images.
For live image segmentation, we first translate the live images to
fake-cadaveric images with LC-GAN and then perform segmentation on the
fake-cadaveric images with models trained on the real cadaveric dataset. The
proposed method fully makes use of the labeled cadaveric dataset for live image
segmentation without the need to label the live dataset. LC-GAN has two
generators with different architectures that leverage the deep feature
representation learned from the cadaveric image based segmentation task.
Moreover, we propose the structural similarity loss and segmentation
consistency loss to improve the semantic consistency during translation. Our
model achieves better image-to-image translation and leads to improved
segmentation performance in the proposed cross-domain segmentation task.
- Abstract(参考訳): インテリジェントビジョンは、コンピュータ支援とロボットの手術にアピールしている。
ディープラーニングを用いた視覚ベースの分析は通常、大きなラベル付きデータセットを必要とするが、手動データラベリングは高価で医療的な問題に時間を要する。
本稿では,画像から画像への変換モデルであるLive-cadaver GAN(LC-GAN)をGAN(Generative Adversarial Network)に基づいて提案することで,手動データラベリングの必要性を低減するための新たなクロスドメイン戦略を検討する。
ラベル付き手術データセットが利用可能である場合,そのタスクがラベル付き手術データセット上の機器セグメンテーションである場合を考える。
LC-GANをトレーニングして, キャデベリックとライブイメージのマッピングを学習する。
実画像のセグメンテーションでは,まず実画像からlc-ganを用いた偽画像に変換し,実画像データセットで学習したモデルを用いて偽画像のセグメンテーションを行う。
提案手法は,ライブデータセットのラベル付けを必要とせずに,ラベル付きカダベリックデータセットをライブイメージセグメンテーションに活用する。
LC-GANには異なるアーキテクチャを持つ2つのジェネレータがあり、カダベリック画像ベースセグメンテーションタスクから学んだ深い特徴表現を活用する。
さらに,翻訳中の意味的一貫性を改善するために,構造的類似性損失とセグメンテーション整合性損失を提案する。
提案手法は画像から画像への変換性が向上し,領域間セグメンテーションタスクにおけるセグメンテーション性能が向上する。
関連論文リスト
- Dual-scale Enhanced and Cross-generative Consistency Learning for Semi-supervised Medical Image Segmentation [49.57907601086494]
医用画像のセグメンテーションはコンピュータ支援診断において重要な役割を担っている。
半教師型医用画像(DEC-Seg)のための新しいDual-scale Enhanced and Cross-generative consistency learning frameworkを提案する。
論文 参考訳(メタデータ) (2023-12-26T12:56:31Z) - Dataset Diffusion: Diffusion-based Synthetic Dataset Generation for
Pixel-Level Semantic Segmentation [6.82236459614491]
テキストから画像への生成モデルであるStable Diffusionを用いて,ピクセルレベルのセマンティックセマンティックセマンティクスラベルを生成する手法を提案する。
テキストプロンプト,クロスアテンション,SDの自己アテンションを活用することで,クラスプロンプト付加,クラスプロンプト横断アテンション,自己アテンション指数の3つの新しい手法を導入する。
これらの手法により合成画像に対応するセグメンテーションマップを生成することができる。
論文 参考訳(メタデータ) (2023-09-25T17:19:26Z) - Improving CT Image Segmentation Accuracy Using StyleGAN Driven Data
Augmentation [42.034896915716374]
本稿では,公開可能な大規模医療データセットをセグメント化するためのStyleGANによるアプローチを提案する。
スタイル転送はトレーニングデータセットを拡張し、新しい解剖学的音声画像を生成するために使用される。
次に、拡張データセットを使用してU-Netセグメンテーションネットワークをトレーニングし、セグメンテーション精度を大幅に向上させる。
論文 参考訳(メタデータ) (2023-02-07T06:34:10Z) - Self-Supervised Correction Learning for Semi-Supervised Biomedical Image
Segmentation [84.58210297703714]
半教師付きバイオメディカルイメージセグメンテーションのための自己教師付き補正学習パラダイムを提案する。
共有エンコーダと2つの独立デコーダを含むデュアルタスクネットワークを設計する。
異なるタスクのための3つの医用画像分割データセットの実験により,本手法の優れた性能が示された。
論文 参考訳(メタデータ) (2023-01-12T08:19:46Z) - Extracting Semantic Knowledge from GANs with Unsupervised Learning [65.32631025780631]
GAN(Generative Adversarial Networks)は、特徴写像のセマンティクスを線形に分離可能な形でエンコードする。
本稿では,線形分離性を利用してGANの特徴をクラスタリングする新しいクラスタリングアルゴリズムKLiSHを提案する。
KLiSHは、さまざまなオブジェクトのデータセットに基づいてトレーニングされたGANのきめ細かいセマンティクスの抽出に成功している。
論文 参考訳(メタデータ) (2022-11-30T03:18:16Z) - Two-Stream Graph Convolutional Network for Intra-oral Scanner Image
Segmentation [133.02190910009384]
本稿では,2ストリームグラフ畳み込みネットワーク(TSGCN)を提案する。
TSGCNは3次元歯(表面)セグメンテーションにおいて最先端の方法よりも優れています。
論文 参考訳(メタデータ) (2022-04-19T10:41:09Z) - Enhancing MR Image Segmentation with Realistic Adversarial Data
Augmentation [17.539828821476224]
本稿では,学習データの利用効率を向上させるために,逆データ拡張手法を提案する。
本稿では,データ拡張モデルとセグメンテーションネットワークを協調的に最適化する汎用的なタスク駆動学習フレームワークを提案する。
提案した逆データ拡張は生成ネットワークに依存しず,汎用セグメンテーションネットワークのプラグインモジュールとして使用できる。
論文 参考訳(メタデータ) (2021-08-07T11:32:37Z) - Semantic Segmentation with Generative Models: Semi-Supervised Learning
and Strong Out-of-Domain Generalization [112.68171734288237]
本論文では,画像とラベルの再生モデルを用いた識別画素レベルのタスクのための新しいフレームワークを提案する。
我々は,共同画像ラベルの分布を捕捉し,未ラベル画像の大規模な集合を用いて効率的に訓練する生成的対向ネットワークを学習する。
ドメイン内性能をいくつかのベースラインと比較し,ドメイン外一般化を極端に示す最初の例である。
論文 参考訳(メタデータ) (2021-04-12T21:41:25Z) - Pairwise Relation Learning for Semi-supervised Gland Segmentation [90.45303394358493]
病理組織像における腺分節に対するPRS2モデルを提案する。
このモデルはセグメンテーションネットワーク(S-Net)とペア関係ネットワーク(PR-Net)から構成される。
我々は,GlaSデータセットの最近の5つの手法とCRAGデータセットの最近の3つの手法を比較した。
論文 参考訳(メタデータ) (2020-08-06T15:02:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。