論文の概要: Graph-Based Intercategory and Intermodality Network for Multilabel
Classification and Melanoma Diagnosis of Skin Lesions in Dermoscopy and
Clinical Images
- arxiv url: http://arxiv.org/abs/2104.00201v1
- Date: Thu, 1 Apr 2021 02:06:48 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-02 13:42:42.941686
- Title: Graph-Based Intercategory and Intermodality Network for Multilabel
Classification and Melanoma Diagnosis of Skin Lesions in Dermoscopy and
Clinical Images
- Title(参考訳): 皮膚内視鏡および臨床画像における皮膚病変のマルチラベル分類とメラノーマ診断のためのグラフベースカテゴリ間・インターモダリティネットワーク
- Authors: Xiaohang Fu, Lei Bi, Ashnil Kumar, Michael Fulham, and Jinman Kim
- Abstract要約: 7-point visual category checklist (7PC) によるメラノーマ診断
7pcは分類を支援するカテゴリ間の内在的な関係を含んでいる。
現在の最先端の手法は、1つの画像のモダリティに焦点を合わせ、他方からの情報を無視する。
本研究では,2つのモジュールを持つGIIN(Graph-based intercategory and Intermodality Network)を提案する。
- 参考スコア(独自算出の注目度): 10.164261744114645
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The identification of melanoma involves an integrated analysis of skin lesion
images acquired using the clinical and dermoscopy modalities. Dermoscopic
images provide a detailed view of the subsurface visual structures that
supplement the macroscopic clinical images. Melanoma diagnosis is commonly
based on the 7-point visual category checklist (7PC). The 7PC contains
intrinsic relationships between categories that can aid classification, such as
shared features, correlations, and the contributions of categories towards
diagnosis. Manual classification is subjective and prone to intra- and
interobserver variability. This presents an opportunity for automated methods
to improve diagnosis. Current state-of-the-art methods focus on a single image
modality and ignore information from the other, or do not fully leverage the
complementary information from both modalities. Further, there is not a method
to exploit the intercategory relationships in the 7PC. In this study, we
address these issues by proposing a graph-based intercategory and intermodality
network (GIIN) with two modules. A graph-based relational module (GRM)
leverages intercategorical relations, intermodal relations, and prioritises the
visual structure details from dermoscopy by encoding category representations
in a graph network. The category embedding learning module (CELM) captures
representations that are specialised for each category and support the GRM. We
show that our modules are effective at enhancing classification performance
using a public dataset of dermoscopy-clinical images, and show that our method
outperforms the state-of-the-art at classifying the 7PC categories and
diagnosis.
- Abstract(参考訳): メラノーマの同定には, 臨床および皮膚内視鏡検査で得られた皮膚病変の画像の統合的解析が関与する。
皮膚内視鏡画像は、マクロな臨床像を補う表面の視覚構造を詳細に観察する。
メラノーマの診断は一般に7-point visual category checklist (7pc)に基づいている。
7pcには、特徴の共有、相関、診断へのカテゴリの寄与など、分類を支援するカテゴリ間の固有の関係が含まれている。
手動の分類は主観的であり、生体内および生体内変動の傾向が強い。
これにより、診断を改善する自動化手法が提案される。
現在の最先端の手法は、単一の画像のモダリティに焦点を合わせ、他方からの情報を無視するか、あるいは両方のモダリティからの補完情報を十分に活用しない。
さらに、7PCにおけるカテゴリ間関係を利用する方法も存在しない。
本研究では,2つのモジュールでグラフベースの相互カテゴリ間ネットワーク(GIIN)を提案する。
グラフベースリレーショナルモジュール(grm)は、グラフネットワークでカテゴリ表現を符号化することにより、カテゴリ間関係、モード間関係を活用し、皮膚内視鏡から視覚構造詳細を優先する。
カテゴリ埋め込み学習モジュール(CELM)は、各カテゴリに特化した表現をキャプチャし、GRMをサポートする。
本手法は,dermoscopy-clinical imageの公開データセットを用いた分類性能の向上に有効であることを示し,7pc分類と診断における最先端技術を上回ることを示す。
関連論文リスト
- A Multimodal Approach For Endoscopic VCE Image Classification Using BiomedCLIP-PubMedBERT [0.62914438169038]
本稿では,マルチモーダルモデルであるBiomedCLIP PubMedBERTの微細調整によるビデオカプセル内視鏡フレームの異常の分類について述べる。
本手法では, 血管拡張症, 出血, エロージョン, エリテマ, 異物, リンパ管拡張症, ポリープ, 潰瘍, ワーム, 正常の10種類の画像に分類する。
分類、精度、リコール、F1スコアなどのパフォーマンス指標は、内視鏡フレームの異常を正確に識別する強力な能力を示している。
論文 参考訳(メタデータ) (2024-10-25T19:42:57Z) - Enhancing Multimodal Medical Image Classification using Cross-Graph Modal Contrastive Learning [5.660131312162423]
本稿では,マルチモーダルな医用画像分類のためのクロスグラフ・モーダルコントラスト学習フレームワークを提案する。
提案手法は、パーキンソン病(PD)データセットと公共メラノーマデータセットの2つのデータセットで評価される。
以上の結果から,CGMCLは従来手法よりも精度,解釈可能性,早期疾患予測に優れていたことが示唆された。
論文 参考訳(メタデータ) (2024-10-23T01:25:25Z) - Self-Supervised Multi-Modality Learning for Multi-Label Skin Lesion
Classification [15.757141597485374]
マルチモーダル皮膚病変分類のための自己教師付き学習アルゴリズムを提案する。
本アルゴリズムは,2対の皮膚内視鏡像と臨床像との類似性を最大化することにより,マルチモーダリティ学習を実現する。
以上の結果から,我々のアルゴリズムは最先端のSSLよりも優れた性能を示した。
論文 参考訳(メタデータ) (2023-10-28T04:16:08Z) - Multi-task Explainable Skin Lesion Classification [54.76511683427566]
少ないラベル付きデータでよく一般化する皮膚病変に対する数発のショットベースアプローチを提案する。
提案手法は,アテンションモジュールや分類ネットワークとして機能するセグメンテーションネットワークの融合を含む。
論文 参考訳(メタデータ) (2023-10-11T05:49:47Z) - Exploiting Causality Signals in Medical Images: A Pilot Study with
Empirical Results [1.2400966570867322]
本稿では,ニューラルネットワークによる分類目的の画像から弱い因果信号を発見し,利用するための新しい手法を提案する。
このようにして、画像の1つの部分における特徴の存在が、画像の別の部分における他の特徴の出現にどのように影響するかをモデル化する。
提案手法は,畳み込みニューラルネットワークのバックボーンと因果係数抽出モジュールから構成される。
論文 参考訳(メタデータ) (2023-09-19T08:00:26Z) - Graph-Ensemble Learning Model for Multi-label Skin Lesion Classification
using Dermoscopy and Clinical Images [7.159532626507458]
本研究では,グラフ畳み込みネットワーク(GCN)を導入し,相関行列として各カテゴリ間の先行的共起を多ラベル分類のためのディープラーニングモデルに活用する。
本稿では,GCNからの予測を融合モデルからの予測の補完情報とみなすグラフ・アンサンブル学習モデルを提案する。
論文 参考訳(メタデータ) (2023-07-04T13:19:57Z) - Self-Supervised Correction Learning for Semi-Supervised Biomedical Image
Segmentation [84.58210297703714]
半教師付きバイオメディカルイメージセグメンテーションのための自己教師付き補正学習パラダイムを提案する。
共有エンコーダと2つの独立デコーダを含むデュアルタスクネットワークを設計する。
異なるタスクのための3つの医用画像分割データセットの実験により,本手法の優れた性能が示された。
論文 参考訳(メタデータ) (2023-01-12T08:19:46Z) - Malignancy Prediction and Lesion Identification from Clinical
Dermatological Images [65.1629311281062]
臨床皮膚画像から機械学習に基づく悪性度予測と病変の同定を検討する。
まず, サブタイプや悪性度に関わらず画像に存在するすべての病変を同定し, その悪性度を推定し, 凝集により, 画像レベルの悪性度も生成する。
論文 参考訳(メタデータ) (2021-04-02T20:52:05Z) - G-MIND: An End-to-End Multimodal Imaging-Genetics Framework for
Biomarker Identification and Disease Classification [49.53651166356737]
診断によって誘導される画像データと遺伝データを統合し、解釈可能なバイオマーカーを提供する新しいディープニューラルネットワークアーキテクチャを提案する。
2つの機能的MRI(fMRI)パラダイムとSingle Nucleotide Polymorphism (SNP)データを含む統合失調症の集団研究で本モデルを評価した。
論文 参考訳(メタデータ) (2021-01-27T19:28:04Z) - Few-shot Medical Image Segmentation using a Global Correlation Network
with Discriminative Embedding [60.89561661441736]
医療画像分割のための新しい手法を提案する。
深層畳み込みネットワークを用いた数ショット画像セグメンタを構築します。
深層埋め込みの識別性を高め,同一クラスの特徴領域のクラスタリングを促進する。
論文 参考訳(メタデータ) (2020-12-10T04:01:07Z) - Weakly supervised multiple instance learning histopathological tumor
segmentation [51.085268272912415]
スライド画像全体のセグメント化のための弱教師付きフレームワークを提案する。
トレーニングモデルに複数のインスタンス学習スキームを利用する。
提案するフレームワークは,The Cancer Genome AtlasとPatchCamelyonデータセットのマルチロケーションとマルチ中心公開データに基づいて評価されている。
論文 参考訳(メタデータ) (2020-04-10T13:12:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。