論文の概要: Panoptic Feature Fusion Net: A Novel Instance Segmentation Paradigm for
Biomedical and Biological Images
- arxiv url: http://arxiv.org/abs/2002.06345v2
- Date: Fri, 1 Jan 2021 10:14:24 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-31 23:09:59.617450
- Title: Panoptic Feature Fusion Net: A Novel Instance Segmentation Paradigm for
Biomedical and Biological Images
- Title(参考訳): Panoptic Feature Fusion Net: バイオメディカルおよび生物学的画像のための新しいインスタンスセグメンテーションパラダイム
- Authors: Dongnan Liu, Donghao Zhang, Yang Song, Heng Huang, Weidong Cai
- Abstract要約: 本稿では,本研究における意味的特徴とインスタンス的特徴を統一するPanoptic Feature Fusion Net(PFFNet)を提案する。
提案するPFFNetには,インスタンス予測を意味的特徴に組み込むための残注意特徴融合機構が組み込まれている。
様々なバイオメディカルおよび生物学的データセットにおいて、最先端のいくつかの手法を上回ります。
- 参考スコア(独自算出の注目度): 91.41909587856104
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Instance segmentation is an important task for biomedical and biological
image analysis. Due to the complicated background components, the high
variability of object appearances, numerous overlapping objects, and ambiguous
object boundaries, this task still remains challenging. Recently, deep learning
based methods have been widely employed to solve these problems and can be
categorized into proposal-free and proposal-based methods. However, both
proposal-free and proposal-based methods suffer from information loss, as they
focus on either global-level semantic or local-level instance features. To
tackle this issue, we present a Panoptic Feature Fusion Net (PFFNet) that
unifies the semantic and instance features in this work. Specifically, our
proposed PFFNet contains a residual attention feature fusion mechanism to
incorporate the instance prediction with the semantic features, in order to
facilitate the semantic contextual information learning in the instance branch.
Then, a mask quality sub-branch is designed to align the confidence score of
each object with the quality of the mask prediction. Furthermore, a consistency
regularization mechanism is designed between the semantic segmentation tasks in
the semantic and instance branches, for the robust learning of both tasks.
Extensive experiments demonstrate the effectiveness of our proposed PFFNet,
which outperforms several state-of-the-art methods on various biomedical and
biological datasets.
- Abstract(参考訳): サンプルセグメンテーションはバイオメディカルおよび生物学的画像解析において重要な課題である。
複雑な背景コンポーネント、オブジェクトの外観のばらつき、多数の重複したオブジェクト、あいまいなオブジェクト境界のため、このタスクは依然として困難である。
近年,これらの問題を解決するために深層学習に基づく手法が広く採用されており,提案を含まない手法や提案に基づく手法に分類することができる。
しかしながら、プロポーザルフリーとプロポーザルベースの両方のメソッドは、グローバルレベルのセマンティクスとローカルレベルのインスタンス機能の両方に焦点を当てているため、情報損失に苦しめられている。
この問題に対処するために,本研究のセマンティック機能とインスタンス機能を統合するPanoptic Feature Fusion Net(PFFNet)を提案する。
具体的には,提案するPFFNetには,インスタンス分岐における意味的文脈情報学習を容易にするために,インスタンス予測を意味的特徴に組み込むための残注意特徴融合機構が備わっている。
次に、各被写体の信頼度とマスク予測の質とを整合させるマスク品質サブブランチを設計する。
さらに、両タスクの堅牢な学習のために、セマンティクスブランチとインスタンスブランチのセマンティクスセグメンテーションタスク間の一貫性の正規化メカニズムも設計されている。
各種バイオメディカルおよび生物学的データセットの最先端手法より優れたPFFNetの有効性を示した。
関連論文リスト
- YOLO-MED : Multi-Task Interaction Network for Biomedical Images [18.535117490442953]
YOLO-Medは、オブジェクト検出とセマンティックセグメンテーションを同時に行うことができる効率的なエンドツーエンドマルチタスクネットワークである。
Kvasir-segデータセットとプライベートバイオメディカルイメージデータセットで評価すると,精度と速度のバランスが期待できる結果が得られた。
論文 参考訳(メタデータ) (2024-03-01T03:20:42Z) - Self-supervised Semantic Segmentation: Consistency over Transformation [3.485615723221064]
Inception Large Kernel Attention (I-LKA) モジュールをベースとしたロバストなフレームワークを統合した新しい自己教師型アルゴリズム textbfS$3$-Net を提案する。
我々は、変形可能な畳み込みを積分成分として利用し、優れた物体境界定義のための歪み変形を効果的に捕捉し、デライン化する。
皮膚病変および肺臓器の分節タスクに関する実験結果から,SOTA法と比較して,本手法の優れた性能を示した。
論文 参考訳(メタデータ) (2023-08-31T21:28:46Z) - Masked Momentum Contrastive Learning for Zero-shot Semantic
Understanding [39.424931953675994]
自己教師付き事前学習(SSP)は、ラベル付きデータなしで有意義な特徴表現を抽出できる機械学習の一般的な手法として登場した。
本研究は、コンピュータビジョンタスクにおける純粋な自己教師付き学習(SSL)技術の有効性を評価する。
論文 参考訳(メタデータ) (2023-08-22T13:55:57Z) - Part-guided Relational Transformers for Fine-grained Visual Recognition [59.20531172172135]
識別的特徴を学習し,特徴変換モジュールとの相関関係を探索するフレームワークを提案する。
提案手法は,3-of-the-levelオブジェクト認識において,部分ブランチの追加に頼らず,最先端の性能に達する。
論文 参考訳(メタデータ) (2022-12-28T03:45:56Z) - Reliable Shot Identification for Complex Event Detection via
Visual-Semantic Embedding [72.9370352430965]
本稿では,映像中の事象検出のための視覚的意味的誘導損失法を提案する。
カリキュラム学習に動機付け,高い信頼性の事例で分類器の訓練を開始するために,負の弾性正規化項を導入する。
提案する非ネット正規化問題の解法として,代替最適化アルゴリズムを開発した。
論文 参考訳(メタデータ) (2021-10-12T11:46:56Z) - Semantic Attention and Scale Complementary Network for Instance
Segmentation in Remote Sensing Images [54.08240004593062]
本稿では,セマンティックアテンション(SEA)モジュールとスケール補完マスクブランチ(SCMB)で構成される,エンドツーエンドのマルチカテゴリインスタンスセグメンテーションモデルを提案する。
SEAモジュールは、機能マップ上の興味あるインスタンスのアクティベーションを強化するために、追加の監督を備えた、単純な完全な畳み込みセマンティックセマンティックセマンティクスブランチを含んでいる。
SCMBは、元のシングルマスクブランチをトリデントマスクブランチに拡張し、異なるスケールで補完マスクの監視を導入する。
論文 参考訳(メタデータ) (2021-07-25T08:53:59Z) - RethNet: Object-by-Object Learning for Detecting Facial Skin Problems [1.6114012813668934]
11種類の顔面皮膚病変を検出するためのオブジェクト・バイ・オブジェクト・ラーニング手法を提案する。
提案モデルは,deeplab v3+よりも15.34%向上した,データセットテストで79.46%のmiouに到達した。
論文 参考訳(メタデータ) (2021-01-06T16:41:03Z) - Mixup-CAM: Weakly-supervised Semantic Segmentation via Uncertainty
Regularization [73.03956876752868]
我々は、ネットワークがオブジェクトの他の部分に注意を払うことを可能にする、原則的でエンドツーエンドのトレーニング可能なフレームワークを提案する。
具体的には、ミックスアップデータ拡張方式を分類ネットワークに導入し、2つの不確実な正規化項を設計し、ミックスアップ戦略をよりよく扱う。
論文 参考訳(メタデータ) (2020-08-03T21:19:08Z) - Weakly-Supervised Semantic Segmentation via Sub-category Exploration [73.03956876752868]
我々は、オブジェクトの他の部分に注意を払うために、ネットワークを強制する単純で効果的なアプローチを提案する。
具体的には、画像の特徴をクラスタリングして、アノテーション付き親クラスごとに擬似サブカテゴリラベルを生成する。
提案手法の有効性を検証し,提案手法が最先端手法に対して良好に機能することを示す。
論文 参考訳(メタデータ) (2020-08-03T20:48:31Z) - NINEPINS: Nuclei Instance Segmentation with Point Annotations [2.19221864553448]
本稿では,ポイントアノテーションから自動生成される擬似ラベルセグメンテーションを用いたサンプルセグメンテーションのアルゴリズムを提案する。
生成されたセグメンテーションマスクを用いて、提案手法は、インスタンスセグメンテーションを実現するために、HoVer-Netモデルの修正版を訓練する。
実験結果から,提案手法はポイントアノテーションの不正確性に対して頑健であり,完全注釈付きインスタンスマスクを用いたHover-Netと比較すると,セグメンテーション性能の劣化が必ずしも組織分類などの高次タスクの劣化を意味するとは限らないことが示唆された。
論文 参考訳(メタデータ) (2020-06-24T08:28:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。