論文の概要: Understanding metric-related pitfalls in image analysis validation
- arxiv url: http://arxiv.org/abs/2302.01790v1
- Date: Fri, 3 Feb 2023 14:57:40 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-06 16:02:35.702427
- Title: Understanding metric-related pitfalls in image analysis validation
- Title(参考訳): 画像解析検証におけるメトリクス関連落とし穴の理解
- Authors: Annika Reinke, Minu D. Tizabi, Michael Baumgartner, Matthias
Eisenmann, Doreen Heckmann-N\"otzel, A. Emre Kavu, Tim R\"adsch, Carole H.
Sudre, Laura Acion, Michela Antonelli, Tal Arbel, Spyridon Bakas, Arriel
Benis, Matthew Blaschko, Florian B\"uttner, M. Jorge Cardoso, Veronika
Cheplygina, Jianxu Chen, Evangelia Christodoulou, Beth A. Cimini, Gary S.
Collins, Keyvan Farahani, Luciana Ferrer, Adrian Galdran, Bram van Ginneken,
Ben Glocker, Patrick Godau, Robert Haase, Daniel A. Hashimoto, Michael M.
Hoffman, Merel Huisman, Fabian Isensee, Pierre Jannin, Charles E. Kahn,
Dagmar Kainmueller, Bernhard Kainz, Alexandros Karargyris, Alan
Karthikesalingam, Hannes Kenngott, Jens Kleesiek, Florian Kofler, Thijs Kooi,
Annette Kopp-Schneider, Michal Kozubek, Anna Kreshuk, Tahsin Kurc, Bennett A.
Landman, Geert Litjens, Amin Madani, Klaus Maier-Hein, Anne L. Martel, Peter
Mattson, Erik Meijering, Bjoern Menze, Karel G.M. Moons, Henning M\"uller,
Brennan Nichyporuk, Felix Nickel, Jens Petersen, Susanne M. Rafelski, Nasir
Rajpoot, Mauricio Reyes, Michael A. Riegler, Nicola Rieke, Julio
Saez-Rodriguez, Clara I. S\'anchez, Shravya Shetty, Maarten van Smeden,
Ronald M. Summers, Abdel A. Taha, Aleksei Tiulpin, Sotirios A. Tsaftaris, Ben
Van Calster, Ga\"el Varoquaux, Manuel Wiesenfarth, Ziv R. Yaniv, Paul F.
J\"ager, Lena Maier-Hein
- Abstract要約: この研究は、画像解析におけるバリデーションメトリクスに関連する落とし穴に関する情報にアクセスするための、初めての包括的な共通点を提供する。
バイオメディカル画像解析に焦点をあてるが、他の分野へ移行する可能性があるため、対処された落とし穴はアプリケーションドメイン全体にわたって一般化され、新しく作成されたドメインに依存しない分類に分類される。
- 参考スコア(独自算出の注目度): 56.306099826925056
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Validation metrics are key for the reliable tracking of scientific progress
and for bridging the current chasm between artificial intelligence (AI)
research and its translation into practice. However, increasing evidence shows
that particularly in image analysis, metrics are often chosen inadequately in
relation to the underlying research problem. This could be attributed to a lack
of accessibility of metric-related knowledge: While taking into account the
individual strengths, weaknesses, and limitations of validation metrics is a
critical prerequisite to making educated choices, the relevant knowledge is
currently scattered and poorly accessible to individual researchers. Based on a
multi-stage Delphi process conducted by a multidisciplinary expert consortium
as well as extensive community feedback, the present work provides the first
reliable and comprehensive common point of access to information on pitfalls
related to validation metrics in image analysis. Focusing on biomedical image
analysis but with the potential of transfer to other fields, the addressed
pitfalls generalize across application domains and are categorized according to
a newly created, domain-agnostic taxonomy. To facilitate comprehension,
illustrations and specific examples accompany each pitfall. As a structured
body of information accessible to researchers of all levels of expertise, this
work enhances global comprehension of a key topic in image analysis validation.
- Abstract(参考訳): 検証メトリクスは、科学的進歩の信頼できる追跡と、人工知能(AI)研究とその実践への翻訳の間の現在の亀裂をブリッジするための鍵である。
しかし、画像解析において、基礎となる研究問題に関してメトリクスが不十分に選択されることが証明されている。
個々の強み、弱点、バリデーションメトリクスの制限を考慮に入れることは、教育的な選択を行う上で重要な前提条件であるが、関連する知識は現在分散しており、個々の研究者にはアクセスできない。
本研究は,多分野の専門家コンソーシアムによる多段階Delphiプロセスと広範なコミュニティフィードバックに基づいて,画像解析における検証メトリクスに関連する落とし穴に関する情報への信頼性と包括的な共通点を提供する。
生物医学的な画像解析に焦点をあてるが、他の分野に転移する可能性があり、アドレス付き落とし穴はアプリケーションドメイン全体に一般化し、新しく作成されたドメインに依存しない分類法に従って分類される。
各落とし穴に付随する理解、イラスト、具体例を容易にする。
あらゆるレベルの専門知識を持つ研究者がアクセス可能な構造化された情報体系として、この研究は、画像分析バリデーションにおける重要なトピックのグローバル理解を強化する。
関連論文リスト
- Unity in Diversity: Multi-expert Knowledge Confrontation and Collaboration for Generalizable Vehicle Re-identification [32.80872775195836]
一般化可能な車両再識別(ReID)は、様々なソースドメインでよく訓練されたモデルが、未知のターゲットドメインに広く適応できるようにすることを目的としている。
依然としてドメインシフトの問題に直面しており、未知のターゲットドメインに正確に一般化することは困難である。
本稿では,2段階のMulti-expert Knowledge Confrontation and Collaboration (MiKeCoCo)法を提案する。
論文 参考訳(メタデータ) (2024-07-10T04:06:39Z) - Human Body Pose Estimation for Gait Identification: A Comprehensive
Survey of Datasets and Models [4.17510581764131]
個人識別は特にセキュリティ領域において大きな注目を集めている問題である。
顔画像、シルエット画像、ウェアラブルセンサーの利用など、人物識別に対処するいくつかのレビュー研究がある。
従来のアプローチの課題を克服しながら、骨格に基づく人物識別が人気を博しているが、既存の調査では歩行識別に対する骨格に基づくアプローチの包括的なレビューが欠如している。
論文 参考訳(メタデータ) (2023-05-23T07:30:00Z) - Modeling Multiple Views via Implicitly Preserving Global Consistency and
Local Complementarity [61.05259660910437]
複数の視点から表現を学習するために,グローバルな一貫性と相補性ネットワーク(CoCoNet)を提案する。
グローバルな段階では、重要な知識はビュー間で暗黙的に共有され、そのような知識を捕捉するためのエンコーダの強化は、学習された表現の識別性を向上させることができる。
最後に、局所的な段階において、横断的な識別的知識を結合する相補的要素を提案し、また、エンコーダが視点的識別性だけでなく、横断的な相補的情報も学習するように誘導する。
論文 参考訳(メタデータ) (2022-09-16T09:24:00Z) - Variational Distillation for Multi-View Learning [104.17551354374821]
我々は,多視点表現学習における2つの重要な特徴を利用するために,様々な情報ボトルネックを設計する。
厳密な理論的保証の下で,本手法は,観察とセマンティックラベルの内在的相関の把握を可能にする。
論文 参考訳(メタデータ) (2022-06-20T03:09:46Z) - Metrics reloaded: Recommendations for image analysis validation [59.60445111432934]
メトリクスのリロード(Metrics Reloaded)は、メトリクスの問題を意識した選択において研究者を導く包括的なフレームワークである。
このフレームワークは多段階のDelphiプロセスで開発され、問題指紋という新しい概念に基づいている。
問題指紋に基づいて、ユーザは適切なバリデーションメトリクスを選択して適用するプロセスを通じてガイドされる。
論文 参考訳(メタデータ) (2022-06-03T15:56:51Z) - Link Analysis meets Ontologies: Are Embeddings the Answer? [0.0]
本稿では,構造のみのリンク解析手法が,可能な異常を検出するためのスケーラブルな手段を提供することができるかどうかを,体系的に評価する。
構造のみのリンク解析により、データセットのサブセットに対してスケーラブルな異常検出が可能になることを実証する。
これは、異なるドメインのセマンティックリソースにまたがる様々なタイプのリンク分析手法の適用性に関する最も広範な研究の1つである。
論文 参考訳(メタデータ) (2021-11-23T08:05:43Z) - Common Limitations of Image Processing Metrics: A Picture Story [58.83274952067888]
本論文は, 画像レベルの分類, セマンティックセグメンテーション, インスタンスセグメンテーション, オブジェクト検出タスクと表現できるバイオメディカル画像解析問題に焦点を当てる。
現在のバージョンは、世界中の60以上の機関からの画像分析の専門家からなる国際コンソーシアムが実施するメトリクスに関するDelphiプロセスに基づいている。
論文 参考訳(メタデータ) (2021-04-12T17:03:42Z) - Evaluation of Complexity Measures for Deep Learning Generalization in
Medical Image Analysis [77.34726150561087]
PAC-ベイズ平坦度とパスノルムに基づく測度は、モデルとデータの組み合わせについて最も一貫した説明をもたらす。
また,乳房画像に対するマルチタスク分類とセグメンテーションのアプローチについても検討した。
論文 参考訳(メタデータ) (2021-03-04T20:58:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。