論文の概要: CaseScope: A Multi-Field Benchmark for Case-Level Pathology Diagnosis with Multimodal LLMs
- arxiv url: http://arxiv.org/abs/2611.15325v1
- Date: Wed, 11 Nov 2026 11:04:30 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-14 01:36:33.108729
- Title: CaseScope: A Multi-Field Benchmark for Case-Level Pathology Diagnosis with Multimodal LLMs
- Title(参考訳): CaseScope: マルチモーダルLCMを用いたケースレベル診断のためのマルチフィールドベンチマーク
- Abstract要約: CaseScopeは1つの病変のいくつかの治癒部位からの診断のベンチマークである。
18の臓器システムで843のエンティティをカバーし、6つのタスクで4,679のアイテムをポーズします。
28のオープンと4つのプロプライエタリなMLLMで診断は不安定である。
- 参考スコア(独自算出の注目度): 26.57623624112992
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Pathologists rarely diagnose from a single image: they scan a section at low power for architecture, zoom into selected fields for cytology, and integrate the evidence across views and scales. Pathology benchmarks for multimodal large language models (MLLMs), however, mostly ask about one image or require whole-slide pipelines, and the few that show several fields draw nested regions from cancer slides of one public cohort. We introduce CaseScope, a benchmark of diagnosis from several curated fields of one lesion: CaseScope-Teaching, 436 cases from a residency-training image library, reconstructed, de-identified, harmonised against a WHO-based ontology and re-examined by a pathologist wherever an automated pre-review raised a doubt, and CaseScope-Atlas, 800 cases from 88 published atlases (387 of them figure series of one disease), labelled from the captions by two LLMs that must agree. They cover 843 entities across 18 organ systems and pose 4,679 items in six tasks, from open-ended and ten-way diagnosis with ontology-guided hard negatives under circular evaluation to the verification and location of morphological findings. Across twenty-eight open and four proprietary MLLMs, diagnoses are unstable -- the best open and proprietary models are correct under all ten option rotations on 17.9% and 61.7% of the teaching cases -- and wrong answers favour the classic look-alike; open models make little use of the additional fields on teaching cases, where the one-line specimen site matters more, although on atlas cases with three or more fields the fields count about as much as the site; and most open models verify findings barely above chance (median 62.0% vs. 50%, best 81.5%), gaining a median +3.4 points from images; proprietary models reach 83.2-93.2%. Rankings broadly replicate between the sources. The evaluation code is available at https://github.com/Wenchuan-Zhang/CaseScope.
- Abstract(参考訳): 病理学者は単一の画像から診断することは滅多になく、建築の低消費電力領域をスキャンし、細胞学のために選択された分野に拡大し、ビューとスケールにまたがる証拠を統合する。
しかし、MLLM(Multimodal large language model)の病理ベンチマークでは、主に1つのイメージを問うか、全体スライディングパイプラインを必要とするが、いくつかのフィールドが1つのパブリックコホートのがんスライドからネストした領域を描画している。
CaseScope-Teaching, 436 CaseScope from a residencency-training image library, restructed, de-identified, harmonized against a WHO-based ontology and re-examineed by a pathologist where see a automated pre-review a doubt, and CaseScope-Atlas, 800 CaseScope-Atlas, 800 CaseScope-Teaching, 800 CaseScope, 800 CaseScope, 800 CaseScope, 800 CaseScope-Teaching, 800 CaseScope-Teaching, 800 CaseScope-Teaching, 800 CaseScope, 800 CaseScope-Atlas, 800 CaseScope-Atlas,
18の臓器系に843の実体を包含し、6つのタスクで4,679の項目を呈する。
28のオープンと4つのプロプライエタリなMLLMの中で、最良のオープンとプロプライエタリなモデルは17.9%と61.7%のオプションローテーションで正当であり、間違った答えは古典的なルックアップを好んでおり、オープンモデルは1行の検体サイトがより重要となる教育ケースのフィールドをほとんど利用していない。
ランクはソース間で広範囲に複製される。
評価コードはhttps://github.com/Wenchuan-Zhang/CaseScope.comで公開されている。
関連論文リスト
- EndoSCOP-V: A Multi-Turn Video Understanding Evaluation Framework for Multimodal Models in Endoscopy Reporting and Clinical Reasoning [0.4548179929410021]
EndoSCOP-Vは、構造化内視鏡レポートと臨床推論のためのビデオグラウンド評価フレームワークである。
実際の内視鏡と大腸内視鏡(63.2 h; 97% 1080p)が1,307本あり、平均174秒である。
20,274個の問合せ用ターンは、臨床に埋もれた構造の内視鏡を報告するERHから決定的に決定される。
論文 参考訳(メタデータ) (2026-11-07T10:05:46Z) - A Visual Grounding Benchmark for Retinal OCT with Multimodal Large Language Models [2.000261414147809]
RetinaBenchは、網膜光コヒーレンストモグラフィーにおけるバイオマーカー視覚接地のための最初のベンチマークである。
眼科医によって徹底的に注釈付けされた815個のBスキャンと、8つの疾患にまたがる13のバイオマーカーをカバーする4,537個のバウンディングボックスからなる。
27のオープンソースMLLM(0.8-38Bパラメータ)のうち、視覚的接地は未解決のままである。
論文 参考訳(メタデータ) (2026-10-22T12:54:19Z) - Pathology foundation models for training-free case retrieval in salivary gland tumors [0.6487995031878866]
病理学者は、興味のある領域を使ってデジタル化されたアーカイブを問い合わせ、ICD-Oコードと対応するWSIとともに形態学的に類似したケースを検索することができる。
ICD-O型12例を対象に, 唾液腺腫瘍の非平衡データセットを用いて, ケースアウトによるアプローチの評価を行った。
論文 参考訳(メタデータ) (2026-10-15T15:40:48Z) - Representation-guided in-context learning for medical image interpretation with multimodal large language models [51.36834689637422]
表現誘導型インコンテキスト学習(RG-ICL)は、凍結エンコーダを用いてクエリアラインなデモを検索する。
RG-ICLは、非文脈や従来のICLよりも分類(平均20ポイント)と視覚的質問応答(VQA)を改善した。
論文 参考訳(メタデータ) (2026-09-21T03:34:38Z) - WILSON - a pathology foundation model framework for patient-level analysis and diagnostic text generation [2.6818590550135206]
WILSONは視覚言語基盤モデルであり, 単一多重化複合画像として全スライディング画像と多スライディングケースを表現している。
ウィルソンはスライドレベルのモデルを272倍から2,155倍の計算で最大9.4倍まで大きくした。
論文 参考訳(メタデータ) (2026-09-20T16:01:04Z) - PanCanBench: A Comprehensive Benchmark for Evaluating Large Language Models in Pancreatic Oncology [48.732366302949515]
大規模言語モデル(LLM)は、標準化された検査において専門家レベルの性能を達成したが、複数の選択精度は現実の臨床的有用性や安全性を十分に反映していない。
我々は、未確認患者の質問に対して、専門家のルーブリックを作成するための、ループ内人間パイプラインを開発した。
LLM-as-a-judge フレームワークを用いて,22のプロプライエタリおよびオープンソース LLM の評価を行い,臨床完全性,事実精度,Web-search 統合について検討した。
論文 参考訳(メタデータ) (2026-03-02T00:50:39Z) - Boosting Pathology Foundation Models via Few-shot Prompt-tuning for Rare Cancer Subtyping [80.92960114162746]
視覚言語病理基盤モデルの可能性を生かした新しいフレームワークPathPTを提案する。
PathPTは、WSIレベルの監視を、VLモデルのゼロショット機能を活用することで、きめ細かいタイルレベルのガイダンスに変換する。
以上の結果から,PathPTは一貫して優れた性能を示し,サブタイピング精度と癌領域の接地能力を著しく向上することが示された。
論文 参考訳(メタデータ) (2025-08-21T18:04:41Z) - Federated Learning Enables Big Data for Rare Cancer Boundary Detection [98.5549882883963]
6大陸にわたる71の医療機関のデータを含む,これまでで最大のフェデレーテッドML研究の結果を報告する。
グリオ芽腫の稀な疾患に対する腫瘍境界自動検出装置を作製した。
当科では, 外科的に標的とした腫瘍の悪性度を高めるために, 33%の改善率を示し, 腫瘍全体に対する23%の改善率を示した。
論文 参考訳(メタデータ) (2022-04-22T17:27:00Z) - WSSS4LUAD: Grand Challenge on Weakly-supervised Tissue Semantic
Segmentation for Lung Adenocarcinoma [51.50991881342181]
この課題には10,091個のパッチレベルのアノテーションと1300万以上のラベル付きピクセルが含まれる。
第一位チームは0.8413mIoUを達成した(腫瘍:0.8389、ストーマ:0.7931、正常:0.8919)。
論文 参考訳(メタデータ) (2022-04-13T15:27:05Z) - A Multi-resolution Model for Histopathology Image Classification and
Localization with Multiple Instance Learning [9.36505887990307]
精度マップを利用して不審な地域を検知し,詳細なグレード予測を行うマルチレゾリューション・マルチインスタンス学習モデルを提案する。
このモデルは、830人の患者から20,229のスライドを含む大規模前立腺生検データセットに基づいて開発された。
このモデルは92.7%の精度、良性、低等級(中等級)、高等級(中等級)のCohen's Kappa、98.2%の受信機動作特性曲線(AUROC)、平均精度(AP)97.4%の予測を達成した。
論文 参考訳(メタデータ) (2020-11-05T06:42:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。