論文の概要: MTNeuro: A Benchmark for Evaluating Representations of Brain Structure
Across Multiple Levels of Abstraction
- arxiv url: http://arxiv.org/abs/2301.00345v1
- Date: Sun, 1 Jan 2023 04:54:03 GMT
- ステータス: 翻訳完了
- システム内更新日: 2023-01-03 14:18:08.855795
- Title: MTNeuro: A Benchmark for Evaluating Representations of Brain Structure
Across Multiple Levels of Abstraction
- Title(参考訳): MTNeuro: 複数の抽象化レベルにわたる脳構造の表現評価ベンチマーク
- Abstract要約: 脳のマッピングでは、画像を自動的に解析して、小さな特徴とグローバルな特性の両方の表現を構築することは、決定的かつオープンな課題である。
我々のベンチマーク(MTNeuro)は、マウス脳の広い領域にまたがる体積分解能X線マイクロトモグラフィー画像に基づいている。
我々は様々な予測課題を生み出し、脳領域予測と画素レベルの微構造セマンティックセマンティックセグメンテーションのための教師付きおよび自己教師型モデルを評価した。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: There are multiple scales of abstraction from which we can describe the same
image, depending on whether we are focusing on fine-grained details or a more
global attribute of the image. In brain mapping, learning to automatically
parse images to build representations of both small-scale features (e.g., the
presence of cells or blood vessels) and global properties of an image (e.g.,
which brain region the image comes from) is a crucial and open challenge.
However, most existing datasets and benchmarks for neuroanatomy consider only a
single downstream task at a time. To bridge this gap, we introduce a new
dataset, annotations, and multiple downstream tasks that provide diverse ways
to readout information about brain structure and architecture from the same
image. Our multi-task neuroimaging benchmark (MTNeuro) is built on volumetric,
micrometer-resolution X-ray microtomography images spanning a large
thalamocortical section of mouse brain, encompassing multiple cortical and
subcortical regions. We generated a number of different prediction challenges
and evaluated several supervised and self-supervised models for brain-region
prediction and pixel-level semantic segmentation of microstructures. Our
experiments not only highlight the rich heterogeneity of this dataset, but also
provide insights into how self-supervised approaches can be used to learn
representations that capture multiple attributes of a single image and perform
well on a variety of downstream tasks. Datasets, code, and pre-trained baseline
models are provided at: https://mtneuro.github.io/ .
- Abstract(参考訳): 同じイメージを記述できる抽象化には、細かな詳細やよりグローバルなイメージ属性に注目しているかどうかによって、複数のスケールがあります。
脳マッピングでは、画像を自動的に解析して小さな特徴(細胞や血管の存在など)と画像のグローバルな特性(脳のどの領域から来ているかなど)の両方の表現を構築することが重要でオープンな課題である。
しかしながら、ほとんどの既存の神経解剖学のデータセットとベンチマークは、一度に1つの下流タスクしか考慮していない。
このギャップを埋めるために、我々は新しいデータセット、アノテーション、複数の下流タスクを導入し、同じ画像から脳の構造とアーキテクチャに関する情報を読み取る様々な方法を提供する。
我々のマルチタスク・ニューロイメージング・ベンチマーク(MTNeuro)は、マウス大脳の視床皮質領域と皮質下領域にまたがる容積分解能X線マイクロトモグラフィー画像上に構築されている。
様々な予測課題を発生させ,脳領域予測のための教師付きモデルと自己教師付きモデル,および微細構造のピクセルレベルセマンティクスセグメンテーションを評価した。
私たちの実験は、このデータセットの豊富な多様性を強調するだけでなく、単一のイメージの複数の属性をキャプチャし、さまざまな下流タスクでうまく機能する表現を学習するために、自己教師付きアプローチをどのように利用できるかに関する洞察を提供します。
データセット、コード、および事前訓練されたベースラインモデルは以下の通りである。
関連論文リスト
- Vision as Unified Multimodal Generation [73.31482353559736]
SenseNova-Visionは、テキスト、画像、混合ターゲットにまたがるコンピュータビジョンの命令応答コーパスである。
このモデルは、検出、OCR、キーポイント推定、セグメンテーション、深さ推定、表面正規予測、ポイントマップ、カメラポーズ推定を含む幅広い視覚タスクをカバーする。
実験により、単一の統一モデルが、構造化された視覚的理解、密集した幾何学的予測、セグメンテーション、多視点視覚幾何学にわたる主要なタスク特殊化システムと一致できることが示されている。
論文 参考訳(メタデータ) (2026-07-07T17:58:33Z) - Multi-Domain Brain Vessel Segmentation Through Feature Disentanglement [3.50262608973709]
脳血管の形態は、自動セグメンテーションモデルにとって重要な課題である。
本フレームワークは,画像から画像への翻訳によって,脳動脈と静脈を様々なデータセットで効果的に分割する。
本評価は, 医療センター, 画像モダリティ, 血管タイプにまたがる, 大規模かつ多様な領域ギャップを効果的に橋渡しするものである。
論文 参考訳(メタデータ) (2025-10-01T08:48:11Z) - Learning Multimodal Volumetric Features for Large-Scale Neuron Tracing [72.45257414889478]
オーバーセグメントニューロン間の接続を予測し,人間の作業量を削減することを目的としている。
最初はFlyTracingという名前のデータセットを構築しました。
本稿では,高密度なボリュームEM画像の埋め込みを生成するための,新しい接続性を考慮したコントラスト学習手法を提案する。
論文 参考訳(メタデータ) (2024-01-05T19:45:12Z) - Self-Supervised Neuron Segmentation with Multi-Agent Reinforcement
Learning [53.00683059396803]
マスク画像モデル(MIM)は,マスク画像から元の情報を復元する簡便さと有効性から広く利用されている。
本稿では、強化学習(RL)を利用して最適な画像マスキング比とマスキング戦略を自動検索する決定に基づくMIMを提案する。
本手法は,ニューロン分節の課題において,代替自己監督法に対して有意な優位性を有する。
論文 参考訳(メタデータ) (2023-10-06T10:40:46Z) - AMIGO: Sparse Multi-Modal Graph Transformer with Shared-Context
Processing for Representation Learning of Giga-pixel Images [53.29794593104923]
本稿では,スライド病理像全体に対する共有コンテキスト処理の新たな概念を提案する。
AMIGOは、組織内のセルラーグラフを使用して、患者に単一の表現を提供する。
我々のモデルは、データの20%以下で同じ性能を達成できる程度に、欠落した情報に対して強い堅牢性を示す。
論文 参考訳(メタデータ) (2023-03-01T23:37:45Z) - Multiclass Semantic Segmentation to Identify Anatomical Sub-Regions of
Brain and Measure Neuronal Health in Parkinson's Disease [2.288652563296735]
現在、脳の解剖下領域を分析して2次元の組織像を分析する機械学習モデルは利用できない。
本研究では,Nissl/HaematoxylinおよびTyrosine hydroxylase酵素(TH,ドーパミン作動性ニューロンの生存率の指標)で染色した約1000個のアノテート2次元脳画像を用いて,ベストフィットモデルを訓練した。
このモデルは、すべての画像において2つのサブリージョンコンパクト(SNCD)とレチキュラタ(SNr)を効果的に検出できる。
論文 参考訳(メタデータ) (2023-01-07T19:35:28Z) - Semantic Brain Decoding: from fMRI to conceptually similar image
reconstruction of visual stimuli [0.29005223064604074]
本稿では,意味的・文脈的類似性にも依存する脳復号法を提案する。
我々は、自然視のfMRIデータセットを使用し、人間の視覚におけるボトムアップとトップダウンの両方のプロセスの存在にインスパイアされたディープラーニングデコードパイプラインを作成します。
視覚刺激の再現は, それまでの文献において, 本来の内容とセマンティックレベルで非常によく一致し, 芸術の状態を超越している。
論文 参考訳(メタデータ) (2022-12-13T16:54:08Z) - Two-Stream Graph Convolutional Network for Intra-oral Scanner Image
Segmentation [133.02190910009384]
本稿では,2ストリームグラフ畳み込みネットワーク(TSGCN)を提案する。
TSGCNは3次元歯(表面)セグメンテーションにおいて最先端の方法よりも優れています。
論文 参考訳(メタデータ) (2022-04-19T10:41:09Z) - Multi-level Second-order Few-shot Learning [111.0648869396828]
教師付きまたは教師なしの少数ショット画像分類と少数ショット動作認識のためのマルチレベル2次数列学習ネットワーク(MlSo)を提案する。
我々は、パワーノーマライズされた二階学習者ストリームと、複数のレベルの視覚的抽象化を表現する機能を組み合わせた、いわゆる2階学習者ストリームを活用している。
我々は,Omniglot, mini-ImageNet, tiered-ImageNet, Open MIC, CUB Birds, Stanford Dogs, Cars, HMDB51, UCF101, mini-MITなどのアクション認識データセットなどの標準データセットに対して,優れた結果を示す。
論文 参考訳(メタデータ) (2022-01-15T19:49:00Z) - Semantic Segmentation with Generative Models: Semi-Supervised Learning
and Strong Out-of-Domain Generalization [112.68171734288237]
本論文では,画像とラベルの再生モデルを用いた識別画素レベルのタスクのための新しいフレームワークを提案する。
我々は,共同画像ラベルの分布を捕捉し,未ラベル画像の大規模な集合を用いて効率的に訓練する生成的対向ネットワークを学習する。
ドメイン内性能をいくつかのベースラインと比較し,ドメイン外一般化を極端に示す最初の例である。
論文 参考訳(メタデータ) (2021-04-12T21:41:25Z) - Microscopic fine-grained instance classification through deep attention [7.50282814989294]
限られたサンプルを用いた微視的画像データのきめ細かい分類は、コンピュータビジョンとバイオメディカルイメージングにおいて未解決の問題である。
本稿では,エンドツーエンドで2つのタスクを同時に実行する,シンプルで効果的なディープネットワークを提案する。
その結果、堅牢だが軽量なエンドツーエンドのトレーニング可能なディープネットワークが実現し、最先端の結果が得られます。
論文 参考訳(メタデータ) (2020-10-06T15:29:58Z) - Evolution of Image Segmentation using Deep Convolutional Neural Network:
A Survey [0.0]
我々はCNNに基づくセマンティックとインスタンスセグメンテーションの両方の進化を垣間見る。
我々は、最先端のパン光学セグメンテーションモデルを垣間見せた。
論文 参考訳(メタデータ) (2020-01-13T06:07:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。