論文の概要: Domain Adaptation-Enhanced Searchlight: Enabling brain decoding from visual perception to mental imagery
- arxiv url: http://arxiv.org/abs/2408.01163v1
- Date: Fri, 2 Aug 2024 10:25:19 GMT
- ステータス: 処理完了
- システム内更新日: 2024-08-05 13:47:29.379970
- Title: Domain Adaptation-Enhanced Searchlight: Enabling brain decoding from visual perception to mental imagery
- Title(参考訳): ドメイン適応強化サーチライト:脳の認知から精神イメージへのデコーディングの実現
- Authors: Alexander Olza, David Soto, Roberto Santana,
- Abstract要約: 本研究では18人の被験者のfMRIスキャンを用いた画像予測における領域適応(DA)の有効性について検討した。
以上の結果から,DAは画像予測の精度を著しく向上させることが明らかとなった。
我々のDA強化サーチライトは、視覚野や前頭頂皮質を含む、高度に分散した脳領域の画像内容を予測する。
- 参考スコア(独自算出の注目度): 46.27328641616778
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: In cognitive neuroscience and brain-computer interface research, accurately predicting imagined stimuli is crucial. This study investigates the effectiveness of Domain Adaptation (DA) in enhancing imagery prediction using primarily visual data from fMRI scans of 18 subjects. Initially, we train a baseline model on visual stimuli to predict imagined stimuli, utilizing data from 14 brain regions. We then develop several models to improve imagery prediction, comparing different DA methods. Our results demonstrate that DA significantly enhances imagery prediction, especially with the Regular Transfer approach. We then conduct a DA-enhanced searchlight analysis using Regular Transfer, followed by permutation-based statistical tests to identify brain regions where imagery decoding is consistently above chance across subjects. Our DA-enhanced searchlight predicts imagery contents in a highly distributed set of brain regions, including the visual cortex and the frontoparietal cortex, thereby outperforming standard cross-domain classification methods. The complete code and data for this paper have been made openly available for the use of the scientific community.
- Abstract(参考訳): 認知神経科学と脳-コンピュータインターフェースの研究では、想像された刺激を正確に予測することが重要である。
本研究は, 画像予測における領域適応(DA)の有効性について検討した。
当初我々は、14の脳領域のデータを利用して、視覚刺激のベースラインモデルをトレーニングし、想像された刺激を予測する。
次に、様々なDA手法を比較し、画像予測を改善するために複数のモデルを開発する。
以上の結果から,DAは画像予測の精度を著しく向上させることが明らかとなった。
次に、正規転送を用いたDA強化サーチライト分析を行い、その後、置換に基づく統計的テストを行い、画像復号が被検体全体で常に上回っている脳領域を特定する。
我々のDA強化サーチライトは、視覚野や前頭前頭葉皮質を含む高度に分散した脳領域のイメージ内容を予測し、標準的なクロスドメイン分類法より優れている。
この論文の完全なコードとデータは、科学コミュニティの利用のために公開されています。
関連論文リスト
- Generalizability analysis of deep learning predictions of human brain responses to augmented and semantically novel visual stimuli [0.6259089590341245]
本研究の目的は,視覚野活性化に対する画像強調技術の影響を探索するための枠組みとして,ニューラルネットワークを用いたアプローチの音質と有用性を検討することである。
The Algonauts Project 2023 Challengeに参加したトップ10の方法の中から選ばれた、最先端の脳エンコーディングモデルを用意します。
我々は、様々な画像強調技術が神経反応に与える影響について、有効な予測を行う能力について分析する。
論文 参考訳(メタデータ) (2024-10-06T14:29:02Z) - Multimodal Learning and Cognitive Processes in Radiology: MedGaze for Chest X-ray Scanpath Prediction [10.388541520456714]
提案システムは,放射線学報告やCXR画像から視線シーケンスを予測することを目的としている。
本モデルでは, 医用スキャンパス予測において重要な固定座標と期間を予測し, コンピュータビジョンコミュニティにおける既存モデルよりも優れていた。
放射線学者の評価に基づいて、MedGazeは関連する領域に焦点をあてたヒトのような視線配列を生成することができる。
論文 参考訳(メタデータ) (2024-06-28T06:38:58Z) - BrainSCUBA: Fine-Grained Natural Language Captions of Visual Cortex Selectivity [6.285481522918523]
そこで本研究では,関心のボクセルを最大に活性化する画像に対して,自然言語記述を生成するデータ駆動方式を提案する。
高次視覚領域にまたがる微細なボクセルレベルのキャプションにより,本手法の有効性を検証した。
そこで我々は,脳内の「個人」表現の分布に関する探索的研究を行った。
論文 参考訳(メタデータ) (2023-10-06T17:59:53Z) - Performance of GAN-based augmentation for deep learning COVID-19 image
classification [57.1795052451257]
ディープラーニングを医療分野に適用する上で最大の課題は、トレーニングデータの提供である。
データ拡張は、限られたデータセットに直面した時に機械学習で使用される典型的な方法論である。
本研究は, 新型コロナウイルスの胸部X線画像セットを限定して, StyleGAN2-ADAモデルを用いて訓練するものである。
論文 参考訳(メタデータ) (2023-04-18T15:39:58Z) - FAST-AID Brain: Fast and Accurate Segmentation Tool using Artificial
Intelligence Developed for Brain [0.8376091455761259]
ヒト脳の132領域への高速かつ正確なセグメンテーションのための新しい深層学習法を提案する。
提案モデルは、効率的なU-Netライクなネットワークと、異なるビューと階層関係の交差点の利点を利用する。
提案手法は,画像の事前処理や性能低下を伴わずに頭蓋骨や他の人工物を含む脳MRIデータに適用することができる。
論文 参考訳(メタデータ) (2022-08-30T16:06:07Z) - Voxel-level Importance Maps for Interpretable Brain Age Estimation [70.5330922395729]
本稿では,畳み込みニューラルネットワークを用いた3次元脳磁気共鳴(MR)画像からの脳年齢回帰の課題に着目した。
予測モデルの性能を損なうことなく、できるだけ多くのノイズを入力に追加することを目的としたノイズモデルを実装した。
本手法は,英国バイオバンクの13750個の脳MR画像を用いて検討し,既存の神経病理学文献と一致している。
論文 参考訳(メタデータ) (2021-08-11T18:08:09Z) - Fader Networks for domain adaptation on fMRI: ABIDE-II study [68.5481471934606]
我々は3次元畳み込みオートエンコーダを用いて、無関係な空間画像表現を実現するとともに、ABIDEデータ上で既存のアプローチより優れていることを示す。
論文 参考訳(メタデータ) (2020-10-14T16:50:50Z) - Domain Shift in Computer Vision models for MRI data analysis: An
Overview [64.69150970967524]
機械学習とコンピュータビジョン手法は、医用画像解析において優れた性能を示している。
しかし、現在臨床応用はごくわずかである。
異なるソースや取得ドメインのデータへのモデルの不適切な転送性は、その理由の1つです。
論文 参考訳(メタデータ) (2020-10-14T16:34:21Z) - Anatomical Predictions using Subject-Specific Medical Data [7.635279671482444]
個人の脳MRIが時間とともにどのように変化するかを予測する手法を提案する。
予測変形場が与えられると、ベースラインスキャンをワープして、将来脳スキャンの予測を行うことができる。
論文 参考訳(メタデータ) (2020-05-29T21:30:46Z) - Pathological Retinal Region Segmentation From OCT Images Using Geometric
Relation Based Augmentation [84.7571086566595]
本稿では,幾何学と形状の内在的関係を共同で符号化することで,従来のGANベースの医用画像合成法よりも優れた手法を提案する。
提案手法は,取得手順の異なる画像を有する公開RETOUCHデータセット上で,最先端のセグメンテーション手法より優れている。
論文 参考訳(メタデータ) (2020-03-31T11:50:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。