論文の概要: Product semantics translation from brain activity via adversarial
learning
- arxiv url: http://arxiv.org/abs/2103.15602v1
- Date: Mon, 29 Mar 2021 13:27:30 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-30 14:35:58.805928
- Title: Product semantics translation from brain activity via adversarial
learning
- Title(参考訳): 対人学習による脳活動からの製品意味翻訳
- Authors: Pan Wang, Zhifeng Gong, Shuo Wang, Hao Dong, Jialu Fan, Ling Li, Peter
Childs and Yike Guo
- Abstract要約: 本稿では,脳信号から製品意味を変換する深層生成変換モデルを提案する。
私たちはStarGANのアイデアを活用し、モデルは好ましいデザインセマンティクスで製品を合成するように設計されています。
- 参考スコア(独自算出の注目度): 17.174039349092055
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: A small change of design semantics may affect a user's satisfaction with a
product. To modify a design semantic of a given product from personalised brain
activity via adversarial learning, in this work, we propose a deep generative
transformation model to modify product semantics from the brain signal. We
attempt to accomplish such synthesis: 1) synthesising the product image with
new features corresponding to EEG signal; 2) maintaining the other image
features that irrelevant to EEG signal. We leverage the idea of StarGAN and the
model is designed to synthesise products with preferred design semantics
(colour & shape) via adversarial learning from brain activity, and is applied
with a case study to generate shoes with different design semantics from
recorded EEG signals. To verify our proposed cognitive transformation model, a
case study has been presented. The results work as a proof-of-concept that our
framework has the potential to synthesis product semantic from brain activity.
- Abstract(参考訳): デザインセマンティクスの小さな変更は、製品に対するユーザの満足度に影響する可能性がある。
本研究は, 個人化された脳活動から, 対人学習を通じて製品の設計意味を変更することを目的として, 脳信号から製品意味を変更するための深層生成変換モデルを提案する。
本研究では,1)脳波信号に対応する新たな特徴を持つ製品画像の合成,2)脳波信号とは無関係な他の画像特徴の維持,である。
我々はstarganのアイデアを活用し,脳活動からの敵対的学習を通じて好みのデザイン意味論(色と形状)を合成し,記録された脳波信号から異なるデザイン意味論を持つ靴を作成するケーススタディに適用する。
提案する認知変換モデルを検証するために,事例研究を行った。
結果は、私たちのフレームワークが脳活動から製品の意味を合成する可能性を秘めた概念実証として機能する。
関連論文リスト
- Visual Neural Decoding via Improved Visual-EEG Semantic Consistency [3.4061238650474657]
EEG機能をCLIP埋め込みスペースに直接マッピングするメソッドは、マッピングバイアスを導入し、セマンティックな矛盾を引き起こす可能性がある。
最適アライメントを容易にするために,これらの2つのモードのセマンティックな特徴を明示的に抽出する Visual-EEG Semantic Decouple Framework を提案する。
提案手法は,ゼロショットニューラルデコードタスクの最先端化を実現する。
論文 参考訳(メタデータ) (2024-08-13T10:16:10Z) - MindFormer: Semantic Alignment of Multi-Subject fMRI for Brain Decoding [50.55024115943266]
本稿では,MindFormer を用いたマルチオブジェクト fMRI 信号のセマンティックアライメント手法を提案する。
このモデルは、fMRIから画像生成のための安定拡散モデルや、fMRIからテキスト生成のための大規模言語モデル(LLM)の条件付けに使用できるfMRI条件付き特徴ベクトルを生成するように設計されている。
実験の結果,MindFormerは意味的に一貫した画像とテキストを異なる主題にわたって生成することがわかった。
論文 参考訳(メタデータ) (2024-05-28T00:36:25Z) - MindBridge: A Cross-Subject Brain Decoding Framework [60.58552697067837]
脳の復号化は、獲得した脳信号から刺激を再構築することを目的としている。
現在、脳の復号化はモデルごとのオブジェクトごとのパラダイムに限られている。
我々は,1つのモデルのみを用いることで,オブジェクト間脳デコーディングを実現するMindBridgeを提案する。
論文 参考訳(メタデータ) (2024-04-11T15:46:42Z) - Manipulating Feature Visualizations with Gradient Slingshots [54.31109240020007]
本稿では,モデルの決定過程に大きな影響を及ぼすことなく,特徴可視化(FV)を操作する新しい手法を提案する。
ニューラルネットワークモデルにおける本手法の有効性を評価し,任意の選択したニューロンの機能を隠蔽する能力を示す。
論文 参考訳(メタデータ) (2024-01-11T18:57:17Z) - CSLP-AE: A Contrastive Split-Latent Permutation Autoencoder Framework
for Zero-Shot Electroencephalography Signal Conversion [49.1574468325115]
脳波分析の鍵となる目的は、基礎となる神経活動(コンテンツ)を抽出し、個体の変動(スタイル)を考慮することである。
近年の音声変換技術の発展に触発されて,脳波変換を直接最適化するCSLP-AEフレームワークを提案する。
論文 参考訳(メタデータ) (2023-11-13T22:46:43Z) - Learning Robust Deep Visual Representations from EEG Brain Recordings [13.768240137063428]
本研究は,脳波に基づく深部表現の頑健な学習を行うための2段階の手法を提案する。
ディープラーニングアーキテクチャを用いて,3つのデータセットにまたがる特徴抽出パイプラインの一般化性を実証する。
本稿では,未知の画像を脳波空間に変換し,近似を用いて再構成する新しい枠組みを提案する。
論文 参考訳(メタデータ) (2023-10-25T10:26:07Z) - Generate your neural signals from mine: individual-to-individual EEG
converters [0.0]
理想的個体間ニューラルコンバータは、ある被験者の実際のニューラル信号を他の被験者のニューラル信号から生成することが期待されている。
コンピュータビジョンにおける生成モデルに触発された脳波変換器(EEG2EEG)を提案する。
論文 参考訳(メタデータ) (2023-04-21T04:13:16Z) - AIGenC: An AI generalisation model via creativity [1.933681537640272]
本稿では,創造性に関する認知理論に触発された計算モデル(AIGenC)を紹介する。
人工エージェントが変換可能な表現を学習、使用、生成するために必要なコンポーネントを配置する。
本稿では, 人工エージェントの配当効率を向上するモデルの有効性について論じる。
論文 参考訳(メタデータ) (2022-05-19T17:43:31Z) - Functional2Structural: Cross-Modality Brain Networks Representation
Learning [55.24969686433101]
脳ネットワーク上のグラフマイニングは、臨床表現型および神経変性疾患のための新しいバイオマーカーの発見を促進する可能性がある。
本稿では,Deep Signed Brain Networks (DSBN) と呼ばれる新しいグラフ学習フレームワークを提案する。
臨床表現型および神経変性疾患予測の枠組みを,2つの独立した公開データセットを用いて検証した。
論文 参考訳(メタデータ) (2022-05-06T03:45:36Z) - Enhancing Affective Representations of Music-Induced EEG through
Multimodal Supervision and latent Domain Adaptation [34.726185927120355]
脳波の重み付けとして音楽信号を用い,その意味的対応を共通の表現空間に投影することを目的としている。
我々は、LSTMに基づくアテンションモデルと、音楽タギングのための事前訓練されたモデルを組み合わせたバイモーダル・フレームワークと、その2つのモードの分布を整列するリバース・ドメイン・ディミネータを併用して、バイモーダル・フレームワークを利用する。
脳波入力クエリに関連音楽サンプルを提供することにより、モダリティのいずれからも、間接的に、教師付き予測を行うことで、感情認識に利用することができる。
論文 参考訳(メタデータ) (2022-02-20T07:32:12Z) - EEGminer: Discovering Interpretable Features of Brain Activity with
Learnable Filters [72.19032452642728]
本稿では,学習可能なフィルタと事前決定された特徴抽出モジュールからなる新しい識別可能なEEGデコーディングパイプラインを提案する。
我々は,SEEDデータセットおよび前例のない大きさの新たな脳波データセット上で,脳波信号からの感情認識に向けたモデルの有用性を実証する。
発見された特徴は、以前の神経科学の研究と一致し、音楽聴取中の左右の時間領域間の機能的接続プロファイルの顕著な相違など、新たな洞察を提供する。
論文 参考訳(メタデータ) (2021-10-19T14:22:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。