論文の概要: ROSE: A Neurocomputational Architecture for Syntax
- arxiv url: http://arxiv.org/abs/2303.08877v1
- Date: Wed, 15 Mar 2023 18:44:37 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-17 18:18:22.252359
- Title: ROSE: A Neurocomputational Architecture for Syntax
- Title(参考訳): ROSE: シンタクスのための神経計算アーキテクチャ
- Authors: Elliot Murphy
- Abstract要約: 本稿では,ROSEモデルと呼ばれる構文のニューロ計算アーキテクチャを提案する。
ROSEでは、構文の基本データ構造は原子的特徴、心的表現のタイプ(R)であり、単一ユニットとアンサンブルレベルでコード化されている。
低周波カップリングと位相振幅カップリング(pSTS-IFGによるデルタ-テータカップリング、IFGによるテータ-ガンマカップリングから概念ハブへのテータ-ガンマカップリング)の識別形式は、これらの構造を異なるワークスペースにエンコードする(E)。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: A comprehensive model of natural language processing in the brain must
accommodate four components: representations, operations, structures and
encoding. It further requires a principled account of how these components
mechanistically, and causally, relate to each another. While previous models
have isolated regions of interest for structure-building and lexical access,
many gaps remain with respect to bridging distinct scales of neural complexity.
By expanding existing accounts of how neural oscillations can index various
linguistic processes, this article proposes a neurocomputational architecture
for syntax, termed the ROSE model (Representation, Operation, Structure,
Encoding). Under ROSE, the basic data structures of syntax are atomic features,
types of mental representations (R), and are coded at the single-unit and
ensemble level. Elementary computations (O) that transform these units into
manipulable objects accessible to subsequent structure-building levels are
coded via high frequency gamma activity. Low frequency synchronization and
cross-frequency coupling code for recursive categorial inferences (S). Distinct
forms of low frequency coupling and phase-amplitude coupling (delta-theta
coupling via pSTS-IFG; theta-gamma coupling via IFG to conceptual hubs) then
encode these structures onto distinct workspaces (E). Causally connecting R to
O is spike-phase/LFP coupling; connecting O to S is phase-amplitude coupling;
connecting S to E is a system of frontotemporal traveling oscillations;
connecting E to lower levels is low-frequency phase resetting of spike-LFP
coupling. ROSE is reliant on neurophysiologically plausible mechanisms, is
supported at all four levels by a range of recent empirical research, and
provides an anatomically precise and falsifiable grounding for the basic
property of natural language syntax: hierarchical, recursive
structure-building.
- Abstract(参考訳): 脳内の自然言語処理の包括的なモデルでは、表現、操作、構造、エンコーディングの4つのコンポーネントを扱わなければならない。
さらに、これらのコンポーネントがいかに機械的かつ慎重に相互に関連しているかを原則的に説明する必要がある。
以前のモデルでは構造構築と語彙アクセスに関心のある独立した領域を持っていたが、神経の複雑さの異なるスケールを橋渡しすることに関して多くのギャップが残っている。
ニューラル振動が様々な言語過程をインデクシングする方法の既存の説明を拡張することにより、ROSEモデル(Representation, Operation, Structure, Encoding)と呼ばれる構文のためのニューロ計算アーキテクチャを提案する。
ROSEでは、構文の基本データ構造は原子的特徴、心的表現のタイプ(R)であり、単一ユニットとアンサンブルレベルでコード化されている。
これらのユニットをその後の構造構築レベルにアクセスできる操作可能なオブジェクトに変換する基礎計算(O)は、高周波ガンマ活動によって符号化される。
再帰的カテゴリー推論(S)のための低周波同期およびクロス周波数結合符号
低周波結合と位相振幅結合(pSTS-IFGによるデルタ-テータカップリング、IFGによるテータ-ガンマカップリング、概念ハブへのテータ-ガンマカップリング)の離散形式は、これらの構造を異なるワークスペース(E)にエンコードする。
因果接続RからOへの結合はスパイク相/LFP結合、OからSへの接続は位相振幅結合、SからEへの接続は前頭側進行振動系、Eから低レベルへの接続はスパイク-LFP結合の低周波位相リセットである。
ROSEは神経生理学的にもっともらしいメカニズムに依存しており、最近の実験的な研究によって4つのレベルすべてで支持され、自然言語構文の基本的性質である階層的、再帰的構造構築の解剖学的に正確で実現可能な基礎を提供する。
関連論文リスト
- Interpretable Spatio-Temporal Embedding for Brain Structural-Effective Network with Ordinary Differential Equation [56.34634121544929]
本研究では,まず動的因果モデルを用いて脳効果ネットワークを構築する。
次に、STE-ODE(Spatio-Temporal Embedding ODE)と呼ばれる解釈可能なグラフ学習フレームワークを導入する。
このフレームワークは、構造的および効果的なネットワーク間の動的相互作用を捉えることを目的とした、特異的に設計されたノード埋め込み層を含んでいる。
論文 参考訳(メタデータ) (2024-05-21T20:37:07Z) - On The Expressivity of Recurrent Neural Cascades [48.87943990557107]
リカレントニューラルカスケード(Recurrent Neural Cascades、RNC)は、リカレントニューラルネットワークであり、リカレントニューロン間で循環的依存を持たない。
RNCは、グループを実装可能なニューロンを導入することで、すべての正規言語を表現できることを示す。
論文 参考訳(メタデータ) (2023-12-14T15:47:26Z) - LOGICSEG: Parsing Visual Semantics with Neural Logic Learning and
Reasoning [73.98142349171552]
LOGICSEGは、神経誘導学習と論理推論をリッチデータとシンボリック知識の両方に統合する、全体論的視覚意味論である。
ファジィ論理に基づく連続的な緩和の間、論理式はデータとニューラルな計算グラフに基礎を置いており、論理によるネットワークトレーニングを可能にする。
これらの設計によりLOGICSEGは、既存のセグメンテーションモデルに容易に統合できる汎用的でコンパクトなニューラル論理マシンとなる。
論文 参考訳(メタデータ) (2023-09-24T05:43:19Z) - Neural-Symbolic Recursive Machine for Systematic Generalization [113.22455566135757]
我々は、基底記号システム(GSS)のコアとなるニューラル・シンボリック再帰機械(NSR)を紹介する。
NSRは神経知覚、構文解析、意味推論を統合している。
我々はNSRの有効性を,系統的一般化能力の探索を目的とした4つの挑戦的ベンチマークで評価した。
論文 参考訳(メタデータ) (2022-10-04T13:27:38Z) - Insights on Neural Representations for End-to-End Speech Recognition [28.833851817220616]
エンドツーエンド自動音声認識(ASR)モデルは、一般化された音声表現を学習することを目的としている。
相関解析手法を用いたネットワーク類似性の調査は、エンド・ツー・エンドASRモデルでは行われていない。
本稿では,CNN,LSTM,Transformerをベースとしたトレーニングにおいて,レイヤ間の内部ダイナミクスを解析し,検討する。
論文 参考訳(メタデータ) (2022-05-19T10:19:32Z) - Spatio-Temporal Representation Factorization for Video-based Person
Re-Identification [55.01276167336187]
本稿では、re-IDのための時空間表現分解モジュール(STRF)を提案する。
STRFはフレキシブルな新しい計算ユニットであり、re-IDのための既存のほとんどの3D畳み込みニューラルネットワークアーキテクチャと併用することができる。
実験により、STRFは様々なベースラインアーキテクチャの性能を向上し、新しい最先端の成果を示す。
論文 参考訳(メタデータ) (2021-07-25T19:29:37Z) - Discrete-Valued Neural Communication [85.3675647398994]
コンポーネント間で伝達される情報を離散表現に制限することは、有益なボトルネックであることを示す。
個人は「猫」が特定の経験に基づいて何であるかについて異なる理解を持っているが、共有された離散トークンは、個人間のコミュニケーションが内部表現の個人差によって切り離されることを可能にする。
我々は、量子化機構をベクトル量子化変分オートコーダから共有符号ブックによる多頭部離散化に拡張し、離散値ニューラル通信に利用する。
論文 参考訳(メタデータ) (2021-07-06T03:09:25Z) - A STDP-based Encoding Algorithm for Associative and Composite Data [0.0]
本研究は,STDPをベースとした,高次元連想データの保存と検索が可能な実用的なメモリモデルを提案する。
このモデルは、STDPダイナミクスと分散表現の符号化スキームを組み合わせることで、連続的に複数の複合データを処理することができる。
論文 参考訳(メタデータ) (2021-04-25T20:26:52Z) - Equivalence in Deep Neural Networks via Conjugate Matrix Ensembles [0.0]
ディープラーニングアーキテクチャの等価性を検出するための数値解析手法を開発した。
経験的証拠は、ニューラルアーキテクチャのスペクトル密度とそれに対応する共役円形アンサンブルの差が消えているという現象を裏付けている。
論文 参考訳(メタデータ) (2020-06-14T12:34:13Z) - Separation of Memory and Processing in Dual Recurrent Neural Networks [0.0]
入力に接続する繰り返し層とフィードフォワード層を積み重ねるニューラルネットワークアーキテクチャを探索する。
繰り返し単位の活性化関数にノイズが導入されたとき、これらのニューロンは二項活性化状態に強制され、ネットワークは有限オートマトンのように振る舞う。
論文 参考訳(メタデータ) (2020-05-17T11:38:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。