論文の概要: A Framework for Learning Invariant Physical Relations in Multimodal
Sensory Processing
- arxiv url: http://arxiv.org/abs/2006.16607v1
- Date: Tue, 30 Jun 2020 08:42:48 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-15 04:18:19.985914
- Title: A Framework for Learning Invariant Physical Relations in Multimodal
Sensory Processing
- Title(参考訳): マルチモーダル感覚処理における不変物理関係学習の枠組み
- Authors: Du Xiaorui, Yavuzhan Erdem, Immanuel Schweizer, Cristian Axenie
- Abstract要約: 我々は、教師なしの方法で、知覚的手がかり間の関係を学習できる新しいニューラルネットワークアーキテクチャを設計する。
低次元知覚データにおける任意の非線形関係を学習する際のコアシステム機能について述べる。
我々は、標準的なRGBカメラフレームから物理量間の関係を学習する現実世界の学習問題を通してこれを実証する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Perceptual learning enables humans to recognize and represent stimuli
invariant to various transformations and build a consistent representation of
the self and physical world. Such representations preserve the invariant
physical relations among the multiple perceived sensory cues. This work is an
attempt to exploit these principles in an engineered system. We design a novel
neural network architecture capable of learning, in an unsupervised manner,
relations among multiple sensory cues. The system combines computational
principles, such as competition, cooperation, and correlation, in a neurally
plausible computational substrate. It achieves that through a parallel and
distributed processing architecture in which the relations among the multiple
sensory quantities are extracted from time-sequenced data. We describe the core
system functionality when learning arbitrary non-linear relations in
low-dimensional sensory data. Here, an initial benefit rises from the fact that
such a network can be engineered in a relatively straightforward way without
prior information about the sensors and their interactions. Moreover,
alleviating the need for tedious modelling and parametrization, the network
converges to a consistent description of any arbitrary high-dimensional
multisensory setup. We demonstrate this through a real-world learning problem,
where, from standard RGB camera frames, the network learns the relations
between physical quantities such as light intensity, spatial gradient, and
optical flow, describing a visual scene. Overall, the benefits of such a
framework lie in the capability to learn non-linear pairwise relations among
sensory streams in an architecture that is stable under noise and missing
sensor input.
- Abstract(参考訳): 知覚学習は、人間が様々な変換に不変な刺激を認識し、表現し、自己と物理的世界の一貫した表現を構築することを可能にする。
このような表現は、複数の知覚的手がかりの間の不変な物理的関係を保つ。
この作業は、これらの原則をエンジニアリングシステムで活用しようとする試みである。
本研究では,複数の感覚的手がかりの関係を教師なしの方法で学習できる新しいニューラルネットワークアーキテクチャを設計する。
このシステムは、競争、協力、相関といった計算原理を、神経的に妥当な計算基盤で組み合わせている。
時系列データから複数の感覚量間の関係を抽出する並列分散処理アーキテクチャによって実現される。
低次元感覚データで任意の非線形関係を学ぶ際のコアシステム機能について述べる。
ここでは、センサーとその相互作用に関する事前情報なしで、そのようなネットワークを比較的簡単な方法で構築できることから、最初のメリットが生じる。
さらに、退屈なモデリングとパラメトリゼーションの必要性を緩和し、ネットワークは任意の高次元多感性セットアップの一貫した記述に収束する。
我々は、標準的なRGBカメラフレームから、光強度、空間勾配、光学フローなどの物理量との関係を学習し、視覚シーンを記述する現実世界の学習問題を通してこれを実証する。
全体として、そのようなフレームワークの利点は、ノイズやセンサ入力の欠如によって安定したアーキテクチャにおいて、知覚ストリーム間の非線形対関係を学習できることにある。
関連論文リスト
- On Neural Architecture Inductive Biases for Relational Tasks [76.18938462270503]
合成ネットワーク一般化(CoRelNet)と呼ばれる類似度分布スコアに基づく簡単なアーキテクチャを導入する。
単純なアーキテクチャの選択は、分布外一般化において既存のモデルより優れていることが分かる。
論文 参考訳(メタデータ) (2022-06-09T16:24:01Z) - Data-driven emergence of convolutional structure in neural networks [83.4920717252233]
識別タスクを解くニューラルネットワークが、入力から直接畳み込み構造を学習できることを示す。
データモデルを慎重に設計することにより、このパターンの出現は、入力の非ガウス的、高次局所構造によって引き起こされることを示す。
論文 参考訳(メタデータ) (2022-02-01T17:11:13Z) - Discrete-Valued Neural Communication [85.3675647398994]
コンポーネント間で伝達される情報を離散表現に制限することは、有益なボトルネックであることを示す。
個人は「猫」が特定の経験に基づいて何であるかについて異なる理解を持っているが、共有された離散トークンは、個人間のコミュニケーションが内部表現の個人差によって切り離されることを可能にする。
我々は、量子化機構をベクトル量子化変分オートコーダから共有符号ブックによる多頭部離散化に拡張し、離散値ニューラル通信に利用する。
論文 参考訳(メタデータ) (2021-07-06T03:09:25Z) - Learning Interpretable Models for Coupled Networks Under Domain
Constraints [8.308385006727702]
脳ネットワークの構造的エッジと機能的エッジの相互作用に着目して,結合ネットワークの概念を検討する。
相互作用を推定しながらノイズ項にハードネットワークの制約を課す新しい定式化を提案する。
ヒトコネクトームプロジェクトから得られたマルチシェル拡散およびタスク誘発fMRIデータセットの手法を検証する。
論文 参考訳(メタデータ) (2021-04-19T06:23:31Z) - Learning Contact Dynamics using Physically Structured Neural Networks [81.73947303886753]
ディープニューラルネットワークと微分方程式の接続を用いて、オブジェクト間の接触ダイナミクスを表現するディープネットワークアーキテクチャのファミリを設計する。
これらのネットワークは,ノイズ観測から不連続な接触事象をデータ効率良く学習できることを示す。
以上の結果から,タッチフィードバックの理想化形態は,この学習課題を扱いやすくするための重要な要素であることが示唆された。
論文 参考訳(メタデータ) (2021-02-22T17:33:51Z) - Semantics-aware Adaptive Knowledge Distillation for Sensor-to-Vision
Action Recognition [131.6328804788164]
本稿では,視覚・センサ・モダリティ(動画)における行動認識を強化するためのフレームワーク,Semantics-Aware Adaptive Knowledge Distillation Networks (SAKDN)を提案する。
SAKDNは複数のウェアラブルセンサーを教師のモダリティとして使用し、RGB動画を学生のモダリティとして使用している。
論文 参考訳(メタデータ) (2020-09-01T03:38:31Z) - Learning Connectivity of Neural Networks from a Topological Perspective [80.35103711638548]
本稿では,ネットワークを解析のための完全なグラフに表現するためのトポロジ的視点を提案する。
接続の規模を反映したエッジに学習可能なパラメータを割り当てることにより、学習プロセスを異なる方法で行うことができる。
この学習プロセスは既存のネットワークと互換性があり、より大きな検索空間と異なるタスクへの適応性を持っている。
論文 参考訳(メタデータ) (2020-08-19T04:53:31Z) - Operationally meaningful representations of physical systems in neural
networks [4.192302677744796]
本稿では、物理的システムの異なる側面を扱うエージェントが、相互に可能な限り効率的に関連情報を伝達できるように設計されたニューラルネットワークアーキテクチャを提案する。
これは、異なる実験環境で物理システムに関するステートメントを作成するのに役立つ異なるパラメータを分離する表現を生成する。
論文 参考訳(メタデータ) (2020-01-02T19:01:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。