論文の概要: On the Capabilities of Pointer Networks for Deep Deductive Reasoning
- arxiv url: http://arxiv.org/abs/2106.09225v1
- Date: Thu, 17 Jun 2021 03:25:20 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-18 15:55:54.619009
- Title: On the Capabilities of Pointer Networks for Deep Deductive Reasoning
- Title(参考訳): 深い推論のためのポインタネットワークの能力について
- Authors: Monireh Ebrahimi, Aaron Eberhart, Pascal Hitzler
- Abstract要約: 我々は,記号的知識ベースに対する推論にニューラルポインターネットワークを適用した。
ポインタネットワークは、複数の推論タスクで驚くほどよく機能する。
Pointer Networksを用いたニューロシンボリック推論に関する最初の研究である。
- 参考スコア(独自算出の注目度): 3.5289688061934963
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: The importance of building neural networks that can learn to reason has been
well recognized in the neuro-symbolic community. In this paper, we apply neural
pointer networks for conducting reasoning over symbolic knowledge bases. In
doing so, we explore the benefits and limitations of encoder-decoder
architectures in general and pointer networks in particular for developing
accurate, generalizable and robust neuro-symbolic reasoners. Based on our
experimental results, pointer networks performs remarkably well across multiple
reasoning tasks while outperforming the previously reported state of the art by
a significant margin. We observe that the Pointer Networks preserve their
performance even when challenged with knowledge graphs of the domain/vocabulary
it has never encountered before. To the best of our knowledge, this is the
first study on neuro-symbolic reasoning using Pointer Networks. We hope our
impressive results on these reasoning problems will encourage broader
exploration of pointer networks' capabilities for reasoning over more complex
logics and for other neuro-symbolic problems.
- Abstract(参考訳): 推論を学ぶことができるニューラルネットワークの構築の重要性は、神経シンボリックなコミュニティでよく認識されている。
本稿では,ニューラルネットワークを記号的知識ベース上の推論に応用する。
そこで我々は,エンコーダ・デコーダアーキテクチャの一般およびポインタネットワークにおけるメリット,特に,正確で一般化可能な,堅牢なニューロシンボリック推論器の開発について検討する。
実験結果に基づき,ポインターネットワークは複数の推論タスクにおいて非常に良好に動作し,前回報告した技術に比較して有意なマージンを示した。
我々は、これまで遭遇したことのないドメイン/語彙の知識グラフに挑戦しても、ポインタネットワークが性能を維持することを観察する。
我々の知る限りでは、ポインタネットワークを用いたニューロシンボリック推論に関する最初の研究である。
これらの推論問題に対する我々の印象的な結果は、より複雑な論理や他の神経-記号問題に対する推論のためのポインタネットワークの機能のより広範な探索を促進することを願っている。
関連論文リスト
- Coding schemes in neural networks learning classification tasks [52.22978725954347]
完全接続型広義ニューラルネットワーク学習タスクについて検討する。
ネットワークが強力なデータ依存機能を取得することを示す。
驚くべきことに、内部表現の性質は神経の非線形性に大きく依存する。
論文 参考訳(メタデータ) (2024-06-24T14:50:05Z) - NeuroExplainer: Fine-Grained Attention Decoding to Uncover Cortical
Development Patterns of Preterm Infants [73.85768093666582]
我々はNeuroExplainerと呼ばれる説明可能な幾何学的深層ネットワークを提案する。
NeuroExplainerは、早産に伴う幼児の皮質発達パターンの解明に使用される。
論文 参考訳(メタデータ) (2023-01-01T12:48:12Z) - Spiking neural network for nonlinear regression [68.8204255655161]
スパイクニューラルネットワークは、メモリとエネルギー消費を大幅に削減する可能性を持っている。
彼らは、次世代のニューロモルフィックハードウェアによって活用できる時間的および神経的疎結合を導入する。
スパイキングニューラルネットワークを用いた回帰フレームワークを提案する。
論文 参考訳(メタデータ) (2022-10-06T13:04:45Z) - Knowledge-based Analogical Reasoning in Neuro-symbolic Latent Spaces [20.260546238369205]
ニューラルネットワークのパターン認識能力とシンボリック推論と背景知識を組み合わせたフレームワークを提案する。
ニューラルアルゴリズム推論」アプローチ [DeepMind 2020] からインスピレーションを得て、問題固有のバックグラウンド知識を使用します。
我々は、RAVENのプログレッシブ・マトリクスにおける視覚的類似性の問題でこれを検証し、人間のパフォーマンスと競合する精度を実現する。
論文 参考訳(メタデータ) (2022-09-19T04:03:20Z) - Rank Diminishing in Deep Neural Networks [71.03777954670323]
ニューラルネットワークのランクは、層をまたがる情報を測定する。
これは機械学習の幅広い領域にまたがる重要な構造条件の例である。
しかし、ニューラルネットワークでは、低ランク構造を生み出す固有のメカニズムはあいまいで不明瞭である。
論文 参考訳(メタデータ) (2022-06-13T12:03:32Z) - A neural anisotropic view of underspecification in deep learning [60.119023683371736]
ニューラルネットが問題の未特定化を扱う方法が,データ表現に大きく依存していることを示す。
深層学習におけるアーキテクチャ的インダクティブバイアスの理解は,これらのシステムの公平性,堅牢性,一般化に対処する上で基本的であることを強調した。
論文 参考訳(メタデータ) (2021-04-29T14:31:09Z) - Object-based attention for spatio-temporal reasoning: Outperforming
neuro-symbolic models with flexible distributed architectures [15.946511512356878]
適切な帰納的バイアスを持つ完全学習型ニューラルネットワークは,従来のニューラルシンボリックモデルよりもかなり優れた性能を示す。
我々のモデルは、自己意識と学習された「ソフト」オブジェクト中心表現の両方を批判的に利用します。
論文 参考訳(メタデータ) (2020-12-15T18:57:40Z) - Theoretical Analysis of the Advantage of Deepening Neural Networks [0.0]
ディープニューラルネットワークによって計算可能な関数の表現性を知ることが重要である。
この2つの基準により,深層ニューラルネットワークの表現性を向上させる上で,各層におけるユニットの増加よりも,レイヤの増加の方が効果的であることを示す。
論文 参考訳(メタデータ) (2020-09-24T04:10:50Z) - Learning Connectivity of Neural Networks from a Topological Perspective [80.35103711638548]
本稿では,ネットワークを解析のための完全なグラフに表現するためのトポロジ的視点を提案する。
接続の規模を反映したエッジに学習可能なパラメータを割り当てることにより、学習プロセスを異なる方法で行うことができる。
この学習プロセスは既存のネットワークと互換性があり、より大きな検索空間と異なるタスクへの適応性を持っている。
論文 参考訳(メタデータ) (2020-08-19T04:53:31Z) - A neural network model of perception and reasoning [0.0]
生物学的に一貫した構成原理の単純なセットが神経ネットワークにこれらの能力を与えることを示す。
我々はこれらの原理を、最適化の代わりに概念構築に基づく新しい機械学習アルゴリズムで実装し、説明可能なニューロン活動で推論されるディープニューラルネットワークを設計する。
論文 参考訳(メタデータ) (2020-02-26T06:26:04Z) - On Interpretability of Artificial Neural Networks: A Survey [21.905647127437685]
我々は、ニューラルネットワークのメカニズムを理解するための最近の研究を体系的にレビューし、特に医学における解釈可能性の応用について述べる。
本稿では,ファジィ論理や脳科学などの解釈可能性研究の今後の方向性について論じる。
論文 参考訳(メタデータ) (2020-01-08T13:40:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。