論文の概要: Geometric and algebraic inference in humans and neural networks
- arxiv url: http://arxiv.org/abs/2611.00387v1
- Date: Fri, 30 Oct 2026 21:07:44 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-04 23:36:30.400939
- Title: Geometric and algebraic inference in humans and neural networks
- Title(参考訳): ヒトとニューラルネットワークにおける幾何学的および代数的推論
- Abstract要約: 我々は、幾何学的および代数的推論と呼ばれる戦略を定式化し、その計算トレードオフを人間とニューラルネットワークで研究する。
幾何学的戦略は、下層の関係構造を反映する表現幾何学を徐々に形成し、その後の推論を安くする。
代数的戦略は、文脈で与えられる新しい関係に対して柔軟に従属するが、推論時にさらなる計算を行う。
- 参考スコア(独自算出の注目度): 15.039972737983867
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Humans possess a remarkable ability to draw inferences from limited data. While some inferences are made intuitively from past experience, others require online reasoning based on novel information given in context. Here, we formalize these strategies, which we term geometric and algebraic inference, and study their computational tradeoffs in humans and neural networks. The geometric strategy gradually shapes representational geometry to reflect underlying relational structure, making subsequent inference cheap. The algebraic strategy flexibly attends to and reasons over novel relations given in context, but costs additional computation at inference time. We identify opposing signatures of these two strategies in transitive inference, a domain widely studied across species, and characterize the conditions under which each is observed. Our framework predicts that the geometric strategy should be dominant when relations are familiar, whereas the algebraic should emerge to support de novo inferences drawn in context. Multiple experiments demonstrate these opposing signatures in humans, neural networks trained from scratch, and large language models (LLMs). Causal interventions in the neural networks reveal that the geometric and algebraic strategies depend on representational geometry and selective attention mechanisms, respectively, and reproduce the effects of analogous neurobiological disruptions in humans. Our framework unifies these effects with disparate phenomena, including content effects observed in human and LLM reasoning and data-distribution effects observed in machine learning. Our findings reconcile competing views of cognitive flexibility that emphasize either representational geometry or algebraic manipulation by showing that each can have unique strengths, and can characterize different aspects of both human and neural network behavior.
- Abstract(参考訳): 人間は限られたデータから推論を引き出す素晴らしい能力を持っている。
いくつかの推論は過去の経験から直感的に行われるが、他の推論は文脈で与えられる新しい情報に基づいたオンライン推論を必要とする。
ここでは、幾何学的および代数的推論と呼ばれるこれらの戦略を定式化し、その計算トレードオフを人間とニューラルネットワークで研究する。
幾何学的戦略は、下層の関係構造を反映する表現幾何学を徐々に形成し、その後の推論を安くする。
代数的戦略は、文脈で与えられる新しい関係に対して柔軟に従属するが、推論時にさらなる計算を行う。
我々は,これらの2つの戦略の相反する署名を,種間で広く研究されている領域である推移的推論において同定し,それぞれが観察される条件を特徴付ける。
我々のフレームワークは、関係が親しみやすいときに幾何学的戦略が支配的であると予測し、一方代数は文脈で描かれたデ・ノボ推論をサポートするために現れるべきである。
複数の実験は、人間、スクラッチから訓練されたニューラルネットワーク、および大きな言語モデル(LLM)におけるこれらの対立するシグネチャを実証している。
ニューラルネットワークにおける因果的介入は、幾何学的戦略と代数的戦略がそれぞれ表現幾何学と選択的注意機構に依存し、ヒトにおける類似の神経生物学的破壊の影響を再現することを明らかにする。
この枠組みは,人間とLLMの推論で観察された内容効果や,機械学習で観察されたデータ分布効果など,異種現象と統合する。
本研究は,表現的幾何や代数的操作を重視した認知的柔軟性の相違点を考察し,それぞれに独自の強みがあり,人的・神経的両方の行動の異なる側面を特徴づけることができることを示した。
関連論文リスト
- Why Neural Network Can Discover Symbolic Structures with Gradient-based Training: An Algebraic and Geometric Foundation for Neurosymbolic Reasoning [73.18052192964349]
我々は、連続的なニューラルネットワークトレーニングのダイナミックスから、離散的なシンボル構造が自然に現れるかを説明する理論的枠組みを開発する。
ニューラルパラメータを測度空間に上げ、ワッサーシュタイン勾配流としてモデル化することにより、幾何的制約の下では、パラメータ測度 $mu_t$ が2つの同時現象となることを示す。
論文 参考訳(メタデータ) (2025-06-26T22:40:30Z) - Concept-Guided Interpretability via Neural Chunking [64.6429903327095]
ニューラルネットワークは、トレーニングデータの規則性を反映した生の集団活動のパターンを示す。
神経集団レベルで繰り返しチャンクを抽出する3つの方法を提案する。
私たちの研究は、認知原則と自然主義的データの構造の両方を活用する、解釈可能性の新しい方向性を指し示しています。
論文 参考訳(メタデータ) (2025-05-16T13:49:43Z) - Unraveling the geometry of visual relational reasoning [11.82509693248749]
人間は「一貫性」を形や色で認識するなど抽象的な関係を簡単に一般化する一方、ニューラルネットワークは柔軟性のある推論を制限するのに苦労する。
本稿では,抽象的関係推論を体系的に評価する新しいベンチマークであるSimplifiedRPMを紹介する。
また、関係性の難易度を定量化するための人間実験を行い、モデルと人間の直接比較を可能にした。
我々の結果は、AIにおけるより人間的な視覚的推論の道を開くことで、関係推論のための幾何学的基盤を確立します。
論文 参考訳(メタデータ) (2025-02-24T18:07:54Z) - Graph Neural Networks Uncover Geometric Neural Representations in Reinforcement-Based Motor Learning [3.379988469252273]
グラフニューラルネットワーク(GNN)は、脳波データにおける神経表現の幾何学的性質を捉えることができる。
強化型運動学習が運動計画中の神経活動パターンに与える影響について検討した。
論文 参考訳(メタデータ) (2024-10-31T10:54:50Z) - A singular Riemannian Geometry Approach to Deep Neural Networks III. Piecewise Differentiable Layers and Random Walks on $n$-dimensional Classes [49.32130498861987]
本稿ではReLUのような非微分可能活性化関数の事例について検討する。
最近の2つの研究は、ニューラルネットワークを研究するための幾何学的枠組みを導入した。
本稿では,画像の分類と熱力学問題に関する数値実験を行った。
論文 参考訳(メタデータ) (2024-04-09T08:11:46Z) - Human-Like Geometric Abstraction in Large Pre-trained Neural Networks [6.650735854030166]
幾何学的視覚処理の認知科学における経験的結果を再考する。
幾何学的視覚処理における3つの重要なバイアスを同定する。
我々は、人間のバイアスを調査する文献からタスクをテストし、AIで使用される大規模なトレーニング済みニューラルネットワークモデルにより、より人間的な抽象幾何学的処理が示されることを示した。
論文 参考訳(メタデータ) (2024-02-06T17:59:46Z) - Interpreting Neural Policies with Disentangled Tree Representations [58.769048492254555]
本稿では,コンパクトなニューラルポリシーの解釈可能性について,不整合表現レンズを用いて検討する。
決定木を利用して,ロボット学習における絡み合いの要因を抽出する。
学習したニューラルダイナミクスの絡み合いを計測する解釈可能性指標を導入する。
論文 参考訳(メタデータ) (2022-10-13T01:10:41Z) - A neural anisotropic view of underspecification in deep learning [60.119023683371736]
ニューラルネットが問題の未特定化を扱う方法が,データ表現に大きく依存していることを示す。
深層学習におけるアーキテクチャ的インダクティブバイアスの理解は,これらのシステムの公平性,堅牢性,一般化に対処する上で基本的であることを強調した。
論文 参考訳(メタデータ) (2021-04-29T14:31:09Z) - Neural population geometry: An approach for understanding biological and
artificial neural networks [3.4809730725241605]
生体および人工ニューラルネットワークの機能に関する洞察を提供する幾何学的アプローチの例を概観する。
神経集団幾何学は、生体と人工のニューラルネットワークにおける構造と機能の理解を統一する可能性がある。
論文 参考訳(メタデータ) (2021-04-14T18:10:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。