論文の概要: Prototype-Rule Neurosymbolic Regularization for Rank-Constrained Tensor Neural Networks under Label Scarcity
- arxiv url: http://arxiv.org/abs/2609.40131v1
- Date: Wed, 30 Sep 2026 16:49:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-01 18:57:28.107682
- Title: Prototype-Rule Neurosymbolic Regularization for Rank-Constrained Tensor Neural Networks under Label Scarcity
- Title(参考訳): ランク拘束型テンソルニューラルネットのラベルスカルシティ下でのプロトタイプ・ルールニューロシンボリック規則化
- Abstract要約: ランク制約テンソルニューラルネットワークは高次入力のパラメータ化を減少させるが、学習表現においてクラス幾何学を明示的に制約するものではない。
本研究では,限定的な監督下でのRランクRテンソル学習において,微分可能なプロトタイプルールが相補的帰納的バイアスを与えるか否かを検討する。
- 参考スコア(独自算出の注目度): 2.635567408694209
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Rank-constrained tensor neural networks reduce the parameterization of high-order inputs, but they do not explicitly constrain class geometry in the learned representation. This study investigates whether a differentiable prototype-rule can provide a complementary inductive bias for Rank-R tensor learning under limited supervision. The proposed framework augments the Rank-R objective with prototype-based regularization and optionally fuses prototype evidence with neural logits at inference. Four hyperspectral benchmarks are evaluated with four Rank-R configurations under both seven-fold stratification and spatially separated folds that mitigate leakage; a separate spatial study varies the class support budget from 2 to 20 samples. Under spatial evaluation, full neurosymbolic inference changes Macro-F1 score by +8.82 percentage points on Botswana, +5.49 on Indian Pines, +1.59 on Pavia University, and -0.62 on Salinas. Most of the benefit arises from training-time regularization, whereas inference fusion is small and dataset dependent.
- Abstract(参考訳): ランク制約テンソルニューラルネットワークは高次入力のパラメータ化を減少させるが、学習表現においてクラス幾何学を明示的に制約するものではない。
本研究では,限定的な監督下でのRランクRテンソル学習において,微分可能なプロトタイプルールが相補的帰納的バイアスを与えるか否かを検討する。
提案されたフレームワークは、プロトタイプベースの正規化でRan-Rの目的を拡大し、任意に推論時に神経ロジットとプロトタイプのエビデンスを融合する。
4つのハイパースペクトルベンチマークを、7つの層状化と、漏れを緩和する空間的に分離された折りたたみの両方の下で4つのランクR構成で評価した。
空間的評価では、マクロ-F1のスコアはボツワナでは+8.82、インドパインズでは+5.49、パヴィア大学では+1.59、サリナスでは-0.62と変化している。
利点のほとんどはトレーニング時の正規化によって生じるが、推論融合は小さく、データセットに依存している。
関連論文リスト
- Unraveling Machine Behavior by Multi-Level Bias Analysis and Detection: Methodology and Application to Computer Vision [10.595890561268735]
本研究では,ニューラルネットワークにおけるバイアスの存在と伝播について,包括的多段階解析を用いて検討する。
本研究では,SpaceBias,ActivationBias,WeightBiasの3つのバイアス検出手法を提案する。
提案手法は,ネットワークアーキテクチャ自体のバイアスが,異なるレベルでどのように現れるかを示す。
論文 参考訳(メタデータ) (2026-07-08T10:18:51Z) - Implicit Regularization and Generalization in Overparameterized Neural Networks [0.0]
小さなバッチサイズは一貫して低いテストエラーとフラットなミニマを生み出した。
スパースワークは、再訓練された際の完全なモデル性能の1.15ポイント以内に達成されたパラメータの10%しか保持していない。
論文 参考訳(メタデータ) (2026-04-08T21:21:44Z) - Deep learning with missing data [3.829599191332801]
本稿では,既存の計算手法と組み合わせて適用可能なパターン埋め込みニューラルネットワーク(PENN)を提案する。
インプットされたデータに基づいてトレーニングされたニューラルネットワークに加えて、PENNは観察指標のベクトルを第2のニューラルネットワークに渡して、コンパクトな表現を提供する。
出力は第3のニューラルネットワークに結合され、最終的な予測が生成される。
論文 参考訳(メタデータ) (2025-04-21T18:57:36Z) - Just How Flexible are Neural Networks in Practice? [89.80474583606242]
ニューラルネットワークは、パラメータを持つ少なくとも多くのサンプルを含むトレーニングセットに適合できると広く信じられている。
しかし実際には、勾配や正規化子など、柔軟性を制限したトレーニング手順によるソリューションしか見つからない。
論文 参考訳(メタデータ) (2024-06-17T12:24:45Z) - On Excess Risk Convergence Rates of Neural Network Classifiers [8.329456268842227]
本稿では,ニューラルネットワークを用いた2値分類におけるプラグイン分類器の性能を,その過大なリスクによって測定した。
ニューラルネットワークの推定と近似特性を分析し,次元自由で均一な収束率を求める。
論文 参考訳(メタデータ) (2023-09-26T17:14:10Z) - Gradient Descent in Neural Networks as Sequential Learning in RKBS [63.011641517977644]
初期重みの有限近傍にニューラルネットワークの正確な電力系列表現を構築する。
幅にかかわらず、勾配降下によって生成されたトレーニングシーケンスは、正規化された逐次学習によって正確に複製可能であることを証明した。
論文 参考訳(メタデータ) (2023-02-01T03:18:07Z) - Improved Convergence Guarantees for Shallow Neural Networks [91.3755431537592]
勾配降下法により訓練された深度2ニューラルネットの収束度を世界最小とする。
我々のモデルには、二次損失関数による回帰、完全連結フィードフォワードアーキテクチャ、RelUアクティベーション、ガウスデータインスタンス、逆ラベルといった特徴がある。
彼らは、少なくとも我々のモデルでは、収束現象がNTK体制をはるかに超越していることを強く示唆している」。
論文 参考訳(メタデータ) (2022-12-05T14:47:52Z) - Compact representations of convolutional neural networks via weight
pruning and quantization [63.417651529192014]
本稿では、音源符号化に基づく畳み込みニューラルネットワーク(CNN)の新しいストレージフォーマットを提案し、重み付けと量子化の両方を活用する。
我々は、全接続層で0.6%、ネットワーク全体で5.44%のスペース占有率を削減し、最低でもベースラインと同じくらいの競争力を発揮する。
論文 参考訳(メタデータ) (2021-08-28T20:39:54Z) - Towards an Understanding of Benign Overfitting in Neural Networks [104.2956323934544]
現代の機械学習モデルは、しばしば膨大な数のパラメータを使用し、通常、トレーニング損失がゼロになるように最適化されている。
ニューラルネットワークの2層構成において、これらの良質な過適合現象がどのように起こるかを検討する。
本稿では,2層型ReLUネットワーク補間器を極小最適学習率で実現可能であることを示す。
論文 参考訳(メタデータ) (2021-06-06T19:08:53Z) - ReMarNet: Conjoint Relation and Margin Learning for Small-Sample Image
Classification [49.87503122462432]
ReMarNet(Relation-and-Margin Learning Network)と呼ばれるニューラルネットワークを導入する。
本手法は,上記2つの分類機構の双方において優れた性能を発揮する特徴を学習するために,異なるバックボーンの2つのネットワークを組み立てる。
4つの画像データセットを用いた実験により,本手法はラベル付きサンプルの小さな集合から識別的特徴を学習するのに有効であることが示された。
論文 参考訳(メタデータ) (2020-06-27T13:50:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。