論文の概要: Universal Construction and Exact Self-Reproduction in Ternary McCulloch-Pitts Networks
- arxiv url: http://arxiv.org/abs/2610.12251v1
- Date: Thu, 08 Oct 2026 16:25:05 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:54.181316
- Title: Universal Construction and Exact Self-Reproduction in Ternary McCulloch-Pitts Networks
- Title(参考訳): 3次マカロック・ピッツネットワークにおける普遍的構築と実践的自己再生
- Abstract要約: 1,0,1の重みを持つマカロック・ピットのしきい値ユニットの固定ネットワークは、その状態にある他のしきい値ネットワークを保持して実行することができる。
このようなネットワークを使って、フォン・ノイマンの普遍的な構築と自己複製を正確に行う。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: A fixed network of McCulloch-Pitts threshold units with weights in {-1,0,1} can hold other threshold networks in its state and run them: the state is a ring of banks of records, each record a unit of a stored network, and each step evaluates one record. We use such a network to carry out von Neumann's universal construction and self-reproduction exactly. As a cellular automaton keeps its rule, the fixed network keeps its weights, and what reproduces is a stored network. A constructor of 143 records reads the description of a network from its tape, builds that network in the next bank, copies the description onto the next tape and hands control to what it built; started on its own description, it rebuilds itself, weights included, in every generation. The scheme scales to a universal computer. A SUBLEQ computer of 17,598 ternary units, stored as 36,080 records and running a program of 27 instructions, builds any network that fits a bank and reproduces itself in the same way, at every word width from eight bits on; run directly, it emits the serialization of its own weights, memory and tape. Integer pre-activations give every orbit a margin of 1/2, and replicating each unit r times multiplies it by r. That suffices against noise of any size on the pre-activations, but against von Neumann's output flips only below a threshold inversely proportional to the fan-in. These results are proved in Rocq.
- Abstract(参考訳): 重みが {-1,0,1} のマカロック・ピットしきい値単位の固定されたネットワークは、その状態にある他のしきい値ネットワークを保持して実行することができる: 状態は記録のバンクのリングであり、それぞれが格納されたネットワークの単位を記録し、各ステップは1つのレコードを評価する。
このようなネットワークを使って、フォン・ノイマンの普遍的な構築と自己複製を正確に行う。
セルラーオートマトンはその規則を守っているので、固定されたネットワークはその重みを保ち、再生するものは保存されたネットワークである。
143レコードのコンストラクタは、テープからネットワークの説明を読み出し、そのネットワークを次のバンクに構築し、その記述を次のテープにコピーし、その記述に手動で制御する。
そのスキームは普遍的なコンピュータにスケールする。
3次ユニット17,598のSUBLEQコンピュータは、36,080レコードとして保存され、27命令のプログラムを実行し、銀行に適合し、8ビットから全てのワード幅で同じ方法で複製するネットワークを構築し、直接実行することで、自身の重み、メモリ、テープのシリアライズを出力する。
整数プレアクティベーションはすべての軌道に1/2のマージンを与え、各単位 r を r 倍に複製する。
これはプレアクティベーション上の任意の大きさの雑音に対して十分であるが、フォン・ノイマンの出力の反転はファンインに反比例する閾値以下である。
これらの結果はRocqで証明されている。
関連論文リスト
- In-Cell Learning: Deployed Language Models Can Learn New Knowledge Without Changing a Single Stored Bit [4.726337413307433]
4ビットのリリースでは、各重みを整数コードと共有スケールとして格納し、格納された値の間に量子化器が捨てる間隔を残していることを示す。
私たちは、新しい知識をそのインターバルに書き込むパラダイムを、インセルラーニングと呼ぶ。
CellFillは、内部の低ランクの位置をベンダー自身の4ビットリリースでトレーニングすることで、構築によってパラダイムを実現する。
論文 参考訳(メタデータ) (2026-08-21T08:49:07Z) - Kilobyte Models: Neural Networks as a Seed and a Quantized Latent [0.0]
デプロイ可能なアーティファクトが重みではなく、それらを再生するための短いレシピである、極端なモデル圧縮の形式について検討する。
モデルは、パラメータカウントではなく、潜在次元とビット幅によってサイズが設定される量子化潜在子と共にシードとなる。
論文 参考訳(メタデータ) (2026-08-01T20:42:52Z) - Sigma-Branch: Hierarchical Single-Path Network Reconstruction for Dynamic Inference with Reduced Active Parameters [0.0]
本稿では,事前学習した高密度ネットワークを,共有バックボーン,階層ルータ,特殊葉からなる階層二分木に再構成するフレームワークを提案する。
CIFAR-100 / ResNet-50, ImageNet-1K / ResNet-50, ModelNet40 / PointNet++ 全体で、SigmaB-Net は高密度ベースライン Top-1 の 1.72 ポイント (pp) に留まりながら、参照毎のアクティブパラメータを58-60%削減する。
論文 参考訳(メタデータ) (2026-06-07T09:19:44Z) - Does Engram Do Memory Retrieval in Autoregressive Image Generation? [50.31813662801864]
本研究では,Engramモジュールを2次元空間的$n$-gramハッシュ,ゲート融合,KV-cache互換インクリメンタル推論で視覚に適応させる。
ゲート・クランプ・スイープは、エングラムの経路を完全に無効にすることは破滅的であることを示している。
ドナープローブ実験により、一致した、逆数的な、あるいはランダムな同一クラスの例にハッシュ入力を交換すると、統計的に区別不能な次トーケン分布が生じることが示された。
論文 参考訳(メタデータ) (2026-05-13T08:40:46Z) - A PyTorch Library of Turing-Complete Neural Networks [0.0]
本稿では、チューリングマシン記述からニューラルネットワークとその重みをコンパイルするPyTorchパッケージを提案する。
遷移関数と一連の端末状態が与えられたパッケージは、前方通過がチューリングマシンの一ステップに対応するモデルを構成する。
論文 参考訳(メタデータ) (2026-05-03T21:06:25Z) - Block-Encoding Tensor Networks and QUBO Embeddings [0.0]
我々は,任意のテンソルネットワーク(TN)を局所ユニタリ列に変換するアルゴリズムを提案する。
構成は各TNを局所等距離として埋め込み、それをユニタリに拡張する。
我々は、形式文、擬符号、資源公式、および一般量子作用素の状態準備と学習への利用に関する議論を提供する。
論文 参考訳(メタデータ) (2025-10-01T14:15:22Z) - Token Turing Machines [53.22971546637947]
Token Turing Machines (TTM) はシーケンシャルな自己回帰型トランスフォーマーモデルである。
我々のモデルは、セミナルなニューラルチューリングマシンにインスパイアされ、以前の履歴を要約するトークンの集合からなる外部メモリを持つ。
論文 参考訳(メタデータ) (2022-11-16T18:59:18Z) - LoopStack: a Lightweight Tensor Algebra Compiler Stack [61.04098601022665]
LoopStackはテンソル操作のためのドメイン固有のコンパイラスタックである。
最先端の機械学習フレームワークのパフォーマンスにマッチし、頻繁なマシンコードを生成する。
メモリフットプリントは非常に小さく、バイナリサイズは245KBで、30K行未満の効率的なコードによって、モバイルや組み込みデバイスでの使用に適している。
論文 参考訳(メタデータ) (2022-05-02T01:57:58Z) - Diverse Branch Block: Building a Convolution as an Inception-like Unit [123.59890802196797]
畳み込みニューラルネットワーク(Convolutional Neural Network、ConvNet)のユニバーサルビルディングブロックを提案し、推論時間コストなしでパフォーマンスを向上させる。
Diverse Branch Block(DBB)は、異なるスケールと複雑さの多様なブランチを組み合わせることで、単一の畳み込みの表現能力を高めます。
トレーニング後、DBBを単一のConv層に等価に変換してデプロイすることができる。
論文 参考訳(メタデータ) (2021-03-24T18:12:00Z) - Efficient Integer-Arithmetic-Only Convolutional Neural Networks [87.01739569518513]
我々は従来のReLUを境界ReLUに置き換え、その減少は活性化量子化によるものであることを示す。
我々の整数ネットワークは、対応するFPNネットワークと同等の性能を発揮するが、メモリコストは1/4に過ぎず、最新のGPUでは2倍高速である。
論文 参考訳(メタデータ) (2020-06-21T08:23:03Z) - Proving the Lottery Ticket Hypothesis: Pruning is All You Need [56.25432563818297]
抽選券仮説では、ランダムなdネットワークには、独立した訓練を受けた場合、元のネットワークの性能と競合する小さなサブネットワークが含まれている。
我々は、全ての有界分布と、有界重みを持つ全ての対象ネットワークに対して、ランダム重みを持つ十分に過度にパラメータ化されたニューラルネットワークは、目標ネットワークとほぼ同じ精度のサブネットワークを、それ以上のトレーニングなしに含んでいることを証明し、さらに強い仮説を証明した。
論文 参考訳(メタデータ) (2020-02-03T07:23:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。