論文の概要: Generalization of Transformer-Based Neural Quantum States via In-Context Learning
- arxiv url: http://arxiv.org/abs/2610.03463v1
- Date: Fri, 02 Oct 2026 15:38:10 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-06 00:14:30.455542
- Title: Generalization of Transformer-Based Neural Quantum States via In-Context Learning
- Title(参考訳): インコンテキスト学習による変圧器型ニューラル量子状態の一般化
- Abstract要約: In-context Learning の下で,Transformer に基づくニューラル量子状態の一般化特性を解析するための理論的枠組みを開発する。
この保証を実現するのに必要なトランスフォーマー深さは,システムサイズと線形にしか一致しないことを示す。
この結果に基づいて、我々は解析をランクワン密度演算子として定式化された完全な量子状態にまで拡張する。
- 参考スコア(独自算出の注目度): 14.434207500036136
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Neural quantum states based on modern deep learning architectures have emerged as powerful representations for quantum many-body systems. In particular, Transformer-based neural quantum states provide expressive models capable of capturing long-range correlations, and their empirical generalization performance has recently been demonstrated. However, a theoretical understanding of their generalization behavior remains largely unexplored. In this paper, we develop a theoretical framework to analyze the generalization properties of Transformer-based neural quantum states under in-context learning. We establish a rigorous inference-time generalization error bound in terms of mean squared error (MSE), showing that the pointwise prediction error decreases inversely with both the number of in-context examples and the depth of the Transformer. We further show that the Transformer depth required to achieve this guarantee scales only linearly with the system size--namely, the number of particles in continuous systems or the number of qudits in discrete systems. Building on this result, we extend our analysis to full quantum states formulated as rank-one density operators, and derive MSE-based generalization bounds over both continuous and discrete domains under physical constraints. Finally, numerical simulations corroborate our theoretical analysis.
- Abstract(参考訳): 現代のディープラーニングアーキテクチャに基づくニューラル量子状態は、量子多体系の強力な表現として登場した。
特に、トランスフォーマーに基づくニューラル量子状態は、長距離相関をキャプチャ可能な表現モデルを提供しており、その経験的一般化性能が最近実証されている。
しかし、それらの一般化行動に関する理論的理解はほとんど未解明のままである。
本論文では,トランスフォーマーをベースとしたニューラルネットワーク状態の一般化特性を,文脈内学習下で解析するための理論的枠組みを開発する。
平均二乗誤差 (MSE) を用いて厳密な推論時間一般化誤差を定め, テキスト中の例数とトランスフォーマーの深さの両方で, ポイントワイド予測誤差が逆減少することを示した。
さらに, この保証を実現するために必要なトランスフォーマー深さは, 連続系における粒子数, 離散系におけるクォーディット数など, システムサイズと線形にしか一致しないことを示す。
この結果に基づいて、我々は、階数1の密度演算子として定式化された完全量子状態まで解析を拡張し、物理的制約の下で連続領域と離散領域の両方に MSE に基づく一般化境界を導出する。
最後に、数値シミュレーションが我々の理論解析を裏付ける。
関連論文リスト
- A PAC-Bayesian approach to generalization for quantum models [0.9543943371833464]
我々は、幅広い量子モデルのクラスに対して、最初のPAC-ベイジアン一般化境界を提供する。
この研究は実行可能なモデル設計の洞察を提供し、量子機械学習における一般化のより微妙な理解のための基礎的なツールを確立する。
論文 参考訳(メタデータ) (2026-03-24T08:58:54Z) - Asymptotic Expansions for Neural Network Approximations of Quantum Channels [0.0]
本稿では,量子ニューラルネット演算子の完全な評価法として,量子Voronovskaya-Damasclin(QVD)理論を確立する。
我々は、リウヴィル表現においてフレシェ微分可能性を通じて定義されるソボレフ空間とハルダー空間の量子アナログを導入する。
本枠組みでは,近似誤差の明示的な拡張を導出し,収束を規定する基本的なメカニズムを同定する。
論文 参考訳(メタデータ) (2026-03-09T18:12:57Z) - Improving Generalization and Trainability of Quantum Eigensolvers via Graph Neural Encoding [0.5013248430919223]
多体ハミルトンの基底状態は物理学、化学、最適化において中心的な問題である。
本稿では,グラフオートエンコーダと古典的ニューラルネットワークを組み合わせたエンドツーエンド表現学習フレームワークを提案する。
一般化と訓練性が向上し, 試験誤差が減少し, 勾配分散が著しく低下することを示した。
論文 参考訳(メタデータ) (2026-02-23T12:01:14Z) - Random-Matrix-Induced Simplicity Bias in Over-parameterized Variational Quantum Circuits [72.0643009153473]
本稿では,観測可能な期待値とパラメータ勾配の両方がシステムサイズに指数関数的に集中するHaar型普遍性クラスに,表現的変分アンサーゼが入ることを示す。
その結果、そのような回路によって誘導される仮説クラスは、近点関数の狭い族に高い確率で崩壊する。
テンソル-ネットワークベースおよびテンソル-ハイパーネットワークパラメータ化を含むテンソル構造VQCは、ハール型普遍性クラスの外にある。
論文 参考訳(メタデータ) (2026-01-05T08:04:33Z) - Quantum critical dynamics and emergent universality in decoherent digital quantum processors [0.0]
我々は,デコヒーレンスによって普遍的なスケーリングが作り直され,理論的予測が検証できることを示す。
我々は、デコヒーレンスによって形成された永続的普遍構造を指して、明確なスケーリング関係を観察する。
本研究は,量子ハードウェアの高レベル記述子としてユニバーサル・ダイナミック・スケーリングを利用する可能性に注目した。
論文 参考訳(メタデータ) (2025-12-15T09:51:44Z) - Efficient Learning for Linear Properties of Bounded-Gate Quantum Circuits [62.46800898243033]
量子学習理論の最近の進歩は、様々な古典的な入力によって生成された測定データから、大きな量子ビット回路の線形特性を効率的に学習できるのか?
我々は、小さな予測誤差を達成するためには、$d$で線形にスケーリングするサンプルの複雑さが必要であることを証明し、それに対応する計算複雑性は、dで指数関数的にスケールする可能性がある。
そこで本研究では,古典的影と三角展開を利用したカーネルベースの手法を提案し,予測精度と計算オーバーヘッドとのトレードオフを制御可能とした。
論文 参考訳(メタデータ) (2024-08-22T08:21:28Z) - Pre-training Tensor-Train Networks Facilitates Machine Learning with Variational Quantum Circuits [70.97518416003358]
変分量子回路(VQC)は、ノイズの多い中間スケール量子(NISQ)デバイス上での量子機械学習を約束する。
テンソルトレインネットワーク(TTN)はVQC表現と一般化を向上させることができるが、結果として得られるハイブリッドモデルであるTTN-VQCは、Polyak-Lojasiewicz(PL)条件による最適化の課題に直面している。
この課題を軽減するために,プレトレーニングTTNモデルとVQCを組み合わせたPre+TTN-VQCを導入する。
論文 参考訳(メタデータ) (2023-05-18T03:08:18Z) - Universality of critical dynamics with finite entanglement [68.8204255655161]
臨界近傍の量子系の低エネルギー力学が有限絡みによってどのように変化するかを研究する。
その結果、時間依存的臨界現象における絡み合いによる正確な役割が確立された。
論文 参考訳(メタデータ) (2023-01-23T19:23:54Z) - The Quantum Path Kernel: a Generalized Quantum Neural Tangent Kernel for
Deep Quantum Machine Learning [52.77024349608834]
古典的なディープニューラルネットワークの量子アナログを構築することは、量子コンピューティングにおける根本的な課題である。
鍵となる問題は、古典的なディープラーニングの本質的な非線形性にどのように対処するかである。
我々は、深層機械学習のこれらの側面を複製できる量子機械学習の定式化であるQuantum Path Kernelを紹介する。
論文 参考訳(メタデータ) (2022-12-22T16:06:24Z) - Theory of Quantum Generative Learning Models with Maximum Mean
Discrepancy [67.02951777522547]
量子回路ボルンマシン(QCBM)と量子生成逆ネットワーク(QGAN)の学習可能性について検討する。
まず、QCBMの一般化能力を解析し、量子デバイスがターゲット分布に直接アクセスできる際の優位性を同定する。
次に、QGANの一般化誤差境界が、採用されるAnsatz、クォーディットの数、入力状態に依存することを示す。
論文 参考訳(メタデータ) (2022-05-10T08:05:59Z) - Continuous-variable neural-network quantum states and the quantum rotor
model [2.3398944692275476]
第1量子化における連続可変格子量子系の解析のためのニューラルネットワーク量子状態アルゴリズムについて検討する。
ボルツマン機械(RBM)波動関数を自然に一般化する連続可変トライアルウェーブフランプトンの族が導入された。
その結果, 偏微分方程式 (PDE) に基づくスケーラブル固有解法と比較した。
論文 参考訳(メタデータ) (2021-07-15T03:53:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。