論文の概要: The loss of the property of locality of the kernel in high-dimensional
Gaussian process regression on the example of the fitting of molecular
potential energy surfaces
- arxiv url: http://arxiv.org/abs/2211.11170v1
- Date: Mon, 21 Nov 2022 04:15:12 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-22 19:11:41.503767
- Title: The loss of the property of locality of the kernel in high-dimensional
Gaussian process regression on the example of the fitting of molecular
potential energy surfaces
- Title(参考訳): 高次元ガウス過程回帰における核の局所性の性質の喪失 : 分子ポテンシャルエネルギー面の嵌合の例
- Authors: Sergei Manzhos and Manabu Ihara
- Abstract要約: ガウス過程回帰(GPR)や一般にカーネルリッジ回帰(KRR)を含むカーネルベースの手法は、計算化学での利用が増加している。
本研究では, 分子ポテンシャルエネルギー曲面の次元性の増大を例に, 高次元におけるガウス型核の局所性の性質の実用的消失を示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Kernel based methods including Gaussian process regression (GPR) and
generally kernel ridge regression (KRR) have been finding increasing use in
computational chemistry, including the fitting of potential energy surfaces and
density functionals in high-dimensional feature spaces. Kernels of the Matern
family such as Gaussian-like kernels (basis functions) are often used, which
allows imparting them the meaning of covariance functions and formulating GPR
as an estimator of the mean of a Gaussian distribution. The notion of locality
of the kernel is critical for this interpretation. It is also critical to the
formulation of multi-zeta type basis functions widely used in computational
chemistry We show, on the example of fitting of molecular potential energy
surfaces of increasing dimensionality, the practical disappearance of the
property of locality of a Gaussian-like kernel in high dimensionality. We also
formulate a multi-zeta approach to the kernel and show that it significantly
improves the quality of regression in low dimensionality but loses any
advantage in high dimensionality, which is attributed to the loss of the
property of locality.
- Abstract(参考訳): ガウス過程回帰(GPR)や一般カーネルリッジ回帰(KRR)を含むカーネルベースの手法は、ポテンシャルエネルギー面の嵌合や高次元特徴空間における密度汎関数など、計算化学での利用が増えている。
ガウス型カーネル (basis function) のようなマタン族のカーネルはよく用いられ、共分散関数の意味を与え、ガウス分布の平均の推定元としてGPRを定式化することができる。
この解釈にはカーネルの局所性の概念が不可欠である。
計算化学において広く用いられる多ゼータ型基底関数の定式化にも批判的であり、次元性の増大による分子ポテンシャルエネルギー曲面の適合例、高次元のガウス型核の局所性の性質の実用的消失について示す。
また,マルチゼータのカーネルへのアプローチを定式化し,低次元の回帰の質を著しく向上させるが,局所性の喪失に起因する高次元の利点を損なうことを示した。
関連論文リスト
- High-Dimensional Kernel Methods under Covariate Shift: Data-Dependent Implicit Regularization [83.06112052443233]
本稿では,共変量シフト下での高次元におけるカーネルリッジの回帰について検討する。
バイアス分散分解により、再重み付け戦略が分散を減少させることができることを理論的に証明する。
偏見について,任意の偏見の正則化を解析し,偏見が正則化の異なる尺度で非常に異なる振る舞いをすることができることを示す。
論文 参考訳(メタデータ) (2024-06-05T12:03:27Z) - Learning Analysis of Kernel Ridgeless Regression with Asymmetric Kernel Learning [33.34053480377887]
本稿では,局所適応バンド幅(LAB)RBFカーネルを用いたカーネルリッジレスレグレッションを強化する。
初めて、LAB RBFカーネルから学習した関数は、Reproducible Kernel Hilbert Spaces (RKHSs) の積分空間に属することを示した。
論文 参考訳(メタデータ) (2024-06-03T15:28:12Z) - An appointment with Reproducing Kernel Hilbert Space generated by
Generalized Gaussian RBF as $L^2-$measure [3.9931474959554496]
Generalized Gaussian Radial Basis Function (RBF) Kernelsは、人工知能と機械学習ルーチンにおいて最も多く採用されているカーネルである。
この原稿は、前述の機械学習ルーチンに対する一般化ガウスRBFのカーネルセンスへの応用と、上記の関数との比較を実証している。
論文 参考訳(メタデータ) (2023-12-17T12:02:10Z) - Gaussian Process Regression under Computational and Epistemic Misspecification [4.5656369638728656]
大規模データアプリケーションでは、カーネルの低ランクあるいはスパース近似を用いて計算コストを削減できる。
本稿では,そのようなカーネル近似が要素誤差に与える影響について検討する。
論文 参考訳(メタデータ) (2023-12-14T18:53:32Z) - Degeneration of kernel regression with Matern kernels into low-order
polynomial regression in high dimension [0.0]
マターン型カーネルの最適長パラメータは非常に大きくなる傾向にあり、この手法は効率よく低次回帰に縮退する。
これは理論上および数値的に6次元および15次元の核の例に示される。
結果は、中規模の分子に対する近似の成功と、結合の順序付けに基づく分子モデルの重要性にさらに光を当てた。
論文 参考訳(メタデータ) (2023-11-17T00:46:54Z) - Promises and Pitfalls of the Linearized Laplace in Bayesian Optimization [73.80101701431103]
線形化ラプラス近似(LLA)はベイズニューラルネットワークの構築に有効で効率的であることが示されている。
ベイズ最適化におけるLLAの有用性について検討し,その性能と柔軟性を強調した。
論文 参考訳(メタデータ) (2023-04-17T14:23:43Z) - Hybrid Random Features [60.116392415715275]
ハイブリッドランダム特徴(HRF)と呼ばれるソフトマックスとガウス核の線形化のための新しいランダム特徴法を提案する。
HRFは、カーネル推定の品質を自動的に適応し、定義された関心領域の最も正確な近似を提供する。
論文 参考訳(メタデータ) (2021-10-08T20:22:59Z) - Spectral density reconstruction with Chebyshev polynomials [77.34726150561087]
厳密な誤差推定で有限エネルギー分解能の制御可能な再構成を行う方法を示す。
これは、核と凝縮物質物理学における将来の応用の道を開くものである。
論文 参考訳(メタデータ) (2021-10-05T15:16:13Z) - Deformed Explicitly Correlated Gaussians [58.720142291102135]
変形相関ガウス基底関数を導入し、それらの行列要素を算出する。
これらの基底関数は非球面ポテンシャルの問題を解くのに使うことができる。
論文 参考訳(メタデータ) (2021-08-10T18:23:06Z) - Scalable Variational Gaussian Processes via Harmonic Kernel
Decomposition [54.07797071198249]
汎用性を維持しつつ高い忠実度近似を提供する,スケーラブルな変分ガウス過程近似を導入する。
様々な回帰問題や分類問題において,本手法は変換やリフレクションなどの入力空間対称性を活用できることを実証する。
提案手法は, 純粋なGPモデルのうち, CIFAR-10 の最先端化を実現する。
論文 参考訳(メタデータ) (2021-06-10T18:17:57Z) - Advanced Stationary and Non-Stationary Kernel Designs for Domain-Aware
Gaussian Processes [0.0]
再生カーネルヒルベルト空間(RKHS)の要素である所望の特性を持つ関数のみを許容する先進カーネル設計を提案する。
いくつかの合成および2つの科学的データセットを用いて、先進的なカーネル設計がガウス過程に与える影響を示す。
論文 参考訳(メタデータ) (2021-02-05T22:07:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。