論文の概要: Likelihood-free Model Choice for Simulator-based Models with the
Jensen--Shannon Divergence
- arxiv url: http://arxiv.org/abs/2206.04110v1
- Date: Wed, 8 Jun 2022 18:16:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-10 15:56:05.004099
- Title: Likelihood-free Model Choice for Simulator-based Models with the
Jensen--Shannon Divergence
- Title(参考訳): Jensen-Shannonダイバージェンスを持つシミュレータモデルに対する自由なモデル選択
- Authors: Jukka Corander (1 2 3 4), Ulpu Remes (3) and Timo Koski (1 2 5) (1
Helsinki Institute of Information Technology (HIIT) 2 University of Helsinki
3 University of Oslo 4 Wellcome Sanger Institute 5 KTH Royal Institute of
Technology)
- Abstract要約: JSD-Razorと呼ばれる可能性のない設定に対する一貫したスコアリング基準を導出する。
JSD-Razorと確率ベースアプローチの確立された評価基準との関係を解析した。
- 参考スコア(独自算出の注目度): 0.9884867402204268
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Choice of appropriate structure and parametric dimension of a model in the
light of data has a rich history in statistical research, where the first
seminal approaches were developed in 1970s, such as the Akaike's and Schwarz's
model scoring criteria that were inspired by information theory and embodied
the rationale called Occam's razor. After those pioneering works, model choice
was quickly established as its own field of research, gaining considerable
attention in both computer science and statistics. However, to date, there have
been limited attempts to derive scoring criteria for simulator-based models
lacking a likelihood expression. Bayes factors have been considered for such
models, but arguments have been put both for and against use of them and around
issues related to their consistency. Here we use the asymptotic properties of
Jensen--Shannon divergence (JSD) to derive a consistent model scoring criterion
for the likelihood-free setting called JSD-Razor. Relationships of JSD-Razor
with established scoring criteria for the likelihood-based approach are
analyzed and we demonstrate the favorable properties of our criterion using
both synthetic and real modeling examples.
- Abstract(参考訳): データの光の中でモデルの適切な構造とパラメトリック次元の選択は、情報理論に触発されoccamのカミソリと呼ばれる理論を具現化したアカイケやシュワルツのモデルスコアリング基準など、1970年代に最初の独創的なアプローチが開発された統計研究において豊富な歴史を持っている。
これらの先駆的な研究の後、モデル選択はすぐに独自の研究分野として確立され、コンピュータ科学と統計の両方でかなりの注目を集めた。
しかし, シミュレータに基づくモデルの採点基準を導出する試みは, これまでのところ限定的であった。
このようなモデルにはベイズ要因が考慮されてきたが、それらの使用と一貫性に関する問題の両方について議論がなされている。
ここでは、Jensen-Shannon divergence (JSD) の漸近特性を用いて、JSD-Razor と呼ばれる確率自由設定に対する一貫したスコアリング基準を導出する。
JSD-Razorと確率ベースアプローチの確立された評価基準の関係を解析し, 実モデルと合成モデルの両方を用いて, 評価基準の好ましい特性を実証した。
関連論文リスト
- Latent Semantic Consensus For Deterministic Geometric Model Fitting [109.44565542031384]
我々はLSC(Latent Semantic Consensus)と呼ばれる効果的な方法を提案する。
LSCは、モデルフィッティング問題をデータポイントとモデル仮説に基づく2つの潜在意味空間に定式化する。
LSCは、一般的な多構造モデルフィッティングのために、数ミリ秒以内で一貫した、信頼性の高いソリューションを提供することができる。
論文 参考訳(メタデータ) (2024-03-11T05:35:38Z) - Synthetic location trajectory generation using categorical diffusion
models [50.809683239937584]
拡散モデル(DPM)は急速に進化し、合成データのシミュレーションにおける主要な生成モデルの一つとなっている。
本稿では,個人が訪れた物理的位置を表す変数列である合成個別位置軌跡(ILT)の生成にDPMを用いることを提案する。
論文 参考訳(メタデータ) (2024-02-19T15:57:39Z) - The Interpolating Information Criterion for Overparameterized Models [49.283527214211446]
補間情報基準(Interpolating Information Criterion)は,モデル選択に事前選択を自然に取り入れたモデル品質の尺度であることを示す。
我々の新しい情報基準は、モデルの事前の誤特定、幾何学的およびスペクトル的特性を考慮に入れており、既知の経験的および理論的挙動と数値的に一致している。
論文 参考訳(メタデータ) (2023-07-15T12:09:54Z) - Comparing Foundation Models using Data Kernels [13.099029073152257]
基礎モデルの埋め込み空間幾何学を直接比較するための方法論を提案する。
提案手法はランダムグラフ理論に基づいており, 埋め込み類似性の有効な仮説検証を可能にする。
本稿では, 距離関数を付加したモデルの多様体が, 下流の指標と強く相関することを示す。
論文 参考訳(メタデータ) (2023-05-09T02:01:07Z) - Empirical Analysis of Model Selection for Heterogeneous Causal Effect Estimation [24.65301562548798]
本研究では,因果推論におけるモデル選択の問題,特に条件付き平均処理効果(CATE)の推定について検討する。
本研究では,本研究で導入されたサロゲートモデル選択指標と,本研究で導入された新しい指標のベンチマークを行う。
論文 参考訳(メタデータ) (2022-11-03T16:26:06Z) - A Statistical-Modelling Approach to Feedforward Neural Network Model Selection [0.8287206589886881]
フィードフォワードニューラルネットワーク(FNN)は非線形回帰モデルと見なすことができる。
FNNのためのベイズ情報基準(BIC)を用いて,新しいモデル選択法を提案する。
サンプル外性能よりもBICを選択することは、真のモデルを回復する確率を増大させる。
論文 参考訳(メタデータ) (2022-07-09T11:07:04Z) - Nonparametric likelihood-free inference with Jensen-Shannon divergence
for simulator-based models with categorical output [1.4298334143083322]
シミュレータに基づく統計モデルに対する自由な推論は、機械学習と統計のコミュニティの両方において、関心の高まりを招いている。
本稿では、Jensen-Shannon- divergenceの計算特性を用いて、モデルパラメータに対する推定、仮説テスト、信頼区間の構築を可能にする理論的結果のセットを導出する。
このような近似はより集中的なアプローチの素早い代替手段であり、シミュレーターベースモデルの多種多様な応用には魅力的である。
論文 参考訳(メタデータ) (2022-05-22T18:00:13Z) - Anomaly Detection of Time Series with Smoothness-Inducing Sequential
Variational Auto-Encoder [59.69303945834122]
Smoothness-Inducing Sequential Variational Auto-Encoder (SISVAE) モデルを提案する。
我々のモデルは、フレキシブルニューラルネットワークを用いて各タイムスタンプの平均と分散をパラメータ化する。
合成データセットと公開実世界のベンチマークの両方において,本モデルの有効性を示す。
論文 参考訳(メタデータ) (2021-02-02T06:15:15Z) - Characterizing Fairness Over the Set of Good Models Under Selective
Labels [69.64662540443162]
同様の性能を実現するモデルセットに対して,予測公正性を特徴付けるフレームワークを開発する。
到達可能なグループレベルの予測格差の範囲を計算するためのトラクタブルアルゴリズムを提供します。
選択ラベル付きデータの実証的な課題に対処するために、我々のフレームワークを拡張します。
論文 参考訳(メタデータ) (2021-01-02T02:11:37Z) - Goal-directed Generation of Discrete Structures with Conditional
Generative Models [85.51463588099556]
本稿では,強化学習目標を直接最適化し,期待される報酬を最大化するための新しいアプローチを提案する。
提案手法は、ユーザ定義プロパティを持つ分子の生成と、所定の目標値を評価する短いピソン表現の同定という2つのタスクで検証する。
論文 参考訳(メタデータ) (2020-10-05T20:03:13Z) - Amortized Bayesian model comparison with evidential deep learning [0.12314765641075436]
本稿では,専門的なディープラーニングアーキテクチャを用いたベイズモデルの比較手法を提案する。
提案手法は純粋にシミュレーションベースであり,観測された各データセットに対して,すべての代替モデルを明示的に適合させるステップを回避している。
提案手法は,本研究で検討した事例に対して,精度,キャリブレーション,効率の点で優れた結果が得られることを示す。
論文 参考訳(メタデータ) (2020-04-22T15:15:46Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。