論文の概要: Joint Probability Estimation Using Tensor Decomposition and Dictionaries
- arxiv url: http://arxiv.org/abs/2203.01667v1
- Date: Thu, 3 Mar 2022 11:55:51 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-04 15:30:53.413954
- Title: Joint Probability Estimation Using Tensor Decomposition and Dictionaries
- Title(参考訳): テンソル分解と辞書を用いた共同確率推定
- Authors: Shaan ul Haque, Ajit Rajwade and Karthik S. Gurumoorthy
- Abstract要約: 本研究では, 与えられた離散確率と連続確率変数の連立確率の非パラメトリック推定を, それらの(経験的推定)2次元境界値から検討した。
我々は、データを調べて分布の様々なファミリーの辞書を作成し、それを混合した製品の各分解因子を近似するために利用する。
- 参考スコア(独自算出の注目度): 3.4720326275851994
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: In this work, we study non-parametric estimation of joint probabilities of a
given set of discrete and continuous random variables from their (empirically
estimated) 2D marginals, under the assumption that the joint probability could
be decomposed and approximated by a mixture of product densities/mass
functions. The problem of estimating the joint probability density function
(PDF) using semi-parametric techniques such as Gaussian Mixture Models (GMMs)
is widely studied. However such techniques yield poor results when the
underlying densities are mixtures of various other families of distributions
such as Laplacian or generalized Gaussian, uniform, Cauchy, etc. Further, GMMs
are not the best choice to estimate joint distributions which are hybrid in
nature, i.e., some random variables are discrete while others are continuous.
We present a novel approach for estimating the PDF using ideas from dictionary
representations in signal processing coupled with low rank tensor
decompositions. To the best our knowledge, this is the first work on estimating
joint PDFs employing dictionaries alongside tensor decompositions. We create a
dictionary of various families of distributions by inspecting the data, and use
it to approximate each decomposed factor of the product in the mixture. Our
approach can naturally handle hybrid $N$-dimensional distributions. We test our
approach on a variety of synthetic and real datasets to demonstrate its
effectiveness in terms of better classification rates and lower error rates,
when compared to state of the art estimators.
- Abstract(参考訳): 本研究では,与えられた離散確率変数と連続確率変数の(推定された)2次元辺数から,生成物の密度/質量関数の混合により,結合確率が分解され近似されるという仮定の下で,非パラメトリックな確率推定を行う。
ガウス混合モデル(gmms)のような半パラメトリック手法を用いて確率密度関数(pdf)を推定する問題は広く研究されている。
しかし、基礎となる密度がラプラシア系や一般化ガウス系、ユニフォーム系、コーシー系といった他の様々な分布の混合物である場合、このような手法は不十分な結果をもたらす。
さらにgmmは、自然にハイブリッドであるジョイント分布、すなわち、ある確率変数は離散的であり、他の変数は連続的であると見積もる最善の選択ではない。
本稿では,低階テンソル分解を伴う信号処理における辞書表現のアイデアを用いたPDF推定手法を提案する。
我々の知る限りでは、テンソル分解を伴う辞書を用いた共同pdfの推定はこれが初めてである。
我々は、データを調べて分布の様々なファミリーの辞書を作成し、それを混合した製品の各分解因子を近似するために利用する。
我々のアプローチは自然にn$-dimensionalのハイブリッド分布を扱うことができる。
提案手法は, 美術推定器の状態と比較した場合の, 分類率の向上と誤り率の低下の観点から, 各種合成データセットと実データセットを比較検討した。
関連論文リスト
- Semiparametric conformal prediction [79.6147286161434]
リスクに敏感なアプリケーションは、複数の、潜在的に相関したターゲット変数に対して、よく校正された予測セットを必要とする。
スコアをランダムなベクトルとして扱い、それらの連接関係構造を考慮した予測セットを構築することを目的とする。
実世界のレグレッション問題に対して,所望のカバレッジと競争効率について報告する。
論文 参考訳(メタデータ) (2024-11-04T14:29:02Z) - Collaborative Heterogeneous Causal Inference Beyond Meta-analysis [68.4474531911361]
異種データを用いた因果推論のための協調的逆確率スコア推定器を提案する。
異質性の増加に伴うメタアナリシスに基づく手法に対して,本手法は有意な改善を示した。
論文 参考訳(メタデータ) (2024-04-24T09:04:36Z) - Estimating Joint Probability Distribution With Low-Rank Tensor
Decomposition, Radon Transforms and Dictionaries [3.0892724364965005]
本報告では, 混合成分の少ない製品密度の混合として, 基礎となる分布を分解できることを仮定して, データサンプルから結合確率密度を推定する手法について述べる。
1-次元の密度を表す辞書と、1-次元の辺りから合同分布を推定するランダムな投影という2つの重要なアイデアを組み合わせる。
提案アルゴリズムは, 従来の辞書を用いた手法に比べて, サンプルの複雑さの向上に有効である。
論文 参考訳(メタデータ) (2023-04-18T05:37:15Z) - Machine-Learned Exclusion Limits without Binning [0.0]
我々は、1次元信号と背景確率密度関数を抽出するためにカーネル密度推定器(KDE)を含むMLL法を拡張した。
本手法は,レプトン対に崩壊するエキゾチックヒッグス粒子の探索と,レプトン対に崩壊するZ'$ボソンの2例に適用する。
論文 参考訳(メタデータ) (2022-11-09T11:04:50Z) - A Robust and Flexible EM Algorithm for Mixtures of Elliptical
Distributions with Missing Data [71.9573352891936]
本稿では、ノイズや非ガウス的なデータに対するデータ計算の欠如に対処する。
楕円分布と潜在的な欠落データを扱う特性を混合した新しいEMアルゴリズムについて検討した。
合成データの実験的結果は,提案アルゴリズムが外れ値に対して頑健であり,非ガウスデータで使用可能であることを示す。
論文 参考訳(メタデータ) (2022-01-28T10:01:37Z) - Density Ratio Estimation via Infinitesimal Classification [85.08255198145304]
そこで我々は, DRE-inftyを提案する。 DRE-inftyは, 密度比推定(DRE)を, より簡単なサブプロブレムに還元する手法である。
モンテカルロ法にインスパイアされ、中間ブリッジ分布の無限連続体を介して2つの分布の間を滑らかに補間する。
提案手法は,複雑な高次元データセット上での相互情報推定やエネルギーベースモデリングなどの下流タスクにおいて良好に動作することを示す。
論文 参考訳(メタデータ) (2021-11-22T06:26:29Z) - A Stochastic Newton Algorithm for Distributed Convex Optimization [62.20732134991661]
均質な分散凸最適化のためのNewtonアルゴリズムを解析し、各マシンが同じ人口目標の勾配を計算する。
提案手法は,既存の手法と比較して,性能を損なうことなく,必要な通信ラウンドの数,頻度を低減できることを示す。
論文 参考訳(メタデータ) (2021-10-07T17:51:10Z) - A similarity-based Bayesian mixture-of-experts model [0.5156484100374058]
多変量回帰問題に対する新しい非パラメトリック混合実験モデルを提案する。
条件付きモデルを用いて、サンプル外入力の予測は、観測された各データポイントと類似性に基づいて行われる。
混合物のパラメータと距離測定値に基づいて後部推論を行う。
論文 参考訳(メタデータ) (2020-12-03T18:08:30Z) - Algebraic and Analytic Approaches for Parameter Learning in Mixture
Models [66.96778152993858]
1次元の混合モデルにおけるパラメータ学習のための2つの異なるアプローチを提案する。
これらの分布のいくつかについては、パラメータ推定の最初の保証を示す。
論文 参考訳(メタデータ) (2020-01-19T05:10:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。