論文の概要: Identifiability of latent-variable and structural-equation models: from
linear to nonlinear
- arxiv url: http://arxiv.org/abs/2302.02672v2
- Date: Wed, 3 May 2023 08:35:48 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-04 18:04:55.687177
- Title: Identifiability of latent-variable and structural-equation models: from
linear to nonlinear
- Title(参考訳): 潜在変数および構造方程式モデルの同定可能性:線形から非線形へ
- Authors: Aapo Hyv\"arinen, Ilyes Khemakhem, Ricardo Monti
- Abstract要約: 因子分析において、(最近)変数の非ガウス性は識別可能性をもたらすことが示されている。
最近では、そのようなモデルの一般の非非線形バージョンでさえ、どのように見積もることができるかが示されている。
- 参考スコア(独自算出の注目度): 2.159277717031637
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: An old problem in multivariate statistics is that linear Gaussian models are
often unidentifiable, i.e. some parameters cannot be uniquely estimated. In
factor (component) analysis, an orthogonal rotation of the factors is
unidentifiable, while in linear regression, the direction of effect cannot be
identified. For such linear models, non-Gaussianity of the (latent) variables
has been shown to provide identifiability. In the case of factor analysis, this
leads to independent component analysis, while in the case of the direction of
effect, non-Gaussian versions of structural equation modelling solve the
problem. More recently, we have shown how even general nonparametric nonlinear
versions of such models can be estimated. Non-Gaussianity is not enough in this
case, but assuming we have time series, or that the distributions are suitably
modulated by some observed auxiliary variables, the models are identifiable.
This paper reviews the identifiability theory for the linear and nonlinear
cases, considering both factor analytic models and structural equation models.
- Abstract(参考訳): 多変量統計学における古い問題として、線形ガウスモデルはしばしば同定不能であり、あるパラメータは一意的に推定できない。
因子(成分)分析では、因子の直交回転は特定できないが、線形回帰では効果の方向は特定できない。
このような線形モデルでは、(相対)変数の非ガウス性が識別可能性をもたらすことが示されている。
因子分析の場合、これは独立成分分析につながるが、効果の方向の場合には、構造方程式モデリングの非ガウシアンバージョンが問題を解く。
最近では、そのようなモデルの一般の非パラメトリック非線形バージョンでさえ、どのように推定できるかが示されている。
非ガウス性は、この場合では十分ではないが、時系列がある、あるいは、分布が観測された補助変数によって適切に変調されていると仮定すると、モデルは識別可能である。
本稿では、因子分析モデルと構造方程式モデルの両方を考慮して、線形および非線形の場合の識別可能性理論をレビューする。
関連論文リスト
- Parameter identification in linear non-Gaussian causal models under general confounding [8.273471398838533]
このようなモデルが潜伏変数を含む場合の線形係数の同定について検討する。
我々の主な成果は、直接的な因果効果の一般的な識別可能性を決定するのに必要かつ十分であるグラフィカルな基準である。
同定結果に基づいて推定を報告し、フィードバックループを持つモデルへの一般化を探索し、因果グラフの識別可能性に関する新たな結果を提供する。
論文 参考訳(メタデータ) (2024-05-31T14:39:14Z) - Scaling and renormalization in high-dimensional regression [72.59731158970894]
本稿では,様々な高次元リッジ回帰モデルの訓練および一般化性能の簡潔な導出について述べる。
本稿では,物理と深層学習の背景を持つ読者を対象に,これらのトピックに関する最近の研究成果の紹介とレビューを行う。
論文 参考訳(メタデータ) (2024-05-01T15:59:00Z) - Learning Graphical Factor Models with Riemannian Optimization [70.13748170371889]
本稿では,低ランク構造制約下でのグラフ学習のためのフレキシブルなアルゴリズムフレームワークを提案する。
この問題は楕円分布のペナルティ化された最大推定値として表される。
楕円モデルによく適合する正定行列と定ランクの正半定行列のジオメトリを利用する。
論文 参考訳(メタデータ) (2022-10-21T13:19:45Z) - Function Classes for Identifiable Nonlinear Independent Component
Analysis [10.828616610785524]
潜在変数モデル(LVM)の教師なし学習は機械学習のデータ表現に広く用いられている。
最近の研究は、そのようなモデルの関数クラスを制約することは、識別可能性を促進することを示唆している。
これらの変換のサブクラスである共形写像が同定可能であることを証明し、新しい理論的結果を与える。
論文 参考訳(メタデータ) (2022-08-12T17:58:31Z) - On the Identifiability of Nonlinear ICA: Sparsity and Beyond [20.644375143901488]
自明な不確定点を特定できる非線形ICAモデルをいかにして特定させるかは、教師なし学習における長年の問題である。
最近のブレークスルーは、いくつかの補助変数が与えられた条件付き独立としてソースの標準独立仮定を再構成する。
このような制約の特定のインスタンス化の下では、独立潜水源はそれらの非線形混合から置換まで同定できることを示す。
論文 参考訳(メタデータ) (2022-06-15T18:24:22Z) - Estimation of Bivariate Structural Causal Models by Variational Gaussian
Process Regression Under Likelihoods Parametrised by Normalising Flows [74.85071867225533]
因果機構は構造因果モデルによって記述できる。
最先端の人工知能の大きな欠点の1つは、説明責任の欠如である。
論文 参考訳(メタデータ) (2021-09-06T14:52:58Z) - Hessian Eigenspectra of More Realistic Nonlinear Models [73.31363313577941]
私たちは、非線形モデルの広いファミリーのためのヘッセン固有スペクトルの言語的特徴付けを行います。
我々の分析は、より複雑な機械学習モデルで観察される多くの顕著な特徴の起源を特定するために一歩前進する。
論文 参考訳(メタデータ) (2021-03-02T06:59:52Z) - Sparse Quantized Spectral Clustering [85.77233010209368]
このような非線形変換の下で行列の固有スペクトルがどのように変化するのかを、ランダム行列理論のツールを用いて正確に述べる。
急激なスペーシング/量子化の下でも,情報的固有構造にはほとんど変化は見られなかった。
論文 参考訳(メタデータ) (2020-10-03T15:58:07Z) - Non-parametric Models for Non-negative Functions [48.7576911714538]
同じ良い線形モデルから非負関数に対する最初のモデルを提供する。
我々は、それが表現定理を認め、凸問題に対する効率的な二重定式化を提供することを証明した。
論文 参考訳(メタデータ) (2020-07-08T07:17:28Z) - Latent variable modeling with random features [7.856578780790166]
我々は非ガウス的データ可能性に容易に対応できる非線形次元減少モデルのファミリーを開発する。
我々の一般化されたRFLVMは、他の最先端の次元還元法に匹敵する結果が得られる。
論文 参考訳(メタデータ) (2020-06-19T14:12:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。