論文の概要: Multi-task Learning of Order-Consistent Causal Graphs
- arxiv url: http://arxiv.org/abs/2111.02545v1
- Date: Wed, 3 Nov 2021 22:10:18 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-05 12:37:16.416324
- Title: Multi-task Learning of Order-Consistent Causal Graphs
- Title(参考訳): 順序整合因数グラフのマルチタスク学習
- Authors: Xinshi Chen, Haoran Sun, Caleb Ellington, Eric Xing, Le Song
- Abstract要約: 我々は、$K関連ガウス非巡回グラフ(DAG)の発見問題を考える。
マルチタスク学習環境下では, 線形構造方程式モデルを学習するためのMLE ($l_1/l$-regularized maximum chance estimator) を提案する。
理論的には、関係するタスクにまたがるデータを活用することで、因果順序を復元する際のサンプルの複雑さをより高めることができることを示す。
- 参考スコア(独自算出の注目度): 59.9575145128345
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: We consider the problem of discovering $K$ related Gaussian directed acyclic
graphs (DAGs), where the involved graph structures share a consistent causal
order and sparse unions of supports. Under the multi-task learning setting, we
propose a $l_1/l_2$-regularized maximum likelihood estimator (MLE) for learning
$K$ linear structural equation models. We theoretically show that the joint
estimator, by leveraging data across related tasks, can achieve a better sample
complexity for recovering the causal order (or topological order) than separate
estimations. Moreover, the joint estimator is able to recover non-identifiable
DAGs, by estimating them together with some identifiable DAGs. Lastly, our
analysis also shows the consistency of union support recovery of the
structures. To allow practical implementation, we design a continuous
optimization problem whose optimizer is the same as the joint estimator and can
be approximated efficiently by an iterative algorithm. We validate the
theoretical analysis and the effectiveness of the joint estimator in
experiments.
- Abstract(参考訳): 我々は、関連するグラフ構造が一貫した因果順序とスパース結合を共有するような、K$関連のガウス有向非巡回グラフ(DAG)を発見する問題を考察する。
マルチタスク学習環境下では, 線形構造方程式モデルを学習するためのMLE ($l_1/l_2$-regularized maximum max estimator) を提案する。
理論的には,結合推定器は関連するタスク間のデータを活用することで,個別の推定よりも因果順序(あるいは位相次数)を回復するためのより良いサンプル複雑性を実現できることを示す。
さらに、関節推定器は、いくつかの同定可能なDAGと一緒に推定することにより、同定不可能なDAGを復元することができる。
最後に,本解析の結果から,構造物の連合支持回復の一貫性が示された。
実用的な実装を実現するために,最適化器はジョイント推定器と同じであり,反復アルゴリズムにより効率的に近似できる連続最適化問題を設計する。
実験における共同推定器の理論的解析と有効性を検証する。
関連論文リスト
- $ψ$DAG: Projected Stochastic Approximation Iteration for DAG Structure Learning [6.612096312467342]
Directed A Graphs (DAGs) の構造を学ぶことは、ノード数に応じてスケールする可能なグラフの巨大な検索空間のため、大きな課題となる。
近年の進歩は、微分可能指数関数性制約を取り入れた連続最適化タスクとしてこの問題を再定義している。
本稿では,SGD(Gradient Descent)に基づく最適化手法と統合した近似手法を用いて,DAGを学習する新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2024-10-31T12:13:11Z) - A Statistical Theory of Regularization-Based Continual Learning [10.899175512941053]
線形回帰タスクの順序に基づく正規化に基づく連続学習の統計的解析を行う。
まず、全てのデータが同時に利用可能であるかのように得られたオラクル推定器の収束率を導出する。
理論解析の副産物は、早期停止と一般化された$ell$-regularizationの等価性である。
論文 参考訳(メタデータ) (2024-06-10T12:25:13Z) - Learning Directed Acyclic Graphs from Partial Orderings [9.387234607473054]
有向非巡回グラフ(DAG)は、確率変数間の因果関係をモデル化するために一般的に用いられる。
本稿では,変数の部分的因果順序付けが可能である場合のDAG学習の中間的問題について考察する。
低次元および高次元問題に対する部分順序付けと効率的な推定アルゴリズムを活用するための一般的な推定フレームワークを提案する。
論文 参考訳(メタデータ) (2024-03-24T06:14:50Z) - Discovering Dynamic Causal Space for DAG Structure Learning [64.763763417533]
本稿では,DAG構造学習のための動的因果空間であるCASPERを提案する。
グラフ構造をスコア関数に統合し、因果空間における新しい尺度として、推定真理DAGと基底真理DAGの因果距離を忠実に反映する。
論文 参考訳(メタデータ) (2023-06-05T12:20:40Z) - Understanding Augmentation-based Self-Supervised Representation Learning
via RKHS Approximation and Regression [53.15502562048627]
最近の研究は、自己教師付き学習とグラフラプラシアン作用素のトップ固有空間の近似との関係を構築している。
この研究は、増強に基づく事前訓練の統計的分析に発展する。
論文 参考訳(メタデータ) (2023-06-01T15:18:55Z) - On Single-Objective Sub-Graph-Based Mutation for Solving the
Bi-Objective Minimum Spanning Tree Problem [0.0]
我々は、進化的計算を取り入れた$mathcalNP$-hard multi-objective least- spanning tree problem (moMST)の効率的な近似に寄与する。
得られた知見に基づいて、高バイアスのサブグラフベースの突然変異演算子を設計する。
その結果,サブグラフベースの演算子が文献のベースラインアルゴリズムに勝っていることを確認した。
論文 参考訳(メタデータ) (2023-05-31T22:35:17Z) - dotears: Scalable, consistent DAG estimation using observational and
interventional data [1.220743263007369]
因果性遺伝子制御ネットワークはDAG(direct acyclic graph)によって表現できる
単一の因果構造を推論する継続的最適化フレームワークであるtexttdotears$[doo-tairs]を提示する。
我々は、$texttdotears$は、軽度の仮定の下で真DAGの証明可能な一貫した推定量であることを示した。
論文 参考訳(メタデータ) (2023-05-30T17:03:39Z) - Amortized Inference for Causal Structure Learning [72.84105256353801]
因果構造を学習することは、通常、スコアまたは独立テストを使用して構造を評価することを伴う探索問題を引き起こす。
本研究では,観測・干渉データから因果構造を予測するため,変分推論モデルを訓練する。
我々のモデルは、実質的な分布シフトの下で頑健な一般化能力を示す。
論文 参考訳(メタデータ) (2022-05-25T17:37:08Z) - DAGs with No Curl: An Efficient DAG Structure Learning Approach [62.885572432958504]
近年のDAG構造学習は連続的な非巡回性制約を伴う制約付き連続最適化問題として定式化されている。
本稿では,DAG空間の重み付き隣接行列を直接モデル化し,学習するための新しい学習フレームワークを提案する。
本手法は, 線形および一般化された構造方程式モデルにおいて, ベースラインDAG構造学習法よりも精度が高いが, 効率がよいことを示す。
論文 参考訳(メタデータ) (2021-06-14T07:11:36Z) - Joint Network Topology Inference via Structured Fusion Regularization [70.30364652829164]
結合ネットワークトポロジ推論は、異種グラフ信号から複数のグラフラプラシア行列を学習する標準的な問題を表す。
新規な構造化融合正規化に基づく一般グラフ推定器を提案する。
提案するグラフ推定器は高い計算効率と厳密な理論保証の両方を享受できることを示す。
論文 参考訳(メタデータ) (2021-03-05T04:42:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。