論文の概要: Multi-Task Edge Prediction in Temporally-Dynamic Video Graphs
- arxiv url: http://arxiv.org/abs/2212.02875v1
- Date: Tue, 6 Dec 2022 10:41:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-07 16:59:22.881902
- Title: Multi-Task Edge Prediction in Temporally-Dynamic Video Graphs
- Title(参考訳): 時間動的ビデオグラフにおけるマルチタスクエッジ予測
- Authors: Osman \"Ulger, Julian Wiederer, Mohsen Ghafoorian, Vasileios
Belagiannis, Pascal Mettes
- Abstract要約: MTD-GNNは,複数種類の関係に対して時間動的エッジを予測するグラフネットワークである。
時間-動的グラフネットワークにおける複数の関係をモデル化することは相互に有益であることを示す。
- 参考スコア(独自算出の注目度): 16.121140184388786
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Graph neural networks have shown to learn effective node representations,
enabling node-, link-, and graph-level inference. Conventional graph networks
assume static relations between nodes, while relations between entities in a
video often evolve over time, with nodes entering and exiting dynamically. In
such temporally-dynamic graphs, a core problem is inferring the future state of
spatio-temporal edges, which can constitute multiple types of relations. To
address this problem, we propose MTD-GNN, a graph network for predicting
temporally-dynamic edges for multiple types of relations. We propose a
factorized spatio-temporal graph attention layer to learn dynamic node
representations and present a multi-task edge prediction loss that models
multiple relations simultaneously. The proposed architecture operates on top of
scene graphs that we obtain from videos through object detection and
spatio-temporal linking. Experimental evaluations on ActionGenome and CLEVRER
show that modeling multiple relations in our temporally-dynamic graph network
can be mutually beneficial, outperforming existing static and spatio-temporal
graph neural networks, as well as state-of-the-art predicate classification
methods.
- Abstract(参考訳): グラフニューラルネットワークは効率的なノード表現を学習し、ノード、リンク、グラフレベルの推論を可能にする。
従来のグラフネットワークはノード間の静的な関係を仮定するが、ビデオ内のエンティティ間の関係は時間とともに進化し、ノードは動的に入出する。
このような時間動的グラフでは、核となる問題は時空間エッジの将来の状態を推測するものであり、これは複数の種類の関係を構成することができる。
この問題に対処するために,複数種類の関係に対して時間動的エッジを予測するグラフネットワークMTD-GNNを提案する。
動的ノード表現を学習するための分解時空間グラフアテンション層を提案し、同時に複数の関係をモデル化するマルチタスクエッジ予測損失を示す。
提案アーキテクチャは、オブジェクト検出と時空間リンクを通じてビデオから得られるシーングラフ上で動作する。
actiongenome と clevrer の実験的評価は、時間-動的グラフネットワークにおける多重関係のモデリングが、既存の静的および時空間グラフニューラルネットワークや最先端の述語分類法よりも優れており、相互に有益であることを示している。
関連論文リスト
- Dynamic Causal Explanation Based Diffusion-Variational Graph Neural
Network for Spatio-temporal Forecasting [60.03169701753824]
時間予測のための動的拡散型グラフニューラルネットワーク(DVGNN)を提案する。
提案したDVGNNモデルは最先端のアプローチよりも優れ,Root Mean Squared Errorの結果が優れている。
論文 参考訳(メタデータ) (2023-05-16T11:38:19Z) - Temporal Aggregation and Propagation Graph Neural Networks for Dynamic
Representation [67.26422477327179]
時間グラフは連続時間を通してノード間の動的相互作用を示す。
本研究では,周辺地域全体と時間的グラフ畳み込みの新たな手法を提案する。
提案するTAP-GNNは,予測性能とオンライン推論遅延の両面で,既存の時間グラフ手法よりも優れた性能を示す。
論文 参考訳(メタデータ) (2023-04-15T08:17:18Z) - TodyNet: Temporal Dynamic Graph Neural Network for Multivariate Time
Series Classification [6.76723360505692]
未定義のグラフ構造を使わずに隠蔽時間依存を抽出できる新しい時間的動的グラフネットワーク(TodyNet)を提案する。
26のUEAベンチマークデータセットの実験は、提案されたTodyNetがMTSCタスクで既存のディープラーニングベースのメソッドより優れていることを示している。
論文 参考訳(メタデータ) (2023-04-11T09:21:28Z) - Time-aware Dynamic Graph Embedding for Asynchronous Structural Evolution [60.695162101159134]
既存の作業は、動的グラフを変更のシーケンスとして見るだけである。
動的グラフを接合時間に付随する時間的エッジシーケンスとして定式化する。
頂点とエッジのタイムパン
組み込みにはタイムアウェアなTransformerが提案されている。
vertexの動的接続と学習へのToEs。
頂点表現
論文 参考訳(メタデータ) (2022-07-01T15:32:56Z) - Learning the Evolutionary and Multi-scale Graph Structure for
Multivariate Time Series Forecasting [50.901984244738806]
時系列の進化的・マルチスケール相互作用をモデル化する方法を示す。
特に、まず、拡張畳み込みと協調して、スケール固有の相関を捉える階層グラフ構造を提供する。
最終的な予測を得るために上記のコンポーネントを統合するために、統合ニューラルネットワークが提供される。
論文 参考訳(メタデータ) (2022-06-28T08:11:12Z) - Continuous Temporal Graph Networks for Event-Based Graph Data [41.786721257905555]
本研究では、時間グラフデータの連続的ダイナミクスを捉えるために、CTGN(Continuous Temporal Graph Networks)を提案する。
鍵となる考え方は、ニューラルネットワークの常微分方程式(ODE)を用いて、動的グラフ上のノード表現の連続的ダイナミクスを特徴づけることである。
帰納的タスクと帰納的タスクの両方の実験結果から,提案手法の有効性が示された。
論文 参考訳(メタデータ) (2022-05-31T16:17:02Z) - Deep Dynamic Effective Connectivity Estimation from Multivariate Time
Series [0.0]
我々はニューラルネットワークトレーニング(DECENNT)による動的有効接続推定を開発する。
DECENNTは5つの異なるタスクに対して最先端(SOTA)メソッドを上回り、解釈可能なタスク固有の動的グラフを推論する。
論文 参考訳(メタデータ) (2022-02-04T21:14:21Z) - Dynamic Graph Learning-Neural Network for Multivariate Time Series
Modeling [2.3022070933226217]
静的および動的グラフ学習ニューラルネットワーク(GL)という新しいフレームワークを提案する。
モデルはそれぞれ、データから静的グラフ行列と動的グラフ行列を取得し、長期パターンと短期パターンをモデル化する。
ほぼすべてのデータセットで最先端のパフォーマンスを実現する。
論文 参考訳(メタデータ) (2021-12-06T08:19:15Z) - Spatio-Temporal Joint Graph Convolutional Networks for Traffic
Forecasting [75.10017445699532]
近年、時間グラフモデリング問題として交通予測の定式化に焦点が移っている。
本稿では,道路網における交通予測の精度向上のための新しい手法を提案する。
論文 参考訳(メタデータ) (2021-11-25T08:45:14Z) - Temporal Graph Network Embedding with Causal Anonymous Walks
Representations [54.05212871508062]
本稿では,時間グラフネットワークに基づく動的ネットワーク表現学習のための新しいアプローチを提案する。
評価のために、時間的ネットワーク埋め込みの評価のためのベンチマークパイプラインを提供する。
欧州の大手銀行が提供した実世界のダウンストリームグラフ機械学習タスクにおいて、我々のモデルの適用性と優れた性能を示す。
論文 参考訳(メタデータ) (2021-08-19T15:39:52Z) - Temporal Relational Modeling with Self-Supervision for Action
Segmentation [38.62057004624234]
ビデオの時間関係をモデル化するための拡張時間グラフ推論モジュール(DTGRM)を紹介します。
特に,多レベル拡張時間グラフの構築により時間関係を捉え,モデル化する。
私たちのモデルは3つの挑戦的なデータセットで最先端のアクションセグメンテーションモデルよりも優れています。
論文 参考訳(メタデータ) (2020-12-14T13:41:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。