論文の概要: Delayed Propagation Transformer: A Universal Computation Engine towards
Practical Control in Cyber-Physical Systems
- arxiv url: http://arxiv.org/abs/2110.15926v1
- Date: Fri, 29 Oct 2021 17:20:53 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-01 15:07:41.257173
- Title: Delayed Propagation Transformer: A Universal Computation Engine towards
Practical Control in Cyber-Physical Systems
- Title(参考訳): 遅延伝搬変換器:サイバー物理システムの実用化に向けてのユニバーサル計算エンジン
- Authors: Wenqing Zheng, Qiangqiang Guo, Hao Yang, Peihao Wang, Zhangyang Wang
- Abstract要約: マルチエージェント制御はサイバー物理システムにおいて中心的なテーマである。
本稿では,CPSのグローバルモデリングを専門とするトランスフォーマーモデルを提案する。
物理的な制約帰納バイアスが設計に組み込まれているため、DePTは幅広い種類のマルチエージェントシステムにプラグアンドプレイする準備ができています。
- 参考スコア(独自算出の注目度): 68.75717332928205
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Multi-agent control is a central theme in the Cyber-Physical Systems (CPS).
However, current control methods either receive non-Markovian states due to
insufficient sensing and decentralized design, or suffer from poor convergence.
This paper presents the Delayed Propagation Transformer (DePT), a new
transformer-based model that specializes in the global modeling of CPS while
taking into account the immutable constraints from the physical world. DePT
induces a cone-shaped spatial-temporal attention prior, which injects the
information propagation and aggregation principles and enables a global view.
With physical constraint inductive bias baked into its design, our DePT is
ready to plug and play for a broad class of multi-agent systems. The
experimental results on one of the most challenging CPS -- network-scale
traffic signal control system in the open world -- show that our model
outperformed the state-of-the-art expert methods on synthetic and real-world
datasets. Our codes are released at: https://github.com/VITA-Group/DePT.
- Abstract(参考訳): マルチエージェント制御はサイバー物理システム(CPS)の中心的なテーマである。
しかしながら、現在の制御方法は、検知と分散設計が不十分なため、非マルコフ状態を受け取るか、あるいは収束不良に苦しむ。
本稿では、物理世界からの不変制約を考慮したCPSのグローバルモデリングを専門とする新しいトランスモデルである遅延伝搬変換器(DePT)を提案する。
DePTは、円錐形の空間的注意を事前に誘導し、情報伝播と集約の原則を注入し、グローバルなビューを可能にする。
物理的な制約帰納バイアスを設計に組み込むことで、DePTは幅広い種類のマルチエージェントシステムにプラグ&プレイする準備ができています。
オープンワールドにおけるネットワーク規模のトラヒック信号制御システムであるcpsにおける実験結果から,本モデルが合成および実世界のデータセットにおける最先端のエキスパート手法を上回っていたことが明らかとなった。
私たちのコードは、https://github.com/VITA-Group/DePTでリリースされています。
関連論文リスト
- One-shot World Models Using a Transformer Trained on a Synthetic Prior [37.027893127637036]
ワンショット世界モデル(英: One-Shot World Model、OSWM)は、純粋に合成データからコンテキスト内学習形式で学習されるトランスフォーマー世界モデルである。
OSWMは、シンプルなグリッド世界のダイナミクスや、CartPoleのジム、カスタムコントロール環境に迅速に適応できる。
論文 参考訳(メタデータ) (2024-09-21T09:39:32Z) - Generalizable Implicit Neural Representation As a Universal Spatiotemporal Traffic Data Learner [46.866240648471894]
時空間交通データ(STTD)は、マルチスケール交通システムの複雑な動的挙動を測定する。
本稿では,STTDを暗黙的ニューラル表現としてパラメータ化することで,STTD学習問題に対処する新しいパラダイムを提案する。
実世界のシナリオにおける広範な実験を通じて,その有効性を検証し,廊下からネットワークスケールへの応用を示す。
論文 参考訳(メタデータ) (2024-06-13T02:03:22Z) - PIDformer: Transformer Meets Control Theory [28.10913642120948]
我々は、そのソリューションのスムーズさを本質的に促進する自律的状態空間モデルとして自己意識を公表する。
モデルに参照点を持つPID(Proportional-Integral-Derivative)クローズドループフィードバック制御システムを導入し,ロバスト性や表現能力の向上を図る。
この制御フレームワークにより、新しい変換器のクラス、PID制御変換器(PIDformer)を導出する。
論文 参考訳(メタデータ) (2024-02-25T05:04:51Z) - Global-to-Local Modeling for Video-based 3D Human Pose and Shape
Estimation [53.04781510348416]
フレーム内精度とフレーム間スムーズさにより,映像に基づく3次元人間のポーズと形状推定を評価する。
エンドツーエンドフレームワークGLoT(Global-to-Local Transformer)における長期的・短期的相関のモデル化を構造的に分離することを提案する。
我々のGLoTは、一般的なベンチマーク(3DPW、MPI-INF-3DHP、Human3.6M)において、最も低いモデルパラメータを持つ従来の最先端の手法を上回る。
論文 参考訳(メタデータ) (2023-03-26T14:57:49Z) - PhysFormer++: Facial Video-based Physiological Measurement with SlowFast
Temporal Difference Transformer [76.40106756572644]
最近のディープラーニングアプローチは、時間的受容の限られた畳み込みニューラルネットワークを用いた微妙な手がかりのマイニングに重点を置いている。
本稿では,PhysFormerとPhys++++をベースとした2つのエンドツーエンドビデオ変換器を提案する。
4つのベンチマークデータセットで総合的な実験を行い、時間内テストとクロスデータセットテストの両方において優れた性能を示す。
論文 参考訳(メタデータ) (2023-02-07T15:56:03Z) - CSformer: Bridging Convolution and Transformer for Compressive Sensing [65.22377493627687]
本稿では,CNNからの詳細な空間情報を活用するためのハイブリッドフレームワークと,表現学習の強化を目的としたトランスフォーマーが提供するグローバルコンテキストを統合することを提案する。
提案手法は、適応的なサンプリングとリカバリからなるエンドツーエンドの圧縮画像センシング手法である。
実験により, 圧縮センシングにおける専用トランスアーキテクチャの有効性が示された。
論文 参考訳(メタデータ) (2021-12-31T04:37:11Z) - PhysFormer: Facial Video-based Physiological Measurement with Temporal
Difference Transformer [55.936527926778695]
近年のディープラーニングアプローチは、時間的受容の限られた畳み込みニューラルネットワークを用いた微妙なrの手がかりのマイニングに重点を置いている。
本稿では,エンドツーエンドのビデオトランスをベースとしたアーキテクチャであるPhysFormerを提案する。
論文 参考訳(メタデータ) (2021-11-23T18:57:11Z) - Transformers Solve the Limited Receptive Field for Monocular Depth
Prediction [82.90445525977904]
畳み込みニューラルネットワークとトランスの両方の恩恵を受けるアーキテクチャであるTransDepthを提案します。
連続ラベルを含む画素単位での予測問題にトランスフォーマーを適用する最初の論文である。
論文 参考訳(メタデータ) (2021-03-22T18:00:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。