論文の概要: Towards physically consistent data-driven weather forecasting:
Integrating data assimilation with equivariance-preserving deep spatial
transformers
- arxiv url: http://arxiv.org/abs/2103.09360v1
- Date: Tue, 16 Mar 2021 23:15:00 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-18 22:51:28.994414
- Title: Towards physically consistent data-driven weather forecasting:
Integrating data assimilation with equivariance-preserving deep spatial
transformers
- Title(参考訳): 物理的に一貫したデータ駆動天気予報に向けて--等分散保存深部変圧器によるデータ同化の統合
- Authors: Ashesh Chattopadhyay, Mustafa Mustafa, Pedram Hassanzadeh, Eviatar
Bach, Karthik Kashinath
- Abstract要約: 一般的なデータ駆動天気予報モデルと統合する3つのコンポーネントを提案する。
これらのコンポーネントは,1) 等価性を維持するためにU-NETの潜伏空間に付加された深部空間トランスフォーマー,2) ノイズ観測を取り込み,次の予測に対する初期条件を改善するデータ同化アルゴリズム,3) 複数段階のアルゴリズムにより,短時間で予測の精度が向上する。
- 参考スコア(独自算出の注目度): 2.7998963147546148
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: There is growing interest in data-driven weather prediction (DDWP), for
example using convolutional neural networks such as U-NETs that are trained on
data from models or reanalysis. Here, we propose 3 components to integrate with
commonly used DDWP models in order to improve their physical consistency and
forecast accuracy. These components are 1) a deep spatial transformer added to
the latent space of the U-NETs to preserve a property called equivariance,
which is related to correctly capturing rotations and scalings of features in
spatio-temporal data, 2) a data-assimilation (DA) algorithm to ingest noisy
observations and improve the initial conditions for next forecasts, and 3) a
multi-time-step algorithm, which combines forecasts from DDWP models with
different time steps through DA, improving the accuracy of forecasts at short
intervals. To show the benefit/feasibility of each component, we use
geopotential height at 500~hPa (Z500) from ERA5 reanalysis and examine the
short-term forecast accuracy of specific setups of the DDWP framework. Results
show that the equivariance-preserving networks (U-STNs) clearly outperform the
U-NETs, for example improving the forecast skill by $45\%$. Using a sigma-point
ensemble Kalman (SPEnKF) algorithm for DA and U-STN as the forward model, we
show that stable, accurate DA cycles are achieved even with high observation
noise. The DDWP+DA framework substantially benefits from large ($O(1000)$)
ensembles that are inexpensively generated with the data-driven forward model
in each DA cycle. The multi-time-step DDWP+DA framework also shows promises,
e.g., it reduces the average error by factors of 2-3.
- Abstract(参考訳): 例えば、モデルからのデータや再分析に基づいてトレーニングされたU-NETのような畳み込みニューラルネットワークを使用することで、データ駆動型天気予報(DDWP)への関心が高まっている。
本稿では,その物理的一貫性と予測精度を向上させるために,一般的なddwpモデルと統合するための3つのコンポーネントを提案する。
These components are 1) a deep spatial transformer added to the latent space of the U-NETs to preserve a property called equivariance, which is related to correctly capturing rotations and scalings of features in spatio-temporal data, 2) a data-assimilation (DA) algorithm to ingest noisy observations and improve the initial conditions for next forecasts, and 3) a multi-time-step algorithm, which combines forecasts from DDWP models with different time steps through DA, improving the accuracy of forecasts at short intervals.
ERA5の再解析から500~hPa (Z500) の測地的高さを用いて, DDWPフレームワークの特定の設定の短期的予測精度を検証した。
その結果, 等価保存ネットワーク(U-STN)はU-NETより明らかに優れており, 例えば予測能力が45.5%向上した。
DAとU-STNのSigma-point ensemble Kalman (SPEnKF) アルゴリズムをフォワードモデルとして用いて, 高い観測ノイズを伴っても, 安定かつ正確なDAサイクルが得られることを示す。
DDWP+DAフレームワークは、DAサイクル毎にデータ駆動のフォワードモデルで安価に生成される大規模な(O(1000)$)アンサンブルから実質的に恩恵を受ける。
DDWP+DAフレームワークは、例えば平均エラーを2~3の係数で削減するという約束も示している。
関連論文リスト
- Tackling Data Heterogeneity in Federated Time Series Forecasting [61.021413959988216]
時系列予測は、エネルギー消費予測、病気の伝染モニタリング、天気予報など、様々な実世界の応用において重要な役割を果たす。
既存のほとんどのメソッドは、分散デバイスから中央クラウドサーバに大量のデータを収集する、集中的なトレーニングパラダイムに依存しています。
本稿では,情報合成データを補助的知識キャリアとして生成することにより,データの均一性に対処する新しいフレームワークであるFed-TRENDを提案する。
論文 参考訳(メタデータ) (2024-11-24T04:56:45Z) - KODA: A Data-Driven Recursive Model for Time Series Forecasting and Data Assimilation using Koopman Operators [14.429071321401953]
非線形力学系における予測とデータ同化を統合したクープマン演算子に基づく手法を提案する。
特に、Fourierドメインフィルタを使用してデータを物理的コンポーネントに切り離し、そのダイナミクスはクープマン演算子によって正確に表現できる。
複数の時系列ベンチマークにおいて,KODAが既存の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2024-09-29T02:25:48Z) - Generalizing Weather Forecast to Fine-grained Temporal Scales via Physics-AI Hybrid Modeling [55.13352174687475]
本稿では,天気予報をより微細なテンポラルスケールに一般化する物理AIハイブリッドモデル(WeatherGFT)を提案する。
具体的には、小さな時間スケールで物理進化をシミュレートするために、慎重に設計されたPDEカーネルを用いる。
我々は、異なるリードタイムでのモデルの一般化を促進するためのリードタイムアウェアトレーニングフレームワークを導入する。
論文 参考訳(メタデータ) (2024-05-22T16:21:02Z) - Deep Learning for Day Forecasts from Sparse Observations [60.041805328514876]
深層ニューラルネットワークは、気象条件をモデル化するための代替パラダイムを提供する。
MetNet-3は、密度とスパースの両方のデータセンサーから学習し、降水、風、温度、露点を最大24時間前に予測する。
MetNet-3は、それぞれ時間分解能と空間分解能が高く、最大2分と1km、運用遅延は低い。
論文 参考訳(メタデータ) (2023-06-06T07:07:54Z) - Probabilistic Solar Proxy Forecasting with Neural Network Ensembles [0.0]
Space Environment Technologies (SET) は線形アルゴリズムを用いて$F_10.7 cm$を予測する。
本稿では,マルチ層パーセプトロン(MLP)と長短項メモリ(LSTM)を用いたニューラルネットワークアンサンブルを用いて,SET予測を改善する手法を提案する。
論文 参考訳(メタデータ) (2023-06-03T18:22:01Z) - Generative Time Series Forecasting with Diffusion, Denoise, and
Disentanglement [51.55157852647306]
時系列予測は多くのアプリケーションにおいて非常に重要な課題である。
実世界の時系列データが短時間に記録されることが一般的であり、これはディープモデルと限られたノイズのある時系列との間に大きなギャップをもたらす。
本稿では,生成モデルを用いた時系列予測問題に対処し,拡散,雑音,ゆがみを備えた双方向変分自動エンコーダを提案する。
論文 参考訳(メタデータ) (2023-01-08T12:20:46Z) - Pangu-Weather: A 3D High-Resolution Model for Fast and Accurate Global
Weather Forecast [91.9372563527801]
我々は,世界天気予報を迅速かつ高精度に予測するためのディープラーニングベースのシステムであるPangu-Weatherを紹介する。
初めてAIベースの手法が、最先端の数値天気予報法(NWP)を精度で上回った。
Pangu-Weatherは、極端な天気予報や大規模なアンサンブル予測など、幅広い下流予測シナリオをサポートしている。
論文 参考訳(メタデータ) (2022-11-03T17:19:43Z) - SpectraNet: Multivariate Forecasting and Imputation under Distribution
Shifts and Missing Data [40.21502451136054]
SpectraNetは時系列予測モデルであり、最近の観測履歴に時間的ダイナミクスと相関関係を動的に推論する。
畳み込みニューラルネットワークは、学習した表現を、成分を逐次混合し、出力を精製することによってマッピングする。
提案手法は, 過去の観測を同時に予測し, 補間し, 生産システムを大幅に単純化することができる。
論文 参考訳(メタデータ) (2022-10-22T18:07:31Z) - SwinVRNN: A Data-Driven Ensemble Forecasting Model via Learned
Distribution Perturbation [16.540748935603723]
本研究では,SwinRNN予測器と摂動モジュールを組み合わせた天気予報モデルであるSwinVRNNを提案する。
SwinVRNNはECMWF統合予測システム(IFS)を2m温度と6時間総降水量で最大5日間のリードタイムで上回っている。
論文 参考訳(メタデータ) (2022-05-26T05:11:58Z) - Inverting the Pose Forecasting Pipeline with SPF2: Sequential Pointcloud
Forecasting for Sequential Pose Forecasting [106.3504366501894]
自動運転車やロボット操作システムは、オブジェクトを最初に検出して追跡することによって、将来のオブジェクトのポーズを予測することが多い。
ポーズ予測アルゴリズムは通常、オブジェクトのポーズのラベル付きシーケンスを必要とするため、このパイプラインはスケールするのに費用がかかる。
本稿では,まず3次元センサデータを予測し,予測点雲列上の物体を検知・追跡し,将来的なポーズを求めることを提案する。
これにより、センサーデータ予測タスクにラベルが不要であるため、予測のスケールが難しくなる。
論文 参考訳(メタデータ) (2020-03-18T17:54:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。