論文の概要: Weather GAN: Multi-Domain Weather Translation Using Generative
Adversarial Networks
- arxiv url: http://arxiv.org/abs/2103.05422v1
- Date: Tue, 9 Mar 2021 13:51:58 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-10 14:57:12.259912
- Title: Weather GAN: Multi-Domain Weather Translation Using Generative
Adversarial Networks
- Title(参考訳): weather gan: 生成型adversarial networkを用いたマルチドメイン気象翻訳
- Authors: Xuelong Li, Kai Kou, and Bin Zhao
- Abstract要約: 新しいタスク、すなわち、あるカテゴリから別のカテゴリに画像の気象条件を転送することを指す天気翻訳が提案されています。
ジェネレーション・アドバーサリー・ネットワーク(GAN)に基づくマルチドメインの気象翻訳手法を開発しています。
本手法は, 気象翻訳による歪みと変形を抑制する。
- 参考スコア(独自算出の注目度): 76.64158017926381
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this paper, a new task is proposed, namely, weather translation, which
refers to transferring weather conditions of the image from one category to
another. It is important for photographic style transfer. Although lots of
approaches have been proposed in traditional image translation tasks, few of
them can handle the multi-category weather translation task, since weather
conditions have rich categories and highly complex semantic structures. To
address this problem, we develop a multi-domain weather translation approach
based on generative adversarial networks (GAN), denoted as Weather GAN, which
can achieve the transferring of weather conditions among sunny, cloudy, foggy,
rainy and snowy. Specifically, the weather conditions in the image are
determined by various weather-cues, such as cloud, blue sky, wet ground, etc.
Therefore, it is essential for weather translation to focus the main attention
on weather-cues. To this end, the generator of Weather GAN is composed of an
initial translation module, an attention module and a weather-cue segmentation
module. The initial translation module performs global translation during
generation procedure. The weather-cue segmentation module identifies the
structure and exact distribution of weather-cues. The attention module learns
to focus on the interesting areas of the image while keeping other areas
unaltered. The final generated result is synthesized by these three parts. This
approach suppresses the distortion and deformation caused by weather
translation. our approach outperforms the state-of-the-arts has been shown by a
large number of experiments and evaluations.
- Abstract(参考訳): 本論文では、画像の気象条件を1つのカテゴリから別のカテゴリに転送することを指す新しいタスク、すなわち天気翻訳を提案します。
写真スタイルの転送には重要である。
従来の画像翻訳タスクでは多くのアプローチが提案されているが、天候条件が豊富なカテゴリと非常に複雑な意味構造を持つため、多カテゴリーの気象翻訳タスクを処理できるものはほとんどない。
そこで本研究では, 日当たり, 曇り, 曇り, 曇り, 降雨, 雪の気象条件の転送を実現できる, 気象GAN(Weather GAN)と称するGAN(Genation Adversarial Network)に基づくマルチドメイン気象変換手法を開発した。
具体的には、雲、青空、湿った地面など様々な気象条件によって画像内の気象条件が決定される。
したがって、天気予報に主な注意を集中することは、天気の翻訳にとって不可欠です。
この目的のために、気象ganの生成部は、初期翻訳モジュールと、注意モジュールと、気象−キューセグメンテーションモジュールとからなる。
初期翻訳モジュールは、生成手順中にグローバル翻訳を行う。
ウェザーキューセグメンテーションモジュールは、ウェザーキューの構造と正確な分布を特定します。
attentionモジュールは、他の領域を変更せずに、画像の興味深い領域にフォーカスすることを学ぶ。
最終的な生成結果はこれら3つの部分によって合成される。
この手法は気象の変換による歪みや変形を抑制する。
我々のアプローチは最先端技術よりも優れており、多くの実験や評価によって示されている。
関連論文リスト
- Multiple weather images restoration using the task transformer and adaptive mixup strategy [14.986500375481546]
本稿では,複雑な気象条件を適応的に効果的に処理できる,マルチタスクの厳しい天候除去モデルを提案する。
本モデルでは,気象タスクシークエンスジェネレータを組み込んで,気象タイプに特有な特徴に選択的に注目する自己認識機構を実現する。
提案モデルでは,公開データセット上での最先端のパフォーマンスを実現している。
論文 参考訳(メタデータ) (2024-09-05T04:55:40Z) - WeatherQA: Can Multimodal Language Models Reason about Severe Weather? [45.43764278625153]
干し草、竜巻、雷雨などの激しい対流的な気象イベントは、しばしば急速に起こるが、大きな被害を招き、毎年何十億ドルもの費用がかかる。
このことは、気象学者や住民のリスクの高い地域での適切な準備のために、前もって厳しい天候の脅威を予知することの重要性を強調している。
我々は、気象パラメータの複雑な組み合わせを推論し、現実のシナリオで厳しい天候を予測するために、機械用に設計された最初のマルチモーダルデータセットであるWeatherQAを紹介する。
論文 参考訳(メタデータ) (2024-06-17T05:23:18Z) - WeatherProof: Leveraging Language Guidance for Semantic Segmentation in Adverse Weather [8.902960772665482]
本研究では,悪天候下で撮影された画像からセマンティックセグメンテーションマップを推定する方法を提案する。
まず、雨や霧、雪などの気象条件によって劣化した画像の既存のモデルを調べる。
気象画像の正当性を考慮した最初のセマンティックセマンティックセグメンテーションデータセットであるWeatherProofを提案する。
論文 参考訳(メタデータ) (2024-03-21T22:46:27Z) - Typhoon Intensity Prediction with Vision Transformer [51.84456610977905]
台風強度を正確に予測するために「台風強度変換器(Tint)」を導入する。
Tintは、層ごとにグローバルな受容野を持つ自己認識機構を使用する。
公開されている台風ベンチマークの実験は、Tintの有効性を検証する。
論文 参考訳(メタデータ) (2023-11-28T03:11:33Z) - Always Clear Days: Degradation Type and Severity Aware All-In-One
Adverse Weather Removal [8.58670633761819]
オールインワンの悪天候除去は画像復元における新たな話題であり、統一されたモデルで複数の気象劣化を回復することを目的としている。
本稿では,視覚障害者の悪天候画像復元のための劣化型および重症度認識モデルUtilityIRを提案する。
論文 参考訳(メタデータ) (2023-10-27T17:29:55Z) - MetaWeather: Few-Shot Weather-Degraded Image Restoration [17.63266150036311]
メタウェザー(MetaWeather)は、多様な新しい気象条件を単一の統一モデルで処理できる普遍的なアプローチである。
メタウェザーは未確認の気象条件に適応でき、最先端のマルチウェザー画像復元法よりも優れることを示す。
論文 参考訳(メタデータ) (2023-08-28T06:25:40Z) - Exploring the Application of Large-scale Pre-trained Models on Adverse
Weather Removal [97.53040662243768]
ネットワークが異なる気象条件を適応的に処理できるようにするために,CLIP埋め込みモジュールを提案する。
このモジュールは、CLIP画像エンコーダによって抽出されたサンプル特定気象と、パラメータセットによって学習された分布特定情報を統合する。
論文 参考訳(メタデータ) (2023-06-15T10:06:13Z) - Counting Crowds in Bad Weather [68.50690406143173]
本研究では,悪天候シナリオにおいて,ロバストな群集カウント手法を提案する。
モデルでは,外見のバリエーションが大きいことを考慮し,効果的な特徴と適応的なクエリを学習する。
実験の結果,提案アルゴリズムは,ベンチマークデータセット上で異なる気象条件下での群集のカウントに有効であることが示唆された。
論文 参考訳(メタデータ) (2023-06-02T00:00:09Z) - TransWeather: Transformer-based Restoration of Images Degraded by
Adverse Weather Conditions [77.20136060506906]
トランスウェザー (TransWeather) は1つのエンコーダとデコーダしか持たない変圧器を用いたエンド・ツー・エンドモデルである。
TransWeatherは、All-in-Oneネットワーク上で、複数のテストデータセット間で大幅に改善されている。
実世界のテスト画像で検証され、従来の方法よりも効果的であることが判明した。
論文 参考訳(メタデータ) (2021-11-29T18:57:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。