論文の概要: Memory-Constrained Semantic Segmentation for Ultra-High Resolution UAV
Imagery
- arxiv url: http://arxiv.org/abs/2310.04721v1
- Date: Sat, 7 Oct 2023 07:44:59 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-12 16:19:43.271178
- Title: Memory-Constrained Semantic Segmentation for Ultra-High Resolution UAV
Imagery
- Title(参考訳): 超高解像度uav画像のためのメモリ制約付きセマンティックセグメンテーション
- Authors: Qi Li, Jiaxin Cai, Yuanlong Yu, Jason Gu, Jia Pan, Wenxi Liu
- Abstract要約: 本稿では,超高解像度UAV画像の高効率・高効率セグメンテーションを実現するための複雑な課題について検討する。
本稿では、ローカルパッチ以外のコンテキストにアクセスすることなく、ローカル推論のためのGPUメモリ効率が高く効果的なフレームワークを提案する。
基礎となる高解像度情報の潜在的な意味バイアスを補正するために,効率的なメモリベースインタラクション方式を提案する。
- 参考スコア(独自算出の注目度): 35.96063342025938
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Amidst the swift advancements in photography and sensor technologies,
high-definition cameras have become commonplace in the deployment of Unmanned
Aerial Vehicles (UAVs) for diverse operational purposes. Within the domain of
UAV imagery analysis, the segmentation of ultra-high resolution images emerges
as a substantial and intricate challenge, especially when grappling with the
constraints imposed by GPU memory-restricted computational devices. This paper
delves into the intricate problem of achieving efficient and effective
segmentation of ultra-high resolution UAV imagery, while operating under
stringent GPU memory limitation. The strategy of existing approaches is to
downscale the images to achieve computationally efficient segmentation.
However, this strategy tends to overlook smaller, thinner, and curvilinear
regions. To address this problem, we propose a GPU memory-efficient and
effective framework for local inference without accessing the context beyond
local patches. In particular, we introduce a novel spatial-guided
high-resolution query module, which predicts pixel-wise segmentation results
with high quality only by querying nearest latent embeddings with the guidance
of high-resolution information. Additionally, we present an efficient
memory-based interaction scheme to correct potential semantic bias of the
underlying high-resolution information by associating cross-image contextual
semantics. For evaluation of our approach, we perform comprehensive experiments
over public benchmarks and achieve superior performance under both conditions
of small and large GPU memory usage limitations. We will release the model and
codes in the future.
- Abstract(参考訳): 写真やセンサー技術の急速な進歩の中で、高精細度カメラは様々な運用目的のために無人航空機(UAV)の配備において一般的になっている。
UAV画像分析の領域内では、超高解像度画像のセグメンテーションは、特にGPUメモリ制限された計算装置によって課される制約に対処する際に、相当かつ複雑な課題として現れる。
本稿では,超高解像度UAV画像の高効率・高効率セグメンテーションを実現するための複雑な問題について検討する。
既存のアプローチの戦略は、画像をダウンスケールして計算効率の良いセグメンテーションを実現することである。
しかし、この戦略はより小さく、薄く、曲線的な領域を見渡す傾向にある。
この問題に対処するために、ローカルパッチ以外のコンテキストにアクセスすることなく、ローカル推論のためのGPUメモリ効率が高く効果的なフレームワークを提案する。
特に,高分解能情報の指導により最寄りの潜在埋め込みを問合せするだけで,高品質で画素単位のセグメンテーション結果を予測する新しい空間誘導型高分解能問合せモジュールを提案する。
さらに,高分解能情報の潜在的な意味バイアスを,画像間の文脈的意味論を関連付けることで補正する,効率的なメモリベースインタラクションスキームを提案する。
提案手法の評価には,ベンチマークによる総合的な実験を行い,GPUメモリの使用制限の小さい条件と大きな条件の両方で優れた性能を実現する。
将来、モデルとコードをリリースします。
関連論文リスト
- HRDecoder: High-Resolution Decoder Network for Fundus Image Lesion Segmentation [12.606794661369959]
骨盤病変分割のための簡易高分解能デコーダネットワークHRDecoderを提案する。
高精細な局所的特徴を捉えるための高精細な表現学習モジュールと、マルチスケールの予測を融合する高精細な融合モジュールを統合している。
本手法は, 適正なメモリと計算オーバーヘッドを消費し, 推論速度の満足度を維持しながら, 足底部病変の全体的なセグメンテーション精度を効果的に向上させる。
論文 参考訳(メタデータ) (2024-11-06T15:13:31Z) - SaccadeDet: A Novel Dual-Stage Architecture for Rapid and Accurate Detection in Gigapixel Images [50.742420049839474]
SaccadeDetは、人間の目の動きにインスパイアされた、ギガピクセルレベルの物体検出のための革新的なアーキテクチャである。
PANDAデータセットを用いて評価した本手法は,最先端手法の8倍の高速化を実現する。
また、全スライドイメージングへの応用を通じて、ギガピクセルレベルの病理解析に有意な可能性を示す。
論文 参考訳(メタデータ) (2024-07-25T11:22:54Z) - Real-Time Image Segmentation via Hybrid Convolutional-Transformer Architecture Search [49.81353382211113]
マルチヘッド自己認識を高分解能表現CNNに効率的に組み込むという課題に対処する。
本稿では,高解像度機能の利点をフル活用したマルチターゲットマルチブランチ・スーパーネット手法を提案する。
本稿では,Hybrid Convolutional-Transformer Architecture Search (HyCTAS)法を用いて,軽量畳み込み層とメモリ効率のよい自己保持層を最適に組み合わせたモデルを提案する。
論文 参考訳(メタデータ) (2024-03-15T15:47:54Z) - On the Effect of Image Resolution on Semantic Segmentation [27.115235051091663]
本研究では,高分解能セグメンテーションを直接生成できるモデルが,より複雑なシステムの性能と一致することを示す。
提案手法は,ボトムアップ情報伝搬手法を様々なスケールで活用する。
先進的なセマンティックセグメンテーションデータセットを用いて,本手法を厳格に検証した。
論文 参考訳(メタデータ) (2024-02-08T04:21:30Z) - Low-Resolution Self-Attention for Semantic Segmentation [96.81482872022237]
我々は,グローバルコンテキストを計算コストの大幅な削減で捉えるために,低解像度自己認識(LRSA)機構を導入する。
我々のアプローチは、入力画像の解像度に関わらず、固定された低解像度空間における自己注意を計算することである。
本稿では,エンコーダ・デコーダ構造を持つビジョントランスであるLRFormerを構築することで,LRSA手法の有効性を示す。
論文 参考訳(メタデータ) (2023-10-08T06:10:09Z) - A Robust Morphological Approach for Semantic Segmentation of Very High
Resolution Images [2.2230089845369085]
既存のセマンティックセグメンテーションアルゴリズムを高解像度画像にシームレスに拡張する堅牢なパイプラインを開発する。
提案手法では,高解像度画像の真理アノテーションは不要である。
提案手法により得られたセマンティックセグメンテーションの結果が,高解像度画像上の既存の最先端アルゴリズムに勝っていることを示す。
論文 参考訳(メタデータ) (2022-08-02T05:25:35Z) - High Quality Segmentation for Ultra High-resolution Images [72.97958314291648]
超高分解能セグメンテーション精錬作業のための連続精細モデルを提案する。
提案手法は画像分割精細化において高速かつ効果的である。
論文 参考訳(メタデータ) (2021-11-29T11:53:06Z) - BoundarySqueeze: Image Segmentation as Boundary Squeezing [104.43159799559464]
本研究では,オブジェクトとシーンの微細な高画質画像分割のための新しい手法を提案する。
形態素画像処理技術による拡張と浸食に着想を得て,画素レベルのセグメンテーション問題をスクイーズ対象境界として扱う。
提案手法は,COCO,Cityscapesのインスタンス・セグメンテーション・セグメンテーション・セグメンテーションにおいて大きく向上し,同一条件下での精度・速度ともに従来のPointRendよりも優れていた。
論文 参考訳(メタデータ) (2021-05-25T04:58:51Z) - A Novel Upsampling and Context Convolution for Image Semantic
Segmentation [0.966840768820136]
最近のセマンティックセグメンテーションの方法は、しばしば深い畳み込みニューラルネットワークを用いたエンコーダデコーダ構造を採用している。
ネットワーク内の画像の空間情報を効率的に保存するために,ガイドフィルタに基づく高密度アップサンプリング畳み込み法を提案する。
ADE20KとPascal-Contextのベンチマークデータセットでは,それぞれ82.86%,81.62%の画素精度を記録した。
論文 参考訳(メタデータ) (2021-03-20T06:16:42Z) - Superpixel Segmentation Based on Spatially Constrained Subspace
Clustering [57.76302397774641]
独立意味情報を持つ各代表領域を部分空間とみなし,部分空間クラスタリング問題としてスーパーピクセルセグメンテーションを定式化する。
従来のサブスペースクラスタリングとスーパーピクセルセグメンテーションの簡単な統合は,画素の空間相関のために効果的に機能しないことを示す。
本稿では,空間隣接画素に類似の属性を付加してスーパーピクセルにクラスタリング可能な,凸局所性制約付きサブスペースクラスタリングモデルを提案する。
論文 参考訳(メタデータ) (2020-12-11T06:18:36Z) - CascadePSP: Toward Class-Agnostic and Very High-Resolution Segmentation
via Global and Local Refinement [0.0]
最先端のセマンティックセグメンテーション手法は、固定解像度範囲内の画像にのみ訓練された。
本稿では,高分解能トレーニングデータを用いることなく,高分解能セグメンテーション問題に対処する新しい手法を提案する。
論文 参考訳(メタデータ) (2020-05-06T01:38:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。