論文の概要: UniEvo-RS: Omni-Prompt Unified Remote Sensing Segmentation with Representative Exemplar-Driven Prototype Evolution
- arxiv url: http://arxiv.org/abs/2608.03911v1
- Date: Tue, 04 Aug 2026 16:39:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-05 17:47:10.513366
- Title: UniEvo-RS: Omni-Prompt Unified Remote Sensing Segmentation with Representative Exemplar-Driven Prototype Evolution
- Title(参考訳): UniEvo-RS: 代表例駆動型プロトタイプ進化を伴うOmni-Prompt統合リモートセンシングセグメンテーション
- Abstract要約: UniEvo-RS (UniEvo-RS) は、代表的模範駆動型プロトタイプ進化を備えた、オムニプロンプト統合RSセグメンテーションフレームワークである。
テキスト駆動型および視覚駆動型プロンプトを単一のアーキテクチャ内で統合するマルチインストラクションプロンプトデータセットを構築した。
マニュアルアノテーションと例題の初期の予測とを対比することにより、UniEvo-RSは予測エラーを正と負のプロトタイプに蒸留する。
- 参考スコア(独自算出の注目度): 8.271561163238383
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Prompt-driven vision-language models (VLMs) hold immense promise for accelerating dense remote sensing (RS) annotation, but static models suffer from severe performance degradation when deployed on novel scenes, unseen categories, or visually confusing backgrounds. Moreover, existing unified paradigms primarily rely on intra-image specific prompts, lacking flexible task routing to adapt to multi-intent operational workflows. In practical batch mapping, annotators typically refine a small set of representative samples before processing large datasets. Motivated by this practice, we propose UniEvo-RS, an omni-prompt unified RS segmentation framework equipped with representative exemplar-driven prototype evolution. First, we construct a multi-instruction prompt dataset that unifies text-driven and visual-driven prompts within a single architecture, establishing a dynamic task-routing mechanism for highly diverse RS annotation scenarios. Second, we introduce a representative feedback-driven, training-free prototype evolution mechanism. By contrasting manual annotations with initial predictions on exemplars, UniEvo-RS distills prediction errors into positive and negative prototypes. These prototypes enhance LLM query recall and suppress spatial background noise under a fixed-budget clustering memory. Extensive experiments show that UniEvo-RS unifies diverse prompting tasks, achieving state-of-the-art performance across most settings. Crucially, with minimal interaction on a few exemplars, it enables training-free, progressive accuracy enhancement on unseen categories during batch annotation.
- Abstract(参考訳): プロンプト駆動型視覚言語モデル(VLM)は、高密度リモートセンシング(RS)アノテーションを加速する大きな可能性を秘めているが、静的モデルは、新しいシーン、見えないカテゴリ、視覚的に混乱した背景に展開する際に、重大なパフォーマンス劣化に悩まされる。
さらに、既存の統一パラダイムは、主にイメージ内の特定のプロンプトに依存しており、マルチインテリジェントな運用ワークフローに適応するための柔軟なタスクルーティングが欠如している。
実際のバッチマッピングでは、アノテータは大規模なデータセットを処理する前に、少数の代表サンプルを精査する。
本手法を応用したUniEvo-RS(UniEvo-RS)を提案する。
まず,テキスト駆動型および視覚駆動型プロンプトを単一アーキテクチャ内で統合するマルチインストラクションプロンプトデータセットを構築し,高度に多様なRSアノテーションシナリオのための動的タスクルーティング機構を確立する。
第2に、代表的なフィードバック駆動型、トレーニング不要なプロトタイプ進化機構を導入する。
マニュアルアノテーションと例題の初期の予測とを対比することにより、UniEvo-RSは予測エラーを正と負のプロトタイプに蒸留する。
これらのプロトタイプはLLMクエリリコールを強化し、固定予算クラスタリングメモリ下での空間背景雑音を抑制する。
大規模な実験により、UniEvo-RSは様々なプロンプトタスクを統一し、ほとんどの設定で最先端のパフォーマンスを達成することが示されている。
重要なことに、いくつかの例では最小限のインタラクションで、バッチアノテーション中に目に見えないカテゴリのトレーニング不要でプログレッシブな精度向上を可能にする。
関連論文リスト
- More with Less: a Large Scale Remote Sensing VLM with a Simple Recipe [52.210953881548996]
遠隔センシングベンチマークに挑戦することで,視覚言語モデルが競争力や最先端のパフォーマンスを達成可能であることを示す。
我々のモデルは、テキストで直接答えるか、セグメント化とグラウンド化のためにローカライズツールを呼び出すことができる単一の言語ポリシーを使用する。
提案手法は,高分解能,マルチテンポラル,マルチモーダル,マルチビュータスクを含む,幅広いベンチマークの競合性を実現する。
論文 参考訳(メタデータ) (2026-07-17T13:25:44Z) - ViQ: Text-Aligned Visual Quantized Representations at Any Resolution [91.46185855575789]
本稿では,視覚的量子化表現フレームワークViQについて紹介する。
我々のアプローチは、量子化学習をテキスト整列事前学習と特徴分別という2つの段階に構成する。
マルチモーダル・タスクの実験では、ViQは最先端のマルチモーダル・ビジョン・エンコーダに比べて競争性能が高いことを示した。
論文 参考訳(メタデータ) (2026-06-25T17:29:27Z) - VaMP: Variational Multi-Modal Prompt Learning for Vision-Language Models [14.275832364410247]
本稿では,サンプル固有かつ不確実性を考慮したプロンプトチューニングを実現する,新しい変分型マルチモーダル・プロンプト・ラーニング(VaMP)フレームワークを提案する。
VaMPは、学習した後部分布からサンプリングすることで、インスタンス条件のプロンプトを生成する。
本稿では,VaMPが最先端の性能を実現し,不確実性とタスク構造の両方をモデル化する利点を強調した。
論文 参考訳(メタデータ) (2025-11-27T17:57:39Z) - Spatial-Temporal-Spectral Unified Modeling for Remote Sensing Dense Prediction [20.1863553357121]
リモートセンシングのための現在のディープラーニングアーキテクチャは、基本的に堅固である。
本稿では,統合モデリングのための空間時間スペクトル統一ネットワーク(STSUN)について紹介する。
STSUNは任意の空間サイズ、時間長、スペクトル帯域で入力および出力データに適応することができる。
様々な密集した予測タスクと多様な意味クラス予測を統一する。
論文 参考訳(メタデータ) (2025-05-18T07:39:17Z) - Unseen from Seen: Rewriting Observation-Instruction Using Foundation Models for Augmenting Vision-Language Navigation [63.54377402784965]
視覚言語ナビゲーション(VLN)のためのリライト駆動型AugMentation(RAM)パラダイムを提案する。
書き換え機構から, シミュレータフリー, 省力両面において, 新たな観察・指導ペアを得ることができた。
離散環境(R2R,REVERIE,R4Rデータセット)と連続環境(R2R-CEデータセット)の両方における実験は,本手法の優れた性能と優れた一般化能力を示している。
論文 参考訳(メタデータ) (2025-03-23T13:18:17Z) - Generative Compositor for Few-Shot Visual Information Extraction [60.663887314625164]
生成空間モデルとして生成空間モデル(Generative Generative Spacetor)を提案する。
ジェネレーティブジェネレーター(Generative Generative Spacetor)は、ソーステキストから単語を検索することでコンポジタの操作をエミュレートするハイブリッドポインタージェネレータネットワークである。
提案手法は,1ショット,5ショット,10ショットの設定において,ベースラインを上回りながら,フルサンプルトレーニングにおいて高い競争力を発揮する。
論文 参考訳(メタデータ) (2025-03-21T04:56:24Z) - UniRS: Unifying Multi-temporal Remote Sensing Tasks through Vision Language Models [23.044366104080822]
textbfUniRSは視覚言語モデルとして最初のbftextremote bftextsensingタスクである。
UniRSはシングルイメージ、デュアルタイムイメージペア、ビデオを入力としてサポートし、総合的なリモートセンシング時間分析を可能にする。
実験の結果、UniRSは様々なタスクで最先端のパフォーマンスを実現していることがわかった。
論文 参考訳(メタデータ) (2024-12-30T06:34:18Z) - RS-MoE: A Vision-Language Model with Mixture of Experts for Remote Sensing Image Captioning and Visual Question Answering [23.699493284403967]
本稿では,リモートセンシングに特化してカスタマイズされた,最初のMixture of ExpertベースのVLMであるRS-MoEを提案する。
従来のMoEモデルとは異なり、RS-MoEのコアとなるMoEブロックは、新しいインストラクションルータと複数の軽量言語モデル(LLM)をエキスパートモデルとして組み込んだものである。
本モデルでは, 精度, 文脈に関連のあるキャプションを生成する際に, 最先端の性能を実現する。
論文 参考訳(メタデータ) (2024-11-03T15:05:49Z) - Unified Demonstration Retriever for In-Context Learning [56.06473069923567]
Unified Demonstration Retriever (textbfUDR)は、幅広いタスクのデモを検索する単一のモデルである。
我々は,高品質な候補を見つけるための反復的なマイニング戦略を備えたマルチタスクリストワイド・トレーニング・フレームワークを提案する。
13のタスクファミリーと複数のデータドメインにわたる30以上のタスクの実験は、UDRがベースラインを大幅に上回っていることを示している。
論文 参考訳(メタデータ) (2023-05-07T16:07:11Z) - Patch-Prompt Aligned Bayesian Prompt Tuning for Vision-Language Models [48.77653835765705]
そこでは,まず下位分布から潜在ベクトルをサンプリングし,次に軽量な生成モデルを用いてラベル固有のプロンプトを階層的に生成する。
提案手法の有効性は,少数ショット画像認識,ベース・ツー・ニュージェネリゼーション,データセット転送学習,ドメインシフトの4つのタスクで評価する。
論文 参考訳(メタデータ) (2023-03-16T06:09:15Z) - Multi-Modal Few-Shot Object Detection with Meta-Learning-Based
Cross-Modal Prompting [77.69172089359606]
本稿では,マルチモーダルな複数ショットオブジェクト検出(FSOD)について,少数ショット視覚例とクラスセマンティック情報の両方を用いて検討する。
我々のアプローチは、(メトリックベース)メタラーニングとプロンプトベースラーニングの高レベルな概念的類似性によって動機付けられている。
提案するマルチモーダルFSODモデルを,複数の複数ショットオブジェクト検出ベンチマークで総合的に評価し,有望な結果を得た。
論文 参考訳(メタデータ) (2022-04-16T16:45:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。