論文の概要: SlimSeg: Slimmable Semantic Segmentation with Boundary Supervision
- arxiv url: http://arxiv.org/abs/2207.06242v1
- Date: Wed, 13 Jul 2022 14:41:05 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-14 15:03:45.118769
- Title: SlimSeg: Slimmable Semantic Segmentation with Boundary Supervision
- Title(参考訳): SlimSeg:境界スーパービジョンによるスリムなセマンティックセグメンテーション
- Authors: Danna Xue, Fei Yang, Pei Wang, Luis Herranz, Jinqiu Sun, Yu Zhu,
Yanning Zhang
- Abstract要約: 本稿では,単純なスリム化可能なセマンティックセマンティックセマンティクス(SlimSeg)法を提案する。
提案するSlimSegは,様々な主流ネットワークを用いて,計算コストの動的調整と性能向上を実現するフレキシブルなモデルを生成することができることを示す。
- 参考スコア(独自算出の注目度): 54.16430358203348
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Accurate semantic segmentation models typically require significant
computational resources, inhibiting their use in practical applications. Recent
works rely on well-crafted lightweight models to achieve fast inference.
However, these models cannot flexibly adapt to varying accuracy and efficiency
requirements. In this paper, we propose a simple but effective slimmable
semantic segmentation (SlimSeg) method, which can be executed at different
capacities during inference depending on the desired accuracy-efficiency
tradeoff. More specifically, we employ parametrized channel slimming by
stepwise downward knowledge distillation during training. Motivated by the
observation that the differences between segmentation results of each submodel
are mainly near the semantic borders, we introduce an additional boundary
guided semantic segmentation loss to further improve the performance of each
submodel. We show that our proposed SlimSeg with various mainstream networks
can produce flexible models that provide dynamic adjustment of computational
cost and better performance than independent models. Extensive experiments on
semantic segmentation benchmarks, Cityscapes and CamVid, demonstrate the
generalization ability of our framework.
- Abstract(参考訳): 正確なセマンティックセグメンテーションモデルは一般的に重要な計算資源を必要とし、実際的な用途での使用を阻害する。
最近の研究は、高速な推論を達成するために、優れた軽量モデルに依存している。
しかし、これらのモデルは様々な精度や効率要件に柔軟に対応できない。
本稿では,要求される精度と効率のトレードオフに応じて,推論中に異なるキャパシティで実行可能な,簡便で効率的な意味セグメンテーション(slimseg)手法を提案する。
より具体的には、訓練中に段階的に下方への知識蒸留によりパラメトリズドチャネルスリム化を行う。
本研究は,各サブモデルのセグメンテーション結果の違いが主にセグメンテーション境界付近にあることを観察した結果,各サブモデルのさらなる性能向上を目的とした境界ガイド付きセグメンテーション損失を導入した。
提案手法は, 計算コストを動的に調整し, 性能を独立モデルよりも向上させるフレキシブルモデルを生成することができることを示す。
セマンティクスセグメンテーションベンチマーク、cityscapesおよびcamvidに関する広範な実験は、我々のフレームワークの一般化能力を示している。
関連論文リスト
- Towards Better Certified Segmentation via Diffusion Models [62.21617614504225]
セグメンテーションモデルは敵の摂動に弱いため、医療や自動運転といった重要な意思決定システムでの使用を妨げます。
近年,理論的保証を得るためにガウス雑音を入力に加えることにより,セグメント化予測のランダム化が提案されている。
本稿では,ランダムな平滑化と拡散モデルを組み合わせたセグメンテーション予測の問題に対処する。
論文 参考訳(メタデータ) (2023-06-16T16:30:39Z) - Learning Context-aware Classifier for Semantic Segmentation [88.88198210948426]
本稿では,文脈認識型分類器の学習を通じて文脈ヒントを利用する。
本手法はモデルに依存しないため,ジェネリックセグメンテーションモデルにも容易に適用できる。
無視できる追加パラメータと+2%の推論時間だけで、小型モデルと大型モデルの両方で十分な性能向上が達成されている。
論文 参考訳(メタデータ) (2023-03-21T07:00:35Z) - Open-vocabulary Panoptic Segmentation with Embedding Modulation [71.15502078615587]
オープン語彙のイメージセグメンテーションは、現実世界における重要な応用のために注目を集めている。
従来のクローズド・ボキャブラリ・セグメンテーション法は、新しいオブジェクトを特徴づけることができないが、最近のいくつかのオープン・ボキャブラリ試みは、満足のいく結果を得る。
オープン語彙パノプトンのための全能的でデータ効率のよいフレームワークであるOPSNetを提案する。
論文 参考訳(メタデータ) (2023-03-20T17:58:48Z) - Semantic Diffusion Network for Semantic Segmentation [1.933681537640272]
セマンティック境界認識を強化する演算子レベルのアプローチを導入する。
意味拡散ネットワーク(SDN)と呼ばれる新しい学習可能なアプローチを提案する。
我々のSDNは、元の機能からクラス間境界強化機能への微分可能なマッピングを構築することを目的としています。
論文 参考訳(メタデータ) (2023-02-04T01:39:16Z) - Unsupervised Continual Semantic Adaptation through Neural Rendering [32.099350613956716]
セマンティックセグメンテーションの課題に対する連続的マルチシーン適応について検討する。
本稿では,セグメンテーションモデルの予測を融合させることで,シーン毎にセマンティック・NeRFネットワークを訓練する。
我々は,Voxelベースのベースラインと最先端の教師なしドメイン適応手法の両方より優れているScanNetに対するアプローチを評価した。
論文 参考訳(メタデータ) (2022-11-25T09:31:41Z) - Prompt-Matched Semantic Segmentation [96.99924127527002]
本研究の目的は、事前学習した基礎モデルを、画像意味セグメンテーションの下流の様々なタスクに効果的に適応する方法を検討することである。
本稿では,タスク指向のチューニングに適応的に視覚的プロンプトを生成するとともに,基礎モデルの本来の構造を維持できる新しい階層間プロンプトマッチングフレームワークを提案する。
次に、Semantic-aware Prompt Matcherと呼ばれる軽量モジュールを導入し、2つのステージ間で階層的に補間し、各タスクに対して適切なプロンプトを学習する。
論文 参考訳(メタデータ) (2022-08-22T09:12:53Z) - Slimmable Domain Adaptation [112.19652651687402]
重み付けモデルバンクを用いて、ドメイン間の一般化を改善するためのシンプルなフレームワーク、Slimmable Domain Adaptationを導入する。
私たちのフレームワークは、他の競合するアプローチを、複数のベンチマークにおいて非常に大きなマージンで上回ります。
論文 参考訳(メタデータ) (2022-06-14T06:28:04Z) - Label-Efficient Semantic Segmentation with Diffusion Models [27.01899943738203]
拡散モデルは意味的セグメンテーションの道具としても機能することを示した。
特に、いくつかの事前訓練拡散モデルに対して、逆拡散過程のマルコフステップを実行するネットワークからの中間活性化について検討する。
これらのアクティベーションは、入力画像から意味情報を効果的にキャプチャし、セグメンテーション問題に対して優れたピクセルレベルの表現であることを示す。
論文 参考訳(メタデータ) (2021-12-06T15:55:30Z) - Combining Discrete Choice Models and Neural Networks through Embeddings:
Formulation, Interpretability and Performance [10.57079240576682]
本研究では、ニューラルネットワーク(ANN)を用いた理論とデータ駆動選択モデルを組み合わせた新しいアプローチを提案する。
特に、分類的または離散的説明変数を符号化するために、埋め込みと呼ばれる連続ベクトル表現を用いる。
我々のモデルは最先端の予測性能を提供し、既存のANNモデルよりも優れ、必要なネットワークパラメータの数を劇的に削減します。
論文 参考訳(メタデータ) (2021-09-24T15:55:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。