論文の概要: Instance-Level Relative Saliency Ranking with Graph Reasoning
- arxiv url: http://arxiv.org/abs/2107.03824v1
- Date: Thu, 8 Jul 2021 13:10:42 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-09 13:34:14.187882
- Title: Instance-Level Relative Saliency Ranking with Graph Reasoning
- Title(参考訳): グラフ推論を用いたインスタンスレベル相対正則ランク付け
- Authors: Nian Liu, Long Li, Wangbo Zhao, Junwei Han, Ling Shao
- Abstract要約: そこで本研究では,有意な事例を分割し,相対的有意な有意なランク順序を推定するための統一モデルを提案する。
また、サラレンシーランキングブランチを効果的にトレーニングするために、新しい損失関数も提案されている。
実験の結果,提案手法は従来の手法よりも有効であることがわかった。
- 参考スコア(独自算出の注目度): 126.09138829920627
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Conventional salient object detection models cannot differentiate the
importance of different salient objects. Recently, two works have been proposed
to detect saliency ranking by assigning different degrees of saliency to
different objects. However, one of these models cannot differentiate object
instances and the other focuses more on sequential attention shift order
inference. In this paper, we investigate a practical problem setting that
requires simultaneously segment salient instances and infer their relative
saliency rank order. We present a novel unified model as the first end-to-end
solution, where an improved Mask R-CNN is first used to segment salient
instances and a saliency ranking branch is then added to infer the relative
saliency. For relative saliency ranking, we build a new graph reasoning module
by combining four graphs to incorporate the instance interaction relation,
local contrast, global contrast, and a high-level semantic prior, respectively.
A novel loss function is also proposed to effectively train the saliency
ranking branch. Besides, a new dataset and an evaluation metric are proposed
for this task, aiming at pushing forward this field of research. Finally,
experimental results demonstrate that our proposed model is more effective than
previous methods. We also show an example of its practical usage on adaptive
image retargeting.
- Abstract(参考訳): 従来の正当性オブジェクト検出モデルは、異なる正当性オブジェクトの重要性を区別できない。
近年,異なる対象に対して異なる給与度を割り当てることで、給与ランキングを検出するための2つの研究が提案されている。
しかし、これらのモデルの1つはオブジェクトインスタンスを区別できず、もう1つは逐次注意シフト順序推論に焦点を当てている。
本稿では,同時にサルエントインスタンスをセグメンテーションし,それらの相対的サルエンシーランクの順序を推定する実用的な問題設定について検討する。
そこでは,改良されたMask R-CNNを用いて,まず有能なインスタンスを分割し,その後,相対的な有能度を推定するために有能度ランキングブランチを追加する。
本研究では,4つのグラフを組み合わせて,インスタンス間相互作用関係,局所的コントラスト,大域的コントラスト,ハイレベルなセマンティクスをそれぞれ前もって組み込む,新たなグラフ推論モジュールを構築する。
また, 給与ランキングを効果的に訓練するために, 新たな損失関数を提案する。
また,この課題に対して新たなデータセットと評価基準を提案し,この研究分野を推し進めることを目指す。
実験の結果,提案手法は従来の手法よりも効果的であることが判明した。
また,適応画像再ターゲティングにおける実用例を示す。
関連論文リスト
- Exploiting Point-Wise Attention in 6D Object Pose Estimation Based on
Bidirectional Prediction [22.894810893732416]
本稿では,ポイントワイズ対応機構を備えた双方向対応予測ネットワークを提案する。
私たちの重要な洞察は、各モデルポイントとシーンポイントの相関が、ポイントペアマッチの学習に不可欠な情報を提供するということです。
LineMOD, YCB-Video, Occ-LineMODの公開データセットに対する実験結果から, 提案手法が他の最先端手法よりも優れた性能を実現することを示す。
論文 参考訳(メタデータ) (2023-08-16T17:13:45Z) - Unified Visual Relationship Detection with Vision and Language Models [89.77838890788638]
この研究は、複数のデータセットからラベル空間の結合を予測する単一の視覚的関係検出器のトレーニングに焦点を当てている。
視覚と言語モデルを活用した統合視覚関係検出のための新しいボトムアップ手法UniVRDを提案する。
人物体間相互作用検出とシーングラフ生成の双方による実験結果から,本モデルの競合性能が示された。
論文 参考訳(メタデータ) (2023-03-16T00:06:28Z) - Doubly Reparameterized Importance Weighted Structure Learning for Scene
Graph Generation [40.46394569128303]
入力画像が与えられたシーングラフ生成は、視覚的に接地されたシーングラフを構築することにより、オブジェクトとその関係を明示的にモデル化することを目的としている。
本稿では,より厳密な重み付き下界を変分推論対象として用いた2重み付き重み付き構造学習法を提案する。
提案手法は,様々な人気シーングラフ生成ベンチマークにおいて,最先端の性能を実現する。
論文 参考訳(メタデータ) (2022-06-22T20:00:25Z) - Importance Weighted Structure Learning for Scene Graph Generation [40.46394569128303]
本稿では,シーングラフ生成のための重み付き構造学習手法を提案する。
結果として生じる制約付き変動推論タスクを解決するために、一般的なエントロピーミラー降下アルゴリズムを適用した。
提案手法は,様々な人気シーングラフ生成ベンチマークにおいて,最先端の性能を実現する。
論文 参考訳(メタデータ) (2022-05-14T09:25:14Z) - Explicitly Modeling the Discriminability for Instance-Aware Visual
Object Tracking [13.311777431243296]
特徴表現の識別性を明らかにするための新しいインスタンス・アウェア・トラッカー (IAT) を提案する。
提案するIATには,ビデオレベルとオブジェクトレベルを含む2つのバリエーションを実装している。
どちらのバージョンも30FPSで動作しながら最先端のメソッドに対して主要な結果を得る。
論文 参考訳(メタデータ) (2021-10-28T11:24:01Z) - A Low Rank Promoting Prior for Unsupervised Contrastive Learning [108.91406719395417]
提案手法は,従来の低階の促進をコントラスト学習の枠組みに効果的に組み込む新しい確率的グラフィカルモデルを構築する。
我々の仮説は、同じインスタンスクラスに属するすべてのサンプルが、小さな次元の同じ部分空間上にあることを明示的に要求する。
実証的な証拠は、提案アルゴリズムが複数のベンチマークにおける最先端のアプローチを明らかに上回っていることを示している。
論文 参考訳(メタデータ) (2021-08-05T15:58:25Z) - From Canonical Correlation Analysis to Self-supervised Graph Neural
Networks [99.44881722969046]
本稿では,グラフデータを用いた自己教師付き表現学習のための概念的単純かつ効果的なモデルを提案する。
古典的カノニカル相関解析にインスパイアされた,革新的な特徴レベルの目的を最適化する。
提案手法は、7つの公開グラフデータセット上で競合的に動作する。
論文 参考訳(メタデータ) (2021-06-23T15:55:47Z) - One-Shot Object Detection without Fine-Tuning [62.39210447209698]
本稿では,第1ステージのMatching-FCOSネットワークと第2ステージのStructure-Aware Relation Moduleからなる2段階モデルを提案する。
また,検出性能を効果的に向上する新たなトレーニング戦略を提案する。
提案手法は,複数のデータセット上で一貫した最先端のワンショット性能を上回る。
論文 参考訳(メタデータ) (2020-05-08T01:59:23Z) - Learning What Makes a Difference from Counterfactual Examples and
Gradient Supervision [57.14468881854616]
ニューラルネットワークの一般化能力を改善するための補助的学習目標を提案する。
我々は、異なるラベルを持つ最小差の例のペア、すなわち反ファクトまたはコントラストの例を使用し、タスクの根底にある因果構造を示す信号を与える。
このテクニックで訓練されたモデルは、配布外テストセットのパフォーマンスを向上させる。
論文 参考訳(メタデータ) (2020-04-20T02:47:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。