論文の概要: Polygonal Point Set Tracking
- arxiv url: http://arxiv.org/abs/2105.14584v1
- Date: Sun, 30 May 2021 17:12:36 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-02 10:01:20.948331
- Title: Polygonal Point Set Tracking
- Title(参考訳): 多角形点集合追跡
- Authors: Gunhee Nam, Miran Heo, Seoung Wug Oh, Joon-Young Lee, Seon Joo Kim
- Abstract要約: 本稿では,学習に基づく多角形点集合追跡手法を提案する。
私たちのゴールは、ターゲットの輪郭上の対応する点を追跡することです。
本稿では,部分歪みとテキストマッピングに対する本手法の視覚効果について述べる。
- 参考スコア(独自算出の注目度): 50.445151155209246
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this paper, we propose a novel learning-based polygonal point set tracking
method. Compared to existing video object segmentation~(VOS) methods that
propagate pixel-wise object mask information, we propagate a polygonal point
set over frames.
Specifically, the set is defined as a subset of points in the target contour,
and our goal is to track corresponding points on the target contour. Those
outputs enable us to apply various visual effects such as motion tracking, part
deformation, and texture mapping. To this end, we propose a new method to track
the corresponding points between frames by the global-local alignment with
delicately designed losses and regularization terms. We also introduce a novel
learning strategy using synthetic and VOS datasets that makes it possible to
tackle the problem without developing the point correspondence dataset. Since
the existing datasets are not suitable to validate our method, we build a new
polygonal point set tracking dataset and demonstrate the superior performance
of our method over the baselines and existing contour-based VOS methods. In
addition, we present visual-effects applications of our method on part
distortion and text mapping.
- Abstract(参考訳): 本稿では,学習に基づく多角形点集合追跡手法を提案する。
画素単位のオブジェクトマスク情報を伝搬する既存のビデオオブジェクトセグメンテーション~(VOS)手法と比較して,フレーム上に設定された多角形点を伝搬する。
具体的には、集合は対象輪郭内の点のサブセットとして定義され、我々の目標は対象輪郭上の対応する点を追跡することである。
これらの出力により、動き追跡、部分変形、テクスチャマッピングなど様々な視覚効果が適用できます。
そこで本研究では,微妙に設計された損失と正規化項を含むグローバルなアライメントにより,フレーム間の対応点を追跡する新しい手法を提案する。
また,点対応データセットを開発することなくこの問題に対処可能な合成およびvosデータセットを用いた新しい学習戦略を提案する。
既存のデータセットは本手法の検証には適さないため,新しい多角形点集合追跡データセットを構築し,本手法のベースラインおよび既存輪郭型VOS法よりも優れた性能を示す。
さらに,部分歪みとテキストマッピングにおける視覚効果の応用について述べる。
関連論文リスト
- Self-Supervised Scene Flow Estimation with Point-Voxel Fusion and Surface Representation [30.355128117680444]
シーンフロー推定は、点雲の2つの連続するフレーム間の点の3次元運動場を生成することを目的としている。
既存の点ベースの手法は点雲の不規則性を無視し、長距離依存を捉えるのが困難である。
本稿では,分散グリッドアテンションとシフトウインドウ戦略に基づくボクセルブランチを用いて,長距離依存性を捕捉するポイントボクセル融合法を提案する。
論文 参考訳(メタデータ) (2024-10-17T09:05:15Z) - Joint Dense-Point Representation for Contour-Aware Graph Segmentation [2.138299283227551]
本稿では,点と画素の輪郭表現を共同で学習することにより,グラフと高密度セグメンテーション技術を組み合わせた新しい手法を提案する。
これは、不整合目的がネットワークを識別的・輪郭的特徴の学習から制限する典型的なグラフ分割法における欠陥に対処する。
提案手法はいくつかのケストX線データセットで検証され,セグメンテーション安定性と精度の明確な改善が示された。
論文 参考訳(メタデータ) (2023-06-21T10:07:17Z) - Tracking by 3D Model Estimation of Unknown Objects in Videos [122.56499878291916]
この表現は限定的であり、代わりに明示的なオブジェクト表現を用いて2次元追跡をガイドし改善することを提案する。
我々の表現は、全てのビデオフレームのオブジェクト上の全ての3Dポイント間の複雑な長期密度対応問題に取り組む。
提案手法は, 最適3次元形状, テクスチャ, 6DoFのポーズを推定するために, 新たな損失関数を最小化する。
論文 参考訳(メタデータ) (2023-04-13T11:32:36Z) - Hybrid Tracker with Pixel and Instance for Video Panoptic Segmentation [50.62685357414904]
ビデオパノプティカル係数(VPS)は、コヒーレントなパノプティカルセグメンテーションを生成し、ビデオフレーム全体の全ピクセルのアイデンティティを追跡することを目的としている。
単一トラッカーの限界を取り除くために,軽量かつ共同的な追跡モデルであるHybridTrackerを提案する。
総合的な実験により、HybridTrackerはCityscapes-VPSとVIPERデータセットの最先端メソッドよりも優れたパフォーマンスを実現している。
論文 参考訳(メタデータ) (2022-03-02T16:21:55Z) - Learning point embedding for 3D data processing [2.12121796606941]
現在の点ベース法は本質的に空間関係処理ネットワークである。
PE-Netは高次元空間における点雲の表現を学習する。
実験によると、PE-Netは複数の挑戦的なデータセットで最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2021-07-19T00:25:28Z) - Weak Multi-View Supervision for Surface Mapping Estimation [0.9367260794056769]
密接なアノテーションを使わずにカテゴリ別表面マッピングを学習する,弱監督型マルチビュー学習手法を提案する。
人間の顔、車、飛行機といった一般的なカテゴリの基盤となる表面形状を、それらのカテゴリの例から学習する。
論文 参考訳(メタデータ) (2021-05-04T09:46:26Z) - SPU-Net: Self-Supervised Point Cloud Upsampling by Coarse-to-Fine
Reconstruction with Self-Projection Optimization [52.20602782690776]
実際のスキャンされたスパースデータからトレーニング用の大規模なペアリングスパーススキャンポイントセットを得るのは高価で面倒です。
本研究では,SPU-Net と呼ばれる自己監視型点群アップサンプリングネットワークを提案する。
本研究では,合成データと実データの両方について様々な実験を行い,最先端の教師付き手法と同等の性能が得られることを示す。
論文 参考訳(メタデータ) (2020-12-08T14:14:09Z) - Point-Set Anchors for Object Detection, Instance Segmentation and Pose
Estimation [85.96410825961966]
中心点から抽出された画像の特徴は、離れたキーポイントや境界ボックスの境界を予測するための限られた情報を含んでいると論じる。
推論を容易にするために,より有利な位置に配置された点集合からの回帰を行うことを提案する。
我々は、オブジェクト検出、インスタンス分割、人間のポーズ推定にPoint-Set Anchorsと呼ばれるこのフレームワークを適用した。
論文 参考訳(メタデータ) (2020-07-06T15:59:56Z) - Segment as Points for Efficient Online Multi-Object Tracking and
Segmentation [66.03023110058464]
本稿では,コンパクトな画像表現を非秩序な2次元点クラウド表現に変換することで,セグメントに基づくインスタンス埋め込みの学習に有効な方法を提案する。
本手法は,画像ではなく,ランダムに選択された点から識別インスタンスの埋め込みを学習する,新たなトラッキング・バイ・ポイントのパラダイムを生成する。
PointTrackという名前のオンラインMOTSフレームワークは、最先端のすべてのメソッドを大きなマージンで上回っている。
論文 参考訳(メタデータ) (2020-07-03T08:29:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。