論文の概要: What Matters in Unsupervised Optical Flow
- arxiv url: http://arxiv.org/abs/2006.04902v2
- Date: Fri, 14 Aug 2020 13:39:34 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-24 01:44:31.214373
- Title: What Matters in Unsupervised Optical Flow
- Title(参考訳): 教師なし光流の諸問題
- Authors: Rico Jonschkowski, Austin Stone, Jonathan T. Barron, Ariel Gordon,
Kurt Konolige, Anelia Angelova
- Abstract要約: 教師なし光流における鍵成分の集合を比較し解析する。
教師なしフローモデルに対する新しい改良点を多数構築する。
本稿では,従来の最先端技術よりもはるかに優れた非教師なしフロー技術を提案する。
- 参考スコア(独自算出の注目度): 51.45112526506455
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We systematically compare and analyze a set of key components in unsupervised
optical flow to identify which photometric loss, occlusion handling, and
smoothness regularization is most effective. Alongside this investigation we
construct a number of novel improvements to unsupervised flow models, such as
cost volume normalization, stopping the gradient at the occlusion mask,
encouraging smoothness before upsampling the flow field, and continual
self-supervision with image resizing. By combining the results of our
investigation with our improved model components, we are able to present a new
unsupervised flow technique that significantly outperforms the previous
unsupervised state-of-the-art and performs on par with supervised FlowNet2 on
the KITTI 2015 dataset, while also being significantly simpler than related
approaches.
- Abstract(参考訳): 教師なし光フローにおけるキー成分のセットを系統的に比較分析し,どの測光損失,咬合取扱い,滑らかさの規則化が最も効果的かを同定した。
この研究と並行して, コストボリューム正規化, 咬合マスクの勾配停止, フローフィールドのサンプリング前の滑らかさの促進, 画像再サイズによる連続的自己スーパービジョンなど, 教師なしフローモデルに対する多くの新しい改善を行った。
本研究の結果と改良されたモデルコンポーネントを組み合わせることで,従来の教師なしの状態を著しく上回り,KITTI 2015データセットの教師付きFlowNet2と同等に動作するとともに,関連するアプローチよりもはるかにシンプルな,新たな教師なしフロー技術を提案することができる。
関連論文リスト
- Motion-prior Contrast Maximization for Dense Continuous-Time Motion Estimation [34.529280562470746]
コントラスト最大化フレームワークと非直線運動を組み合わせた新たな自己監督的損失を画素レベルの軌跡の形で導入する。
連続時間運動の高密度推定では, 合成学習モデルのゼロショット性能を29%向上する。
論文 参考訳(メタデータ) (2024-07-15T15:18:28Z) - GAFlow: Incorporating Gaussian Attention into Optical Flow [62.646389181507764]
我々はガウス的注意(GA)を光学フローモデルに押し込み、表現学習中に局所特性をアクセントする。
本稿では,既存の Transformer ブロックに簡単に接続可能な新しい Gaussian-Constrained Layer (GCL) を提案する。
動作解析のための新しいガウス誘導注意モジュール(GGAM)を提供する。
論文 参考訳(メタデータ) (2023-09-28T07:46:01Z) - DistractFlow: Improving Optical Flow Estimation via Realistic
Distractions and Pseudo-Labeling [49.46842536813477]
本稿では,光フロー推定モデルのトレーニングのための新しいデータ拡張手法であるDistractFlowを提案する。
2つのフレームのうちの1つを、類似したドメインを描写したイントラクタイメージと組み合わせることで、自然の物体やシーンと相反する視覚的摂動を誘発することができる。
私たちのアプローチでは、追加のアノテーションを必要とせずに、利用可能なトレーニングペアの数を大幅に増やすことができます。
論文 参考訳(メタデータ) (2023-03-24T15:42:54Z) - FG-Depth: Flow-Guided Unsupervised Monocular Depth Estimation [17.572459787107427]
そこで本研究では,典型的な測光損失を代替する流量蒸留損失と,不適切な画素を除去するための前向きフローベースマスクを提案する。
提案手法は,KITTIとNYU-Depth-v2の両方のデータセットの最先端結果を実現する。
論文 参考訳(メタデータ) (2023-01-20T04:02:13Z) - Unsupervised Flow Refinement near Motion Boundaries [3.5317804902980527]
深層学習に基づく教師なし光流推定器は, 地平への注記のコストと困難さから注目されている。
提案アルゴリズムは,同じ入力を持つベースライン法よりも高精度に境界を検出でき,任意のフロー予測器からの推定値を改善することができる。
論文 参考訳(メタデータ) (2022-08-03T18:44:39Z) - Self-Supervised Multi-Frame Monocular Scene Flow [61.588808225321735]
自己監督学習に基づくマルチフレーム一眼的シーンフローネットワークを導入。
自己監督学習に基づく単眼的シーンフロー法における最新の精度を観察する。
論文 参考訳(メタデータ) (2021-05-05T17:49:55Z) - Unsupervised Motion Representation Enhanced Network for Action
Recognition [4.42249337449125]
連続するフレーム間の動きの表現は、ビデオの理解を大いに促進することが証明されている。
効果的な光フロー解決器であるTV-L1法は、抽出した光フローをキャッシュするために時間と費用がかかる。
UF-TSN(UF-TSN)は、軽量な非監視光フロー推定器を組み込んだ、エンドツーエンドのアクション認識手法です。
論文 参考訳(メタデータ) (2021-03-05T04:14:32Z) - Learning by Analogy: Reliable Supervision from Transformations for
Unsupervised Optical Flow Estimation [83.23707895728995]
光フローの教師なし学習は、教師付き手法に代わる有望な代替手段として登場した。
私たちは、トランスフォーメーションからより信頼性の高い監視を使用するためのフレームワークを提示します。
提案手法は, 深い教師なし手法の中で, 最高の精度で, いくつかのベンチマークで連続的に性能を向上する。
論文 参考訳(メタデータ) (2020-03-29T14:55:24Z) - Joint Unsupervised Learning of Optical Flow and Egomotion with Bi-Level
Optimization [59.9673626329892]
エピポーラ幾何を用いた光学フローとカメラモーションのグローバルな関係を利用する。
我々は暗黙の微分を用いて、その実装とは無関係に低レベルの幾何最適化層を通してバックプロパゲーションを可能にする。
論文 参考訳(メタデータ) (2020-02-26T22:28:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。