論文の概要: Structured Context Enhancement Network for Mouse Pose Estimation
- arxiv url: http://arxiv.org/abs/2012.00630v2
- Date: Fri, 2 Apr 2021 15:10:01 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-30 19:46:01.308186
- Title: Structured Context Enhancement Network for Mouse Pose Estimation
- Title(参考訳): マウスポーズ推定のための構造化コンテキスト拡張ネットワーク
- Authors: Feixiang Zhou, Zheheng Jiang, Zhihua Liu, Fang Chen, Long Chen, Lei
Tong, Zhile Yang, Haikuan Wang, Minrui Fei, Ling Li and Huiyu Zhou
- Abstract要約: 我々は、新しいHourglass Networkベースモデル、すなわち、グラフィカルモデルに基づく構造化コンテキスト拡張ネットワーク(GM-SCENet)を提案する。
SCMは、新しいグラフィカルモデルにより、提案した各マウス部分の構造的コンテキスト情報を適応的に学習し、強化することができる。
CMLSモジュールは、マルチレベル情報を生成することにより、提案するSCMとHourglassネットワークを共同でトレーニングするように設計されている。
- 参考スコア(独自算出の注目度): 16.95848000851908
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Automated analysis of mouse behaviours is crucial for many applications in
neuroscience. However, quantifying mouse behaviours from videos or images
remains a challenging problem, where pose estimation plays an important role in
describing mouse behaviours. Although deep learning based methods have made
promising advances in human pose estimation, they cannot be directly applied to
pose estimation of mice due to different physiological natures. Particularly,
since mouse body is highly deformable, it is a challenge to accurately locate
different keypoints on the mouse body. In this paper, we propose a novel
Hourglass network based model, namely Graphical Model based Structured Context
Enhancement Network (GM-SCENet) where two effective modules, i.e., Structured
Context Mixer (SCM) and Cascaded Multi-Level Supervision (CMLS) are
subsequently implemented. SCM can adaptively learn and enhance the proposed
structured context information of each mouse part by a novel graphical model
that takes into account the motion difference between body parts. Then, the
CMLS module is designed to jointly train the proposed SCM and the Hourglass
network by generating multi-level information, increasing the robustness of the
whole network.Using the multi-level prediction information from SCM and CMLS,
we develop an inference method to ensure the accuracy of the localisation
results. Finally, we evaluate our proposed approach against several
baselines...
- Abstract(参考訳): マウスの行動の自動分析は神経科学の多くの応用に不可欠である。
しかし、動画や画像からマウスの行動を定量化することは難しい問題であり、マウスの行動を記述する上でポーズ推定が重要な役割を果たす。
深層学習に基づく手法は、人間のポーズ推定において有望な進歩をもたらしたが、異なる生理的性質のためにマウスのポーズ推定に直接適用することはできない。
特に、マウスの体は非常に変形しやすいため、マウスの体に異なるキーポイントを正確に見つけることが困難である。
本稿では,構造化コンテキストミキサー (scm) とカスケードマルチレベル監督 (cmls) の2つの効果的なモジュールを実装した,新しい砂時計ネットワークモデル,すなわちcg-scenet (graphic model based structured context enhancement network) を提案する。
SCMは、身体部分間の運動差を考慮した新しいグラフィカルモデルにより、各マウス部分の構造的コンテキスト情報を適応的に学習し、強化することができる。
そして、CMLSモジュールは、提案したSCMとHourglassネットワークを協調的にトレーニングするために設計され、ネットワーク全体の堅牢性を高め、SCMとCMLSのマルチレベル予測情報を用いて、ローカライゼーション結果の精度を確保するための推論手法を開発した。
最後に,提案手法を複数のベースラインに対して評価する。
関連論文リスト
- Unleashing Network Potentials for Semantic Scene Completion [50.95486458217653]
本稿では,新しいSSCフレームワーク - Adrial Modality Modulation Network (AMMNet)を提案する。
AMMNetは、モダリティ間の勾配流の相互依存性を可能にするクロスモーダル変調と、動的勾配競争を利用するカスタマイズされた逆トレーニングスキームの2つのコアモジュールを導入している。
AMMNetは最先端のSSC法よりも大きなマージンで優れていた。
論文 参考訳(メタデータ) (2024-03-12T11:48:49Z) - Efficient Adaptive Human-Object Interaction Detection with
Concept-guided Memory [64.11870454160614]
概念誘導メモリ(ADA-CM)を用いた適応型HOI検出器を提案する。
ADA-CMには2つの操作モードがある。最初のモードでは、トレーニング不要のパラダイムで新しいパラメータを学習することなくチューニングできる。
提案手法は, HICO-DET と V-COCO のデータセットに対して, より少ないトレーニング時間で, 最新技術による競合的な結果を得る。
論文 参考訳(メタデータ) (2023-09-07T13:10:06Z) - Modular Deep Learning [120.36599591042908]
トランスファーラーニングは近年、機械学習の主要なパラダイムとなっている。
負の干渉を伴わずに複数のタスクを専門とするモデルを開発する方法はまだ不明である。
これらの課題に対する有望な解決策として、モジュール型ディープラーニングが登場した。
論文 参考訳(メタデータ) (2023-02-22T18:11:25Z) - Cross-Skeleton Interaction Graph Aggregation Network for Representation
Learning of Mouse Social Behaviour [24.716092330419123]
マウスの社会的行動分析は、行動神経科学においてますますポピュラーな研究領域となっている。
高度に変形可能な体型とあいまいな運動パターンにより、マウス間の複雑な社会的相互作用をモデル化することは困難である。
我々は,自由に相互作用するマウスの豊富な動態を学習するクロス骨格相互作用グラフ集約ネットワーク(CS-IGANet)を提案する。
論文 参考訳(メタデータ) (2022-08-07T21:06:42Z) - Deep Measurement Updates for Bayes Filters [5.059735037931382]
本稿では,多種多様なシステムに対する一般的な更新ルールとして,Deep Measurement Update (DMU)を提案する。
DMUは、深度画像を生の入力として処理する条件付きエンコーダ・デコーダニューラルネットワーク構造を持つ。
情報ボトルネックに頼らずに条件変数に敏感なDMUモデルを効率的に訓練する方法を実証する。
論文 参考訳(メタデータ) (2021-12-01T10:00:37Z) - Coarse-to-fine Animal Pose and Shape Estimation [67.39635503744395]
単一画像から3次元動物メッシュを再構成する粗大なアプローチを提案する。
粗い推定段階はまずSMALモデルのポーズ、形状、翻訳パラメータを推定する。
次に、推定メッシュをグラフ畳み込みネットワーク(GCN)によって開始点として使用し、精製段階における頂点毎の変形を予測する。
論文 参考訳(メタデータ) (2021-11-16T01:27:20Z) - Multi-Scale Semantics-Guided Neural Networks for Efficient
Skeleton-Based Human Action Recognition [140.18376685167857]
スケルトンに基づく行動認識には,単純なマルチスケールセマンティクス誘導ニューラルネットワークが提案されている。
MS-SGNは、NTU60、NTU120、SYSUデータセットの最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2021-11-07T03:50:50Z) - Efficient Model-Based Multi-Agent Mean-Field Reinforcement Learning [89.31889875864599]
マルチエージェントシステムにおける学習に有効なモデルベース強化学習アルゴリズムを提案する。
我々の理論的な貢献は、MFCのモデルベース強化学習における最初の一般的な後悔の限界である。
コア最適化問題の実用的なパラメトリゼーションを提供する。
論文 参考訳(メタデータ) (2021-07-08T18:01:02Z) - Learning Multiscale Correlations for Human Motion Prediction [10.335804615372629]
本研究では、人体成分間の相関を捕捉する新しいマルチスケールグラフ畳み込みネットワーク(MGCN)を提案する。
ヒューマンモーション予測のための2つの標準ベンチマークデータセットに対するアプローチを評価した。
論文 参考訳(メタデータ) (2021-03-19T07:58:16Z) - On Training and Evaluation of Neural Network Approaches for Model
Predictive Control [9.8918553325509]
本稿では,制約ニューラルネットワークを用いて実装されたモデル予測制御(MPC)のトレーニングと評価を行うフレームワークである。
モチベーションは、安全クリティカルフィードバック制御システムのリアルタイム最適化を、ニューラルネットワークと最適化層という形で学習されたマッピングに置き換えることである。
論文 参考訳(メタデータ) (2020-05-08T15:37:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。