論文の概要: MEMTRACK: A Deep Learning-Based Approach to Microrobot Tracking in Dense
and Low-Contrast Environments
- arxiv url: http://arxiv.org/abs/2310.09441v1
- Date: Fri, 13 Oct 2023 23:21:32 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-18 02:06:10.308177
- Title: MEMTRACK: A Deep Learning-Based Approach to Microrobot Tracking in Dense
and Low-Contrast Environments
- Title(参考訳): MEMTRACK: 深層学習に基づく高密度・低コントラスト環境におけるマイクロロボット追跡
- Authors: Medha Sawhney, Bhas Karmarkar, Eric J. Leaman, Arka Daw, Anuj
Karpatne, Bahareh Behkam
- Abstract要約: Motion Enhanced Multi-level Tracker (MEMTrack) はマイクロロボットを検知・追跡するための堅牢なパイプラインである。
菌体マイクロモーターを用いてコラーゲン(tissue phantom)の試験を行い,コラーゲンおよび水性培地で試験した。
MEMTrackは、精巧に生産された手動追跡データと統計的に有意な差がなく、平均細菌の速度を定量化することができる。
- 参考スコア(独自算出の注目度): 4.638136711579875
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Tracking microrobots is challenging, considering their minute size and high
speed. As the field progresses towards developing microrobots for biomedical
applications and conducting mechanistic studies in physiologically relevant
media (e.g., collagen), this challenge is exacerbated by the dense surrounding
environments with feature size and shape comparable to microrobots. Herein, we
report Motion Enhanced Multi-level Tracker (MEMTrack), a robust pipeline for
detecting and tracking microrobots using synthetic motion features, deep
learning-based object detection, and a modified Simple Online and Real-time
Tracking (SORT) algorithm with interpolation for tracking. Our object detection
approach combines different models based on the object's motion pattern. We
trained and validated our model using bacterial micro-motors in collagen
(tissue phantom) and tested it in collagen and aqueous media. We demonstrate
that MEMTrack accurately tracks even the most challenging bacteria missed by
skilled human annotators, achieving precision and recall of 77% and 48% in
collagen and 94% and 35% in liquid media, respectively. Moreover, we show that
MEMTrack can quantify average bacteria speed with no statistically significant
difference from the laboriously-produced manual tracking data. MEMTrack
represents a significant contribution to microrobot localization and tracking,
and opens the potential for vision-based deep learning approaches to microrobot
control in dense and low-contrast settings. All source code for training and
testing MEMTrack and reproducing the results of the paper have been made
publicly available https://github.com/sawhney-medha/MEMTrack.
- Abstract(参考訳): 微小なサイズと高速を考えると、マイクロロボットの追跡は難しい。
バイオメディカル応用のためのマイクロロボットの開発や、生理学的に関連のあるメディア(コラーゲンなど)で機械学研究を行う分野が進むにつれ、この課題はマイクロロボットに匹敵する大きさと形状の密集した環境によって悪化する。
本稿では,モーション・エンハンスメント・マルチレベル・トラッカー(memtrack),合成モーション機能を用いたマイクロロボットの検出と追跡のためのロバストなパイプライン,深層学習に基づく物体検出,補間による簡易オンライン・リアルタイムトラッキング(sort)アルゴリズムの改良について報告する。
我々の物体検出手法は、物体の動きパターンに基づいて異なるモデルを組み合わせる。
コラーゲン中の細菌マイクロモーター (tissue phantom) を用いて実験を行い, コラーゲンおよび水性培地を用いて実験を行った。
以上の結果から,MEMTrackはヒトのアノテーターが見逃す最も難易度の高い細菌を正確に追跡し,コラーゲンでは77%,リコールでは48%,液体メディアでは94%,リコールでは35%の精度を示した。
また,MEMTrackは,手動追跡データと統計的に有意な差はなく,平均細菌速度を定量化できることを示した。
MEMTrackは、マイクロロボットのローカライゼーションとトラッキングに重要な貢献であり、高密度および低コントラスト環境でのマイクロロボット制御に対するビジョンベースのディープラーニングアプローチの可能性を開く。
MEMTrackのトレーニングとテスト、および論文の結果の再現のためのソースコードは、https://github.com/sawhney-medha/MEMTrack.comで公開されている。
関連論文リスト
- Temporal Correlation Meets Embedding: Towards a 2nd Generation of JDE-based Real-Time Multi-Object Tracking [52.04679257903805]
共同検出・埋め込み(JDE)トラッカーは多目的追跡(MOT)タスクにおいて優れた性能を示した。
TCBTrackという名前のトラッカーは、複数の公開ベンチマークで最先端のパフォーマンスを実現しています。
論文 参考訳(メタデータ) (2024-07-19T07:48:45Z) - Chemotaxis of sea urchin sperm cells through deep reinforcement learning [0.0]
本研究では, ウニ精子のモデルが, ケモアトレラント濃度場において, 自己学習型遊走運動をいかに行うかを検討する。
我々は,人工ニューラルネットワークを用いて意思決定エージェントとして機能し,精子の効率的な操作戦略の発見を容易にする。
以上の結果から,ウニ精子の遊走過程に関する知見が得られ,微生物の知能的操作のためのガイダンスも用意された。
論文 参考訳(メタデータ) (2022-08-02T06:04:32Z) - Transformer Inertial Poser: Attention-based Real-time Human Motion
Reconstruction from Sparse IMUs [79.72586714047199]
本研究では,6つのIMUセンサからリアルタイムに全体動作を再構築する,注意に基づく深層学習手法を提案する。
提案手法は, 実装が簡単で, 小型でありながら, 定量的かつ質的に新しい結果が得られる。
論文 参考訳(メタデータ) (2022-03-29T16:24:52Z) - Learnable Online Graph Representations for 3D Multi-Object Tracking [156.58876381318402]
3D MOT問題に対する統一型学習型アプローチを提案します。
我々は、完全にトレーニング可能なデータアソシエーションにNeural Message Passing Networkを使用します。
AMOTAの65.6%の最先端性能と58%のIDスウィッチを達成して、公開可能なnuScenesデータセットに対する提案手法のメリットを示す。
論文 参考訳(メタデータ) (2021-04-23T17:59:28Z) - Autonomous object harvesting using synchronized optoelectronic
microrobots [10.860767733334306]
optoelectronic tweezer-driven microrobots (oetdms)は多用途のマイクロマニピュレーション技術である。
複数のマイクロロボットのオープンループ制御を実現するために,自動的ターゲティングと経路計画手法を提案する。
論文 参考訳(メタデータ) (2021-03-08T17:24:15Z) - Domain Adaptive Robotic Gesture Recognition with Unsupervised
Kinematic-Visual Data Alignment [60.31418655784291]
本稿では,マルチモダリティ知識,すなわちキネマティックデータとビジュアルデータを同時にシミュレータから実ロボットに伝達できる,教師なしドメイン適応フレームワークを提案する。
ビデオの時間的手がかりと、ジェスチャー認識に対するマルチモーダル固有の相関を用いて、トランスファー可能な機能を強化したドメインギャップを修復する。
その結果, 本手法は, ACCでは最大12.91%, F1scoreでは20.16%と, 実際のロボットではアノテーションを使わずに性能を回復する。
論文 参考訳(メタデータ) (2021-03-06T09:10:03Z) - Online Body Schema Adaptation through Cost-Sensitive Active Learning [63.84207660737483]
この作業は、icubロボットシミュレータの7dofアームを使用して、シミュレーション環境で実行された。
コストに敏感な能動学習手法は最適な関節構成を選択するために用いられる。
その結果,コスト依存型能動学習は標準的な能動学習手法と同等の精度を示し,実行運動の約半分を減らした。
論文 参考訳(メタデータ) (2021-01-26T16:01:02Z) - Towards an Automatic Analysis of CHO-K1 Suspension Growth in
Microfluidic Single-cell Cultivation [63.94623495501023]
我々は、人間の力で抽象化されたニューラルネットワークをデータレベルで注入できる新しい機械学習アーキテクチャを提案する。
具体的には、自然データと合成データに基づいて生成モデルを同時に訓練し、細胞数などの対象変数を確実に推定できる共有表現を学習する。
論文 参考訳(メタデータ) (2020-10-20T08:36:51Z) - DistNet: Deep Tracking by displacement regression: application to
bacteria growing in the Mother Machine [2.741266294612776]
本稿では,トラッキングエラー率とセグメンテーションエラー率を極端に低くする自己認識機構を活用するディープニューラルネットワークアーキテクチャを提案する。
本手法はDISTance+DISplacement and Tracking Networkの略であるDiSTNetと名付けられた。
論文 参考訳(メタデータ) (2020-03-17T16:13:44Z) - AP-MTL: Attention Pruned Multi-task Learning Model for Real-time
Instrument Detection and Segmentation in Robot-assisted Surgery [23.33984309289549]
高解像度画像の検出とセグメンテーションのためのリアルタイムロボットシステムの訓練は、限られた計算資源で難しい問題となる。
重み付きエンコーダとタスク認識検出とセグメンテーションデコーダを備えた,エンドツーエンドのトレーニング可能なリアルタイムマルチタスク学習モデルを開発した。
我々のモデルは最先端のセグメンテーションモデルや検出モデルよりも優れており、最も優れたモデルもその課題である。
論文 参考訳(メタデータ) (2020-03-10T14:24:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。