論文の概要: PST: Plant segmentation transformer for 3D point clouds of rapeseed
plants at the podding stage
- arxiv url: http://arxiv.org/abs/2206.13082v3
- Date: Sat, 20 Jan 2024 01:23:32 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-24 00:28:22.684716
- Title: PST: Plant segmentation transformer for 3D point clouds of rapeseed
plants at the podding stage
- Title(参考訳): pst: 植込み段階におけるナマメの3次元点雲の植物分節変圧器
- Authors: Ruiming Du, Zhihong Ma, Pengyao Xie, Yong He, Haiyan Cen
- Abstract要約: 深層学習ネットワークプラントセグメンテーショントランス (PST)
PSTは、(i)動的ボクセル特徴エンコーダ(DVFE)と、(ii)デュアルウインドウが注意ブロックを設定してコンテキスト情報をキャプチャし、(iii)濃密な特徴伝搬モジュールで最後の密集点特徴マップを得る。
結果: PST と PST-PointGroup (PG) はセマンティックおよびインスタンスセグメンテーションタスクにおいて優れた性能を示した。
- 参考スコア(独自算出の注目度): 5.010317705589445
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Segmentation of plant point clouds to obtain high-precise morphological
traits is essential for plant phenotyping. Although the fast development of
deep learning has boosted much research on segmentation of plant point clouds,
previous studies mainly focus on the hard voxelization-based or
down-sampling-based methods, which are limited to segmenting simple plant
organs. Segmentation of complex plant point clouds with a high spatial
resolution still remains challenging. In this study, we proposed a deep
learning network plant segmentation transformer (PST) to achieve the semantic
and instance segmentation of rapeseed plants point clouds acquired by handheld
laser scanning (HLS) with the high spatial resolution, which can characterize
the tiny siliques as the main traits targeted. PST is composed of: (i) a
dynamic voxel feature encoder (DVFE) to aggregate the point features with the
raw spatial resolution; (ii) the dual window sets attention blocks to capture
the contextual information; and (iii) a dense feature propagation module to
obtain the final dense point feature map. The results proved that PST and
PST-PointGroup (PG) achieved superior performance in semantic and instance
segmentation tasks. For the semantic segmentation, the mean IoU, mean
Precision, mean Recall, mean F1-score, and overall accuracy of PST were 93.96%,
97.29%, 96.52%, 96.88%, and 97.07%, achieving an improvement of 7.62%, 3.28%,
4.8%, 4.25%, and 3.88% compared to the second-best state-of-the-art network
PAConv. For instance segmentation, PST-PG reached 89.51%, 89.85%, 88.83% and
82.53% in mCov, mWCov, mPerc90, and mRec90, achieving an improvement of 2.93%,
2.21%, 1.99%, and 5.9% compared to the original PG. This study proves that the
deep-learning-based point cloud segmentation method has a great potential for
resolving dense plant point clouds with complex morphological traits.
- Abstract(参考訳): 植物表現には, 高精度な形態特性を得るための植物点雲の分別が不可欠である。
ディープラーニングの急速な発展により、植物点雲のセグメンテーションの研究が盛んに進んでいるが、これまでの研究では、単純な植物器官のセグメンテーションに限定されたハードボクセル化またはダウンサンプリングベースの手法に重点が置かれていた。
複雑な植物点雲の空間分解能の高いセグメンテーションは依然として困難である。
本研究では,高空間分解能のハンドヘルドレーザスキャン(HLS)により得られたラピス植物点群群を,目的とする主形質として特徴付けることができる,深層学習ネットワーク植物区分変換器(PST)を提案する。
PSTは以下の通りである。
(i)動ボクセル特徴エンコーダ(dvfe)であって、点特徴を生の空間分解能で集約したもの
(ii)デュアルウィンドウは、コンテキスト情報をキャプチャするために注意ブロックを設定します。
(iii)最終密点特徴写像を得るための密特徴伝播モジュール。
その結果, PST と PST-PointGroup (PG) はセマンティックおよびインスタンスセグメンテーションタスクにおいて優れた性能を示した。
意味セグメンテーションでは、平均iou、平均リコール、平均f1-score、pstの全体的な精度は93.96%、97.29%、976.52%、96.88%、97.07%で、7.62%、3.28%、4.8%、4.25%、および3.88%改善した。
例えば、PST-PGは89.51%、89.85%、88.83%、mCov、mWCov、mPerc90、mRec90で82.53%に達し、2.93%、2.21%、.99%、および5.9%の改善を達成した。
本研究は,深層学習に基づくポイントクラウド分割法が,複雑な形態的特徴を持つ密接なプラントポイント雲を解消する大きな可能性を持っていることを証明している。
関連論文リスト
- Parameter-Efficient Fine-Tuning in Spectral Domain for Point Cloud Learning [49.91297276176978]
私たちは小説を提案します。
ポイントGST (Point GST) と呼ばれる点雲の効率的な微細調整法。
ポイントGSTは事前トレーニングされたモデルを凍結し、スペクトル領域のパラメータを微調整するためのトレーニング可能なポイントクラウドスペクトルアダプタ(PCSA)を導入する。
挑戦的なポイントクラウドデータセットに関する大規模な実験は、ポイントGSTが完全に微調整されたデータセットを上回るだけでなく、トレーニング可能なパラメータを大幅に削減することを示した。
論文 参考訳(メタデータ) (2024-10-10T17:00:04Z) - Point Cloud Pre-training with Diffusion Models [62.12279263217138]
我々は、ポイントクラウド拡散事前学習(PointDif)と呼ばれる新しい事前学習手法を提案する。
PointDifは、分類、セグメンテーション、検出など、さまざまな下流タスクのために、さまざまな現実世界のデータセット間で大幅に改善されている。
論文 参考訳(メタデータ) (2023-11-25T08:10:05Z) - PointHPS: Cascaded 3D Human Pose and Shape Estimation from Point Clouds [99.60575439926963]
本稿では,実環境で捉えた点雲から正確な3次元HPSを実現するための基本的フレームワークであるPointHPSを提案する。
PointHPSは、カスケードアーキテクチャを通じてポイント機能を反復的に洗練する。
広範囲な実験により、ポイントHPSは強力な特徴抽出と処理方式を持ち、State-of-the-Art法より優れていることが示された。
論文 参考訳(メタデータ) (2023-08-28T11:10:14Z) - Clustering based Point Cloud Representation Learning for 3D Analysis [80.88995099442374]
本稿では,ポイントクラウド分析のためのクラスタリングに基づく教師付き学習手法を提案する。
現在のデファクトでシーンワイドなトレーニングパラダイムとは異なり、我々のアルゴリズムは点埋め込み空間上でクラス内のクラスタリングを行う。
我々のアルゴリズムは、有名なポイントクラウドセグメンテーションデータセットの顕著な改善を示している。
論文 参考訳(メタデータ) (2023-07-27T03:42:12Z) - Benchmarking Deep Learning Architectures for Urban Vegetation Point Cloud Semantic Segmentation from MLS [0.5999777817331315]
植物は持続可能で回復力のある都市にとって、生態系のサービスや人間の幸福のために不可欠である。
近年、ポイントクラウドセマンティックセグメンテーションのためのディープラーニングが大きな進歩を見せている。
植生分類のセマンティックセグメンテーションのためのポイントベース深層学習モデルの評価を行う。
論文 参考訳(メタデータ) (2023-06-17T06:38:42Z) - PlantDet: A benchmark for Plant Detection in the Three-Rivers-Source
Region [4.676030127116814]
三波源領域(PTRS)における植物検出のためのデータセットを構築する。
21種類の高解像度画像を2160*3840ピクセルで6965枚、様々なセンサーやプラットフォームで撮影し、形状や大きさの異なる物体を特徴とする。
PTRSは、密接な隠蔽、葉の分解能の変化、植物間の特徴的類似性などの課題を提示する。
論文 参考訳(メタデータ) (2023-04-11T04:18:56Z) - Spatial Layout Consistency for 3D Semantic Segmentation [0.7614628596146599]
本稿では,ALTMの点雲のボクセルに基づくセマンティックセマンティックセグメンテーションを実現するための,新しいディープ畳み込みニューラルネットワーク(DCNN)手法を提案する。
提案する深層学習手法であるセマンティック・ユーティリティ・ネットワーク(SUNet)は多次元・多次元ネットワークである。
実験により,SuNetの空間的レイアウトの整合性とマルチレゾリューション機能アグリゲーションにより,性能が大幅に向上することを示した。
論文 参考訳(メタデータ) (2023-03-02T03:24:21Z) - Eff-3DPSeg: 3D organ-level plant shoot segmentation using
annotation-efficient point clouds [1.5882586857953638]
本稿では,3次元植物撮影セグメンテーションのための弱教師付きフレームワーク Eff-3DPSeg を提案する。
大豆の高分解能点雲を低コストのフォトグラムシステムを用いて再構成した。
植物器官セグメンテーションのための弱教師付き深層学習法が提案された。
論文 参考訳(メタデータ) (2022-12-20T14:09:37Z) - A Deep Learning Approach Based on Graphs to Detect Plantation Lines [16.76043873454695]
本稿では,UAVを用いたRGB画像における植林線検出のためのグラフに基づく深層学習手法を提案する。
提案手法は最先端のディープラーニング手法と比較した。
精度、リコール、F1スコアはそれぞれ98.7%、91.9%、95.1%だった。
論文 参考訳(メタデータ) (2021-02-05T14:56:42Z) - Point Transformer [122.2917213154675]
セルフアテンションネットワークを3Dポイントクラウド処理に適用することを検討する。
ポイントクラウドのセルフアテンションレイヤを設計し、セマンティックシーンセグメンテーションなどのタスクのためのセルフアテンションネットワークの構築に使用します。
ポイントトランスフォーマーの設計は、ドメインやタスク間の事前作業を改善する。
論文 参考訳(メタデータ) (2020-12-16T18:58:56Z) - PointGroup: Dual-Set Point Grouping for 3D Instance Segmentation [111.7241018610573]
私たちは、インスタンスセグメンテーションのための新しいエンドツーエンドボトムアップアーキテクチャであるPointGroupを紹介します。
我々は2分岐ネットワークを設計し、ポイントの特徴を抽出し、セマンティックラベルとオフセットを予測し、各ポイントをそれぞれのインスタンスセントロイドに向けてシフトさせる。
クラスタリングコンポーネントは、元のおよびオフセットシフトされた点座標セットの両方を利用するために、その相補的な強度を利用する。
ScanNet v2 と S3DIS の2つの挑戦的データセットに対する広範な実験を行い、ScanNet v2 と S3DIS が最も高い性能を達成し、63.6% と 64.0% の2つを以前のベストが達成した54.9% と54.4% と比較した。
論文 参考訳(メタデータ) (2020-04-03T16:26:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。