論文の概要: Multimodal Signal Processing For Thermo-Visible-Lidar Fusion In Real-time 3D Semantic Mapping
- arxiv url: http://arxiv.org/abs/2601.09578v1
- Date: Wed, 14 Jan 2026 15:46:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-15 18:59:20.457001
- Title: Multimodal Signal Processing For Thermo-Visible-Lidar Fusion In Real-time 3D Semantic Mapping
- Title(参考訳): リアルタイム3次元セマンティックマッピングにおける熱可視・ライダー融合のためのマルチモーダル信号処理
- Authors: Jiajun Sun, Yangyi Ou, Haoyuan Zheng, Chao yang, Yue Ma,
- Abstract要約: 本稿では,熱情報を用いた3次元点雲マップを意味的に拡張する新しい手法を提案する。
このシステムは、この融合した画像ストリーム上にリアルタイムのLiDAR点雲を投影する。
次に、熱チャネル内の熱源の特徴を分割して、温度目標を即座に識別し、この温度情報を最終3Dマップのセマンティック層として適用する。
- 参考スコア(独自算出の注目度): 8.401699100150866
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In complex environments, autonomous robot navigation and environmental perception pose higher requirements for SLAM technology. This paper presents a novel method for semantically enhancing 3D point cloud maps with thermal information. By first performing pixel-level fusion of visible and infrared images, the system projects real-time LiDAR point clouds onto this fused image stream. It then segments heat source features in the thermal channel to instantly identify high temperature targets and applies this temperature information as a semantic layer on the final 3D map. This approach generates maps that not only have accurate geometry but also possess a critical semantic understanding of the environment, making it highly valuable for specific applications like rapid disaster assessment and industrial preventive maintenance.
- Abstract(参考訳): 複雑な環境では、自律型ロボットナビゲーションと環境認識がSLAM技術により高い要求をもたらす。
本稿では,熱情報を用いた3次元点雲マップを意味的に拡張する新しい手法を提案する。
可視光と赤外線の画像をピクセルレベルで融合させることで、この融合した画像ストリーム上にリアルタイムのLiDAR点雲を投影する。
次に、熱チャネル内の熱源の特徴を分割して、温度目標を即座に識別し、この温度情報を最終3Dマップのセマンティック層として適用する。
このアプローチは、正確な地形を持つだけでなく、環境に対する重要な意味的理解をももった地図を生成し、迅速な災害評価や産業の予防管理といった特定の応用に非常に有用である。
関連論文リスト
- Fast 3D Surrogate Modeling for Data Center Thermal Management [15.644716872105002]
従来の熱CFDソルバは計算コストが高く、熟練したメッシュと境界条件を必要とする。
我々は,データセンタの3次元ボキセル化表現を直接操作する視覚ベースの代理モデリングフレームワークを開発した。
以上の結果から,サロゲートモデルはデータセンター構成全体にわたって一般化し,最大2万倍の高速化を実現していることがわかった。
論文 参考訳(メタデータ) (2025-11-13T02:12:24Z) - ThermalDiffusion: Visual-to-Thermal Image-to-Image Translation for Autonomous Navigation [6.524847658755803]
本稿では,合成熱データを用いたマルチモーダルデータセットの拡張手法を提案し,熱カメラの広範かつ迅速な適応を実現する。
本研究では、実世界の物体の熱特性を学習するために、自己アテンションを用いて既存のRGB画像を熱画像に変換するための条件拡散モデルの利用について検討する。
論文 参考訳(メタデータ) (2025-06-26T03:18:22Z) - ThermoStereoRT: Thermal Stereo Matching in Real Time via Knowledge Distillation and Attention-based Refinement [9.923805440410739]
本研究では,リアルタイムなサーマルステレオマッチング手法であるThermoStereoRTを紹介する。
2つの補正された熱ステレオ画像から相違を回復する。
夜間ドローン監視や下層クリーニングロボットなどの応用を想定する。
論文 参考訳(メタデータ) (2025-04-10T03:24:21Z) - Thermal3D-GS: Physics-induced 3D Gaussians for Thermal Infrared Novel-view Synthesis [11.793425521298488]
本稿では,熱3D-GSという物理誘導型3次元ガウススプラッティング法を提案する。
The first large-scale benchmark dataset for this field called Thermal Infrared Novel-view Synthesis dataset (TI-NSD)。
その結果,本手法はPSNRの3.03dB改善によりベースライン法よりも優れていた。
論文 参考訳(メタデータ) (2024-09-12T13:46:53Z) - SeMLaPS: Real-time Semantic Mapping with Latent Prior Networks and
Quasi-Planar Segmentation [53.83313235792596]
本稿では,RGB-Dシーケンスからのリアルタイム意味マッピングのための新しい手法を提案する。
2DニューラルネットワークとSLAMシステムに基づく3Dネットワークと3D占有マッピングを組み合わせる。
本システムは,2D-3Dネットワークベースシステムにおいて,最先端のセマンティックマッピング品質を実現する。
論文 参考訳(メタデータ) (2023-06-28T22:36:44Z) - Spatiotemporally Consistent HDR Indoor Lighting Estimation [66.26786775252592]
本研究では,屋内照明推定問題を解決するための物理動機付きディープラーニングフレームワークを提案する。
深度マップを用いた1枚のLDR画像から,任意の画像位置における空間的に一貫した照明を予測できる。
我々のフレームワークは、最先端の単一画像やビデオベースの手法と比較して、高画質で光リアリスティック照明予測を実現する。
論文 参考訳(メタデータ) (2023-05-07T20:36:29Z) - DETR4D: Direct Multi-View 3D Object Detection with Sparse Attention [50.11672196146829]
サラウンドビュー画像を用いた3次元物体検出は、自動運転にとって必須の課題である。
マルチビュー画像における3次元オブジェクト検出のためのスパースアテンションと直接特徴クエリを探索するトランスフォーマーベースのフレームワークであるDETR4Dを提案する。
論文 参考訳(メタデータ) (2022-12-15T14:18:47Z) - Does Thermal Really Always Matter for RGB-T Salient Object Detection? [153.17156598262656]
本稿では,RGB-T有意物体検出(SOD)タスクを解決するために,TNetというネットワークを提案する。
本稿では,画像のグローバル照度を推定するためのグローバル照度推定モジュールを提案する。
一方, 2段階の局所化と相補化モジュールを導入し, 熱的特徴の物体位置化キューと内部整合キューをRGBモダリティに転送する。
論文 参考訳(メタデータ) (2022-10-09T13:50:12Z) - Real-Time Multi-Modal Semantic Fusion on Unmanned Aerial Vehicles [28.504921333436837]
実時間意味推論と複数センサの融合のためのUAVシステムを提案する。
LiDARスキャンとRGBイメージのセマンティックセグメンテーション、およびRGBおよび熱画像のオブジェクト検出は、UAVコンピュータ上でオンラインで実行される。
都市環境における実環境実験における統合システムの評価を行った。
論文 参考訳(メタデータ) (2021-08-14T20:16:08Z) - Exploring Thermal Images for Object Detection in Underexposure Regions
for Autonomous Driving [67.69430435482127]
アンダーエクスポージャー地域は、安全な自動運転のための周囲の完全な認識を構築するのに不可欠である。
サーマルカメラが利用可能になったことで、他の光学センサーが解釈可能な信号を捉えていない地域を探索するための重要な代替手段となった。
本研究は,可視光画像から熱画像へ学習を伝達するためのスタイル伝達手法を用いたドメイン適応フレームワークを提案する。
論文 参考訳(メタデータ) (2020-06-01T09:59:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。