論文の概要: Continuous-Time Spatiotemporal Calibration of a Rolling Shutter
Camera---IMU System
- arxiv url: http://arxiv.org/abs/2108.07200v1
- Date: Mon, 16 Aug 2021 16:09:22 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-17 14:47:51.537452
- Title: Continuous-Time Spatiotemporal Calibration of a Rolling Shutter
Camera---IMU System
- Title(参考訳): 転がりシャッターカメラの連続時間時空間校正--IMUシステム
- Authors: Jianzhu Huai, Yuan Zhuang, Qicheng Yuan, Yukai Lin
- Abstract要約: シャッター(RS)機構は、スマートフォンや自動運転車に不可欠な、コンシューマグレードのカメラで広く使用されている。
この研究は、カメラ-IMUシステムを例に挙げ、その時間的キャリブレーションにおけるRS効果を考察する。
- 参考スコア(独自算出の注目度): 8.201100713224003
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: The rolling shutter (RS) mechanism is widely used by consumer-grade cameras,
which are essential parts in smartphones and autonomous vehicles. The RS effect
leads to image distortion upon relative motion between a camera and the scene.
This effect needs to be considered in video stabilization, structure from
motion, and vision-aided odometry, for which recent studies have improved
earlier global shutter (GS) methods by accounting for the RS effect. However,
it is still unclear how the RS affects spatiotemporal calibration of the camera
in a sensor assembly, which is crucial to good performance in aforementioned
applications.
This work takes the camera-IMU system as an example and looks into the RS
effect on its spatiotemporal calibration. To this end, we develop a calibration
method for a RS-camera-IMU system with continuous-time B-splines by using a
calibration target. Unlike in calibrating GS cameras, every observation of a
landmark on the target has a unique camera pose fitted by continuous-time
B-splines. With simulated data generated from four sets of public calibration
data, we show that RS can noticeably affect the extrinsic parameters, causing
errors about 1$^\circ$ in orientation and 2 $cm$ in translation with a RS
setting as in common smartphone cameras. With real data collected by two
industrial camera-IMU systems, we find that considering the RS effect gives
more accurate and consistent spatiotemporal calibration. Moreover, our method
also accurately calibrates the inter-line delay of the RS. The code for
simulation and calibration is publicly available.
- Abstract(参考訳): ローリングシャッター(RS)機構は、スマートフォンや自動運転車に不可欠な、コンシューマグレードのカメラで広く利用されている。
RS効果は、カメラとシーンの間の相対的な動きに画像の歪みをもたらす。
この効果はビデオの安定化、運動による構造、視覚支援オドメトリにおいて考慮され、rs効果を考慮し、最近の研究により初期のグローバルシャッター(gs)法が改善されている。
しかし、rsがセンサアセンブリにおけるカメラの時空間的キャリブレーションにどのように影響するかはまだ不明であり、上述のアプリケーションでの性能向上に不可欠である。
この研究は、カメラ-IMUシステムを例に挙げ、時空間キャリブレーションにおけるRS効果を考察する。
この目的を達成するために,キャリブレーションターゲットを用いて,連続時間Bスプラインを有するRSカメラIMUシステムのキャリブレーション手法を開発した。
gsカメラのキャリブレーションとは異なり、ターゲットのランドマークの全ての観察は、連続的なbスプラインが取り付けられたユニークなカメラのポーズを持つ。
4セットの公衆キャリブレーションデータから生成されたシミュレーションデータから,rsは外部パラメータに顕著に影響を与え,スマートフォンカメラのように約1$^\circ$,約2$cm$の誤差を生じさせることが示された。
2つの産業用カメラ-IMUシステムによって収集された実データにより、RS効果を考慮すると、より正確で一貫した時空間キャリブレーションが得られることがわかった。
さらに,本手法は,RSのライン間遅延を正確に校正する。
シミュレーションと校正のコードは公開されている。
関連論文リスト
- EF-Calib: Spatiotemporal Calibration of Event- and Frame-Based Cameras Using Continuous-Time Trajectories [10.338905475270746]
イベントカメラはフレームベースのカメラと融合する見込みがある。
本稿では,固有カメラとフレームベースカメラを併用したステレオビジョンシステムの校正フレームワークEF-Calibを提案する。
論文 参考訳(メタデータ) (2024-05-27T15:40:24Z) - E-Calib: A Fast, Robust and Accurate Calibration Toolbox for Event Cameras [18.54225086007182]
E-Calibは、イベントカメラの新しい、高速で、堅牢で、正確なキャリブレーションツールボックスである。
提案手法は,様々なイベントカメラモデルに対する様々な厳密な実験で検証される。
論文 参考訳(メタデータ) (2023-06-15T12:16:38Z) - Rolling Shutter Inversion: Bring Rolling Shutter Images to High
Framerate Global Shutter Video [111.08121952640766]
本稿では,RS時相超解問題に対する新しいディープラーニングに基づく解法を提案する。
RSイメージングプロセスの多視点幾何関係を利用して,高フレームレートGS生成を実現する。
提案手法は,高精細で高品質なGS画像系列を生成でき,最先端の手法よりも優れている。
論文 参考訳(メタデータ) (2022-10-06T16:47:12Z) - Learning Adaptive Warping for Real-World Rolling Shutter Correction [52.45689075940234]
本稿では,実世界のローリングシャッター(RS)補正データセットであるBS-RSCと,歪みビデオ中のRSフレームを補正するための対応するモデルを提案する。
ビデオキャプチャ用のCMOSベースのセンサを備えたコンシューマ市場のモバイルデバイスは、ビデオ取得プロセス中に相対的な動きが発生した場合、ローリングシャッター効果をもたらすことが多い。
論文 参考訳(メタデータ) (2022-04-29T05:13:50Z) - Bringing Rolling Shutter Images Alive with Dual Reversed Distortion [75.78003680510193]
ローリングシャッター(RS)歪みは、時間とともにインスタントグローバルシャッター(GS)フレームから一列のピクセルを選択した結果であると解釈することができる。
我々は、RS時間における速度場の反復学習を通して、デュアル光流列を生成するための新しいエンド・ツー・エンドモデルIFEDを開発した。
論文 参考訳(メタデータ) (2022-03-12T14:57:49Z) - How to Calibrate Your Event Camera [58.80418612800161]
画像再構成を用いた汎用イベントカメラキャリブレーションフレームワークを提案する。
ニューラルネットワークに基づく画像再構成は,イベントカメラの内在的・外在的キャリブレーションに適していることを示す。
論文 参考訳(メタデータ) (2021-05-26T07:06:58Z) - CoMo: A novel co-moving 3D camera system [0.0]
CoMoは2台の同期高速カメラと回転ステージを組み合わせた共同移動カメラシステムである。
本稿では,システム"ホーム"構成において,カメラの位置とヨー,ピッチ,ロールの3つの角度を測定する外部パラメータのキャリブレーションについて述べる。
本研究では,3次元実験において,再現および測定した3次元距離を1%の相対誤差で比較することにより,システムのロバスト性と精度を評価する。
論文 参考訳(メタデータ) (2021-01-26T13:29:13Z) - Infrastructure-based Multi-Camera Calibration using Radial Projections [117.22654577367246]
パターンベースのキャリブレーション技術は、カメラの内在を個別にキャリブレーションするために使用することができる。
Infrastucture-based calibration techniqueはSLAMやStructure-from-Motionで事前に構築した3Dマップを用いて外部情報を推定することができる。
本稿では,インフラストラクチャベースのアプローチを用いて,マルチカメラシステムをスクラッチから完全にキャリブレーションすることを提案する。
論文 参考訳(メタデータ) (2020-07-30T09:21:04Z) - Learning Camera Miscalibration Detection [83.38916296044394]
本稿では,視覚センサ,特にRGBカメラの誤校正検出を学習するためのデータ駆動型アプローチに焦点を当てた。
コントリビューションには、RGBカメラの誤校正基準と、この基準に基づく新しい半合成データセット生成パイプラインが含まれる。
深層畳み込みニューラルネットワークをトレーニングすることにより、カメラ固有のパラメータの再校正が必要か否かを判断するパイプラインの有効性を実証する。
論文 参考訳(メタデータ) (2020-05-24T10:32:49Z) - Superaccurate Camera Calibration via Inverse Rendering [0.19336815376402716]
逆レンダリングの原理を用いたカメラキャリブレーションの新しい手法を提案する。
検出された特徴点のみに頼らず、内部パラメータの推定と校正対象のポーズを用いて光学的特徴の非フォトリアリスティックな等価性を暗黙的に描画する。
論文 参考訳(メタデータ) (2020-03-20T10:26:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。