arXiv reaDer
PLIN: A Network for Pseudo-LiDAR Point Cloud Interpolation
  LiDARセンサーは、低周波数(約10Hz)で信頼できる3D空間情報を提供でき、自動運転およびUAVの分野で広く適用されています。ただし、マルチセンサーシステムのLiDARと一致させるには、より高い周波数(約20Hz)のカメラを減らす必要があります。この論文では、LiDARセンサーの周波数を増加させるために、新しいPseudo-LiDAR補間ネットワーク(PLIN)を提案します。 PLINは、カメラの高周波数に合わせて、時間的および空間的に高品質のポイントクラウドシーケンスを生成できます。この目標を達成するために、連続した疎な深度マップと動きの関係によって導かれる粗い補間ステージを設計します。また、リアルなシーンに導かれた洗練された補間ステージを提案します。この粗から細へのカスケード構造を使用して、私たちの方法はマルチモーダル情報を徐々に知覚し、正確な中間点群を生成できます。私たちの知る限り、これはPseudo-LiDAR点群補間の最初の深いフレームワークであり、LiDARとカメラを搭載したナビゲーションシステムで魅力的なアプリケーションを示しています。実験結果は、PLINがKITTIデータセットで有望なパフォーマンスを達成し、従来の補間方法と最先端のビデオ補間技術を大幅に上回ることを示しています。
LiDAR sensors can provide dependable 3D spatial information at a low frequency (around 10Hz) and have been widely applied in the field of autonomous driving and UAV. However, the camera with a higher frequency (around 20Hz) has to be decreased so as to match with LiDAR in a multi-sensor system. In this paper, we propose a novel Pseudo-LiDAR interpolation network (PLIN) to increase the frequency of LiDAR sensors. PLIN can generate temporally and spatially high-quality point cloud sequences to match the high frequency of cameras. To achieve this goal, we design a coarse interpolation stage guided by consecutive sparse depth maps and motion relationship. We also propose a refined interpolation stage guided by the realistic scene. Using this coarse-to-fine cascade structure, our method can progressively perceive multi-modal information and generate accurate intermediate point clouds. To the best of our knowledge, this is the first deep framework for Pseudo-LiDAR point cloud interpolation, which shows appealing applications in navigation systems equipped with LiDAR and cameras. Experimental results demonstrate that PLIN achieves promising performance on the KITTI dataset, significantly outperforming the traditional interpolation method and the state-of-the-art video interpolation technique.
updated: Mon Sep 16 2019 11:50:04 GMT+0000 (UTC)
published: Mon Sep 16 2019 11:50:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト