arXiv reaDer
2段階のディープリマッピングによる高速見通し外イメージング
Fast Non-line-of-sight Imaging with Two-step Deep Remapping
従来のイメージングでは、オブジェクトから検出器に直接送信された光子のみが記録されますが、見通し外(NLOS)イメージングでは間接光が考慮されます。ほとんどのNLOSソリューションは、一時的なスキャンプロセスを採用し、その後に物理ベースのアルゴリズムを使用してNLOSシーンを再構築します。ただし、過渡検出には、スキャン時間が長く、周囲環境に対するロバスト性が低い高度な装置が必要であり、再構成アルゴリズムは通常、時間と計算コストがかかります。ここでは、上記の欠陥に対処するための新しいNLOSソリューションを提案し、機器とアルゴリズムの両方を革新します。検出には安価な市販のLidarを適用し、スキャン速度を大幅に向上させ、実際のイメージングとの互換性を高めています。私たちの再構築フレームワークはディープラーニングベースであり、高い再構築の忠実度を保証するための生成的な2段階の再マッピング戦略を備えています。全体的な検出および再構成プロセスでは、ミリ秒レベルの再構成精度でミリ秒の応答が可能です。提案されたソリューションを合成オブジェクトと実際のオブジェクトの両方で実験的にテストし、さらに、フルカラーNLOSイメージングに適用できる方法を示しました。
Conventional imaging only records photons directly sent from the object to the detector, while non-line-of-sight (NLOS) imaging takes the indirect light into account. Most NLOS solutions employ a transient scanning process, followed by a physical based algorithm to reconstruct the NLOS scenes. However, the transient detection requires sophisticated apparatus, with long scanning time and low robustness to ambient environment, and the reconstruction algorithms are typically time-consuming and computationally expensive. Here we propose a new NLOS solution to address the above defects, with innovations on both equipment and algorithm. We apply inexpensive commercial Lidar for detection, with much higher scanning speed and better compatibility to real-world imaging. Our reconstruction framework is deep learning based, with a generative two-step remapping strategy to guarantee high reconstruction fidelity. The overall detection and reconstruction process allows for millisecond responses, with reconstruction precision of millimeter level. We have experimentally tested the proposed solution on both synthetic and real objects, and further demonstrated our method to be applicable to full-color NLOS imaging.
updated: Fri Mar 26 2021 01:23:18 GMT+0000 (UTC)
published: Tue Jan 26 2021 00:08:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト