単一光子LiDARを使用した光子効率の高いイメージングでは、ピクセルあたりわずか数個の検出信号光子によってシーンの3D構造をキャプチャします。ただし、光子効率の高いイメージングのための既存の計算方法は、制限されたシナリオで事前に調整されているか、シミュレートされたデータセットでトレーニングされています。信号対バックグラウンド比(SBR)およびその他のハードウェア固有のプロパティが元のタスクのプロパティと異なる現実的なシナリオに適用すると、モデルのパフォーマンスが大幅に低下することがよくあります。このレターでは、ラベルのない実世界のデータを活用してリソースを大幅に節約することで、このドメインシフトの問題を軽減するためのドメイン敵対的適応設計を紹介します。この方法は、現実的なアプリケーションの計算イメージングアルゴリズムを実装する際に、グラウンドトゥルース深度情報の不足を回避する効率的なアプローチを提供する、自社製のアップコンバージョン単一光子イメージングシステムを使用したシミュレーションおよび実世界の実験で優れたパフォーマンスを示します。
Photon-efficient imaging with the single-photon LiDAR captures the 3D structure of a scene by only a few detected signal photons per pixel. However, the existing computational methods for photon-efficient imaging are pre-tuned on a restricted scenario or trained on simulated datasets. When applied to realistic scenarios whose signal-to-background ratios (SBR) and other hardware-specific properties differ from those of the original task, the model performance often significantly deteriorates. In this Letter, we present a domain adversarial adaptation design to alleviate this domain shift problem by exploiting unlabeled real-world data, with significant resource savings. This method demonstrates superior performance on simulated and real-world experiments using our home-built up-conversion single-photon imaging system, which provides an efficient approach to bypass the lack of ground-truth depth information in implementing computational imaging algorithms for realistic applications.