arXiv reaDer
ディープラーニングとコンピュータグラフィックスに基づくシングルショットフリンジプロジェクションプロフィロメトリー
Single-shot fringe projection profilometry based on Deep Learning and Computer Graphics
近年、複数の研究が深層学習をフリンジプロジェクションプロフィロメトリー(FPP)に適用しています。ただし、トレーニングのために実際のシステムから大量のデータを取得することは依然として難しい問題であり、さらに、ネットワークの設計と最適化についても検討する価値があります。この論文では、必要なデータセットを便利かつ簡単に生成するために、仮想FPPシステムを構築するためのコンピューターグラフィックスを紹介します。最初に仮想FPPシステムを構築する方法を詳細に説明し、次に仮想FPPシステムを現実に非常に近づけるためのいくつかの重要な要素を分析します。 1つのフリンジ画像から深度画像を正確に推定することを目的として、復元された全体的で詳細な情報の品質を向上させる新しい損失関数も設計します。そして、2つの代表的なネットワークであるU-Netとpix2pixが複数の側面で比較されています。実際の実験は、仮想システムからのデータと設計された損失によってトレーニングされたネットワークの優れた精度と一般化を証明し、アプリケーションに対する私たちの方法の可能性を示唆しています。
Multiple works have applied deep learning to fringe projection profilometry (FPP) in recent years. However, to obtain a large amount of data from actual systems for training is still a tricky problem, and moreover, the network design and optimization still worth exploring. In this paper, we introduce computer graphics to build virtual FPP systems in order to generate the desired datasets conveniently and simply. The way of constructing a virtual FPP system is described in detail firstly, and then some key factors to set the virtual FPP system much close to the reality are analyzed. With the aim of accurately estimating the depth image from only one fringe image, we also design a new loss function to enhance the quality of the overall and detailed information restored. And two representative networks, U-Net and pix2pix, are compared in multiple aspects. The real experiments prove the good accuracy and generalization of the network trained by the data from our virtual systems and the designed loss, implying the potential of our method for applications.
updated: Mon Jan 04 2021 07:42:37 GMT+0000 (UTC)
published: Mon Jan 04 2021 07:42:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト