複雑な環境を探している生き物が興味のある獲物を簡単に見ることができるように、複雑なシーンで興味のあるオブジェクトのイメージングを実行する光学システムを紹介しました。ディープラーニングネットワークを利用して、関心のあるオブジェクトの視覚的特徴を学習し、対応する「イメージングマトリックス」を設計しました。さらに、学習したマトリックスは、単一ピクセルカメラで圧縮イメージングを完了するための測定マトリックスとして機能し、最終的に圧縮画像データを使用できます。以前の深層学習ネットワークを使用して、シーンの残りのオブジェクトと背景を使用せずに、関心のあるオブジェクトのみを画像化します。私たちの結果は、関心のあるオブジェクトが単一の機能または豊富な詳細であるかどうかに関係なく、干渉を正常にフィルターで除去でき、このアイデアをパフォーマンスを効果的に向上させるいくつかの一般的なアプリケーションに適用できることを示しています。このバイオインスパイアード光学システムは、生き物の目として機能し、関心に基づくオブジェクトイメージング、オブジェクト検出、オブジェクト認識、オブジェクトトラッキングなどで成功を収めることができます。
We presented an optical system to perform imaging interested objects in complex scenes, like the creature easy see the interested prey in the hunt for complex environments. It utilized Deep-learning network to learn the interested objects's vision features and designed the corresponding "imaging matrices", furthermore the learned matrixes act as the measurement matrix to complete compressive imaging with a single-pixel camera, finally we can using the compressed image data to only image the interested objects without the rest objects and backgrounds of the scenes with the previous Deep-learning network. Our results demonstrate that no matter interested object is single feature or rich details, the interference can be successfully filtered out and this idea can be applied in some common applications that effectively improve the performance. This bio-inspired optical system can act as the creature eye to achieve success on interested-based object imaging, object detection, object recognition and object tracking, etc.