畳み込みニューラルネットワーク(CNN)を使用した画像の再構成は、過去10年間に精力的に研究されてきました。これまで、ニューラルネットワークを用いて散乱媒体を介して単一の物体を画像化するためのいくつかの技術が開発されてきましたが、複数の物体の画像を同時に再構成する方法は実現が難しいようです。この論文では、生成的敵対的ネットワーク(GAN)を使用して、散乱媒体を介して2つの隣接するオブジェクトの画像を再構成するアプローチを示します。散乱媒体の背後にある2つの隣接するオブジェクトをイメージングするためのイメージングシステムを構築します。一般に、2つの隣接するオブジェクト画像のライトフィールドが散乱スラブを通過すると、スペックルパターンが得られます。 YGANと呼ばれる設計された敵対的ネットワークは、画像を同時に再構成するために使用されます。訓練されたYGANに基づいて、1つのスペックルパターンから2つの隣接するオブジェクトの画像を忠実に再構成できることが示されています。さらに、オブジェクトの画像タイプの影響、および再構成された画像の忠実度に対する2つの隣接するオブジェクト間の距離を調査します。また、2つの物体の間に別の散乱媒体を挿入しても、スペックルから2つの物体の画像を高品質で再構成することもできます。この作業で提示された手法は、医用画像の分類、セグメンテーション、多目的散乱イメージングの研究など、医用画像分析の分野でのアプリケーションに使用できます。
Reconstruction of image by using convolutional neural networks (CNNs) has been vigorously studied in the last decade. Until now, there have being developed several techniques for imaging of a single object through scattering medium by using neural networks, however how to reconstruct images of more than one object simultaneously seems hard to realize. In this paper, we demonstrate an approach by using generative adversarial network (GAN) to reconstruct images of two adjacent objects through scattering media. We construct an imaging system for imaging of two adjacent objects behind the scattering media. In general, as the light field of two adjacent object images pass through the scattering slab, a speckle pattern is obtained. The designed adversarial network, which is called as YGAN, is employed to reconstruct the images simultaneously. It is shown that based on the trained YGAN, we can reconstruct images of two adjacent objects from one speckle pattern with high fidelity. In addition, we study the influence of the object image types, and the distance between the two adjacent objects on the fidelity of the reconstructed images. Moreover even if another scattering medium is inserted between the two objects, we can also reconstruct the images of two objects from a speckle with high quality. The technique presented in this work can be used for applications in areas of medical image analysis, such as medical image classification, segmentation, and studies of multi-object scattering imaging etc.