低品質の細胞画像のセグメンテーションのための自動前処理とアンサンブル学習を提案します。強い光で細胞を捕捉することは困難です。したがって、細胞の顕微鏡画像は画質が低い傾向がありますが、これらの画像はセマンティックセグメンテーションには適していません。ここでは、入力画像を深層学習で認識しやすい画像に変換する方法を提案します。提案された方法は、2つの深いニューラルネットワークで構成されています。最初のネットワークは、セマンティックセグメンテーションの通常のトレーニングであり、最初のネットワークの最後から2番目の特徴マップは、入力画像を各クラスを強調する画像に変換するためのフィルターとして使用されます。これは自動前処理であり、翻訳された細胞画像は簡単に分類されます。低品質の入力セル画像は、最初のネットワークの特徴マップによって変換され、変換された画像は、セマンティックセグメンテーションのために2番目のネットワークに送られます。 2番目のネットワークの出力は複数のセグメンテーション結果であるため、これらのセグメンテーション画像の加重アンサンブルを実行します。 2つのネットワークはエンドツーエンドの方法でトレーニングされており、翻訳のために高品質の画像を準備する必要はありません。提案手法では、低品質の細胞画像をセグメンテーションしやすい画像に変換できることを確認し、加重アンサンブル学習によりセグメンテーション精度が向上しました。
We propose an automatic preprocessing and ensemble learning for segmentation of cell images with low quality. It is difficult to capture cells with strong light. Therefore, the microscopic images of cells tend to have low image quality but these images are not good for semantic segmentation. Here we propose a method to translate an input image to the images that are easy to recognize by deep learning. The proposed method consists of two deep neural networks. The first network is the usual training for semantic segmentation, and penultimate feature maps of the first network are used as filters to translate an input image to the images that emphasize each class. This is the automatic preprocessing and translated cell images are easily classified. The input cell image with low quality is translated by the feature maps in the first network, and the translated images are fed into the second network for semantic segmentation. Since the outputs of the second network are multiple segmentation results, we conduct the weighted ensemble of those segmentation images. Two networks are trained by end-to-end manner, and we do not need to prepare images with high quality for the translation. We confirmed that our proposed method can translate cell images with low quality to the images that are easy to segment, and segmentation accuracy has improved using the weighted ensemble learning.