蛍光寿命イメージング顕微鏡(FLIM)システムは、処理速度が遅く、信号対雑音比(SNR)が低く、ハードウェアのセットアップが高価で困難なため、制限があります。この作業では、ノイズ除去畳み込みネットワークを適用してFLIMSNRを改善する方法を示します。このネットワークは、アナログ信号処理に基づく高速データ収集、高効率パルス変調を使用した高SNR、および既製の無線周波数コンポーネントを利用した費用効果の高い実装を備えたインスタントFLIMシステムと統合されます。当社のインスタントFLIMシステムは、invivoおよびexvivoで強度、寿命、およびフェーザプロットを同時に提供します。トレーニングされた深層学習モデルを使用して画像のノイズ除去をFLIMデータに統合することにより、正確なFLIMフェーザ測定値が得られます。次に、強化されたフェーザは、K-meansクラスタリングセグメンテーション法を通過します。これは、さまざまなフルオロフォアを正確に分離するための、偏りのない教師なし機械学習手法です。私たちの実験的なinvivoマウス腎臓の結果は、セグメンテーションの前に深層学習画像のノイズ除去モデルを導入すると、既存の方法と比較してフェーザーのノイズが効果的に除去され、より明確なセグメントが提供されることを示しています。したがって、提案された深層学習ベースのワークフローは、インスタントFLIMを使用して蛍光画像の高速で正確な自動セグメンテーションを提供します。 FLIM測定にノイズが多い場合、ノイズ除去操作はセグメンテーションに効果的です。クラスタリングは、生物医学画像アプリケーションで関心のある生物学的構造の検出を効果的に強化することができます。
Fluorescence lifetime imaging microscopy (FLIM) systems are limited by their slow processing speed, low signal-to-noise ratio (SNR), and expensive and challenging hardware setups. In this work, we demonstrate applying a denoising convolutional network to improve FLIM SNR. The network will be integrated with an instant FLIM system with fast data acquisition based on analog signal processing, high SNR using high-efficiency pulse-modulation, and cost-effective implementation utilizing off-the-shelf radio-frequency components. Our instant FLIM system simultaneously provides the intensity, lifetime, and phasor plots in vivo and ex vivo. By integrating image denoising using the trained deep learning model on the FLIM data, provide accurate FLIM phasor measurements are obtained. The enhanced phasor is then passed through the K-means clustering segmentation method, an unbiased and unsupervised machine learning technique to separate different fluorophores accurately. Our experimental in vivo mouse kidney results indicate that introducing the deep learning image denoising model before the segmentation effectively removes the noise in the phasor compared to existing methods and provides clearer segments. Hence, the proposed deep learning-based workflow provides fast and accurate automatic segmentation of fluorescence images using instant FLIM. The denoising operation is effective for the segmentation if the FLIM measurements are noisy. The clustering can effectively enhance the detection of biological structures of interest in biomedical imaging applications.