arXiv reaDer
Semi- and Self-Supervised Multi-View Fusion of 3D Microscopy Images using Generative Adversarial Networks
蛍光顕微鏡の最近の開発により、生きているモデル生物の高解像度3D画像を経時的にキャプチャすることができます。大きな標本でも画像化できるようにするために、マルチビューライトシート画像化などの手法では、各時点で異なる方向を記録し、それを単一の高品質ボリュームに融合することができます。測定された点像分布関数(PSF)に基づいて、デコンボリューションとコンテンツフュージョンは、イメージングプロセス中に発生する避けられない劣化を大幅に元に戻すことができます。従来のマルチビューデコンボリューションおよびフュージョンメソッドは、主に反復手順とコンテンツベースの平均化を使用します。最近、畳み込みニューラルネットワーク(CNN)が3Dシングルビューデコンボリューション顕微鏡にアプローチするために展開されましたが、マルチビューのケースは研究されるのを待っています。 CNNベースのマルチビューデコンボリューションと、発生中の胚を模倣し、2つまたは4つの補完的な3Dビューを含む2つの合成データセットとの融合の有効性を調査しました。古典的な最先端の方法と比較して、提案された半教師ありモデルと自己教師ありモデルは、それぞれ2ビューと4ビューの場合に競争力のある優れたデコンボリューションと融合品質を実現します。
Recent developments in fluorescence microscopy allow capturing high-resolution 3D images over time for living model organisms. To be able to image even large specimens, techniques like multi-view light-sheet imaging record different orientations at each time point that can then be fused into a single high-quality volume. Based on measured point spread functions (PSF), deconvolution and content fusion are able to largely revert the inevitable degradation occurring during the imaging process. Classical multi-view deconvolution and fusion methods mainly use iterative procedures and content-based averaging. Lately, Convolutional Neural Networks (CNNs) have been deployed to approach 3D single-view deconvolution microscopy, but the multi-view case waits to be studied. We investigated the efficacy of CNN-based multi-view deconvolution and fusion with two synthetic data sets that mimic developing embryos and involve either two or four complementary 3D views. Compared with classical state-of-the-art methods, the proposed semi- and self-supervised models achieve competitive and superior deconvolution and fusion quality in the two-view and quad-view cases, respectively.
updated: Thu Aug 05 2021 17:21:01 GMT+0000 (UTC)
published: Thu Aug 05 2021 17:21:01 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト