arXiv reaDer
時間から秒まで:微分可能な顕微鏡を介した100倍高速な定量的位相イメージングに向けて
From Hours to Seconds: Towards 100x Faster Quantitative Phase Imaging via Differentiable Microscopy
メタボロミクスから組織病理学に至るまでのアプリケーションで、定量的位相顕微鏡(QPM)は強力なラベルフリーのイメージングモダリティです。高速多重化イメージングセンサーと深層学習ベースの逆ソルバーの大幅な進歩にもかかわらず、QPMのスループットは現在、電子ハードウェアの速度によって制限されています。補足として、スループットをさらに向上させるために、ここでは、既存の電子ハードウェアのボトルネックを超えてより多くの情報を転送できるように、圧縮された形式で画像を取得することを提案します。この目的のために、コンテンツ固有の機能を学習する学習可能な光学圧縮-解凍フレームワークを紹介します。提案された微分可能な光電子定量的位相顕微鏡法(\partialμ)は、最初に画像圧縮機として学習可能な光学的特徴抽出器を使用します。これらのネットワークによって生成された強度表現は、画像センサーによってキャプチャされます。最後に、電子ハードウェア上で実行されている再構成ネットワークがQPMイメージを解凍します。提案されたシステムは、SSIMを約0.90、PSNRを約30 dBに維持しながら、64倍の圧縮を実現します。私たちの実験によって実証された有望な結果は、前例のないスループットの向上を提供するエンドツーエンドの最適化された(つまり、光学および電子)コンパクトQPMシステムを実現するための新しい道を開きます。
With applications ranging from metabolomics to histopathology, quantitative phase microscopy (QPM) is a powerful label-free imaging modality. Despite significant advances in fast multiplexed imaging sensors and deep-learning-based inverse solvers, the throughput of QPM is currently limited by the speed of electronic hardware. Complementarily, to improve throughput further, here we propose to acquire images in a compressed form such that more information can be transferred beyond the existing electronic hardware bottleneck. To this end, we present a learnable optical compression-decompression framework that learns content-specific features. The proposed differentiable optical-electronic quantitative phase microscopy (\partial μ) first uses learnable optical feature extractors as image compressors. The intensity representation produced by these networks is then captured by the imaging sensor. Finally, a reconstruction network running on electronic hardware decompresses the QPM images. The proposed system achieves compression of × 64 while maintaining the SSIM of ∼0.90 and PSNR of ∼30 dB. The promising results demonstrated by our experiments open up a new pathway for achieving end-to-end optimized (i.e., optics and electronic) compact QPM systems that provide unprecedented throughput improvements.
updated: Mon May 23 2022 17:59:58 GMT+0000 (UTC)
published: Mon May 23 2022 17:59:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト