arXiv reaDer
フーリエ畳み込みネットワークを使用したプログラム可能な3Dスナップショット顕微鏡
Programmable 3D snapshot microscopy with Fourier convolutional networks
3Dスナップショット顕微鏡は、単一の2Dカメラ画像で3Dボリュームをキャプチャすることにより、カメラが許可するのと同じ速さでボリュームイメージングを可能にし、幼虫のゼブラフィッシュの高速神経活動の全脳イメージングなど、さまざまな生物学的アプリケーションを発見しました。可能な限り多くの3D情報を保存するためのこの光学3Dから2Dへのエンコーディングの最適な顕微鏡設計は、一般的に不明であり、サンプルに依存します。高度にプログラム可能な光学素子は、顕微鏡パラメータのサンプル固有の計算最適化の新しい可能性を生み出します。たとえば、特に深層学習を使用して、特定のサンプル構造の光の収集を調整します。これには、プログラム可能な顕微鏡とニューラルネットワークを介した光伝搬の微分可能なシミュレーションが含まれ、顕微鏡画像からボリュームを再構築します。 3Dスナップショット画像にエンコードされたグローバルに混合された情報を効率的に統合できるグローバルカーネルフーリエ畳み込みニューラルネットワークのクラスを紹介します。インシリコで、提案されたグローバルフーリエ畳み込みネットワークが、従来のネットワークが失敗した場合に、広い視野のボリューム再構成と顕微鏡パラメータの最適化に成功することを示します。
3D snapshot microscopy enables volumetric imaging as fast as a camera allows by capturing a 3D volume in a single 2D camera image, and has found a variety of biological applications such as whole brain imaging of fast neural activity in larval zebrafish. The optimal microscope design for this optical 3D-to-2D encoding to preserve as much 3D information as possible is generally unknown and sample-dependent. Highly-programmable optical elements create new possibilities for sample-specific computational optimization of microscope parameters, e.g. tuning the collection of light for a given sample structure, especially using deep learning. This involves a differentiable simulation of light propagation through the programmable microscope and a neural network to reconstruct volumes from the microscope image. We introduce a class of global kernel Fourier convolutional neural networks which can efficiently integrate the globally mixed information encoded in a 3D snapshot image. We show in silico that our proposed global Fourier convolutional networks succeed in large field-of-view volume reconstruction and microscope parameter optimization where traditional networks fail.
updated: Wed Apr 21 2021 16:09:56 GMT+0000 (UTC)
published: Wed Apr 21 2021 16:09:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト