曲線構造は、顕微鏡イメージングで関心のあるオブジェクトとして頻繁に表示されます。結晶学的欠陥、すなわち転位は、透過型電子顕微鏡(TEM)の下で繰り返し調査されてきた曲線構造の1つであり、それらの3D構造情報は材料の特性を理解するために非常に重要です。転位の3D情報は、異なる傾斜角と同様のイメージング条件で多くの画像を取得する必要があるため、面倒なプロセスである断層撮影によって取得されることがよくあります。代替立体鏡検査法では、必要な画像の数が2つに減りますが、正確な3D推定を行うには、人間の介入と形状の事前設定が必要です。 3D形状を事前に想定せずに、深い畳み込みニューラルネットワーク(CNN)を利用することにより、ステレオペアの曲線構造の検出とマッチングの両方を行う完全に自動化されたパイプラインを提案します。この作業では、主にTEM画像のステレオペアからの転位の3D再構成に焦点を当てます。
Curvilinear structures frequently appear in microscopy imaging as the object of interest. Crystallographic defects, i.edislocations, are one of the curvilinear structures that have been repeatedly investigated under transmission electronmicroscopy (TEM) and their 3D structural information is of great importance for understanding the properties ofmaterials. 3D information of dislocations is often obtained by tomography which is a cumbersome process since itis required to acquire many images with different tilt angles and similar imaging conditions. Although, alternativestereoscopy methods lower the number of required images to two, they still require human intervention and shape priorsfor accurate 3D estimation. We propose a fully automated pipeline for both detection and matching of curvilinearstructures in stereo pairs by utilizing deep convolutional neural networks (CNNs) without making any prior assumptionon 3D shapes. In this work, we mainly focus on 3D reconstruction of dislocations from stereo pairs of TEM images.