マルチモダリティ画像の登録は、医療画像解析で最も下線が引かれたプロセスの1つです。最近、畳み込みニューラルネットワーク(CNN)は、変形可能な登録で重要な可能性を示しています。ただし、ボクセル単位のグランドトゥルースがないため、正確な登録のためのCNNのトレーニングが困難になります。この作業では、画像変数のKL発散に基づくクロスモダリティ類似性メトリックを提案し、CNNを使用して効率的な推定方法を実装します。 KLDivNetと呼ばれるこの推定ネットワークは、教師なしでトレーニングできます。その後、KLDivNetを登録ネットワークに埋め込み、マルチモダリティ画像の教師なし変形可能登録を実現します。 AAL Brain、LiTS Liver、Hospital Liverの3つのデータセットを、検証のためのモダリティ内およびインターモダリティの画像登録タスクとともに使用しました。結果は、類似性メトリックが効果的であり、提案された登録ネットワークは、最新の方法と比較して優れたパフォーマンスを提供することを示しました。
Multi-modality image registration is one of the most underlined processes in medical image analysis. Recently, convolutional neural networks (CNNs) have shown significant potential in deformable registration. However, the lack of voxel-wise ground truth challenges the training of CNNs for an accurate registration. In this work, we propose a cross-modality similarity metric, based on the KL-divergence of image variables, and implement an efficient estimation method using a CNN. This estimation network, referred to as KLDivNet, can be trained unsupervisedly. We then embed the KLDivNet into a registration network to achieve the unsupervised deformable registration for multi-modality images. We employed three datasets, i.e., AAL Brain, LiTS Liver and Hospital Liver, with both the intra- and inter-modality image registration tasks for validation. Results showed that our similarity metric was effective, and the proposed registration network delivered superior performance compared to the state-of-the-art methods.