マルチモダリティ医用画像は、ターゲット(臓器、腫瘍、または組織)に関連する情報または補足的な情報を提供できます。マルチモダリティ画像を共通の空間に登録することで、これらの包括的な情報を融合し、臨床応用の利便性をもたらすことができます。最近、登録方法を後押しするためにニューラルネットワークが広く研究されています。ただし、ネットワークトレーニングの堅牢な基準がないため、マルチモダリティ登録ネットワークを開発することは依然として困難です。この作業では、マルチモダリティ画像間の登録を実行できるマルチモダリティ登録ネットワーク(MMRegNet)を提案します。一方、教師なし方法でMMRegNetをトレーニングするために、空間的にエンコードされた勾配情報を提示します。提案されたネットワークはMM-WHS2017で評価されました。結果は、MMRegNetが左心室の心臓登録タスクに対して有望なパフォーマンスを達成できることを示しています。一方、MMRegNetの多様性を実証するために、CHAOS 2019の肝臓データセットを使用してメソッドをさらに評価します。原稿が承認されると、ソースコードが公開されますhttps://github.com/NanYoMy/mmregnet。
Multi-modality medical images can provide relevant or complementary information for a target (organ, tumor or tissue). Registering multi-modality images to a common space can fuse these comprehensive information, and bring convenience for clinical application. Recently, neural networks have been widely investigated to boost registration methods. However, it is still challenging to develop a multi-modality registration network due to the lack of robust criteria for network training. In this work, we propose a multi-modality registration network (MMRegNet), which can perform registration between multi-modality images. Meanwhile, we present spatially encoded gradient information to train MMRegNet in an unsupervised manner. The proposed network was evaluated on MM-WHS 2017. Results show that MMRegNet can achieve promising performance for left ventricle cardiac registration tasks. Meanwhile, to demonstrate the versatility of MMRegNet, we further evaluate the method with a liver dataset from CHAOS 2019. Source code will be released publiclyhttps://github.com/NanYoMy/mmregnet once the manuscript is accepted.