arXiv reaDer
ViT-V-Net:教師なし体積医療画像レジストレーション用のビジョントランスフォーマー
ViT-V-Net: Vision Transformer for Unsupervised Volumetric Medical Image Registration
過去10年間で、畳み込みニューラルネットワーク(ConvNets)は、さまざまな医用画像アプリケーションで最先端のパフォーマンスを支配し、達成してきました。ただし、ConvNetのパフォーマンスは、画像内の長距離空間関係の理解が不足しているため、依然として制限されています。最近提案された画像分類用のVisionTransformer(ViT)は、純粋に自己注意に基づくモデルを使用して、画像の関連部分に焦点を合わせるために長距離の空間関係を学習します。それにもかかわらず、ViTは連続的なダウンサンプリングのために低解像度の機能を強調し、詳細なローカリゼーション情報が不足し、画像レジストレーションには不適切になります。最近、いくつかのViTベースの画像セグメンテーション方法がConvNetsと組み合わされて、詳細なローカリゼーション情報の回復が改善されました。それらに触発されて、ViTとConvNetを橋渡しして体積医療画像レジストレーションを提供するViT-V-Netを紹介します。ここに提示された実験結果は、提案されたアーキテクチャがいくつかの最高性能の登録方法よりも優れた性能を達成することを示しています。
In the last decade, convolutional neural networks (ConvNets) have dominated and achieved state-of-the-art performances in a variety of medical imaging applications. However, the performances of ConvNets are still limited by lacking the understanding of long-range spatial relations in an image. The recently proposed Vision Transformer (ViT) for image classification uses a purely self-attention-based model that learns long-range spatial relations to focus on the relevant parts of an image. Nevertheless, ViT emphasizes the low-resolution features because of the consecutive downsamplings, result in a lack of detailed localization information, making it unsuitable for image registration. Recently, several ViT-based image segmentation methods have been combined with ConvNets to improve the recovery of detailed localization information. Inspired by them, we present ViT-V-Net, which bridges ViT and ConvNet to provide volumetric medical image registration. The experimental results presented here demonstrate that the proposed architecture achieves superior performance to several top-performing registration methods.
updated: Tue Apr 13 2021 19:18:19 GMT+0000 (UTC)
published: Tue Apr 13 2021 19:18:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト