変圧器は最近、医用画像アプリケーションに有望であることが示されており、医用画像登録用のこのようなモデルの開発への関心が高まっています。レジストレーションの設計における最近の進歩 トランスフォーマーは、クロスアテンション (CA) を使用して、移動イメージと固定イメージの間の空間的対応をより正確に理解できるようにすることに重点を置いてきました。ここでは、変形可能なウィンドウを使用してウィンドウ化された注意を計算する新しい CA メカニズムを提案します。固定および拡張された検索ウィンドウを使用して CA をグローバルまたはローカルに計算することによって集中的な計算の複雑さを必要とする既存の CA メカニズムとは対照的に、提案された変形可能な CA は、低い計算の複雑さを維持しながら、大きな検索ウィンドウでさまざまな機能のセットを選択的にサンプリングできます。提案されたモデルは、マルチモーダル、モノモーダル、およびアトラスから患者への登録タスクで広く評価され、最先端の方法に対して有望なパフォーマンスを示し、医用画像登録の有効性を示しています。この作品のソースコードは公開後に公開されます。
Transformers have recently shown promise for medical image applications, leading to an increasing interest in developing such models for medical image registration. Recent advancements in designing registration Transformers have focused on using cross-attention (CA) to enable a more precise understanding of spatial correspondences between moving and fixed images. Here, we propose a novel CA mechanism that computes windowed attention using deformable windows. In contrast to existing CA mechanisms that require intensive computational complexity by either computing CA globally or locally with a fixed and expanded search window, the proposed deformable CA can selectively sample a diverse set of features over a large search window while maintaining low computational complexity. The proposed model was extensively evaluated on multi-modal, mono-modal, and atlas-to-patient registration tasks, demonstrating promising performance against state-of-the-art methods and indicating its effectiveness for medical image registration. The source code for this work will be available after publication.