arXiv reaDer
マルチモダリティ PET-CT セグメンテーションのためのハイパーコネクト変圧器ネットワーク
Hyper-Connected Transformer Network for Multi-Modality PET-CT Segmentation
[18F]-フルオロデオキシグルコース (FDG) 陽電子放射断層撮影法 - コンピューター断層撮影法 (PET-CT) は、多くのがんの診断に最適な画像診断手段となっています。補完的な PET-CT イメージング機能を共同学習することは、自動腫瘍セグメンテーションおよびコンピュータ支援がん診断システムの開発にとって基本的な要件です。本研究では、マルチモダリティ PET-CT 画像用にトランス ネットワーク (TN) とハイパー コネクテッド フュージョンを統合したハイパーコネクテッド トランス (HCT) ネットワークを提案します。 TN は、画像特徴学習におけるグローバルな依存関係を提供する機能で活用されました。これは、画像全体のコンテキスト情報をキャプチャするセルフ アテンション メカニズムを備えた画像パッチ埋め込みを使用することによって実現されました。画像特徴を個別に抽出するために、TN の単一モダリティ定義を複数の TN ベースの分岐で拡張しました。また、複数のトランスフォーマー間でコンテキストに応じた補完的な画像特徴を反復的に融合するハイパー コネクテッド フュージョンも導入しました。 2 つの臨床データセットを使用した結果は、HCT が既存の方法と比較してセグメンテーションの精度において優れたパフォーマンスを達成したことを示しています。
[18F]-Fluorodeoxyglucose (FDG) positron emission tomography - computed tomography (PET-CT) has become the imaging modality of choice for diagnosing many cancers. Co-learning complementary PET-CT imaging features is a fundamental requirement for automatic tumor segmentation and for developing computer aided cancer diagnosis systems. In this study, we propose a hyper-connected transformer (HCT) network that integrates a transformer network (TN) with a hyper connected fusion for multi-modality PET-CT images. The TN was leveraged for its ability to provide global dependencies in image feature learning, which was achieved by using image patch embeddings with a self-attention mechanism to capture image-wide contextual information. We extended the single-modality definition of TN with multiple TN based branches to separately extract image features. We also introduced a hyper connected fusion to fuse the contextual and complementary image features across multiple transformers in an iterative manner. Our results with two clinical datasets show that HCT achieved better performance in segmentation accuracy when compared to the existing methods.
updated: Mon Aug 07 2023 10:33:34 GMT+0000 (UTC)
published: Fri Oct 28 2022 00:03:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト