arXiv reaDer
CuNeRF: ゼロショット医用画像の任意スケールの超解像のためのキューブベースの神経放射場
CuNeRF: Cube-Based Neural Radiance Field for Zero-Shot Medical Image Arbitrary-Scale Super Resolution
医用画像の任意スケールの超解像 (MIASSR) は、単一のモデルを介して任意のスケールで医療ボリュームをスーパーサンプリングすることを目的として、最近広く注目を集めています。ただし、既存の MIASSR メソッドには、(i) 高解像度 (HR) ボリュームへの依存と、(ii) さまざまなシナリオでの適用を制限する制限された一般化能力という 2 つの大きな制限があります。これらの制限を克服するために、連続ドメイン内の任意のスケールと視点で医用画像を生成できるゼロショット MIASSR フレームワークであるキューブベースのニューラル ラディアンス フィールド (CuNeRF) を提案します。低解像度 (LR) ボリュームと HR ボリュームの間のマッピングに適合する既存の MIASSR メソッドとは異なり、CuNeRF は、HR 参照を必要とせずに LR ボリュームから座標強度の連続表現を構築することに重点を置いています。これは、キューブベースのサンプリング、等方性ボリュームレンダリング、キューブベースの階層レンダリングなど、提案された微分可能モジュールによって実現されます。磁気リソース イメージング (MRI) およびコンピューター断層撮影 (CT) モダリティに関する広範な実験を通じて、CuNeRF が最先端の MIASSR メソッドよりも優れていることを実証します。 CuNeRF は、より優れた視覚的再現性をもたらし、さまざまなアップサンプリング係数でエイリアシング アーティファクトを低減します。さらに、CuNeRF は LR-HR トレーニング ペアを必要とせず、他のものよりも柔軟で使いやすいです。私たちのコードはまもなく公開されます。
Medical image arbitrary-scale super-resolution (MIASSR) has recently gained widespread attention, aiming to super sample medical volumes at arbitrary scales via a single model. However, existing MIASSR methods face two major limitations: (i) reliance on high-resolution (HR) volumes and (ii) limited generalization ability, which restricts their application in various scenarios. To overcome these limitations, we propose Cube-based Neural Radiance Field (CuNeRF), a zero-shot MIASSR framework that can yield medical images at arbitrary scales and viewpoints in a continuous domain. Unlike existing MIASSR methods that fit the mapping between low-resolution (LR) and HR volumes, CuNeRF focuses on building a coordinate-intensity continuous representation from LR volumes without the need for HR references. This is achieved by the proposed differentiable modules: including cube-based sampling, isotropic volume rendering, and cube-based hierarchical rendering. Through extensive experiments on magnetic resource imaging (MRI) and computed tomography (CT) modalities, we demonstrate that CuNeRF outperforms state-of-the-art MIASSR methods. CuNeRF yields better visual verisimilitude and reduces aliasing artifacts at various upsampling factors. Moreover, our CuNeRF does not need any LR-HR training pairs, which is more flexible and easier to be used than others. Our code will be publicly available soon.
updated: Sat Sep 16 2023 22:35:19 GMT+0000 (UTC)
published: Tue Mar 28 2023 18:36:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト