コーンビームコンピュータ断層撮影法(CBCT)は診断に役立つことが証明されていますが、より少ない放射線量でスキャン時間を短縮する方法と3D画像を効率的に再構成する方法が臨床診療の主要な問題として残っています。スパースビュー測定での断層画像再構成の最近の開発では、教師ありの方法でディープニューラルネットワークを使用してこのような問題に取り組んでいますが、モデルトレーニングを成功させるには、特定のペアの測定/画像の量と質が必要です。データをトレーニングせずにCBCT逆ソルバーに適合させるための新しいトレーニングされていないトランスフォーマーを提案します。これは主に、数十億のネットワーク重みを持つトレーニングされていない3Dトランスフォーマーと、重みが可変のマルチレベル損失関数で構成されています。従来のディープニューラルネットワーク(DNN)とは異なり、私たちのアプローチではトレーニング手順の要件はありません。 Transformerの最適化の難しさを観察すると、損失関数内の可変重みは、反復プロセスとともに自動的に更新されるように設計されており、最終的には最適化が安定します。提案されたアプローチを、SPAREとWalnutの2つの公開されているデータセットで評価します。結果は、視覚化におけるストリークアーティファクトの削減により、画質メトリックのパフォーマンスが大幅に向上することを示しています。また、診断の観点から再構成された画像を評価するために、経験豊富な放射線科医による臨床レポートを提供します。ソースコードと最適化されたモデルは、現時点で対応する作成者からリクエストに応じて入手できます。
Cone-Beam Computed Tomography (CBCT) has been proven useful in diagnosis, but how to shorten scanning time with lower radiation dosage and how to efficiently reconstruct 3D image remain as the main issues for clinical practice. The recent development of tomographic image reconstruction on sparse-view measurements employs deep neural networks in a supervised way to tackle such issues, whereas the success of model training requires quantity and quality of the given paired measurements/images. We propose a novel untrained Transformer to fit the CBCT inverse solver without training data. It is mainly comprised of an untrained 3D Transformer of billions of network weights and a multi-level loss function with variable weights. Unlike conventional deep neural networks (DNNs), there is no requirement of training steps in our approach. Upon observing the hardship of optimising Transformer, the variable weights within the loss function are designed to automatically update together with the iteration process, ultimately stabilising its optimisation. We evaluate the proposed approach on two publicly available datasets: SPARE and Walnut. The results show a significant performance improvement on image quality metrics with streak artefact reduction in the visualisation. We also provide a clinical report by an experienced radiologist to assess our reconstructed images in a diagnosis point of view. The source code and the optimised models are available from the corresponding author on request at the moment.