ニューラルネットワークと反復期待値最大化(EM)アルゴリズムを順次組み合わせた、コンピューター断層撮影イメージング分光法(CTIS)画像からのハイパースペクトルデータキューブ再構成へのシンプルでありながら新しいハイブリッドアプローチを紹介します。 CTISシミュレータによって生成されたシミュレートされたCTIS画像から、25および100スペクトルチャネルに対応する100×100×25および100×100×100ボクセルのデータキューブを再構築するメソッドの機能をトレーニングおよびテストします。ハイブリッドアプローチは、ノイズに関する畳み込みニューラルネットワーク(CNN)の固有の強みと、一貫した再構成を生成する能力を利用し、トレーニングなしで任意のオブジェクトのスペクトル画像に一般化するEMアルゴリズムの能力を利用します。ハイブリッドアプローチは、25チャネルと100チャネルの両方のケースで、表示された(CNNトレーニングに含まれる)キューブと表示されない(CNNトレーニングから除外された)キューブについて、CNNとEMの両方よりも優れたパフォーマンスを実現します。 25のスペクトルチャネルの場合、平均二乗誤差に関するCNNからハイブリッドモデル(CNN + EM)への改善は14〜26%です。 100個のスペクトルチャネルの場合、19〜40%の改善が達成され、トレーニング中にCNNが公開されていない見えないデータの場合は40%の最大の改善が見られます。
We present a simple but novel hybrid approach to hyperspectral data cube reconstruction from computed tomography imaging spectrometry (CTIS) images that sequentially combines neural networks and the iterative Expectation Maximization (EM) algorithm. We train and test the ability of the method to reconstruct data cubes of 100×100×25 and 100×100×100 voxels, corresponding to 25 and 100 spectral channels, from simulated CTIS images generated by our CTIS simulator. The hybrid approach utilizes the inherent strength of the Convolutional Neural Network (CNN) with regard to noise and its ability to yield consistent reconstructions and make use of the EM algorithm's ability to generalize to spectral images of any object without training. The hybrid approach achieves better performance than both the CNNs and EM alone for seen (included in CNN training) and unseen (excluded from CNN training) cubes for both the 25- and 100-channel cases. For the 25 spectral channels, the improvements from CNN to the hybrid model (CNN + EM) in terms of the mean-squared errors are between 14-26%. For 100 spectral channels, the improvements between 19-40% are attained with the largest improvement of 40% for the unseen data, to which the CNNs are not exposed during the training.