最新の高解像度イメージ センサーの場合、ピクセル ビニングは低照度条件で実行され、高いフレーム レートが必要な場合に使用されます。元の空間解像度を回復するために、単一画像の超解像技術をアップスケーリングに適用できます。アップスケーリング後により高い画質を実現するために、テトロミノ形状のピクセルを使用した新しいビニングの概念を提案します。これは圧縮センシングの分野に組み込まれ、コヒーレンスが計算されて、使用されるセンサー レイアウトが動機付けられます。次に、文献で初めてテトロミノ ピクセルを使用した再構成品質を調べます。他の場所で提案されているようにさまざまな種類のテトロミノを使用する代わりに、4つのT-テトロミノのみからなる小さな繰り返しセルを使用するだけで十分であることを示します。再構成には、ローカル完全接続再構成 (LFCR) ネットワークと、圧縮センシングの分野からの 2 つの古典的な再構成方法を使用します。 LFCR ネットワークを提案されたテトロミノ レイアウトと組み合わせて使用することで、PSNR、SSIM、および非常に深い超解像 (VDSR) ネットワークを使用した従来の単一画像の超解像と比較して視覚的に優れた画質を実現します。 PSNR の場合、最大 +1.92dB のゲインが達成されます。
For modern high-resolution imaging sensors, pixel binning is performed in low-lighting conditions and in case high frame rates are required. To recover the original spatial resolution, single-image super-resolution techniques can be applied for upscaling. To achieve a higher image quality after upscaling, we propose a novel binning concept using tetromino-shaped pixels. It is embedded into the field of compressed sensing and the coherence is calculated to motivate the sensor layouts used. Next, we investigate the reconstruction quality using tetromino pixels for the first time in literature. Instead of using different types of tetrominoes as proposed elsewhere, we show that using a small repeating cell consisting of only four T-tetrominoes is sufficient. For reconstruction, we use a locally fully connected reconstruction (LFCR) network as well as two classical reconstruction methods from the field of compressed sensing. Using the LFCR network in combination with the proposed tetromino layout, we achieve superior image quality in terms of PSNR, SSIM, and visually compared to conventional single-image super-resolution using the very deep super-resolution (VDSR) network. For PSNR, a gain of up to +1.92dB is achieved.