クォーターサンプリングは、ピクセル数を増やすことなく、より高解像度の画像を取得できる新しいセンサー設計です。ビデオデータに使用する場合、4ピクセルのうち1ピクセルが各フレームで測定されます。事実上、これは不規則な時空間サブサンプリングにつながります。純粋に空間的または時間的なサブサンプリングと比較して、エイリアシングアーティファクトを減らすことができるため、これにより再構成の品質を向上させることができます。固定マスクを使用したこのようなセンサーデータの高速再構成のために、周波数選択的再構成(FSR)の再帰的バリアントが提案されました。ここでは、前のフレームで測定されたピクセルが現在のフレームに投影され、その再構築がサポートされます。そうすることで、フレーム間の動きはテンプレートマッチングを使用して計算されます。一部の動きベクトルは誤っている可能性があるため、適切な整合性チェックを実行することが重要です。この論文では、より高速な整合性チェック方法と、文献とは異なる投影ピクセルを使用し、動的マスクを処理できる新しい再帰FSRを提案します。全体として、固定マスクを使用した最先端の再帰的再構成方法と比較して、再構成の品質を+1.01dB大幅に向上させることができます。単一フレームの再構成と比較して、ダイナミックマスクでは約+1.52dBの平均ゲインが達成されます。同時に、整合性チェックの計算の複雑さは、文献のアルゴリズムと比較して13分の1に削減されます。
Quarter sampling is a novel sensor design that allows for an acquisition of higher resolution images without increasing the number of pixels. When being used for video data, one out of four pixels is measured in each frame. Effectively, this leads to a non-regular spatio-temporal sub-sampling. Compared to purely spatial or temporal sub-sampling, this allows for an increased reconstruction quality, as aliasing artifacts can be reduced. For the fast reconstruction of such sensor data with a fixed mask, recursive variant of frequency selective reconstruction (FSR) was proposed. Here, pixels measured in previous frames are projected into the current frame to support its reconstruction. In doing so, the motion between the frames is computed using template matching. Since some of the motion vectors may be erroneous, it is important to perform a proper consistency checking. In this paper, we propose faster consistency checking methods as well as a novel recursive FSR that uses the projected pixels different than in literature and can handle dynamic masks. Altogether, we are able to significantly increase the reconstruction quality by + 1.01 dB compared to the state-of-the-art recursive reconstruction method using a fixed mask. Compared to a single frame reconstruction, an average gain of about + 1.52 dB is achieved for dynamic masks. At the same time, the computational complexity of the consistency checks is reduced by a factor of 13 compared to the literature algorithm.