多様体モデルは、自然画像パッチが高次元状態空間に埋め込まれた低次元多様体上にあると見なし、各パッチとその類似パッチはほぼ線形アフィン部分空間上にあると見なします。多様体モデルは、自然画像のよく知られた特性である半局所的類似性と密接に関連しており、ほとんどの自然画像パッチの場合、その空間的近傍にいくつかの類似したパッチがあります。単一画像補間への多くのアプローチは、多様なモデルを使用して、2つの相互に排他的な部分によるセミローカル類似性を活用します:i)各ターゲットパッチの類似パッチを検索し、ii)検索された類似パッチ、ターゲットパッチ、および測定された入力ピクセルを操作して、ターゲットパッチ。残念ながら、入力画像のエイリアシングは、両方の部分にとって困難になります。これらの課題を明示的に扱っている作品はごくわずかであり、アドホックなソリューションのみが提案されています。最初の部分の課題を克服するために、従来の手法からは削除できない、深刻なエイリアシング領域のエイリアシングを削除するために慎重に設計された適応手法を提案します。この手法により、強力なエイリアシングが存在する場合でも、類似したパッチを確実に識別できます。第2部の課題を克服するために、エイリアシングが除去された画像を使用して補間画像の初期化をガイドし、多様体モデルに基づいて補間画像を改良するプログレッシブスキームを開発することを提案します。実験結果は、私たちのアプローチが輪郭に沿った滑らかさとプロファイル全体のシャープネスの両方でエッジを再構築し、既存のモデルベースのアプローチよりも大幅に高い平均ピーク信号対雑音比(PSNR)を達成することを示しています。
Manifold models consider natural-image patches to be on a low-dimensional manifold embedded in a high dimensional state space and each patch and its similar patches to approximately lie on a linear affine subspace. Manifold models are closely related to semi-local similarity, a well-known property of natural images, referring to that for most natural-image patches, several similar patches can be found in its spatial neighborhood. Many approaches to single image interpolation use manifold models to exploit semi-local similarity by two mutually exclusive parts: i) searching each target patch's similar patches and ii) operating on the searched similar patches, the target patch and the measured input pixels to estimate the target patch. Unfortunately, aliasing in the input image makes it challenging for both parts. A very few works explicitly deal with those challenges and only ad-hoc solutions are proposed. To overcome the challenge in the first part, we propose a carefully-designed adaptive technique to remove aliasing in severely aliased regions, which cannot be removed from traditional techniques. This technique enables reliable identification of similar patches even in the presence of strong aliasing. To overcome the challenge in the second part, we propose to use the aliasing-removed image to guide the initialization of the interpolated image and develop a progressive scheme to refine the interpolated image based on manifold models. Experimental results demonstrate that our approach reconstructs edges with both smoothness along contours and sharpness across profiles, and achieves an average Peak Signal-to-Noise Ratio (PSNR) significantly higher than existing model-based approaches.