arXiv reaDer
ほぼ周期的なパターンの連続陰的表現の学習
Learning Continuous Implicit Representation for Near-Periodic Patterns
準周期パターン (NPP) は、人工的なシーンに広く見られ、照明、欠陥、またはデザイン要素によって外観が異なるタイル状のモチーフで構成されています。適切な NPP 表現は、画像の完成、セグメンテーション、幾何学的な再マッピングなど、多くのアプリケーションに役立ちます。しかし、NPP を表現することは、ローカルなバリエーション (外観の違い) を維持しながら、グローバルな一貫性 (タイル化されたモチーフのレイアウト) を維持する必要があるため、困難です。大規模なデータセットまたは単一画像の最適化を使用して一般的なシーンでトレーニングされた方法は、これらの制約を満たすのに苦労しますが、周期性を明示的にモデル化する方法は、周期性検出エラーに対して堅牢ではありません。これらの課題に対処するために、単一画像の最適化を伴う座標ベースの MLP を使用してニューラルの暗黙的な表現を学習します。グローバルな一貫性とローカルな変動の両方を処理するために、入力フィーチャ ワーピング モジュールと周期性に基づくパッチ損失を設計します。堅牢性をさらに向上させるために、周期性提案モジュールを導入して、パイプラインで複数の候補周期性を検索して使用します。単一および多平面のシーンで、建物のファサード、フリーズ、壁紙、地面、およびモンドリアン パターンの 500 を超える画像で、この方法の有効性を実証します。
Near-Periodic Patterns (NPP) are ubiquitous in man-made scenes and are composed of tiled motifs with appearance differences caused by lighting, defects, or design elements. A good NPP representation is useful for many applications including image completion, segmentation, and geometric remapping. But representing NPP is challenging because it needs to maintain global consistency (tiled motifs layout) while preserving local variations (appearance differences). Methods trained on general scenes using a large dataset or single-image optimization struggle to satisfy these constraints, while methods that explicitly model periodicity are not robust to periodicity detection errors. To address these challenges, we learn a neural implicit representation using a coordinate-based MLP with single image optimization. We design an input feature warping module and a periodicity-guided patch loss to handle both global consistency and local variations. To further improve the robustness, we introduce a periodicity proposal module to search and use multiple candidate periodicities in our pipeline. We demonstrate the effectiveness of our method on more than 500 images of building facades, friezes, wallpapers, ground, and Mondrian patterns on single and multi-planar scenes.
updated: Thu Aug 25 2022 18:01:04 GMT+0000 (UTC)
published: Thu Aug 25 2022 18:01:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト