迷惑な変換に対する不変性を実現することは、堅牢で信頼性の高いビジョンシステムを構築する上での基本的な課題です。不変性への既存のアプローチは、変換のファミリーの次元に応じて指数関数的にスケーリングし、ポーズや視点の変化などの視覚データの自然な変動に対処できなくなります。これらのアプローチの一般的な制限を特定し(変換の高次元空間をトラバースするためにサンプリングに依存します)、最適化に基づいて不変ネットワークを構築するための新しい計算プリミティブを提案します。これにより、多くのシナリオで、より効率的な方法が提供されます。サンプリングよりも高次元の探索に。提案した方法の効率の向上と健全性の経験的および理論的な裏付けを提供し、展開された最適化と組み合わせた場合の単純な階層型オブジェクト検出タスクの効率的な不変ネットワークの構築におけるその有用性を示します。ネットワークと実験のコードは、https://github.com/sdbuch/refineで入手できます。
Achieving invariance to nuisance transformations is a fundamental challenge in the construction of robust and reliable vision systems. Existing approaches to invariance scale exponentially with the dimension of the family of transformations, making them unable to cope with natural variabilities in visual data such as changes in pose and perspective. We identify a common limitation of these approaches--they rely on sampling to traverse the high-dimensional space of transformations--and propose a new computational primitive for building invariant networks based instead on optimization, which in many scenarios provides a provably more efficient method for high-dimensional exploration than sampling. We provide empirical and theoretical corroboration of the efficiency gains and soundness of our proposed method, and demonstrate its utility in constructing an efficient invariant network for a simple hierarchical object detection task when combined with unrolled optimization. Code for our networks and experiments is available at https://github.com/sdbuch/refine.