ホモグラフィは、特殊線形群および埋め込みリー代数構造と本質的な関係を持っています。リー代数表現は洗練されていますが、ニューラル ネットワークにおけるホモグラフィと代数表現の関係を確立した研究者はほとんどいません。この論文では、SL(3) グループとグループ畳み込みを使用した sl(3) 代数によるホモグラフィを効果的に学習して表現するために、Warped Convolution Networks (WCN) を提案します。この目的のために、SL(3) グループ内の 6 つの可換サブグループが構成され、ホモグラフィを形成します。サブグループごとに、リー代数構造をホモグラフィの対応するパラメーターに橋渡しするワーピング関数が提案されています。歪んだ畳み込みを利用することで、ホモグラフィ学習はいくつかの単純な疑似翻訳回帰に定式化されます。リー トポロジに沿って歩くことにより、提案された WCN は、ホモグラフィに対して不変な特徴を学習できます。さらに、他の一般的な CNN ベースの方法に簡単にプラグインできます。 POT ベンチマーク、S-COCO-Proj、および MNIST-Proj データセットに関する広範な実験は、提案された方法が平面オブジェクト追跡、ホモグラフィ推定、および分類に有効であることを示しています。
Homography has an essential relationship with the special linear group and the embedding Lie algebra structure. Although the Lie algebra representation is elegant, few researchers have established the connection between homography and algebra expression in neural networks. In this paper, we propose Warped Convolution Networks (WCN) to effectively learn and represent the homography by SL(3) group and sl(3) algebra with group convolution. To this end, six commutative subgroups within the SL(3) group are composed to form a homography. For each subgroup, a warping function is proposed to bridge the Lie algebra structure to its corresponding parameters in homography. By taking advantage of the warped convolution, homography learning is formulated into several simple pseudo-translation regressions. By walking along the Lie topology, our proposed WCN is able to learn the features that are invariant to homography. Moreover, it can be easily plugged into other popular CNN-based methods. Extensive experiments on the POT benchmark, S-COCO-Proj, and MNIST-Proj dataset show that our proposed method is effective for planar object tracking, homography estimation, and classification.