arXiv reaDer
クロスプロトコルネットワークトレーニングによるロバストな顔のランドマークローカリゼーションのための分離可能なバッチ正規化
Separable Batch Normalization for Robust Facial Landmark Localization with Cross-protocol Network Training
大きくて多様でバランスの取れたトレーニングデータは、ディープニューラルネットワークトレーニングの成功の鍵です。ただし、顔のランドマークのローカリゼーションで使用される既存の公開されているデータセットは、通常、他のコンピュータービジョンタスクのデータセットよりもはるかに小さくなります。多様でバランスの取れたトレーニングサンプルがない小さなデータセットでは、深いネットワークのトレーニングを効果的にサポートできません。上記の問題に対処するために、このペーパーでは、堅牢な顔のランドマークのローカリゼーションのためのクロスプロトコルネットワークトレーニング(CNT)戦略を備えた新しい分離可能バッチ正規化(SepBN)モジュールを紹介します。すべてのトレーニングデータを使用して単一のパラメーターセットを計算する標準のBNレイヤーとは異なり、SepBNは、トレーニングデータセットのサンプルが異なるサブドメインに属している可能性があると見なします。したがって、提案されたSepBNモジュールは、それぞれが特定のサブドメインに対応する複数のパラメータのセットを使用する。ただし、テストサンプルのサブドメインが不明であるため、推論段階で適切なブランチを選択することは依然として困難な作業です。この問題を軽減するために、効果的なスタイルで自動選択するために、各ブランチに異なる重みを割り当てる新しい注意メカニズムを提案します。さらなる革新として、提案されたCNT戦略は、異なる顔のランドマーク注釈システムを持つ複数のデータセットを使用してネットワークをトレーニングし、パフォーマンスを向上させ、トレーニングされたネットワークの一般化能力を強化します。いくつかのよく知られたデータセットで得られた実験結果は、提案された方法の有効性を示しています。
A big, diverse and balanced training data is the key to the success of deep neural network training. However, existing publicly available datasets used in facial landmark localization are usually much smaller than those for other computer vision tasks. A small dataset without diverse and balanced training samples cannot support the training of a deep network effectively. To address the above issues, this paper presents a novel Separable Batch Normalization (SepBN) module with a Cross-protocol Network Training (CNT) strategy for robust facial landmark localization. Different from the standard BN layer that uses all the training data to calculate a single set of parameters, SepBN considers that the samples of a training dataset may belong to different sub-domains. Accordingly, the proposed SepBN module uses multiple sets of parameters, each corresponding to a specific sub-domain. However, the selection of an appropriate branch in the inference stage remains a challenging task because the sub-domain of a test sample is unknown. To mitigate this difficulty, we propose a novel attention mechanism that assigns different weights to each branch for automatic selection in an effective style. As a further innovation, the proposed CNT strategy trains a network using multiple datasets having different facial landmark annotation systems, boosting the performance and enhancing the generalization capacity of the trained network. The experimental results obtained on several well-known datasets demonstrate the effectiveness of the proposed method.
updated: Sun Jan 17 2021 13:04:06 GMT+0000 (UTC)
published: Sun Jan 17 2021 13:04:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト