arXiv reaDer
世代間機能相互作用学習に基づく親族検証
Kinship Verification Based on Cross-Generation Feature Interaction Learning
顔画像からの親族関係の検証は、多くの潜在的なコンピュータービジョンアプリケーションで新たに登場しているが挑戦的な手法として認識されています。この論文では、ロバストな親族関係の検証のための新しい世代間特徴相互作用学習(CFIL)フレームワークを提案します。特に、親と子の両方の画像ペアの特徴を企業的に抽出することにより、世代間の関係の特性を調査するために、効果的な協調的重み付け戦略が構築されます。具体的には、親子全体で表現力豊かなローカルと非ローカルの特徴を抽出します。距離によって類似性を測定する従来の作業とは異なり、内部補助重みとして類似性計算を深いCNNアーキテクチャに補間して、全体および自然の特徴を学習します。これらの類似度の重みには、対応する単一のポイントが含まれるだけでなく、複数の関係のクロスポイントが掘削されます。ここで、ローカルおよび非ローカルの特徴は、これら2種類の距離測定を使用して計算されます。重要なのは、類似性の計算と特徴抽出を別々に実行する代わりに、類似性学習と特徴抽出を1つの統合された学習プロセスに統合することです。ローカルおよび非ローカル機能から推定される統合表現は、画像に埋め込まれた有益なセマンティクスを包括的に表現し、画像ペアからの豊富な相関知識を保持できます。広範な実験は、いくつかの最先端の親族検証方法と比較して、提案されたモデルの効率と優位性を示しています。
Kinship verification from facial images has been recognized as an emerging yet challenging technique in many potential computer vision applications. In this paper, we propose a novel cross-generation feature interaction learning (CFIL) framework for robust kinship verification. Particularly, an effective collaborative weighting strategy is constructed to explore the characteristics of cross-generation relations by corporately extracting features of both parents and children image pairs. Specifically, we take parents and children as a whole to extract the expressive local and non-local features. Different from the traditional works measuring similarity by distance, we interpolate the similarity calculations as the interior auxiliary weights into the deep CNN architecture to learn the whole and natural features. These similarity weights not only involve corresponding single points but also excavate the multiple relationships cross points, where local and non-local features are calculated by using these two kinds of distance measurements. Importantly, instead of separately conducting similarity computation and feature extraction, we integrate similarity learning and feature extraction into one unified learning process. The integrated representations deduced from local and non-local features can comprehensively express the informative semantics embedded in images and preserve abundant correlation knowledge from image pairs. Extensive experiments demonstrate the efficiency and superiority of the proposed model compared to some state-of-the-art kinship verification methods.
updated: Tue Sep 07 2021 01:50:50 GMT+0000 (UTC)
published: Tue Sep 07 2021 01:50:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト