オクルージョンされた人物の再識別(ReID)は、人物の画像をオクルージョンと一致させることを目的としています。画像間のミスアライメントの問題を悪化させる深刻なオクルージョンのため、これは根本的に困難です。ポーズ推定器を組み込むことを犠牲にして、多くの作品は、トレーニングとテストの両方でのミスアライメントを軽減するためにポーズ情報を導入します。推論の複雑さを低く抑えながら高精度を実現するために、ポーズ情報を利用してセマンティクスに合わせた特徴の学習を正規化するポーズガイド型特徴学習と知識蒸留(PGFL-KD)という名前のネットワークを提案しますが、テストでは破棄されます。 PGFL-KDは、メインブランチ(MB)と、2つのポーズガイドブランチ、\ ieno、フォアグラウンド拡張ブランチ(FEB)、およびボディパーツセマンティクスアラインブランチ(SAB)で構成されます。 FEBは、障害物と背景の干渉を排除しながら、目に見える身体部分の特徴を強調することを意図しています(\ ieno、前景の特徴の位置合わせ)。 SABは、さまざまなチャネルグループがさまざまな身体部分に焦点を合わせて、身体部分のセマンティクスを調整した表現にすることを推奨しています。テスト時にポーズ情報への依存を取り除くために、MBを正規化して、知識の蒸留と相互作用ベースのトレーニングを通じてFEBとSABのメリットを学習します。閉塞、部分的、および全体的なReIDタスクに関する広範な実験は、提案されたネットワークの有効性を示しています。
Occluded person re-identification (ReID) aims to match person images with occlusion. It is fundamentally challenging because of the serious occlusion which aggravates the misalignment problem between images. At the cost of incorporating a pose estimator, many works introduce pose information to alleviate the misalignment in both training and testing. To achieve high accuracy while preserving low inference complexity, we propose a network named Pose-Guided Feature Learning with Knowledge Distillation (PGFL-KD), where the pose information is exploited to regularize the learning of semantics aligned features but is discarded in testing. PGFL-KD consists of a main branch (MB), and two pose-guided branches, \ieno, a foreground-enhanced branch (FEB), and a body part semantics aligned branch (SAB). The FEB intends to emphasise the features of visible body parts while excluding the interference of obstructions and background (\ieno, foreground feature alignment). The SAB encourages different channel groups to focus on different body parts to have body part semantics aligned representation. To get rid of the dependency on pose information when testing, we regularize the MB to learn the merits of the FEB and SAB through knowledge distillation and interaction-based training. Extensive experiments on occluded, partial, and holistic ReID tasks show the effectiveness of our proposed network.