Gait は、歩行パターンから歩行者を識別することを目的とした、最も有望な生体認証の 1 つです。ただし、一般的な方法は交絡因子の影響を受けやすいため、ネットワークは効果的な歩行パターンを反映する領域にほとんど焦点を当てることができません。歩行認識におけるこの根本的な問題に対処するために、我々は、反事実介入学習 (CIL) と多様性制約動的畳み込み (DCDC) で構成される、GaitGCI と呼ばれる生成的反事実介入フレームワークを提案します。 CIL は事実と反事実の注意の間の尤度差を最大化することで交絡因子の影響を排除し、DCDC はサンプルごとの事実と反事実の注意を適応的に生成してサンプルごとの特性を効率的に認識します。行列分解と多様性制約により、DCDC はモデルが効率的かつ効果的であることを保証します。広範な実験により、提案された GaitGCI は次のことを示しています。 1) 歩行パターンを反映する識別可能で解釈可能な領域に効果的に焦点を当てることができます。 2) モデルに依存せず、既存のモデルに組み込むことで追加コストをほとんど発生させずにパフォーマンスを向上させることができます。 3) 任意のシナリオ (実験室および野外) で最先端のパフォーマンスを効率的に達成します。
Gait is one of the most promising biometrics that aims to identify pedestrians from their walking patterns. However, prevailing methods are susceptible to confounders, resulting in the networks hardly focusing on the regions that reflect effective walking patterns. To address this fundamental problem in gait recognition, we propose a Generative Counterfactual Intervention framework, dubbed GaitGCI, consisting of Counterfactual Intervention Learning (CIL) and Diversity-Constrained Dynamic Convolution (DCDC). CIL eliminates the impacts of confounders by maximizing the likelihood difference between factual/counterfactual attention while DCDC adaptively generates sample-wise factual/counterfactual attention to efficiently perceive the sample-wise properties. With matrix decomposition and diversity constraint, DCDC guarantees the model to be efficient and effective. Extensive experiments indicate that proposed GaitGCI: 1) could effectively focus on the discriminative and interpretable regions that reflect gait pattern; 2) is model-agnostic and could be plugged into existing models to improve performance with nearly no extra cost; 3) efficiently achieves state-of-the-art performance on arbitrary scenarios (in-the-lab and in-the-wild).