arXiv reaDer
ノイズおよびハードフレーム対応クラスタリングによる教師なしビデオ人物の再識別
Unsupervised Video Person Re-identification via Noise and Hard frame Aware Clustering
教師なしビデオベースの個人再識別(re-ID)メソッドは、画像ベースのものよりもビデオトラックレットから豊富な機能を抽出します。最先端の方法では、クラスタリングを利用して疑似ラベルを取得し、モデルを繰り返しトレーニングします。ただし、トラックレット内の2種類のフレームの影響を過小評価しています。1)検出エラーまたは重いオクルージョンによって引き起こされるノイズフレームがトラックレット内に存在し、クラスタリング中に信頼性の低いラベルが割り当てられる可能性があります。 2)トラックレットには、ポーズの変更や部分的なオクルージョンによって引き起こされるハードフレームも含まれています。これらは区別が困難ですが、有益です。この論文は、ノイズとハードフレームを意識したクラスタリング(NHAC)法を提案します。 NHACは、グラフトリミングモジュールとノードリサンプリングモジュールで構成されています。グラフトリミングモジュールは、ノイズフレームノードを削除してクラスタリングの精度を向上させることにより、安定したグラフを取得します。ノードリサンプリングモジュールは、ハードフレームノードのトレーニングを強化して、豊富なトラックレット情報を学習します。 2つのビデオベースのデータセットで実施された実験は、教師なしre-ID設定の下で提案されたNHACの有効性を示しています。
Unsupervised video-based person re-identification (re-ID) methods extract richer features from video tracklets than image-based ones. The state-of-the-art methods utilize clustering to obtain pseudo-labels and train the models iteratively. However, they underestimate the influence of two kinds of frames in the tracklet: 1) noise frames caused by detection errors or heavy occlusions exist in the tracklet, which may be allocated with unreliable labels during clustering; 2) the tracklet also contains hard frames caused by pose changes or partial occlusions, which are difficult to distinguish but informative. This paper proposes a Noise and Hard frame Aware Clustering (NHAC) method. NHAC consists of a graph trimming module and a node re-sampling module. The graph trimming module obtains stable graphs by removing noise frame nodes to improve the clustering accuracy. The node re-sampling module enhances the training of hard frame nodes to learn rich tracklet information. Experiments conducted on two video-based datasets demonstrate the effectiveness of the proposed NHAC under the unsupervised re-ID setting.
updated: Thu Jun 10 2021 00:52:06 GMT+0000 (UTC)
published: Thu Jun 10 2021 00:52:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト