このホワイトペーパーでは、トップランキングリストのほとんどの偽陽性画像(つまり、クエリ画像の異なるID)は、通常、個人再認証(Re-ID)でのクエリ画像と同様の色情報を持っています。一方、RGB画像から生成されたグレースケール画像を使用して人物のRe-IDタスクを実行する場合、一部のハードクエリ画像は、RGB画像を使用するよりも優れたパフォーマンスを得ることができます。したがって、RGBとグレースケールの画像は、Re-IDに関しては互いに補完し合うように見えます。このペーパーでは、RGBとグレースケールの両方の画像を利用して、人物のRe-IDパフォーマンスを向上させることを目指しています。この目的のために、RGBとグレースケールの機能表現を効果的に融合してRe-IDの汎化能力を強化できる、RGBグレー情報を備えた新しい2ストリームディープニューラルネットワークを提案します。まず、各トレーニングバッチでRGB画像をグレースケール画像に変換します。これらのRGBイメージとグレースケールイメージに基づいて、RGBブランチとグレースケールブランチをそれぞれトレーニングします。次に、RGBブランチとグレースケールブランチ間の接続を構築するために、RGBブランチとグレースケールブランチを新しいジョイントブランチにマージします。最後に、3つのブランチすべての機能をRe-IDの最終的な機能表現として連結します。さらに、トレーニングプロセスでは、各ブランチの汎化能力を高めることができる独立した損失関数によって各ブランチを同時にトレーニングする共同学習スキームを採用しています。さらに、グローバルな損失関数を使用して、最終的な連結機能をさらに微調整します。複数のベンチマークデータセットでの広範な実験は、提案された方法が最先端の人物のRe-IDメソッドよりも優れていることを完全に示しています。さらに、グレースケール画像を使用すると、実際にRe-IDのパフォーマンスが向上します。
In this paper, we observe that most false positive images (i.e., different identities with query images) in the top ranking list usually have the similar color information with the query image in person re-identification (Re-ID). Meanwhile, when we use the greyscale images generated from RGB images to conduct the person Re-ID task, some hard query images can obtain better performance compared with using RGB images. Therefore, RGB and greyscale images seem to be complementary to each other for person Re-ID. In this paper, we aim to utilize both RGB and greyscale images to improve the person Re-ID performance. To this end, we propose a novel two-stream deep neural network with RGB-grey information, which can effectively fuse RGB and greyscale feature representations to enhance the generalization ability of Re-ID. Firstly, we convert RGB images to greyscale images in each training batch. Based on these RGB and greyscale images, we train the RGB and greyscale branches, respectively. Secondly, to build up connections between RGB and greyscale branches, we merge the RGB and greyscale branches into a new joint branch. Finally, we concatenate the features of all three branches as the final feature representation for Re-ID. Moreover, in the training process, we adopt the joint learning scheme to simultaneously train each branch by the independent loss function, which can enhance the generalization ability of each branch. Besides, a global loss function is utilized to further fine-tune the final concatenated feature. The extensive experiments on multiple benchmark datasets fully show that the proposed method can outperform the state-of-the-art person Re-ID methods. Furthermore, using greyscale images can indeed improve the person Re-ID performance.