arXiv reaDer
関連性を意識した専門家の混合による一般化可能な個人の再識別
Generalizable Person Re-identification with Relevance-aware Mixture of Experts
ドメイン一般化可能(DG)の個人再識別(ReID)は、トレーニング中に見えないターゲットドメインデータにアクセスできないため、難しい問題です。ほとんどすべての既存のDGReIDメソッドは、トレーニングに複数のソースドメインからのハイブリッドデータセットを使用する同じパイプラインに従い、トレーニングされたモデルをテストのために見えないターゲットドメインに直接適用します。これらの方法は、多くの場合、個々のソースドメインの識別特性と、見えないターゲットドメインとの関連性を無視しますが、どちらもモデルの一般化に役立てることができます。上記の2つの問題を処理するために、効果的な投票ベースの混合メカニズムを使用してソースドメインの多様な特性を動的に活用し、モデルの一般化を改善する、関連性を意識した専門家の混合(RaMoE)と呼ばれる新しい方法を提案します。具体的には、ソースドメインネットワーク(専門家)が個々のドメインの特性の多様性と識別可能性を維持できるようにするために、無相関損失を提案します。さらに、投票ネットワークを設計して、すべての専門家の機能を、ドメインに関連するより一般化可能な集約機能に適応的に統合します。トレーニング中のターゲットドメインの不可視性を考慮して、投票ネットワークを更新するために、リレーションアラインメント損失と組み合わせた新しい学習から学習へのアルゴリズムを提案します。広範な実験は、提案されたRaMoEが最先端の方法よりも優れていることを示しています。
Domain generalizable (DG) person re-identification (ReID) is a challenging problem because we cannot access any unseen target domain data during training. Almost all the existing DG ReID methods follow the same pipeline where they use a hybrid dataset from multiple source domains for training, and then directly apply the trained model to the unseen target domains for testing. These methods often neglect individual source domains' discriminative characteristics and their relevances w.r.t. the unseen target domains, though both of which can be leveraged to help the model's generalization. To handle the above two issues, we propose a novel method called the relevance-aware mixture of experts (RaMoE), using an effective voting-based mixture mechanism to dynamically leverage source domains' diverse characteristics to improve the model's generalization. Specifically, we propose a decorrelation loss to make the source domain networks (experts) keep the diversity and discriminability of individual domains' characteristics. Besides, we design a voting network to adaptively integrate all the experts' features into the more generalizable aggregated features with domain relevance. Considering the target domains' invisibility during training, we propose a novel learning-to-learn algorithm combined with our relation alignment loss to update the voting network. Extensive experiments demonstrate that our proposed RaMoE outperforms the state-of-the-art methods.
updated: Wed May 19 2021 14:19:34 GMT+0000 (UTC)
published: Wed May 19 2021 14:19:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト