arXiv reaDer
Fashion Retrieval via Graph Reasoning Networks on a Similarity Pyramid
  顧客とオンラインショッピングストアの衣服の画像を一致させることは、電子商取引で豊富な用途があります。既存のアルゴリズムは、画像をグローバルな特徴ベクトルとしてエンコードし、グローバルな表現で検索を実行しました。ただし、衣服に関する差別的なローカル情報はこのグローバルな表現に没頭しているため、パフォーマンスが最適化されていません。この問題に対処するために、複数のスケールでグローバルとローカルの両方の表現を使用してクエリとギャラリークロスの類似性を学習する、類似性ピラミッド上の新しいグラフ推論ネットワーク(GRNet)を提案します。類似性ピラミッドは類似性のグラフで表されます。ノードは異なる縮尺の衣服コンポーネント間の類似性を表し、最終的な一致スコアはエッジに沿ってメッセージを渡すことで取得されます。 GRNetでは、グラフの畳み込みネットワークをトレーニングすることでグラフの推論を解決し、衣服の顕著なコンポーネントを調整して衣服の取得を改善します。将来の研究を促進するために、境界ボックス、ビュー、オクルージョン、クロッピングの豊富な注釈を含む新しいベンチマークFindFashionを導入します。広範な実験により、GRNetは、DeepFashionのトップ1、トップ20、トップ50の精度を26%、64%、75%にプッシュするなど、2つの困難なベンチマークで最新の結果が得られることが示されています(すなわち、4%、10%、および10%の絶対的な改善)、大きなマージンで競合他社よりも優れています。 FindFashionでは、GRNetはすべての経験的設定でかなりの改善を達成しています。
Matching clothing images from customers and online shopping stores has rich applications in E-commerce. Existing algorithms encoded an image as a global feature vector and performed retrieval with the global representation. However, discriminative local information on clothes are submerged in this global representation, resulting in sub-optimal performance. To address this issue, we propose a novel Graph Reasoning Network (GRNet) on a Similarity Pyramid, which learns similarities between a query and a gallery cloth by using both global and local representations in multiple scales. The similarity pyramid is represented by a Graph of similarity, where nodes represent similarities between clothing components at different scales, and the final matching score is obtained by message passing along edges. In GRNet, graph reasoning is solved by training a graph convolutional network, enabling to align salient clothing components to improve clothing retrieval. To facilitate future researches, we introduce a new benchmark FindFashion, containing rich annotations of bounding boxes, views, occlusions, and cropping. Extensive experiments show that GRNet obtains new state-of-the-art results on two challenging benchmarks, e.g., pushing the top-1, top-20, and top-50 accuracies on DeepFashion to 26%, 64%, and 75% (i.e., 4%, 10%, and 10% absolute improvements), outperforming competitors with large margins. On FindFashion, GRNet achieves considerable improvements on all empirical settings.
updated: Fri Aug 30 2019 14:19:24 GMT+0000 (UTC)
published: Fri Aug 30 2019 14:19:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト