arXiv reaDer
Searching for Apparel Products from Images in the Wild
ソーシャルメディアのこの時代では、人々はしばしば他の人が着ているものを見ます。特に、InstagramとTwitterのインフルエンサーは、異なる服を着ている自分の画像を提供することが多く、フォロワーは似たような服を購入するように促されることがよくあります。オンラインカタログで視覚的に最も近い服を自動的に見つけるシステムを提案します(ストリートツーショップ検索) 。元の画像はさまざまなポーズや照明条件で撮影されているため、この問題は困難です。システムは最初に、アパレルドメイン用に特別にトレーニングされたYOLOやSSDなどの複数のCNN検出器を使用して、高レベルの記述領域(上、下、リストウェア。..)をローカライズします。次に、これらの地域をTシャツ、チュニック、ドレスなどのより具体的な地域に分類します。最後に、マルチタスク機能を使用して学習した機能の埋め込みがアイテムごとに復元され、オンラインカタログデータベース内の対応するアイテムと比較され、距離に従ってランク付けされます。ベンチマークデータセットを使用してコンポーネントごとにアプローチを検証し、人間の評価を使用してエンドツーエンドで検証します。
In this age of social media, people often look at what others are wearing. In particular, Instagram and Twitter influencers often provide images of themselves wearing different outfits and their followers are often inspired to buy similar clothes.We propose a system to automatically find the closest visually similar clothes in the online Catalog (street-to-shop searching). The problem is challenging since the original images are taken under different pose and lighting conditions. The system initially localizes high-level descriptive regions (top, bottom, wristwear. . . ) using multiple CNN detectors such as YOLO and SSD that are trained specifically for apparel domain. It then classifies these regions into more specific regions such as t-shirts, tunic or dresses. Finally, a feature embedding learned using a multi-task function is recovered for every item and then compared with corresponding items in the online Catalog database and ranked according to distance. We validate our approach component-wise using benchmark datasets and end-to-end using human evaluation.
updated: Thu Apr 07 2022 22:06:13 GMT+0000 (UTC)
published: Thu Jul 04 2019 06:51:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト