arXiv reaDer
衣装生成のためのトランスフォーマーベースのグラフニューラルネットワーク
Transformer-based Graph Neural Networks for Outfit Generation
衣装を構成するために補完的な衣類アイテムを提案することは、新たな関心のプロセスですが、ファッショントレンドと視覚的美学をよく理解する必要があります.以前の作品は主に、視覚的な魅力を採点し、衣服を順序付けられたシーケンスまたはペアワイズ互換アイテムのコレクションとして表現することにより、推奨に焦点を当てていました。これにより、衣服間の関係の完全な使用が制限されます。コレクション内のアイテムのグラフベースの表現を活用することで、服装の推奨と生成の間のギャップを埋めようとします.このペーパーで実行された作業は、既存の服のコレクションから新しい魅力的な服を発見することによって、服の推奨と世代の間の架け橋を築こうとしています。畳み込みグラフニューラルネットワークのメッセージパッシングステップとして、多頭自己注意を利用してグラフ内の衣料品間の関係をキャプチャする TGNN という名前のトランスフォーマーベースのアーキテクチャを提案します。具体的には、シード、すなわち1つまたは複数の衣服から出発して、以前に選択された衣服と最も適合する衣服を繰り返し選択することによって、衣装の生成が実行される。 2 つの異なるデータセットを使用して広範な実験が行われ、シードされた衣装の生成を実行するモデルの機能と、互換性推定タスクに関する最先端の結果が得られることが実証されています。
Suggesting complementary clothing items to compose an outfit is a process of emerging interest, yet it involves a fine understanding of fashion trends and visual aesthetics. Previous works have mainly focused on recommendation by scoring visual appeal and representing garments as ordered sequences or as collections of pairwise-compatible items. This limits the full usage of relations among clothes. We attempt to bridge the gap between outfit recommendation and generation by leveraging a graph-based representation of items in a collection. The work carried out in this paper, tries to build a bridge between outfit recommendation and generation, by discovering new appealing outfits starting from a collection of pre-existing ones. We propose a transformer-based architecture, named TGNN, which exploits multi-headed self attention to capture relations between clothing items in a graph as a message passing step in Convolutional Graph Neural Networks. Specifically, starting from a seed, i.e.~one or more garments, outfit generation is performed by iteratively choosing the garment that is most compatible with the previously chosen ones. Extensive experimentations are conducted with two different datasets, demonstrating the capability of the model to perform seeded outfit generation as well as obtaining state of the art results on compatibility estimation tasks.
updated: Mon Apr 17 2023 09:18:45 GMT+0000 (UTC)
published: Mon Apr 17 2023 09:18:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト