arXiv reaDer
PoNA:人間の姿勢移動に対する姿勢誘導の非局所的注意
PoNA: Pose-guided Non-local Attention for Human Pose Transfer
特定の人物の外観をターゲットポーズに転送することを目的とした人間のポーズ転送は、多くのアプリケーションで非常に困難で重要です。前の作品は、ポーズの特徴のガイダンスを無視するか、局所的な注意メカニズムのみを使用しているため、信じられないほどぼやけた結果になります。単純化されたカスケードブロックを備えた生成的敵対的ネットワーク(GAN)を使用した新しい人間のポーズ転送方法を提案します。各ブロックでは、転送する画像特徴のより重要な領域を選択するために、長距離依存スキームを備えたポーズ誘導非局所注意(PoNA)メカニズムを提案します。また、ポーズと画像の機能をより有効に活用するために、ポーズ前の画像誘導ポーズ機能の更新とポーズ後のポーズ誘導画像機能の更新を設計します。私たちのネットワークはシンプルで安定していて、トレーニングも簡単です。 Market-1501およびDeepFashionデータセットの定量的および定性的な結果は、モデルの有効性と効率を示しています。最先端の方法と比較して、私たちのモデルは、パラメータが少なく、速度が速い一方で、詳細が豊富な、よりシャープでリアルな画像を生成します。さらに、生成された画像は、個人を再識別するためのデータ不足を軽減するのに役立ちます。
Human pose transfer, which aims at transferring the appearance of a given person to a target pose, is very challenging and important in many applications. Previous work ignores the guidance of pose features or only uses local attention mechanism, leading to implausible and blurry results. We propose a new human pose transfer method using a generative adversarial network (GAN) with simplified cascaded blocks. In each block, we propose a pose-guided non-local attention (PoNA) mechanism with a long-range dependency scheme to select more important regions of image features to transfer. We also design pre-posed image-guided pose feature update and post-posed pose-guided image feature update to better utilize the pose and image features. Our network is simple, stable, and easy to train. Quantitative and qualitative results on Market-1501 and DeepFashion datasets show the efficacy and efficiency of our model. Compared with state-of-the-art methods, our model generates sharper and more realistic images with rich details, while having fewer parameters and faster speed. Furthermore, our generated images can help to alleviate data insufficiency for person re-identification.
updated: Sun Dec 13 2020 12:38:29 GMT+0000 (UTC)
published: Sun Dec 13 2020 12:38:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト