arXiv reaDer
3DSNet:教師なし形状から形状への3Dスタイル転送
3DSNet: Unsupervised Shape-to-Shape 3D Style Transfer
ある画像から別の画像にスタイルを転送することは、コンピュータビジョンで広く研究されている人気のあるタスクです。それでも、3D設定での学習ベースのスタイル転送は、ほとんど未踏の問題のままです。私たちの知る限り、解きほぐされたコンテンツとスタイル表現を提供する3Dオブジェクト間のスタイル転送のための最初の学習ベースのアプローチを提案します。私たちの方法では、ソースとターゲットの3Dモデルのコンテンツとスタイルを組み合わせて、ソースコンテンツを保持しながら、ターゲットのスタイルに似た新しい形状を生成できます。提案されたフレームワークは、点群とメッシュの両方の形で新しい3D形状を合成できます。さらに、選択したドメインの基礎となるマルチモーダルスタイルの分布を暗黙的に学習するように手法を拡張します。学習した分布からスタイルコードをサンプリングすることで、モデルが特定の参照オブジェクトに与えることができるスタイルの多様性を増やします。実験結果は、いくつかのベンチマークで提案された3Dスタイルの転送方法の有効性を検証します。私たちのフレームワークの実装は、承認され次第リリースされます。
Transferring the style from one image onto another is a popular and widely studied task in computer vision. Yet, learning-based style transfer in the 3D setting remains a largely unexplored problem. To our knowledge, we propose the first learning-based approach for style transfer between 3D objects providing disentangled content and style representations. Our method allows to combine the content and style of a source and target 3D model to generate a novel shape that resembles in style the target while retaining the source content. The proposed framework can synthesize new 3D shapes both in the form of point clouds and meshes. Furthermore, we extend our technique to implicitly learn the underlying multimodal style distribution of the chosen domains. By sampling style codes from the learned distributions, we increase the variety of styles that our model can confer to a given reference object. Experimental results validate the effectiveness of the proposed 3D style transfer method on a number of benchmarks. The implementation of our framework will be released upon acceptance.
updated: Thu Jan 14 2021 09:29:34 GMT+0000 (UTC)
published: Thu Nov 26 2020 16:59:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト