arXiv reaDer
投影型アーバンテクスチャリング
Projective Urban Texturing
この論文は、没入型都市環境における3D都市メッシュのテクスチャを自動生成する方法を提案します。最近のパイプラインの多くは、スキャナーまたは手続き型モデリングパイプラインを使用して、大量の都市ジオメトリをキャプチャまたは合成しています。このようなジオメトリは複雑でリアルですが、このような大きなシーンでフォトリアリスティックなテクスチャを生成することは依然として問題です。都市環境をキャプチャするパノラマ写真のすぐに利用可能なデータセットに存在するテクスチャスタイルによって駆動される入力ターゲット3Dメッシュのテクスチャを生成することを提案します。写真の都市構造の基礎となる形状、サイズ、およびレイアウトがターゲットメッシュのものと一致しないため、このような2Dデータセットを3Dジオメトリに再ターゲットすることは困難です。写真には、ターゲットジオメトリに存在しない可能性のあるオブジェクト(樹木、車両など)も含まれていることがよくあります。これらの問題に対処するために、実際のテクスチャスタイルを再ターゲットするProjective Urban Texturing(PUT)と呼ばれる方法を紹介します。目に見えない都市のメッシュへのパノラマ画像。 PUTは、対になっていない画像からテクスチャへの変換用に設計されたニューラルアーキテクチャの対照的で敵対的なトレーニングに依存しています。生成されたテクスチャは、ターゲットの3Dメッシュジオメトリに適用されたテクスチャアトラスに保存されます。テクスチャの一貫性を促進するために、PUTは、テクスチャ合成が以前に生成された隣接するテクスチャに条件付けられる反復手順を採用しています。生成されたテクスチャの定量的評価と定性的評価の両方を示します。
This paper proposes a method for automatic generation of textures for 3D city meshes in immersive urban environments. Many recent pipelines capture or synthesize large quantities of city geometry using scanners or procedural modeling pipelines. Such geometry is intricate and realistic, however the generation of photo-realistic textures for such large scenes remains a problem. We propose to generate textures for input target 3D meshes driven by the textural style present in readily available datasets of panoramic photos capturing urban environments. Re-targeting such 2D datasets to 3D geometry is challenging because the underlying shape, size, and layout of the urban structures in the photos do not correspond to the ones in the target meshes. Photos also often have objects (e.g., trees, vehicles) that may not even be present in the target geometry.To address these issues we present a method, called Projective Urban Texturing (PUT), which re-targets textural style from real-world panoramic images to unseen urban meshes. PUT relies on contrastive and adversarial training of a neural architecture designed for unpaired image-to-texture translation. The generated textures are stored in a texture atlas applied to the target 3D mesh geometry. To promote texture consistency, PUT employs an iterative procedure in which texture synthesis is conditioned on previously generated, adjacent textures. We demonstrate both quantitative and qualitative evaluation of the generated textures.
updated: Tue Jan 25 2022 14:56:52 GMT+0000 (UTC)
published: Tue Jan 25 2022 14:56:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト