arXiv reaDer
HyperColor: A HyperNetwork Approach for Synthesizing Auto-colored 3D Models for Game Scenes Population
3Dゲームシーンの設計は退屈な作業であり、多くの場合、かなりの量の作業が必要になります。通常、このタスクには、ゲームシーン内での3Dモデルの合成、色付け、および配置が含まれます。この作業負荷を軽減するために、機械学習を適用してゲームシーン開発のいくつかの側面を自動化できます。以前の研究では、機械学習を使用してゲームシーンの背景の自動生成にすでに取り組んでいます。ただし、モデルの自動カラーリングは未踏の問題のままです。 3Dモデルの自動カラーリングは、特にカラフルなマルチパートオブジェクトのデジタル表現を扱う場合、困難な作業です。このような場合、オブジェクトの構成と各パーツの配色を「理解」する必要があります。既存のシングルステージメソッドには、オブジェクトのセグメンテーションの必要性や、最終モデルを生成するために一緒に組み立てる必要がある個々のパーツの生成など、独自の注意事項があります。自動カラー3Dモデルを合成するための2段階のトレーニングアプローチを提案することにより、これらの制限に対処します。最初の段階では、3Dオブジェクトを表す3Dポイントクラウドを取得し、2番目のステージでは、そのようなクラウド内のポイントに色を割り当てます。次に、いわゆる三角測量のトリックを利用して、特定のメッシュ三角形の頂点を表す色付きの点の補間に基づいてサーフェスが色付けされた3Dメッシュを生成します。このアプローチにより、滑らかな配色を生成できます。実験的評価は、従来の単一段階の手法と比較した場合、2段階のアプローチが形状の再構築と色付けの点でより良い結果をもたらすことを示しています。
Designing a 3D game scene is a tedious task that often requires a substantial amount of work. Typically, this task involves synthesis, coloring, and placement of 3D models within the game scene. To lessen this workload, we can apply machine learning to automate some aspects of the game scene development. Earlier research has already tackled automated generation of the game scene background with machine learning. However, model auto-coloring remains an underexplored problem. The automatic coloring of a 3D model is a challenging task, especially when dealing with the digital representation of a colorful, multipart object. In such a case, we have to ``understand'' the object's composition and coloring scheme of each part. Existing single-stage methods have their own caveats such as the need for segmentation of the object or generating individual parts that have to be assembled together to yield the final model. We address these limitations by proposing a two-stage training approach to synthesize auto-colored 3D models. In the first stage, we obtain a 3D point cloud representing a 3D object, whilst in the second stage, we assign colors to points within such cloud. Next, by leveraging the so-called triangulation trick, we generate a 3D mesh in which the surfaces are colored based on interpolation of colored points representing vertices of a given mesh triangle. This approach allows us to generate a smooth coloring scheme. Experimental evaluation shows that our two-stage approach gives better results in terms of shape reconstruction and coloring when compared to traditional single-stage techniques.
updated: Tue Aug 03 2021 11:00:08 GMT+0000 (UTC)
published: Tue Aug 03 2021 11:00:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト