arXiv reaDer
オブジェクトのウェイクアップ:単一の画像からの3Dオブジェクトの再構築とアニメーション
Object Wake-up: 3D Object Reconstruction and Animation from a Single Image
単一の椅子の画像が与えられた場合、その3D形状を抽出し、そのもっともらしいアーティキュレーションとモーションをアニメーション化できますか?これは興味深い新しい質問であり、多数のダウンストリーム拡張現実および仮想現実アプリケーションが存在する可能性があります。この論文では、単一の画像、リギング、アニメーションからこのような3D汎用オブジェクトを再構築するプロセス全体に取り組むための自動化されたアプローチを提案します。オブジェクトマニピュレーションに関するこれまでの取り組みと比較すると、私たちの仕事は2Dマニピュレーションを超えています。さらに、椅子などの剛体オブジェクトに、人間のような、または動物のような変形を与えます。これにより、実行可能なオブジェクトの動きに関して柔軟性が高まります。経験的に、私たちのアプローチは、社内データセットだけでなく公開データセットでも十分なパフォーマンスで実証されています。 3D再構成とスケルトン予測の関連タスクを比較すると、私たちの結果は、最先端の結果を大幅に上回っています。私たちの実装とデータセットは、紙の承認時に公開されます。
Given a single chair image, could we extract its 3D shape and animate its plausible articulations and motions? This is an interesting new question that may have numerous downstream augmented reality and virtual reality applications. In this paper, we propose an automated approach to tackle the entire process of reconstruct such 3-D generic objects from single images, rigging and animation. Comparing with previous efforts on object manipulation, our work goes beyond 2D manipulation. Moreover, we endow plausible human-like or animal-like deformations to the otherwise rigid-body objects such as chairs; this leads to greater flexibility in terms of feasible object motions. Empirically our approach is demonstrated with satisfactory performance on public datasets as well as our in-house dataset; when compared on the related tasks of 3D reconstruction and skeleton prediction, our results surpass those of the State-of-the-arts by a noticeable margin. Our implementation and dataset are to be made publicly available upon paper acceptance.
updated: Sun Dec 12 2021 05:32:04 GMT+0000 (UTC)
published: Thu Aug 05 2021 16:20:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト