arXiv reaDer
深い3Dから2Dへの透かし:3Dメッシュへのメッセージの埋め込みと2Dレンダリングからのメッセージの抽出
Deep 3D-to-2D Watermarking: Embedding Messages in 3D Meshes and Extracting Them from 2D Renderings
電子透かしは、著作権保護のために広く使用されています。従来の3D透かしアプローチまたは商用ソフトウェアは、通常、メッセージを3Dメッシュに埋め込み、後で歪んだ/歪んでいない透かし付き3Dメッシュから直接メッセージを取得するように設計されています。ただし、多くの場合、ユーザーは3Dメッシュではなくレンダリングされた2D画像にしかアクセスできません。残念ながら、3Dメッシュの2Dレンダリングからメッセージを取得することは、依然として困難であり、十分に検討されていません。この問題を解決するための新しいエンドツーエンドの学習フレームワークを紹介します。1)メッシュジオメトリとテクスチャの両方にメッセージを密かに埋め込むエンコーダ。 2)透かしを入れた3Dオブジェクトをさまざまなカメラアングルからさまざまな照明条件でレンダリングするための微分可能なレンダラー。 3)2Dレンダリングされた画像からメッセージを回復するためのデコーダ。私たちの実験から、私たちのモデルは、人間が視覚的に知覚できない情報を埋め込むこと、および3D歪みを受ける2Dレンダリングから埋め込まれた情報を取得することを学習できることを示します。さらに、この方法が、微調整の有無にかかわらず、レイトレーサーやリアルタイムレンダラーなどの他のレンダラーでも機能することを示します。
Digital watermarking is widely used for copyright protection. Traditional 3D watermarking approaches or commercial software are typically designed to embed messages into 3D meshes, and later retrieve the messages directly from distorted/undistorted watermarked 3D meshes. However, in many cases, users only have access to rendered 2D images instead of 3D meshes. Unfortunately, retrieving messages from 2D renderings of 3D meshes is still challenging and underexplored. We introduce a novel end-to-end learning framework to solve this problem through: 1) an encoder to covertly embed messages in both mesh geometry and textures; 2) a differentiable renderer to render watermarked 3D objects from different camera angles and under varied lighting conditions; 3) a decoder to recover the messages from 2D rendered images. From our experiments, we show that our model can learn to embed information visually imperceptible to humans, and to retrieve the embedded information from 2D renderings that undergo 3D distortions. In addition, we demonstrate that our method can also work with other renderers, such as ray tracers and real-time renderers with and without fine-tuning.
updated: Tue Mar 29 2022 04:36:06 GMT+0000 (UTC)
published: Tue Apr 27 2021 19:51:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト