arXiv reaDer
野生のNeRF:制約のない写真コレクションの神経放射輝度フィールド
NeRF in the Wild: Neural Radiance Fields for Unconstrained Photo Collections
野生の写真の構造化されていないコレクションのみを使用して、複雑なシーンの新しいビューを合成するための学習ベースの方法を提示します。多層パーセプトロンの重みを使用して、3D座標の関数としてシーンの密度と色をモデル化するNeural Radiance Fields(NeRF)に基づいています。 NeRFは、制御された設定でキャプチャされた静的な被写体の画像でうまく機能しますが、可変照明や一時的なオクルーダーなど、制御されていない画像で多くのユビキタスな現実世界の現象をモデル化することはできません。これらの問題に対処するためにNeRFに一連の拡張機能を導入し、インターネットから取得した非構造化画像コレクションからの正確な再構成を可能にします。 NeRF-Wと呼ばれるシステムを有名なランドマークのインターネット写真コレクションに適用し、以前の最先端技術よりもフォトリアリズムに大幅に近い、時間的に一貫した新しいビューレンダリングを示します。
We present a learning-based method for synthesizing novel views of complex scenes using only unstructured collections of in-the-wild photographs. We build on Neural Radiance Fields (NeRF), which uses the weights of a multilayer perceptron to model the density and color of a scene as a function of 3D coordinates. While NeRF works well on images of static subjects captured under controlled settings, it is incapable of modeling many ubiquitous, real-world phenomena in uncontrolled images, such as variable illumination or transient occluders. We introduce a series of extensions to NeRF to address these issues, thereby enabling accurate reconstructions from unstructured image collections taken from the internet. We apply our system, dubbed NeRF-W, to internet photo collections of famous landmarks, and demonstrate temporally consistent novel view renderings that are significantly closer to photorealism than the prior state of the art.
updated: Wed Jan 06 2021 13:45:14 GMT+0000 (UTC)
published: Wed Aug 05 2020 17:51:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト