arXiv reaDer
Enhance-NeRF: 神経放射フィールドの複数の性能評価
Enhance-NeRF: Multiple Performance Evaluation for Neural Radiance Fields
3 次元再構築の品質は、仮想現実 (VR) や拡張現実 (AR) テクノロジーなどの分野での応用の有効性に影響を与える重要な要素です。 Neural Radiance Fields (NeRF) は、あらゆる視点からリアルな画像を生成できます。オブジェクトの形状、照明、素材を表面欠陥なしに同時に再構築し、仮想と現実の間の障壁を打ち破ります。 NeRF によって表示される、再構成されたシーンと現実世界のシーンの間の潜在的な空間対応関係は、広範な実用的なアプリケーションの可能性を提供します。 NeRF が導入されて以来、3D 再構成は大きく進歩しましたが、探索と実験の余地は依然としてかなり残っています。 NeRF ベースのモデルは、色付きの「霧」ノイズによって引き起こされる干渉問題の影響を受けやすくなります。さらに、境界のないシーンを再構築しようとすると、不安定や失敗が頻繁に発生します。さらに、モデルは収束するまでにかなりの時間がかかるため、このようなシナリオでの使用はさらに困難になります。私たちのアプローチは、Enhance-NeRF という造語であり、低反射率と高反射率のオブジェクト表示のバランスを取るために結合色を採用し、事前知識を備えたデコード アーキテクチャを利用して認識を向上させ、多層パフォーマンス評価メカニズムを採用して学習能力を強化します。シングルカード条件で屋外シーンの再構築を1時間以内に実現します。実験結果に基づいて、Enhance-NeRF はフィットネス機能を部分的に強化し、屋外シーンの再構築にある程度のサポートを提供します。 Enhance-NeRF メソッドはプラグ アンド プレイ コンポーネントとして使用できるため、他の NeRF ベースのモデルと簡単に統合できます。コードはhttps://github.com/TANQIanQ/Enhance-NeRFから入手できます。
The quality of three-dimensional reconstruction is a key factor affecting the effectiveness of its application in areas such as virtual reality (VR) and augmented reality (AR) technologies. Neural Radiance Fields (NeRF) can generate realistic images from any viewpoint. It simultaneously reconstructs the shape, lighting, and materials of objects, and without surface defects, which breaks down the barrier between virtuality and reality. The potential spatial correspondences displayed by NeRF between reconstructed scenes and real-world scenes offer a wide range of practical applications possibilities. Despite significant progress in 3D reconstruction since NeRF were introduced, there remains considerable room for exploration and experimentation. NeRF-based models are susceptible to interference issues caused by colored "fog" noise. Additionally, they frequently encounter instabilities and failures while attempting to reconstruct unbounded scenes. Moreover, the model takes a significant amount of time to converge, making it even more challenging to use in such scenarios. Our approach, coined Enhance-NeRF, which adopts joint color to balance low and high reflectivity objects display, utilizes a decoding architecture with prior knowledge to improve recognition, and employs multi-layer performance evaluation mechanisms to enhance learning capacity. It achieves reconstruction of outdoor scenes within one hour under single-card condition. Based on experimental results, Enhance-NeRF partially enhances fitness capability and provides some support to outdoor scene reconstruction. The Enhance-NeRF method can be used as a plug-and-play component, making it easy to integrate with other NeRF-based models. The code is available at: https://github.com/TANQIanQ/Enhance-NeRF
updated: Thu Jun 08 2023 15:49:30 GMT+0000 (UTC)
published: Thu Jun 08 2023 15:49:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト