arXiv reaDer
UAVのアンダーディスプレイカメラのゼロ参照画像復元
Zero-Reference Image Restoration for Under-Display Camera of UAV
露出したUAVのカメラは、悪天候の影響下で揺れたり、ずれたり、誤動作したりする可能性がありますが、アドオンデバイス(デュポンライン)は損傷に対して非常に脆弱です。低コストのT-OLEDオーバーレイをカメラの周囲に配置してカメラを保護することもできますが、これにより画像の劣化の問題も発生します。特に、大気中の温度変化により、T-OLEDに吸着するミストが発生する可能性があり、UAVの撮影プロセス中に二次災害(つまり、より深刻な画像劣化)を引き起こす可能性があります。 T-OLEDのオーバーレイによって引き起こされる画像劣化の問題を解決するために、本論文では、画像のテクスチャと色を強化することによって視覚体験を強化する新しい方法を提案します。具体的には、私たちの方法は、入力画像上の低ランクのアフィングリッドを推定するために軽量ネットワークをトレーニングし、次にグリッドを利用してブロック粒度で入力画像を強化します。私たちの方法の利点は、参照画像が不要であり、損失関数が視覚的な経験から開発されることです。さらに、私たちのモデルは、任意の解像度の画像の高品質な復元をリアルタイムで実行できます。最後に、モデルと収集されたデータセット(昼間と夜間のシーンを含む)の制限について説明します。
The exposed cameras of UAV can shake, shift, or even malfunction under the influence of harsh weather, while the add-on devices (Dupont lines) are very vulnerable to damage. We can place a low-cost T-OLED overlay around the camera to protect it, but this would also introduce image degradation issues. In particular, the temperature variations in the atmosphere can create mist that adsorbs to the T-OLED, which can cause secondary disasters (i.e., more severe image degradation) during the UAV's filming process. To solve the image degradation problem caused by overlaying T-OLEDs, in this paper we propose a new method to enhance the visual experience by enhancing the texture and color of images. Specifically, our method trains a lightweight network to estimate a low-rank affine grid on the input image, and then utilizes the grid to enhance the input image at block granularity. The advantages of our method are that no reference image is required and the loss function is developed from visual experience. In addition, our model can perform high-quality recovery of images of arbitrary resolution in real time. In the end, the limitations of our model and the collected datasets (including the daytime and nighttime scenes) are discussed.
updated: Sun Feb 13 2022 11:12:00 GMT+0000 (UTC)
published: Sun Feb 13 2022 11:12:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト