arXiv reaDer
単一画像からの関節深さの推定と降雨除去の混合
Joint Depth Estimation and Mixture of Rain Removal From a Single Image
雨天は、特に屋外のカメラ レンズやフロント ガラスを通して画像をキャプチャする場合に、シーン オブジェクトの視認性を大幅に低下させます。多くの雨の写真を注意深く観察することで、画像は一般的に、雨滴、雨の筋、雨のかすみなどのさまざまな雨水アーティファクトの影響を受け、近距離と遠距離の両方で画質に影響を与え、複雑で絡み合った画像になることがわかりました。イメージ劣化のプロセス。ただし、現在の排水技術は、1 種類または 2 種類の雨水しか処理できないため、混合雨 (MOR) を除去することが困難です。この研究では、MOR 効果を十分に考慮した、DEMore-Net と呼ばれる、Mixture of rain REmoval の効果的な画像デレイン パラダイムを提案します。 DEMore-Net は、既存の排水の知恵を超えて、深度推定と MOR 除去タスクを統合して優れた降雨除去を実現する共同学習パラダイムです。深度情報は、距離に基づいた追加の意味のあるガイダンス情報を提供できるため、DEMore-Net がさまざまな種類の雨水を除去するのに役立ちます。さらに、この研究では、イメージのデレイン タスクにおける正規化アプローチを調査し、新しいハイブリッド正規化ブロック (HNB) を導入して、DEMore-Net のデレイン パフォーマンスを強化します。合成データセットと実世界の MOR 写真に対して実施された広範な実験により、提案された DEMore-Net の優位性が完全に検証されました。コードは https://github.com/yz-wang/DEMore-Net で入手できます。
Rainy weather significantly deteriorates the visibility of scene objects, particularly when images are captured through outdoor camera lenses or windshields. Through careful observation of numerous rainy photos, we have found that the images are generally affected by various rainwater artifacts such as raindrops, rain streaks, and rainy haze, which impact the image quality from both near and far distances, resulting in a complex and intertwined process of image degradation. However, current deraining techniques are limited in their ability to address only one or two types of rainwater, which poses a challenge in removing the mixture of rain (MOR). In this study, we propose an effective image deraining paradigm for Mixture of rain REmoval, called DEMore-Net, which takes full account of the MOR effect. Going beyond the existing deraining wisdom, DEMore-Net is a joint learning paradigm that integrates depth estimation and MOR removal tasks to achieve superior rain removal. The depth information can offer additional meaningful guidance information based on distance, thus better helping DEMore-Net remove different types of rainwater. Moreover, this study explores normalization approaches in image deraining tasks and introduces a new Hybrid Normalization Block (HNB) to enhance the deraining performance of DEMore-Net. Extensive experiments conducted on synthetic datasets and real-world MOR photos fully validate the superiority of the proposed DEMore-Net. Code is available at https://github.com/yz-wang/DEMore-Net.
updated: Fri Mar 31 2023 02:05:45 GMT+0000 (UTC)
published: Fri Mar 31 2023 02:05:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト