arXiv reaDer
CoReFusion: ガイド付き熱超解像のための対照的な正則化融合
CoReFusion: Contrastive Regularized Fusion for Guided Thermal Super-Resolution
赤外線画像は、低照度環境で良好に機能するため、通常の可視範囲画像に比べて多くの利点があります。超解像度アプローチは、低コストで低解像度の熱センサーからの測定値を使用して正確な高解像度の熱画像を複製することにより、その有用性を広げることができます。画像間のスペクトル範囲の不一致により、可視範囲画像を利用した熱画像のガイド付き超解像は困難です。ただし、可視範囲画像のキャプチャに失敗した場合、重要な領域でのアプリケーションの操作が妨げられる可能性があります。熱画像のガイド付き超解像のための新しいデータ融合フレームワークと正則化手法を提示します。提案されたアーキテクチャは、モダリティの 1 つ、つまり高解像度の RGB 画像または低解像度の熱画像が欠けていてもパフォーマンスを維持する能力を備えた、計算コストが低く軽量であり、欠落したデータが存在する場合でも堅牢になるように設計されています。 .提案された方法は、現実世界のシナリオでモダリティが欠落しているという頻繁に発生する問題に対する有望な解決策を提示します。コードは https://github.com/Kasliwal17/CoReFusion で入手できます。
Thermal imaging has numerous advantages over regular visible-range imaging since it performs well in low-light circumstances. Super-Resolution approaches can broaden their usefulness by replicating accurate high-resolution thermal pictures using measurements from low-cost, low-resolution thermal sensors. Because of the spectral range mismatch between the images, Guided Super-Resolution of thermal images utilizing visible range images is difficult. However, In case of failure to capture Visible Range Images can prevent the operations of applications in critical areas. We present a novel data fusion framework and regularization technique for Guided Super Resolution of Thermal images. The proposed architecture is computationally in-expensive and lightweight with the ability to maintain performance despite missing one of the modalities, i.e., high-resolution RGB image or the lower-resolution thermal image, and is designed to be robust in the presence of missing data. The proposed method presents a promising solution to the frequently occurring problem of missing modalities in a real-world scenario. Code is available at https://github.com/Kasliwal17/CoReFusion .
updated: Mon Apr 24 2023 17:59:20 GMT+0000 (UTC)
published: Mon Apr 03 2023 14:21:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト