arXiv reaDer
A Multiple Source Hourglass Deep Network for Multi-Focus Image Fusion
  Multi-Focus Image Fusionは、異なるフォーカスプレーンで取得した一連の画像の品質を改善しようとしています。タスクを解決するために、通常、活動レベルの測定と融合ルールが確立され、ソースから最も関連性の高い情報を選択して融合します。ただし、この種の方法の手作業による設計は非常に難しく、最適な全焦点画像が含まれていないソリューション空間に制限される場合があります。次に、ここで、ディープニューラルネットワークに基づく画像融合の2つの高速で簡単なアプローチを提案します。当社のソリューションは、エンドツーエンドでトレーニングされた複数ソースのHourglassアーキテクチャを使用しています。モデルはデータ駆動型であり、他の種類の融合問題に簡単に一般化できます。フォーカスマップの認識にはセグメンテーションアプローチが使用され、フュージョンには加重平均ルールが使用されます。回帰ベースの融合関数のトレーニング損失関数を設計しました。これにより、ネットワークはアクティビティレベルの測定と融合ルールの両方を学習できます。実験結果は、本手法が520X520解像度の画像の計算効率を60倍向上させた最新の手法に匹敵する結果をもたらすことを示しています。
Multi-Focus Image Fusion seeks to improve the quality of an acquired burst of images with different focus planes. For solving the task, an activity level measurement and a fusion rule are typically established to select and fuse the most relevant information from the sources. However, the design of this kind of method by hand is really hard and sometimes restricted to solution spaces where the optimal all-in-focus images are not contained. Then, we propose here two fast and straightforward approaches for image fusion based on deep neural networks. Our solution uses a multiple source Hourglass architecture trained in an end-to-end fashion. Models are data-driven and can be easily generalized for other kinds of fusion problems. A segmentation approach is used for recognition of the focus map, while the weighted average rule is used for fusion. We designed a training loss function for our regression-based fusion function, which allows the network to learn both the activity level measurement and the fusion rule. Experimental results show our approach has comparable results to the state-of-the-art methods with a 60X increase of computational efficiency for 520X520 resolution images.
updated: Wed Aug 28 2019 21:01:24 GMT+0000 (UTC)
published: Wed Aug 28 2019 21:01:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト