arXiv reaDer
半教師あり回帰深層学習モデルを使用した古い絵画の平織りのスレッドカウント
Thread Counting in Plain Weave for Old Paintings Using Semi-Supervised Regression Deep Learning Models
この作業では、平織りキャンバス分析のスレッド密度推定を実行するために、深層学習に基づく回帰アプローチを開発しています。以前のアプローチはフーリエ解析に基づいていました。これは、いくつかのシナリオでは非常に堅牢ですが、他のいくつかのシナリオでは失敗します。機械学習ツールでは、手元の絵画の事前ラベリング、または糸の交差ポイントのセグメンテーションが含まれます。事前にラベル付けする必要のないすべてのシナリオ。交差点の位置を特定した後に密度の推定が実行されるため、セグメンテーション アプローチは時間がかかります。この新しい提案では、回帰深層学習モデルを使用して画像からスレッドの密度を直接計算することにより、このステップを回避します。また、入力画像の初期前処理にいくつかの改善を組み込み、最終的なエラーに影響を与えます。最良のモデルを保持するために、いくつかのモデルが提案され、分析されます。さらに、半教師ありアプローチを導入することにより、密度推定誤差をさらに減らします。私たちの新しいアルゴリズムのパフォーマンスは、Ribera、Velázquez、および Poussin による研究で分析され、以前のアプローチの結果と比較されます。最後に、この方法を実践して、プラド美術館での作者変更または傑作をサポートします。
In this work, the authors develop regression approaches based on deep learning to perform thread density estimation for plain weave canvas analysis. Previous approaches were based on Fourier analysis, which is quite robust for some scenarios but fails in some others, in machine learning tools, that involve pre-labeling of the painting at hand, or the segmentation of thread crossing points, that provides good estimations in all scenarios with no need of pre-labeling. The segmentation approach is time-consuming as the estimation of the densities is performed after locating the crossing points. In this novel proposal, we avoid this step by computing the density of threads directly from the image with a regression deep learning model. We also incorporate some improvements in the initial preprocessing of the input image with an impact on the final error. Several models are proposed and analyzed to retain the best one. Furthermore, we further reduce the density estimation error by introducing a semi-supervised approach. The performance of our novel algorithm is analyzed with works by Ribera, Velázquez, and Poussin where we compare our results to the ones of previous approaches. Finally, the method is put into practice to support the change of authorship or a masterpiece at the Museo del Prado.
updated: Fri Mar 31 2023 07:54:40 GMT+0000 (UTC)
published: Tue Mar 28 2023 14:15:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト