アートワークのクラスタリングは、いくつかの理由で困難です。一方では、ドメイン知識と視覚に基づいて意味のあるパターンを認識することは非常に困難です。一方、高次元のピクセル空間に従来のクラスタリングと特徴削減手法を適用しても効果がない場合があります。これらの問題に対処するために、この論文では DELIUS を提案します。DELIUS は、ビジュアル アートをクラスタリングするためのディープ ラーニング アプローチです。この方法では、事前にトレーニングされた畳み込みネットワークを使用して特徴を抽出し、これらの特徴をディープに埋め込まれたクラスタリング モデルにフィードします。そこでは、入力データを潜在空間にマッピングするタスクが、一連のクラスター重心を見つけるタスクと一緒に最適化されます。この潜在空間。定量的および定性的な実験結果は、提案された方法の有効性を示しています。 DELIUS は、美術分析に関連するいくつかのタスク、特に視覚的なリンクの検索と絵画データセットの歴史的知識の発見に役立ちます。
Clustering artworks is difficult for several reasons. On the one hand, recognizing meaningful patterns based on domain knowledge and visual perception is extremely hard. On the other hand, applying traditional clustering and feature reduction techniques to the highly dimensional pixel space can be ineffective. To address these issues, in this paper we propose DELIUS: a DEep learning approach to cLustering vIsUal artS. The method uses a pre-trained convolutional network to extract features and then feeds these features into a deep embedded clustering model, where the task of mapping the input data to a latent space is jointly optimized with the task of finding a set of cluster centroids in this latent space. Quantitative and qualitative experimental results show the effectiveness of the proposed method. DELIUS can be useful for several tasks related to art analysis, in particular visual link retrieval and historical knowledge discovery in painting datasets.