ディープニューラルネットワークの検索固有のトレーニングが最近傍画像の検索品質に有益であることが広く示されていますが、これらのモデルのほとんどは、ランドマーク画像のドメインでトレーニングおよびテストされています。ただし、一部のアプリケーションは他のさまざまなドメインの画像を使用するため、優れた一般化プロパティを備えたネットワーク(汎用CBIRモデル)が必要です。私たちの知る限り、一般的な画像検索品質に関してベンチマークモデルにテストプロトコルが導入されたことはありません。人気のある画像検索テストセットを分析した後、GPR1200を手動でキュレートすることにしました。これは、使いやすく、アクセスしやすいが、幅広い画像カテゴリを持つやりがいのあるベンチマークデータセットです。このベンチマークは、その後、一般化の品質について、さまざまなアーキテクチャのさまざまな事前トレーニング済みモデルを評価するために使用されます。大規模な事前トレーニングが検索パフォーマンスを大幅に向上させることを示し、適切な微調整によってこれらのプロパティをさらに向上させる方法に関する実験を提示します。これらの有望な成果により、汎用CBIRの研究テーマへの関心を高めていきたいと考えています。
Even though it has extensively been shown that retrieval specific training of deep neural networks is beneficial for nearest neighbor image search quality, most of these models are trained and tested in the domain of landmarks images. However, some applications use images from various other domains and therefore need a network with good generalization properties - a general-purpose CBIR model. To the best of our knowledge, no testing protocol has so far been introduced to benchmark models with respect to general image retrieval quality. After analyzing popular image retrieval test sets we decided to manually curate GPR1200, an easy to use and accessible but challenging benchmark dataset with a broad range of image categories. This benchmark is subsequently used to evaluate various pretrained models of different architectures on their generalization qualities. We show that large-scale pretraining significantly improves retrieval performance and present experiments on how to further increase these properties by appropriate fine-tuning. With these promising results, we hope to increase interest in the research topic of general-purpose CBIR.