ディープハッシュ法は、大規模な画像検索のための最も効率的な近似最近傍探索手法であることが示されています。ただし、既存のディープハッシュ手法では、ケースベースの医用画像検索の小サンプルランキングのパフォーマンスが低くなります。返されるクエリ結果の上位の画像は、クエリ画像とは異なるクラスである可能性があります。このランキングの問題は、分類、関心領域(ROI)、およびハッシュ空間での小さなサンプルの情報損失が原因で発生します。ランキングの問題に対処するために、アテンションベースのトリプレットハッシュ(ATH)ネットワークと呼ばれるエンドツーエンドのフレームワークを提案し、分類、ROI、および少量のサンプル情報を保持する低次元ハッシュコードを学習します。 ATHのネットワーク構造に空間的注意モジュールを組み込んで、ROI情報に焦点を合わせます。空間アテンションモジュールは、チャネル軸に沿って共同で最大プーリング、要素ごとの最大、および要素ごとの平均操作を利用することにより、特徴マップの空間情報を集約します。トリプレットクロスエントロピー損失は、画像の分類情報と画像間の類似性をハッシュコードにマッピングするのに役立ちます。 2つのケースベースの医療データセットでの広範な実験は、提案されたATHが、最先端のディープハッシュ手法と比較して検索パフォーマンスをさらに向上させ、小さなサンプルのランキングパフォーマンスを向上させることができることを示しています。他の損失方法と比較して、トリプレットクロスエントロピー損失は分類パフォーマンスとハッシュコードの識別可能性を向上させることができます
Deep hashing methods have been shown to be the most efficient approximate nearest neighbor search techniques for large-scale image retrieval. However, existing deep hashing methods have a poor small-sample ranking performance for case-based medical image retrieval. The top-ranked images in the returned query results may be as a different class than the query image. This ranking problem is caused by classification, regions of interest (ROI), and small-sample information loss in the hashing space. To address the ranking problem, we propose an end-to-end framework, called Attention-based Triplet Hashing (ATH) network, to learn low-dimensional hash codes that preserve the classification, ROI, and small-sample information. We embed a spatial-attention module into the network structure of our ATH to focus on ROI information. The spatial-attention module aggregates the spatial information of feature maps by utilizing max-pooling, element-wise maximum, and element-wise mean operations jointly along the channel axis. The triplet cross-entropy loss can help to map the classification information of images and similarity between images into the hash codes. Extensive experiments on two case-based medical datasets demonstrate that our proposed ATH can further improve the retrieval performance compared to the state-of-the-art deep hashing methods and boost the ranking performance for small samples. Compared to the other loss methods, the triplet cross-entropy loss can enhance the classification performance and hash code-discriminability