コンピューター ビジョン ドメイン、特に医療画像やリモート センシングの分野で、非常に大きな画像を小さなオブジェクトで分類することを目標とする場合、ますます多くのアプリケーションが困難になります。より具体的には、これらのタイプの分類タスクは 2 つの重要な課題に直面します: i) ターゲット データセットの入力画像のサイズは通常メガピクセルのオーダーですが、既存のディープ アーキテクチャはメモリの制約によりそのような大きな画像で簡単に動作しません。したがって、これらの画像を処理するためのメモリ効率の高い方法を探しています。 ii) 入力画像のごく一部のみが対象のラベルについて情報を提供し、その結果、対象領域 (ROI) に対する画像の比率が低くなります。ただし、現在の畳み込みニューラル ネットワーク (CNN) のほとんどは、比較的大きな ROI と小さな画像サイズ (サブメガピクセル) を持つ画像分類データセット用に設計されています。既存のアプローチは、これら 2 つの課題に個別に対処してきました。ズームイン ネットワークと呼ばれるエンド ツー エンドの CNN モデルを紹介します。これは、単一の GPU を使用して小さなオブジェクトを含む大きな画像を分類するために階層的なアテンション サンプリングを活用します。 2 つの大きな画像データセットと 1 つのギガピクセル データセットでこの方法を評価します。実験結果は、モデルが既存の方法よりも高い精度を達成する一方で、必要な計算リソースが少ないことを示しています。
An increasing number of applications in the computer vision domain, specially, in medical imaging and remote sensing, are challenging when the goal is to classify very large images with tiny objects. More specifically, these type of classification tasks face two key challenges: i) the size of the input image in the target dataset is usually in the order of megapixels, however, existing deep architectures do not easily operate on such big images due to memory constraints, consequently, we seek a memory-efficient method to process these images; and ii) only a small fraction of the input images are informative of the label of interest, resulting in low region of interest (ROI) to image ratio. However, most of the current convolutional neural networks (CNNs) are designed for image classification datasets that have relatively large ROIs and small image size (sub-megapixel). Existing approaches have addressed these two challenges in isolation. We present an end-to-end CNN model termed Zoom-In network that leverages hierarchical attention sampling for classification of large images with tiny objects using a single GPU. We evaluate our method on two large-image datasets and one gigapixel dataset. Experimental results show that our model achieves higher accuracy than existing methods while requiring less computing resources.