arXiv reaDer
アダプティブクラスアクティベーションマッピングによるマルチビュー機能拡張
Multi-view Feature Augmentation with Adaptive Class Activation Mapping
モデルのパフォーマンスを向上させるためにマルチビューのローカル機能を抽出して活用する、画像分類用に構築されたエンドツーエンドのトレーニング可能な機能拡張モジュールを提案します。グローバル平均プーリング(GAP)を使用してグローバルビューのみからベクトル化された特徴を抽出するのとは異なり、モデルの堅牢性を向上させるために、多様なマルチビューローカル特徴をサンプリングしてアンサンブルすることを提案します。クラスを表すローカル特徴をサンプリングするために、提案されたAdaCAM(Adaptive Class Activation Mapping)を介して特徴マップのクラス識別ローカル領域に効率的かつ適応的に対応する単純な補助分類器ヘッド(1つの1×1畳み込み層のみで構成される)を組み込みます。広範な実験により、マルチビュー機能拡張モジュールによって達成された一貫した顕著なパフォーマンスの向上が実証されています。
We propose an end-to-end-trainable feature augmentation module built for image classification that extracts and exploits multi-view local features to boost model performance. Different from using global average pooling (GAP) to extract vectorized features from only the global view, we propose to sample and ensemble diverse multi-view local features to improve model robustness. To sample class-representative local features, we incorporate a simple auxiliary classifier head (comprising only one 1×1 convolutional layer) which efficiently and adaptively attends to class-discriminative local regions of feature maps via our proposed AdaCAM (Adaptive Class Activation Mapping). Extensive experiments demonstrate consistent and noticeable performance gains achieved by our multi-view feature augmentation module.
updated: Sun Feb 18 2024 11:09:05 GMT+0000 (UTC)
published: Sun Jun 26 2022 19:05:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト