arXiv reaDer
Boosting k-NN for categorization of natural scenes
 k最近傍(k-NN)分類ルールは、無数のコンピュータービジョンアプリケーションで非常に成功していることが証明されています。たとえば、画像の分類は、多くの場合、記述子の空間で最も近いプロトタイプ間の均一な投票に依存しています。その優れた特性にもかかわらず、古典的なk-NNルールは、高次元でスパースプロトタイプデータセットを処理する場合に大きな分散の影響を受けます。 k-NN分類を改善するためのいくつかの手法が提案されています。これらの手法は、最近傍の関係の変形または入力空間の変更に依存しています。この論文では、レバレッジドk-NNを誘導するUNN(Universal Nearest Neighbors)と呼ばれる新しいブースティングアルゴリズムを提案します。投票ルールを、k個の最も近いプロトタイプからの予測を線形に結合する強力な分類子として再定義します。代理リスクを最小限に抑えるために、UNNは弱い分類子を学習します。 UNNの主な機能は、どのプロトタイプが特定のクラスに最も関連しているかを学習できるため、効果的なデータ削減を可能にします。 Ripleyの合成2クラスデータセットに関する実験結果は、このようなフィルタリング戦略が「ノイズの多い」プロトタイプを拒否できることを示しています。 8つのクラスの自然シーンを含むデータベースで画像分類実験を実施しました。データフィルタリングによって計算コストを大幅に削減しながら、本手法が従来のk-NN分類よりも大幅に優れていることを示します。
The k-nearest neighbors (k-NN) classification rule has proven extremely successful in countless many computer vision applications. For example, image categorization often relies on uniform voting among the nearest prototypes in the space of descriptors. In spite of its good properties, the classic k-NN rule suffers from high variance when dealing with sparse prototype datasets in high dimensions. A few techniques have been proposed to improve k-NN classification, which rely on either deforming the nearest neighborhood relationship or modifying the input space. In this paper, we propose a novel boosting algorithm, called UNN (Universal Nearest Neighbors), which induces leveraged k-NN, thus generalizing the classic k-NN rule. We redefine the voting rule as a strong classifier that linearly combines predictions from the k closest prototypes. Weak classifiers are learned by UNN so as to minimize a surrogate risk. A major feature of UNN is the ability to learn which prototypes are the most relevant for a given class, thus allowing one for effective data reduction. Experimental results on the synthetic two-class dataset of Ripley show that such a filtering strategy is able to reject "noisy" prototypes. We carried out image categorization experiments on a database containing eight classes of natural scenes. We show that our method outperforms significantly the classic k-NN classification, while enabling significant reduction of the computational cost by means of data filtering.
updated: Fri Jan 08 2010 08:30:51 GMT+0000 (UTC)
published: Fri Jan 08 2010 08:30:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト