arXiv reaDer
オンデマンドでオブジェクトを検出するための変形可能な検出器
Morphable Detector for Object Detection on Demand
インテリジェントロボットの多くの新しいアプリケーションは、最小限のオンライン作業でその場で新しいクラスのオブジェクトを検出することが望ましい新しい環境を探索して理解する必要があります。これは、オブジェクト検出オンデマンド(ODOD)タスクです。大量のデータにその場で注釈を付けることは不可能であり、組み込みシステムは通常、トレーニングに不可欠なバックプロパゲーションを実行できないため、困難です。追加のトレーニングが必要なため、ほとんどの既存の数ショット検出方法がここで直面します。いくつかのサンプルからオンラインで推定された変更可能なパラメーターの一部を単純に「モーフィング」して、追加のトレーニングなしで新しいクラスを検出する、新しいモーフィング可能な検出器(MD)を提案します。 MDには2つのパラメーターセットがあります。1つは機能の埋め込み用で、もう1つはクラス表現用(「プロトタイプ」と呼ばれます)です。各クラスは、視覚的埋め込みと意味的埋め込みを統合することによって学習される非表示のプロトタイプに関連付けられています。 MDの学習は、EMのようなアプローチでの機能の埋め込みとプロトタイプの代替学習に基づいており、新しいクラスのいくつかのサンプルから未知のプロトタイプを復元できます。 MDが学習されると、新しいクラスのいくつかのサンプルを使用して、プロトタイプを直接計算し、オンラインモーフィングプロセスを実行できます。 Pascal、COCO、FSODのデータセットでMDの優位性を示しました。コードはhttps://github.com/Zhaoxiangyun/Morphable-Detectorで入手できます。
Many emerging applications of intelligent robots need to explore and understand new environments, where it is desirable to detect objects of novel classes on the fly with minimum online efforts. This is an object detection on demand (ODOD) task. It is challenging, because it is impossible to annotate a large number of data on the fly, and the embedded systems are usually unable to perform back-propagation which is essential for training. Most existing few-shot detection methods are confronted here as they need extra training. We propose a novel morphable detector (MD), that simply "morphs" some of its changeable parameters online estimated from the few samples, so as to detect novel classes without any extra training. The MD has two sets of parameters, one for the feature embedding and the other for class representation (called "prototypes"). Each class is associated with a hidden prototype to be learned by integrating the visual and semantic embeddings. The learning of the MD is based on the alternate learning of the feature embedding and the prototypes in an EM-like approach which allows the recovery of an unknown prototype from a few samples of a novel class. Once an MD is learned, it is able to use a few samples of a novel class to directly compute its prototype to fulfill the online morphing process. We have shown the superiority of the MD in Pascal, COCO and FSOD datasets. The code is available https://github.com/Zhaoxiangyun/Morphable-Detector.
updated: Sun Oct 10 2021 22:29:47 GMT+0000 (UTC)
published: Sun Oct 10 2021 22:29:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト