arXiv reaDer
DEYOv2: エンドツーエンドの物体検出のための貪欲なマッチングによるランク機能
DEYOv2: Rank Feature with Greedy Matching for End-to-End Object Detection
この論文では、第一世代の DEYO (DETR with YOLO) モデルの改良版である DEYOv2 と呼ばれる新しい物体検出器を紹介します。 DEYOv2 は、前バージョンと同様に、モデルのトレーニングを加速し、パフォーマンスを向上させるために進歩的な推論アプローチを採用しています。この研究では、最適化における 1 対 1 マッチングの限界を詳しく調査し、ランク特徴や貪欲マッチングなど、問題に効果的に対処するソリューションを提案しています。このアプローチにより、DEYOv2 の第 3 ステージは、NMS を必要とせずに第 1 ステージと第 2 ステージからの情報取得を最大化し、エンドツーエンドの最適化を実現できます。 DEYOv2 は、密なクエリ、疎なクエリ、1 対多のマッチング、および 1 対 1 のマッチングを組み合わせることで、それぞれの方法の利点を活用します。同じ設定の下では、既存のすべてのクエリベースのエンドツーエンド検出器よりも優れたパフォーマンスを発揮します。 ResNet-50 をバックボーンとして使用し、COCO データセットのマルチスケール機能を使用すると、DEYOv2 は 12 エポックで 51.1 AP、24 エポックで 51.8 AP を達成します。エンドツーエンド モデル DINO と比較して、DEYOv2 は 2 つのエポック設定で 2.1 AP と 1.4 AP の大幅なパフォーマンス向上を実現します。私たちの知る限り、DEYOv2 は、従来の検出器とクエリベースの検出器のそれぞれの長所を組み合わせた、初めての完全なエンドツーエンドのオブジェクト検出器です。
This paper presents a novel object detector called DEYOv2, an improved version of the first-generation DEYO (DETR with YOLO) model. DEYOv2, similar to its predecessor, DEYOv2 employs a progressive reasoning approach to accelerate model training and enhance performance. The study delves into the limitations of one-to-one matching in optimization and proposes solutions to effectively address the issue, such as Rank Feature and Greedy Matching. This approach enables the third stage of DEYOv2 to maximize information acquisition from the first and second stages without needing NMS, achieving end-to-end optimization. By combining dense queries, sparse queries, one-to-many matching, and one-to-one matching, DEYOv2 leverages the advantages of each method. It outperforms all existing query-based end-to-end detectors under the same settings. When using ResNet-50 as the backbone and multi-scale features on the COCO dataset, DEYOv2 achieves 51.1 AP and 51.8 AP in 12 and 24 epochs, respectively. Compared to the end-to-end model DINO, DEYOv2 provides significant performance gains of 2.1 AP and 1.4 AP in the two epoch settings. To the best of our knowledge, DEYOv2 is the first fully end-to-end object detector that combines the respective strengths of classical detectors and query-based detectors.
updated: Mon Jul 03 2023 01:52:45 GMT+0000 (UTC)
published: Thu Jun 15 2023 14:42:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト