arXiv reaDer
FastInst: リアルタイム インスタンス セグメンテーションのためのシンプルなクエリベース モデル
FastInst: A Simple Query-Based Model for Real-Time Instance Segmentation
インスタンスのセグメンテーションにおける最近の注目は、クエリベースのモデルに集中しています。非最大抑制 (NMS) がなく、エンドツーエンドであるにもかかわらず、高精度のリアルタイム ベンチマークでのこれらのモデルの優位性は十分に実証されていません。このホワイト ペーパーでは、効率的なインスタンス セグメンテーション アルゴリズム設計におけるクエリ ベース モデルの強力な可能性を示します。リアルタイムのインスタンスセグメンテーションのためのシンプルで効果的なクエリベースのフレームワークである FastInst を紹介します。 FastInst はリアルタイム速度 (つまり 32.5 FPS) で実行でき、追加機能なしで COCO テスト開発で 40 を超える AP (つまり 40.5 AP) を生成します。具体的には、FastInst は、最近導入された Mask2Former のメタ アーキテクチャに従います。その主要な設計には、インスタンス アクティベーション ガイド付きクエリ、デュアル パス更新戦略、およびグラウンド トゥルース マスク ガイド付き学習が含まれます。これにより、パフォーマンスを向上させながら、より軽量なピクセル デコーダー、より少ない Transformer デコーダー レイヤーを使用できるようになります。実験は、FastInst が、速度と精度の両方で、強力な完全畳み込みベースラインを含むほとんどの最先端のリアルタイム対応物よりも優れていることを示しています。コードは https://github.com/junjiehe96/FastInst にあります。
Recent attention in instance segmentation has focused on query-based models. Despite being non-maximum suppression (NMS)-free and end-to-end, the superiority of these models on high-accuracy real-time benchmarks has not been well demonstrated. In this paper, we show the strong potential of query-based models on efficient instance segmentation algorithm designs. We present FastInst, a simple, effective query-based framework for real-time instance segmentation. FastInst can execute at a real-time speed (i.e., 32.5 FPS) while yielding an AP of more than 40 (i.e., 40.5 AP) on COCO test-dev without bells and whistles. Specifically, FastInst follows the meta-architecture of recently introduced Mask2Former. Its key designs include instance activation-guided queries, dual-path update strategy, and ground truth mask-guided learning, which enable us to use lighter pixel decoders, fewer Transformer decoder layers, while achieving better performance. The experiments show that FastInst outperforms most state-of-the-art real-time counterparts, including strong fully convolutional baselines, in both speed and accuracy. Code can be found at https://github.com/junjiehe96/FastInst .
updated: Wed Mar 15 2023 13:06:30 GMT+0000 (UTC)
published: Wed Mar 15 2023 13:06:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト