コンピュータビジョンの基本的なタスクの1つとして、オブジェクト検出は多くのインテリジェントアプリケーションで広く使用されています。ただし、オブジェクト検出アルゴリズムは通常、計算が重いため、リソースに制約のあるエッジデバイスでの実装が妨げられます。エッジクラウドデバイス上のCNNパーティションなど、現在のエッジクラウドコラボレーション方法は、中間結果の巨大なデータサイズが莫大な通信コストをもたらすため、オブジェクト検出には適していません。この課題に対処するために、クラウドに大きなモデルを展開し、エッジデバイスに小さなモデルを展開する小さな大きなモデルフレームワークを提案します。データを受信すると、エッジデバイスは難しいケースの弁別器を操作して、画像の特定のセマンティクスに従って画像を簡単なケースと難しいケースに分類します。簡単なケースはエッジでローカルに処理され、難しいケースはクラウドにアップロードされます。 2つの異なるオブジェクト検出アルゴリズムを使用したVOC、COCO、HELMETデータセットの実験結果は、SSDを使用した場合、スモールビッグモデルシステムがクラウドにアップロードされた画像が約50%で、オブジェクトの94.01%〜97.84%を検出できることを示しています。さらに、スモールビッグモデルは、すべての画像をクラウドにアップロードするスキームのエンドツーエンドmAPの平均で91.22%〜92.52%に達します。
As one of the basic tasks of computer vision, object detection has been widely used in many intelligent applications. However, object detection algorithms are usually heavyweight in computation, hindering their implementations on resource-constrained edge devices. Current edge-cloud collaboration methods, such as CNN partition over Edge-cloud devices, are not suitable for object detection since the huge data size of the intermediate results will introduce extravagant communication costs. To address this challenge, we propose a small-big model framework that deploys a big model in the cloud and a small model on the edge devices. Upon receiving data, the edge device operates a difficult-case discriminator to classify the images into easy cases and difficult cases according to the specific semantics of the images. The easy cases will be processed locally at the edge, and the difficult cases will be uploaded to the cloud. Experimental results on the VOC, COCO, HELMET datasets using two different object detection algorithms demonstrate that the small-big model system can detect 94.01%-97.84% of objects with only about 50% images uploaded to the cloud when using SSD. In addition, the small-big model averagely reaches 91.22%- 92.52% end-to-end mAP of the scheme that uploading all images to the cloud.