エッジデバイスでディープニューラルネットワーク(DNN)アプリケーションを処理する場合、モデルを継続的に更新することが重要です。実際の受信データでモデルを更新するのが理想的ですが、ラベル付けや通信コストなどの制限により、すべてを使用できるとは限りません。したがって、デバイスでのトレーニング(アクティブラーニング)に使用するデータをフィルタリングして選択する必要があります。この論文では、エッジデバイス上のDNNの実用的なアクティブラーニング問題を形式化し、この問題に取り組むための一般的なタスクにとらわれないフレームワークを提案します。これにより、ストリームの劣モジュラ最大化になります。このフレームワークは、少ない計算リソースで実行できるほど軽量ですが、劣モジュラ特性のおかげで理論的に品質が保証されているソリューションを提供します。このフレームワークを通じて、以前のアクティブラーニング研究で提案された方法を使用するなど、データ選択基準を柔軟に構成できます。実際のシナリオをシミュレートするために、実際の設定で分類タスクとオブジェクト検出タスクの両方に対するアプローチを評価します。私たちの研究の結果は、提案されたフレームワークが、実際のデバイスで実用的な速度で実行されている間、両方のタスクで他のすべての方法よりも優れていることを示しています。
When dealing with deep neural network (DNN) applications on edge devices, continuously updating the model is important. Although updating a model with real incoming data is ideal, using all of them is not always feasible due to limits, such as labeling and communication costs. Thus, it is necessary to filter and select the data to use for training (i.e., active learning) on the device. In this paper, we formalize a practical active learning problem for DNNs on edge devices and propose a general task-agnostic framework to tackle this problem, which reduces it to a stream submodular maximization. This framework is light enough to be run with low computational resources, yet provides solutions whose quality is theoretically guaranteed thanks to the submodular property. Through this framework, we can configure data selection criteria flexibly, including using methods proposed in previous active learning studies. We evaluate our approach on both classification and object detection tasks in a practical setting to simulate a real-life scenario. The results of our study show that the proposed framework outperforms all other methods in both tasks, while running at a practical speed on real devices.