既存の継続学習手法は、タスク増分学習(TIL)またはクラス増分学習(CIL)の問題のいずれかに焦点を当てていますが、両方には焦点を当てていません。 CILとTILは主に、TILのテスト中に各テストサンプルにタスクIDが提供されるという点で異なりますが、CILには提供されません。一方の問題を対象とした継続的な学習方法には、もう一方の問題に制限があります。この論文は、両方の問題を解決するために、CLOMと呼ばれる分布外(OOD)検出とタスクマスキングに基づく新しい統一されたアプローチを提案します。重要な目新しさは、各タスクが従来の教師あり学習モデルではなくOOD検出モデルとしてトレーニングされ、タスクマスクが各タスクを保護して忘却を防ぐようにトレーニングされていることです。私たちの評価は、CLOMが既存の最先端のベースラインを大幅に上回っていることを示しています。 6回の実験でのCLOMの平均TIL/CIL精度は87.6/67.9%ですが、最良のベースラインの精度はわずか82.4 / 55.0%です。
Existing continual learning techniques focus on either task incremental learning (TIL) or class incremental learning (CIL) problem, but not both. CIL and TIL differ mainly in that the task-id is provided for each test sample during testing for TIL, but not provided for CIL. Continual learning methods intended for one problem have limitations on the other problem. This paper proposes a novel unified approach based on out-of-distribution (OOD) detection and task masking, called CLOM, to solve both problems. The key novelty is that each task is trained as an OOD detection model rather than a traditional supervised learning model, and a task mask is trained to protect each task to prevent forgetting. Our evaluation shows that CLOM outperforms existing state-of-the-art baselines by large margins. The average TIL/CIL accuracy of CLOM over six experiments is 87.6/67.9% while that of the best baselines is only 82.4/55.0%.