新しいデータに直面したときに人工エージェントが能力を向上させる能力は、人工知能における未解決の課題です。このような場合に直面する主な課題は、壊滅的な忘却です。つまり、新しいデータが取り込まれると、ニューラルネットワークが過去のデータに適合しなくなる傾向があります。アプローチの最初のグループは、新しい知識に対応するための深いモデル容量を増やすことによって、壊滅的な忘却に取り組みます。 2番目のタイプのアプローチは、深いモデルサイズを修正し、モデルの安定性と可塑性の間の適切な妥協点を確保することを目的とするメカニズムを導入します。最初のタイプのアルゴリズムは徹底的に比較されましたが、これは固定サイズモデルを利用するメソッドには当てはまりません。ここでは、後者に焦点を当て、それらを共通の概念的および実験的フレームワークに配置し、次の貢献を提案します:(1)インクリメンタル学習アルゴリズムの6つの望ましいプロパティを定義し、これらのプロパティに従って分析します。(2)の統一された形式化を導入します。クラスインクリメンタル学習問題、(3)データセットの数、データセットのサイズ、制限されたメモリのサイズ、インクリメンタル状態の数の点で既存のものよりも徹底的な共通の評価フレームワークを提案します。(4)の有用性を調査します。過去の模範選択の群れは、(5)壊滅的な忘却に取り組むために知識蒸留を使用せずに競争力のあるパフォーマンスを得ることが可能であるという実験的証拠を提供し、(6)共通のオープンソースリポジトリにすべてのテスト済みメソッドを統合することによって再現性を促進します。主な実験結果は、既存のアルゴリズムのいずれも、評価されたすべての設定で最良の結果を達成しないということです。過去のクラスの制限されたメモリが許可されているかどうかにかかわらず、重要な違いが特に発生します。
The ability of artificial agents to increment their capabilities when confronted with new data is an open challenge in artificial intelligence. The main challenge faced in such cases is catastrophic forgetting, i.e., the tendency of neural networks to underfit past data when new ones are ingested. A first group of approaches tackles catastrophic forgetting by increasing deep model capacity to accommodate new knowledge. A second type of approaches fix the deep model size and introduce a mechanism whose objective is to ensure a good compromise between stability and plasticity of the model. While the first type of algorithms were compared thoroughly, this is not the case for methods which exploit a fixed size model. Here, we focus on the latter, place them in a common conceptual and experimental framework and propose the following contributions: (1) define six desirable properties of incremental learning algorithms and analyze them according to these properties, (2) introduce a unified formalization of the class-incremental learning problem, (3) propose a common evaluation framework which is more thorough than existing ones in terms of number of datasets, size of datasets, size of bounded memory and number of incremental states, (4) investigate the usefulness of herding for past exemplars selection, (5) provide experimental evidence that it is possible to obtain competitive performance without the use of knowledge distillation to tackle catastrophic forgetting, and (6) facilitate reproducibility by integrating all tested methods in a common open-source repository. The main experimental finding is that none of the existing algorithms achieves the best results in all evaluated settings. Important differences arise notably if a bounded memory of past classes is allowed or not.