ディープラーニングは、大規模なデータセットのトレーニングによって繁栄しました。ただし、ロボットアプリケーションでは、サンプルの効率が重要です。いくつかのラベル付きサンプルから最終的なセグメンテーションレイヤーの重みを構築する新しい適応型マスクプロキシ法を提案します。ラベルでマスクされたベース埋め込みの多重解像度平均プーリングを使用して、新しいクラスのポジティブプロキシとして機能し、以前に学習したクラスシグネチャと融合します。私たちの方法は、PASCAL- $ 5 ^ i $データセットで評価され、数ショットのセマンティックセグメンテーションで最先端の性能を発揮します。以前の方法とは異なり、このアプローチでは、パラメータまたはプロトタイプを推定するために2番目のブランチを必要としないため、2ストリームモーションおよび外観ベースのセグメンテーションネットワークで使用できます。さらに、オブジェクトセグメンテーションの継続的な学習を評価するための新しいセットアップを提案します。コードはhttps://github.com/MSiam/AdaptiveMaskedProxiesで公開されています。
Deep learning has thrived by training on large-scale datasets. However, in robotics applications sample efficiency is critical. We propose a novel adaptive masked proxies method that constructs the final segmentation layer weights from few labelled samples. It utilizes multi-resolution average pooling on base embeddings masked with the label to act as a positive proxy for the new class, while fusing it with the previously learned class signatures. Our method is evaluated on PASCAL-$5^i$ dataset and outperforms the state-of-the-art in the few-shot semantic segmentation. Unlike previous methods, our approach does not require a second branch to estimate parameters or prototypes, which enables it to be used with 2-stream motion and appearance based segmentation networks. We further propose a novel setup for evaluating continual learning of object segmentation which we name incremental PASCAL (iPASCAL) where our method outperforms the baseline method. Our code is publicly available at https://github.com/MSiam/AdaptiveMaskedProxies.