この作業では、マルチドメイン学習のための新しいアルゴリズムを紹介します。事前にトレーニングされたアーキテクチャと一連のビジュアルドメインが順番に受信されるとすると、マルチドメイン学習の目標は、すべてのドメインでタスクを一緒に実行する単一のモデルを作成することです。最近の研究では、学習したバイナリ変数を使用して、特定の元のconv-netの内部重みをマスクすることにより、この問題に対処する方法が示されました。この作業では、元のネットワークパラメータのアフィン変換によるマルチドメイン学習のためのバイナリマスクベースのモデルの一般的な定式化を提供します。私たちの定式化は、新しいドメインへの大幅に高いレベルの適応を実現し、追加のドメインごとにネットワークパラメータごとに1ビットをわずかに超える必要がある一方で、ドメイン固有のモデルに匹敵するパフォーマンスを実現します。 2つの人気のあるベンチマークでの実験は、私たちのアプローチの力を示しており、ビジュアル十種競技チャレンジの最先端の方法に近いパフォーマンスを達成しています。
In this work, we present a new, algorithm for multi-domain learning. Given a pretrained architecture and a set of visual domains received sequentially, the goal of multi-domain learning is to produce a single model performing a task in all the domains together. Recent works showed how we can address this problem by masking the internal weights of a given original conv-net through learned binary variables. In this work, we provide a general formulation of binary mask based models for multi-domain learning by affine transformations of the original network parameters. Our formulation obtains significantly higher levels of adaptation to new domains, achieving performances comparable to domain-specific models while requiring slightly more than 1 bit per network parameter per additional domain. Experiments on two popular benchmarks showcase the power of our approach, achieving performances close to state-of-the-art methods on the Visual Decathlon Challenge.