コンピューター ビジョンの多くの深層回帰アプローチでは、回帰損失に分類損失を追加すると、結果が向上すると報告されています。ここでは、これが実際になぜ役立つのか、またどのような場合に有益なのかを検討します。そのために、正確に制御されたデータセットの変動とデータ サンプリングから開始し、不均衡なデータを使用した回帰では、分類損失を追加した効果が最も顕著であることがわかりました。均衡型回帰損失と不均衡型回帰損失の関係を形式化することで、これらの経験的発見を説明します。最後に、深度推定 (NYUD2-DIR) と年齢推定 (IMDB-WIKI-DIR) のための 2 つの実際の不均衡な画像データセット、および不均衡なビデオの進行予測 (Breakfast) の問題について、我々の発見が当てはまることを示します。主なポイントは次のとおりです。回帰タスクの場合、データ サンプリングが不均衡な場合は、分類損失を追加します。
A number of computer vision deep regression approaches report improved results when adding a classification loss to the regression loss. Here, we explore why this is useful in practice and when it is beneficial. To do so, we start from precisely controlled dataset variations and data samplings and find that the effect of adding a classification loss is the most pronounced for regression with imbalanced data. We explain these empirical findings by formalizing the relation between the balanced and imbalanced regression losses. Finally, we show that our findings hold on two real imbalanced image datasets for depth estimation (NYUD2-DIR), and age estimation (IMDB-WIKI-DIR), and on the problem of imbalanced video progress prediction (Breakfast). Our main takeaway is: for a regression task, if the data sampling is imbalanced, then add a classification loss.