単一のネットワーク内で複数のタスクを学習するディープマルチタスク方式が、最近ますます注目を集めています。この注目の燃えるポイントは、タスク間の関係をキャプチャする能力です。現在のアプローチは、重みの共有のみに依存するか、ベイズの連鎖律を使用してタスクの同時分布を分解することにより、明示的な依存関係モデリングを追加します。後者の戦略で包括的なタスク間関係モデリングが得られる場合は、順序付けされていないタスクセットに任意の順序を課す必要があります。最も重要なことは、このシーケンスの順序の選択が、パフォーマンスの変動の重要な原因として特定されていることです。本論文では、共同タスク順序最適化を伴うマルチタスク学習法であるマルチオーダーネットワーク(MONET)を提示した。 MONETは、バーコフ多面体内のソフトオーダーモデリングに基づく微分可能なオーダー選択を使用して、タスクごとの反復モジュールを最適なチェーンオーダーで共同で学習します。さらに、ウォームアップと注文ドロップアウトを導入して、注文の探索を促進することで注文の選択を強化します。実験的に、最初にMONETの容量を検証して、おもちゃの環境で最適な順序を取得します。次に、属性検出シナリオを使用して、MONETがさまざまな依存関係設定で既存のマルチタスクベースラインよりも優れていることを示します。最後に、MONETがフェイシャルアクションユニット検出の最先端のパフォーマンスを大幅に拡張することを示します。
Deep multi-task methods, where several tasks are learned within a single network, have recently attracted increasing attention. Burning point of this attention is their capacity to capture inter-task relationships. Current approaches either only rely on weight sharing, or add explicit dependency modelling by decomposing the task joint distribution using Bayes chain rule. If the latter strategy yields comprehensive inter-task relationships modelling, it requires imposing an arbitrary order into an unordered task set. Most importantly, this sequence ordering choice has been identified as a critical source of performance variations. In this paper, we present Multi-Order Network (MONET), a multi-task learning method with joint task order optimization. MONET uses a differentiable order selection based on soft order modelling inside Birkhoff's polytope to jointly learn task-wise recurrent modules with their optimal chaining order. Furthermore, we introduce warm up and order dropout to enhance order selection by encouraging order exploration. Experimentally, we first validate MONET capacity to retrieve the optimal order in a toy environment. Second, we use an attribute detection scenario to show that MONET outperforms existing multi-task baselines on a wide range of dependency settings. Finally, we demonstrate that MONET significantly extends state-of-the-art performance in Facial Action Unit detection.