動的タイムワーピング(DTW)は、時間データ処理に広く使用されています。ただし、既存のメソッドでは、異なるクラスの識別可能なプロトタイプを学習することも、そのようなプロトタイプを利用してさらに分析することもできません。弁別プロトタイプDTW(DP-DTW)を提案します。これは、時間認識タスクのクラス固有の弁別プロトタイプを学習するための新しい方法です。 DP-DTWは、時系列分類ベンチマークで従来のDTWと比較して優れたパフォーマンスを示します。 DP-DTWは、エンドツーエンドの深層学習と組み合わせることで、弱く監視されたアクションセグメンテーションの問題を処理し、標準ベンチマークで最先端の結果を達成できます。さらに、入力ビデオの詳細な推論は、学習したアクションプロトタイプによって可能になります。具体的には、アクションベースのビデオ要約は、入力シーケンスをアクションプロトタイプと整列させることによって取得できます。
Dynamic Time Warping (DTW) is widely used for temporal data processing. However, existing methods can neither learn the discriminative prototypes of different classes nor exploit such prototypes for further analysis. We propose Discriminative Prototype DTW (DP-DTW), a novel method to learn class-specific discriminative prototypes for temporal recognition tasks. DP-DTW shows superior performance compared to conventional DTWs on time series classification benchmarks. Combined with end-to-end deep learning, DP-DTW can handle challenging weakly supervised action segmentation problems and achieves state of the art results on standard benchmarks. Moreover, detailed reasoning on the input video is enabled by the learned action prototypes. Specifically, an action-based video summarization can be obtained by aligning the input sequence with action prototypes.