arXiv reaDer
自己教師ありスケルトンベースのアクション表現のためのハイパーボリックセルフペース学習
HYperbolic Self-Paced Learning for Self-Supervised Skeleton-based Action Representations
セルフペース学習は、弱い教師あり学習やドメイン適応など、いくつかの初期知識が利用可能なタスクで有益であり、簡単なものから複雑なものまで、トレーニング サンプル シーケンスを選択して順序付けます。ただし、教師なし学習ではその適用性が未調査のままであり、それによってタスクの知識はトレーニング中に成熟します。スケルトンベースのアクション表現を学習するための新しいHYperbolic Self-Pacedモデル(HYSP)を提案します。 HYSP は自己監視を採用しています。データ拡張を使用して同じサンプルの 2 つのビューを生成し、一方 (オンラインで命名) を他方 (ターゲット) に一致させることによって学習します。アルゴリズムの学習ペースを決定するために双曲線的不確実性を使用することを提案します。これは、不確かさの少ないサンプルがより大きな重みとペースでトレーニングをより強力に推進する必要があるという仮定の下です。双曲線の不確実性は、採用された双曲線ニューラル ネットワークの副産物であり、トレーニング中に成熟し、確立されたユークリッド SSL フレームワークの対応物と比較して、追加のコストはかかりません。確立された 3 つのスケルトンベースのアクション認識データセットでテストした場合、HYSP は PKU-MMD I の最先端技術を上回り、NTU-60 と NTU-120 の 3 つのダウンストリーム タスクのうち 2 つでも優れています。さらに、HYSP はポジティブ ペアとバイパスのみを使用するため、対照的な手法でネガに必要な複雑で計算量の多いマイニング手順を使用します。コードは https://github.com/paolomandica/HYSP で入手できます。
Self-paced learning has been beneficial for tasks where some initial knowledge is available, such as weakly supervised learning and domain adaptation, to select and order the training sample sequence, from easy to complex. However its applicability remains unexplored in unsupervised learning, whereby the knowledge of the task matures during training. We propose a novel HYperbolic Self-Paced model (HYSP) for learning skeleton-based action representations. HYSP adopts self-supervision: it uses data augmentations to generate two views of the same sample, and it learns by matching one (named online) to the other (the target). We propose to use hyperbolic uncertainty to determine the algorithmic learning pace, under the assumption that less uncertain samples should be more strongly driving the training, with a larger weight and pace. Hyperbolic uncertainty is a by-product of the adopted hyperbolic neural networks, it matures during training and it comes with no extra cost, compared to the established Euclidean SSL framework counterparts. When tested on three established skeleton-based action recognition datasets, HYSP outperforms the state-of-the-art on PKU-MMD I, as well as on 2 out of 3 downstream tasks on NTU-60 and NTU-120. Additionally, HYSP only uses positive pairs and bypasses therefore the complex and computationally-demanding mining procedures required for the negatives in contrastive techniques. Code is available at https://github.com/paolomandica/HYSP.
updated: Fri Mar 10 2023 23:22:41 GMT+0000 (UTC)
published: Fri Mar 10 2023 23:22:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト