arXiv reaDer
困難な治療シナリオにおけるワンショットアクション認識
One-shot action recognition in challenging therapy scenarios
ワンショットアクション認識は、通常アンカー例と呼ばれる単一の参照例から新しいアクションカテゴリを認識することを目的としています。この作品は、可変運動学的条件にロバストなモーション表現を計算する、野生でのワンショットアクション認識のための新しいアプローチを提示します。次に、アンカーとターゲットのモーション表現を評価することにより、ワンショットアクション認識が実行されます。また、最も困難なシナリオでアクション認識のパフォーマンスを向上させる一連の補完的な手順を開発します。私たちのアプローチは、公開されているNTU-120ワンショットアクション認識ベンチマークで評価されており、以前のアクション認識モデルを上回っています。さらに、自閉症の人を対象とした治療の実際のユースケースでフレームワークを評価します。これらの記録は、患者の動きによる高レベルのアーチファクトのために特に困難です。私たちの結果は、実際の治療中の患者の評価とモニタリングに不可欠な、定量的だけでなくオンラインの定性的測定も提供します。
One-shot action recognition aims to recognize new action categories from a single reference example, typically referred to as the anchor example. This work presents a novel approach for one-shot action recognition in the wild that computes motion representations robust to variable kinematic conditions. One-shot action recognition is then performed by evaluating anchor and target motion representations. We also develop a set of complementary steps that boost the action recognition performance in the most challenging scenarios. Our approach is evaluated on the public NTU-120 one-shot action recognition benchmark, outperforming previous action recognition models. Besides, we evaluate our framework on a real use-case of therapy with autistic people. These recordings are particularly challenging due to high-level artifacts from the patient motion. Our results provide not only quantitative but also online qualitative measures, essential for the patient evaluation and monitoring during the actual therapy.
updated: Thu Jul 29 2021 15:25:40 GMT+0000 (UTC)
published: Wed Feb 17 2021 19:41:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト