リハビリテーションおよび運動科学に計り知れない価値を提供する可能性のある人間の姿勢推定のための機械学習アルゴリズムには大きな進歩がありました。ただし、これらのツールを臨床診療およびトランスレーショナルリサーチに日常的に使用するには、1)参入障壁が高い、2)アルゴリズムのスペースが急速に進化している、3)アルゴリズムの相互依存性に挑戦している、4)複雑なデータ管理要件など、いくつかの課題が残っています。これらのコンポーネント間。これらの障壁を緩和するために、臨床コンテキストで取得されたデータに対して最先端のアルゴリズムを実行することを容易にする人間の姿勢推定パイプラインを開発しました。私たちのシステムは、いくつかのクラスのアルゴリズムのさまざまな実装を実行することを可能にし、それらの相互依存性を簡単に処理します。これらのアルゴリズムクラスには、被験者の識別と追跡、2Dキーポイント検出、3D関節位置推定、および身体モデルのポーズの推定が含まれます。システムはデータベースを使用して、ビデオ、中間分析、および各段階での計算用のデータを管理します。また、プライバシーを強化するために顔を覆い隠すビデオオーバーレイの生成など、データを視覚化するためのツールも提供します。この作業での私たちの目標は、新しいアルゴリズムをトレーニングすることではなく、臨床およびトランスレーショナルリサーチのための最先端の人間のポーズ推定アルゴリズムの使用を促進することです。このツールは、歩行実験室の分析から、診療所や治療の訪問、地域の人々に至るまで、人間の動きの多数のビデオの分析を容易にすることを示しています。また、リハビリテーションの設定で臨床集団に適用された場合のこれらのアルゴリズムの制限を強調します。
There has been significant progress in machine learning algorithms for human pose estimation that may provide immense value in rehabilitation and movement sciences. However, there remain several challenges to routine use of these tools for clinical practice and translational research, including: 1) high technical barrier to entry, 2) rapidly evolving space of algorithms, 3) challenging algorithmic interdependencies, and 4) complex data management requirements between these components. To mitigate these barriers, we developed a human pose estimation pipeline that facilitates running state-of-the-art algorithms on data acquired in clinical context. Our system allows for running different implementations of several classes of algorithms and handles their interdependencies easily. These algorithm classes include subject identification and tracking, 2D keypoint detection, 3D joint location estimation, and estimating the pose of body models. The system uses a database to manage videos, intermediate analyses, and data for computations at each stage. It also provides tools for data visualization, including generating video overlays that also obscure faces to enhance privacy. Our goal in this work is not to train new algorithms, but to advance the use of cutting-edge human pose estimation algorithms for clinical and translation research. We show that this tool facilitates analyzing large numbers of videos of human movement ranging from gait laboratories analyses, to clinic and therapy visits, to people in the community. We also highlight limitations of these algorithms when applied to clinical populations in a rehabilitation setting.