ドローンは一般的なツールになり、航空写真、監視、配達などの多くのタスクで利用されています。ただし、ドローンを操作するには、ユーザーとの対話がますます必要になります。人間開発指数(HDI)の自然で安全な方法は、ジェスチャーを使用することです。この論文では、スケルトンベースのポーズ推定に基づいて構築されたHDIフレームワークを紹介します。私たちのフレームワークは、簡単な腕のジェスチャーでドローンの動きを制御し、安全な距離を保ちながらユーザーを追跡する機能を提供します。また、画像の特徴に完全に基づいており、追加の深度センサーを必要としない単眼距離推定方法を提案します。包括的な実験と定量分析を実行するために、カスタマイズされたテストデータセットを作成します。実験は、私たちのHDIフレームワークが11の一般的なジェスチャの認識で平均93.5%の精度を達成できることを示しています。コードは、将来の研究を促進するために公開されます。コードはhttps://github.com/Zrrr1997/Pose2Droneで入手できます。
Drones have become a common tool, which is utilized in many tasks such as aerial photography, surveillance, and delivery. However, operating a drone requires more and more interaction with the user. A natural and safe method for Human-Drone Interaction (HDI) is using gestures. In this paper, we introduce an HDI framework building upon skeleton-based pose estimation. Our framework provides the functionality to control the movement of the drone with simple arm gestures and to follow the user while keeping a safe distance. We also propose a monocular distance estimation method, which is entirely based on image features and does not require any additional depth sensors. To perform comprehensive experiments and quantitative analysis, we create a customized testing dataset. The experiments indicate that our HDI framework can achieve an average of93.5% accuracy in the recognition of 11 common gestures. The code will be made publicly available to foster future research. Code is available at: https://github.com/Zrrr1997/Pose2Drone