arXiv reaDer
正確なクロスドメインベッド内人間の姿勢推定に向けて
Towards Accurate Cross-Domain In-Bed Human Pose Estimation
睡眠中の人間の行動の監視は、さまざまな医療アプリケーションに不可欠です。非接触の人間の姿勢推定アルゴリズムの大部分はRGBモダリティに基づいており、毛布による閉塞やさまざまな照明条件のために、ベッド内の姿勢推定が無効になります。長波長赤外線(LWIR)モダリティベースのポーズ推定アルゴリズムは、前述の課題を克服します。ただし、そのような条件下での人間の注釈者によるグラウンドトゥルースポーズの生成は実行可能ではありません。この問題に対処するための実行可能な解決策は、ポーズラベルがあり、オクルージョンがない画像から学習した知識を転送し、それを実際の条件(毛布によるオクルージョン)に適応させることです。この論文では、クロスドメインの不一致を減らすための2倍のデータ拡張と、実世界の条件でのラベルなし画像の分布を学習するための知識の蒸留で構成される新しい学習戦略を提案します。私たちの実験と分析は、複数の標準的な人間の姿勢推定ベースラインに対する私たちのアプローチの有効性を示しています。
Human behavioral monitoring during sleep is essential for various medical applications. Majority of the contactless human pose estimation algorithms are based on RGB modality, causing ineffectiveness in in-bed pose estimation due to occlusions by blankets and varying illumination conditions. Long-wavelength infrared (LWIR) modality based pose estimation algorithms overcome the aforementioned challenges; however, ground truth pose generations by a human annotator under such conditions are not feasible. A feasible solution to address this issue is to transfer the knowledge learned from images with pose labels and no occlusions, and adapt it towards real world conditions (occlusions due to blankets). In this paper, we propose a novel learning strategy comprises of two-fold data augmentation to reduce the cross-domain discrepancy and knowledge distillation to learn the distribution of unlabeled images in real world conditions. Our experiments and analysis show the effectiveness of our approach over multiple standard human pose estimation baselines.
updated: Thu Oct 07 2021 15:54:46 GMT+0000 (UTC)
published: Thu Oct 07 2021 15:54:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト