arXiv reaDer
マルチパラメータカメラベースの生理学的センシングのための合成データ
Synthetic Data for Multi-Parameter Camera-Based Physiological Sensing
合成データは、データを大量に消費する深層学習アルゴリズムをトレーニングするための強力なツールです。しかし、今日まで、カメラベースの生理学的センシングはこれらの技術を十分に活用していません。この作業では、忠実な血流と呼吸パターンを持つ顔のビデオを生成するために、忠実度の高い合成パイプラインを活用します。生理学的に接地された合成データがカメラベースのマルチパラメータ心肺センシングのトレーニングにどのように使用できるかを示す体系的な実験を提示します。心臓と呼吸数の測定精度は、トレーニングセット内の合成アバターの数とともに増加するという経験的証拠を提供します。さらに、肌の色が濃いアバターでトレーニングすると、肌の色が薄いアバターでトレーニングするよりも全体的なパフォーマンスが向上します。最後に、合成がカメラベースの生理学的センシングの領域に存在する機会と克服する必要のある制限について説明します。
Synthetic data is a powerful tool in training data hungry deep learning algorithms. However, to date, camera-based physiological sensing has not taken full advantage of these techniques. In this work, we leverage a high-fidelity synthetics pipeline for generating videos of faces with faithful blood flow and breathing patterns. We present systematic experiments showing how physiologically-grounded synthetic data can be used in training camera-based multi-parameter cardiopulmonary sensing. We provide empirical evidence that heart and breathing rate measurement accuracy increases with the number of synthetic avatars in the training set. Furthermore, training with avatars with darker skin types leads to better overall performance than training with avatars with lighter skin types. Finally, we discuss the opportunities that synthetics present in the domain of camera-based physiological sensing and limitations that need to be overcome.
updated: Sun Oct 10 2021 20:51:54 GMT+0000 (UTC)
published: Sun Oct 10 2021 20:51:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト