心拍数は、さまざまな人間の生理学的および心理的情報を調査し、直感を得るために利用できる最も重要な健康指標の 1 つです。したがって、接触ベースのセンサーの制約なしで心拍数を推定することは、さまざまなシナリオでの健康状態の監視を可能にするため、非常に魅力的な研究分野です。その結果、従来の画像処理から畳み込み深層学習モデルおよびアーキテクチャに至るまで、カメラベースの心拍数推定のためのさまざまな手法が開発されてきました。このような研究努力の中心にあるのは、健康および視覚データの取得、クリーニング、変換、および注釈です。このホワイトペーパーでは、顔領域の画像から心拍数を推定するためのアルゴリズムまたは機械学習モデルを開発またはテストするタスクのためにデータを準備する方法について説明します。準備されたデータには、カメラ フレームと心電計センサーからのセンサー読み取り値が含まれます。提案されたパイプラインは、4 つの主なステップに分かれています。つまり、障害のあるデータの削除、フレームと心電計のタイムスタンプのデジッタリング、信号のノイズ除去とフィルタリング、フレームの注釈の作成です。私たちの主な貢献は、ヘルス センサーとカメラのタイムスタンプからジッターを除去する新しい手法と、他のセンサー タイプにも適用できるビジュアル フレームと心電図センサー データの両方を正確に時間調整する方法です。
Heart rate is one of the most vital health metrics which can be utilized to investigate and gain intuitions into various human physiological and psychological information. Estimating heart rate without the constraints of contact-based sensors thus presents itself as a very attractive field of research as it enables well-being monitoring in a wider variety of scenarios. Consequently, various techniques for camera-based heart rate estimation have been developed ranging from classical image processing to convoluted deep learning models and architectures. At the heart of such research efforts lies health and visual data acquisition, cleaning, transformation, and annotation. In this paper, we discuss how to prepare data for the task of developing or testing an algorithm or machine learning model for heart rate estimation from images of facial regions. The data prepared is to include camera frames as well as sensor readings from an electrocardiograph sensor. The proposed pipeline is divided into four main steps, namely removal of faulty data, frame and electrocardiograph timestamp de-jittering, signal denoising and filtering, and frame annotation creation. Our main contributions are a novel technique of eliminating jitter from health sensor and camera timestamps and a method to accurately time align both visual frame and electrocardiogram sensor data which is also applicable to other sensor types.