栄養失調は、低中所得国(LMIC)における主要な公衆衛生上の懸念事項です。コミュニティ、世帯、個人全体の食物と栄養素の摂取量を理解することは、健康政策と介入の開発にとって重要です。大規模な食事評価を実施する際の手順を容易にするために、ガーナとウガンダの家庭に特化した自己中心性カメラを介したインテリジェントな受動的食物摂取評価システムの実装を提案します。アルゴリズムは最初に、ストレージメモリを最小化するために冗長なイメージを削除するように設計されています。実行時に、ディープラーニングベースのセマンティックセグメンテーションを適用して複数の食品タイプを認識し、新しく設計された手作りの特徴を抽出して、さらに消費される食品の重量を監視します。包括的な実験は、一般的なガーナ/ケニア料理を食べるガーナとケニア出身の参加者とのユニークなLMIC条件をシミュレートする設定の下でキャプチャされた野生のデータセットで私たちの方法を検証するために行われます。有効性を実証するために、経験豊富な栄養士が視覚的な部分サイズの推定を実行するためにこの研究に関与し、彼らの予測を提案された方法と比較します。有望な結果は、私たちの方法が確実に食物摂取量を監視し、定期的な食事評価において栄養士にガイダンスを提供するユーザーの食事行動に関するフィードバックを与えることができることを示しています。
Malnutrition is a major public health concern in low-and-middle-income countries (LMICs). Understanding food and nutrient intake across communities, households and individuals is critical to the development of health policies and interventions. To ease the procedure in conducting large-scale dietary assessments, we propose to implement an intelligent passive food intake assessment system via egocentric cameras particular for households in Ghana and Uganda. Algorithms are first designed to remove redundant images for minimising the storage memory. At run time, deep learning-based semantic segmentation is applied to recognise multi-food types and newly-designed handcrafted features are extracted for further consumed food weight monitoring. Comprehensive experiments are conducted to validate our methods on an in-the-wild dataset captured under the settings which simulate the unique LMIC conditions with participants of Ghanaian and Kenyan origin eating common Ghanaian/Kenyan dishes. To demonstrate the efficacy, experienced dietitians are involved in this research to perform the visual portion size estimation, and their predictions are compared to our proposed method. The promising results have shown that our method is able to reliably monitor food intake and give feedback on users' eating behaviour which provides guidance for dietitians in regular dietary assessment.