画像解析の革新的な進歩を可能にする最新のデータ駆動型機械学習研究は、皮膚病変の文書化、マッピング、追跡の方法を再定義するための重要なツールになりました。皮膚病変の自動評価とマッピングを可能にする 3D 全身イメージング プロトタイプを提案します。円筒形に配置されたモジュラー カメラ リグは、全身スキャン用に複数の角度から同期画像を自動的にキャプチャするように設計されています。深層畳み込みニューラル ネットワークに基づく 3D 身体画像再構成、データ処理、および皮膚病変検出のためのアルゴリズムを開発します。また、ユーザーがマシンとやり取りしてデータを理解できるようにする、カスタマイズされた直感的で柔軟なインターフェースも提案します。合成画像と実際の画像を使用した実験結果は、標的の皮膚病変の複数のビューを提供することで提案されたソリューションの有効性を実証し、さらなる 3D ジオメトリ分析を可能にします。皮膚病変は、皮膚がんの医師がもっと注意を払うべき外れ値として識別されます。私たちの検出器は、専門家の注釈付きラベルを活用して、解剖学的変動の影響を捉えながら、各病変の表現を学習します。皮膚情報を記録するのに必要な時間はわずか数秒に短縮されますが、キャプチャ情報を高品質の情報に処理するにはさらに約30分かかります。提案された 3D 全身イメージング システムは、皮膚科クリニックで使用でき、病変の迅速な文書化、全身の迅速かつ正確な分析による疑わしい病変の検出が可能になります。自動化された検査のため、この方法はスクリーニングや疫学的調査に使用される可能性があります。高品質の皮膚情報の記録に必要な時間が短縮されるため、医師はより多くの時間とより詳細な情報を取得して、より質の高い治療を提供できます。
Modern data-driven machine learning research that enables revolutionary advances in image analysis has now become a critical tool to redefine how skin lesions are documented, mapped, and tracked. We propose a 3D whole body imaging prototype to enable automated evaluation and mapping of skin lesions. A modular camera rig arranged in a cylindrical configuration is designed to automatically capture synchronised images from multiple angles for entire body scanning. We develop algorithms for 3D body image reconstruction, data processing and skin lesion detection based on deep convolutional neural networks. We also propose a customised, intuitive and flexible interface that allows the user to interact and collaborate with the machine to understand the data. The experimental results using synthetic and real images demonstrate the effectiveness of the proposed solution by providing multiple views of the target skin lesion, enabling further 3D geometry analysis. Skin lesions are identified as outliers which deserve more attention from a skin cancer physician. Our detector leverage expert annotated labels to learn representations of each lesion, while capturing the effects of anatomical variability. The time needed for recording skin information is reduced to just a few seconds, although about half an hour more is needed to process the capture information to high quality information. The proposed 3D whole body imaging system can be used by dermatological clinics, allowing for fast documentation of lesions, quick and accurate analysis of the entire body to detect suspicious lesions. Because of its automated examination, the method might be used for screening or epidemiological investigations. With shorted time required for recording high quality skin information, doctors could have more time and more detailed information to provide better quality treatment.