arXiv reaDer
StyleGAN2ベースのモデル適応技術を使用した裂け目の顔の教師なし異常評価
Unsupervised Anomaly Appraisal of Cleft Faces Using a StyleGAN2-based Model Adaptation Technique
この論文では、人間の顔の先天性口唇裂の異常を一貫して検出、位置特定、評価するための新しい機械学習フレームワークを紹介します。目標は、人間の判断に一致する顔の違いと再建手術の結果の普遍的で客観的な尺度を提供することです。提案された方法は、ピクセル単位の減算アプローチを使用した変形のその後の測定を可能にするために、裂け目の影響を受けた顔の正規化された変換を生成するためのモデル適応を伴う StyleGAN2 敵対的生成ネットワークを採用しています。提案されたフレームワークの完全なパイプラインは、画像の前処理、顔の正規化、色変換、形態侵食、ヒートマップ生成、異常スコアリングのステップで構成されています。解剖学的異常を細かく識別するヒートマップは、考慮されたフレームワークの機能を活用することによって提案されます。提案されたフレームワークは、コンピューター シミュレーションと人間の評価を含む調査を通じて検証されます。提案されたコンピュータ モデルによって生成された異常スコアは、0.942 ピアソンの r スコアにつながる、顔の違いに対する人間の評価と密接に相関しています。
This paper presents a novel machine learning framework to consistently detect, localize and rate congenital cleft lip anomalies in human faces. The goal is to provide a universal, objective measure of facial differences and reconstructive surgical outcomes that matches human judgments. The proposed method employs the StyleGAN2 generative adversarial network with model adaptation to produce normalized transformations of cleft-affected faces in order to allow for subsequent measurement of deformity using a pixel-wise subtraction approach. The complete pipeline of the proposed framework consists of the following steps: image preprocessing, face normalization, color transformation, morphological erosion, heat-map generation and abnormality scoring. Heatmaps that finely discern anatomic anomalies are proposed by exploiting the features of the considered framework. The proposed framework is validated through computer simulations and surveys containing human ratings. The anomaly scores yielded by the proposed computer model correlate closely with the human ratings of facial differences, leading to 0.942 Pearson's r score.
updated: Sat Nov 12 2022 13:30:20 GMT+0000 (UTC)
published: Sat Nov 12 2022 13:30:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト