この論文では、小児心エコー検査における標準ビューを認識するための新しい自己教師あり手法である Efficient Decoupled Masked Autoencoder (EDMAE) を紹介します。 EDMAE では、エンコーダ/デコーダ構造に基づいた新しいプロキシ タスクが導入されています。 EDMAE エンコーダは、教師エンコーダと生徒エンコーダで構成されます。教師エンコーダはマスクされた画像ブロックの潜在的な表現を抽出し、生徒エンコーダは可視画像ブロックの潜在的な表現を抽出します。損失は、2 つのエンコーダによって出力された特徴マップ間で計算され、抽出される潜在表現の一貫性が保証されます。 EDMAE は、MAE エンコーダの ViT 構造の代わりに純粋な畳み込み演算を使用します。これにより、トレーニングの効率と収束速度が向上します。 EDMAE は、自己教師あり学習を使用して小児心エコー検査の大規模なプライベート データセットで事前トレーニングされ、標準的なビュー認識向けに微調整されています。提案された方法は、小児心エコー検査の 27 の標準ビューで高い分類精度を達成します。提案された方法の有効性をさらに検証するために、著者らは公開データセット CAMUS に対して心臓超音波セグメンテーションという別の下流タスクを実行します。実験結果は、提案された手法がいくつかの一般的な教師あり手法や最近の自己教師あり手法よりも優れたパフォーマンスを示し、さまざまな下流タスクでより競争力があることを示しています。
This paper introduces the Efficient Decoupled Masked Autoencoder (EDMAE), a novel self-supervised method for recognizing standard views in pediatric echocardiography. EDMAE introduces a new proxy task based on the encoder-decoder structure. The EDMAE encoder is composed of a teacher and a student encoder. The teacher encoder extracts the potential representation of the masked image blocks, while the student encoder extracts the potential representation of the visible image blocks. The loss is calculated between the feature maps output by the two encoders to ensure consistency in the latent representations they extract. EDMAE uses pure convolution operations instead of the ViT structure in the MAE encoder. This improves training efficiency and convergence speed. EDMAE is pre-trained on a large-scale private dataset of pediatric echocardiography using self-supervised learning, and then fine-tuned for standard view recognition. The proposed method achieves high classification accuracy in 27 standard views of pediatric echocardiography. To further verify the effectiveness of the proposed method, the authors perform another downstream task of cardiac ultrasound segmentation on the public dataset CAMUS. The experimental results demonstrate that the proposed method outperforms some popular supervised and recent self-supervised methods, and is more competitive on different downstream tasks.