胸部 X 線写真 (または胸部 X 線、CXR) は、世界中の放射線科医が心臓や肺の状態を診断するために使用する一般的な医療画像診断法です。過去 10 年間、畳み込みニューラル ネットワーク (CNN) は、CXR 画像の病状の特定に成功してきました。通常、これらの CNN は標準の ImageNet 分類タスクで事前トレーニングされていますが、これは大規模な注釈付きデータセットの可用性を前提としています。この作業では、さまざまなアルゴリズムと複数の設定を使用して、ラベルのない ImageNet または胸部 X 線 (CXR) データセットでの事前トレーニングの有用性を分析します。 (i) ラベル付けされた ImageNet を使用した教師ありトレーニングは、打ち負かすのが難しい強力な表現を学習します。 (ii) ImageNet (~1M 画像) での自己教師あり事前トレーニングは、CXR データセット (~100K 画像) での自己教師あり事前トレーニングと同様のパフォーマンスを示します。 (iii) 教師あり ImageNet でトレーニングされた CNN は、自己教師あり CXR 画像を使用してさらにトレーニングすることができ、特にダウンストリーム データセットが数千の画像のオーダーである場合に、改善につながります。
Chest radiograph (or Chest X-Ray, CXR) is a popular medical imaging modality that is used by radiologists across the world to diagnose heart or lung conditions. Over the last decade, Convolutional Neural Networks (CNN), have seen success in identifying pathologies in CXR images. Typically, these CNNs are pretrained on the standard ImageNet classification task, but this assumes availability of large-scale annotated datasets. In this work, we analyze the utility of pretraining on unlabeled ImageNet or Chest X-Ray (CXR) datasets using various algorithms and in multiple settings. Some findings of our work include: (i) supervised training with labeled ImageNet learns strong representations that are hard to beat; (ii) self-supervised pretraining on ImageNet (~1M images) shows performance similar to self-supervised pretraining on a CXR dataset (~100K images); and (iii) the CNN trained on supervised ImageNet can be trained further with self-supervised CXR images leading to improvements, especially when the downstream dataset is on the order of a few thousand images.