arXiv reaDer
デジタル組織病理学のための自己教師あり対照学習
Self supervised contrastive learning for digital histopathology
教師なし学習は機械学習の長年の目標であり、学習がラベル付きデータセットの不足を補うことができる医療画像分析にとって特に重要です。教師なし学習の有望なサブクラスは、教師あり学習です。これは、生の入力を学習信号として使用して顕著な特徴を学習することを目的としています。この論文では、SimCLRと呼ばれる対照的な自己教師あり学習法を使用して、自然シーンの画像で最先端の結果を達成し、ラベルなしで57の組織病理学データセットを収集して事前トレーニングすることにより、この方法をデジタル組織病理学に適用します。複数の多臓器データセットをさまざまなタイプの染色および解像度プロパティと組み合わせると、学習された特徴の品質が向上することがわかります。さらに、事前トレーニングに多くの画像を使用すると、複数のダウンストリームタスクのパフォーマンスが向上することがわかりました。学習した機能に基づいてトレーニングされた線形分類器は、デジタル組織病理学データセットで事前トレーニングされたネットワークがImageNet事前トレーニングされたネットワークよりもパフォーマンスが高く、F1スコアで平均28%以上タスクのパフォーマンスを向上させることを示しています。これらの調査結果は、組織病理学データに新しい対照的な手法を適用する場合にも役立つ可能性があります。事前トレーニング済みのPyTorchモデルは、https://github.com/ozanciga/self-supervised-histopathologyで公開されています。
Unsupervised learning has been a long-standing goal of machine learning and is especially important for medical image analysis, where the learning can compensate for the scarcity of labeled datasets. A promising subclass of unsupervised learning is self-supervised learning, which aims to learn salient features using the raw input as the learning signal. In this paper, we use a contrastive self-supervised learning method called SimCLR that achieved state-of-the-art results on natural-scene images and apply this method to digital histopathology by collecting and pretraining on 57 histopathology datasets without any labels. We find that combining multiple multi-organ datasets with different types of staining and resolution properties improves the quality of the learned features. Furthermore, we find using more images for pretraining leads to a better performance in multiple downstream tasks. Linear classifiers trained on top of the learned features show that networks pretrained on digital histopathology datasets perform better than ImageNet pretrained networks, boosting task performances by more than 28% in F1 scores on average. These findings may also be useful when applying newer contrastive techniques to histopathology data. Pretrained PyTorch models are made publicly available at https://github.com/ozanciga/self-supervised-histopathology.
updated: Tue Sep 07 2021 20:02:12 GMT+0000 (UTC)
published: Fri Nov 27 2020 19:18:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト