病理学的診断は、組織学的に染色された薄い組織標本の目視検査に依存しており、さまざまな種類の染色が適用されて、さまざまな望ましい組織学的特徴に対比をもたらし、強調します。ただし、破壊的な組織化学的染色手順は通常不可逆的であり、同じ組織切片で複数の染色を取得することは非常に困難です。ここでは、カスケードディープニューラルネットワーク(C-DNN)を介して、ヘマトキシリンおよびエオシン(H&E)染色組織画像を他のタイプの組織学的染色にデジタル変換する仮想染色転送フレームワークを示します。 1つの染色タイプのみを入力として別の染色タイプの画像をデジタル出力する単一のニューラルネットワーク構造とは異なり、C-DNNは最初に仮想染色を使用して自家蛍光顕微鏡画像をH&Eに変換し、次にH&Eから他のドメインへの染色転送を実行しますカスケード方式で染色します。トレーニングフェーズでのこのカスケード構造により、モデルは、H&Eと対象の特別な染色の両方で組織化学的に染色された画像データを直接活用できます。この利点は、ペアデータ取得の課題を軽減し、H&Eから別の染色への仮想染色転送の画質と色精度を向上させます。腎臓針コア生検組織切片を使用してこのC-DNNアプローチの優れた性能を検証し、H&E染色組織画像を仮想PAS(過ヨウ素酸シッフ)染色に正常に転送しました。この方法は、既存の組織化学的に染色されたスライドを使用して特殊な染色の高品質の仮想画像を提供し、高精度の染色から染色への変換を実行することにより、デジタルパソロジーに新しい機会を生み出します。
Pathological diagnosis relies on the visual inspection of histologically stained thin tissue specimens, where different types of stains are applied to bring contrast to and highlight various desired histological features. However, the destructive histochemical staining procedures are usually irreversible, making it very difficult to obtain multiple stains on the same tissue section. Here, we demonstrate a virtual stain transfer framework via a cascaded deep neural network (C-DNN) to digitally transform hematoxylin and eosin (H&E) stained tissue images into other types of histological stains. Unlike a single neural network structure which only takes one stain type as input to digitally output images of another stain type, C-DNN first uses virtual staining to transform autofluorescence microscopy images into H&E and then performs stain transfer from H&E to the domain of the other stain in a cascaded manner. This cascaded structure in the training phase allows the model to directly exploit histochemically stained image data on both H&E and the target special stain of interest. This advantage alleviates the challenge of paired data acquisition and improves the image quality and color accuracy of the virtual stain transfer from H&E to another stain. We validated the superior performance of this C-DNN approach using kidney needle core biopsy tissue sections and successfully transferred the H&E-stained tissue images into virtual PAS (periodic acid-Schiff) stain. This method provides high-quality virtual images of special stains using existing, histochemically stained slides and creates new opportunities in digital pathology by performing highly accurate stain-to-stain transformations.