組織病理学的癌の診断は、染色された組織スライドの目視検査に基づいています。ヘマトキシリンおよびエオシン(H \&E)は、世界中で日常的に使用されている標準的な染色剤です。入手は簡単で費用効果が高いですが、細胞と組織の成分は濃い青とピンクのさまざまな色調で低コントラストを示し、視覚的評価、デジタル画像分析、および定量化が困難になります。これらの制限は、組織スライドの標的タンパク質のIHC染色によって克服できます。 IHCは、細胞および組織成分の選択的で高コントラストのイメージングを提供しますが、それらの使用は、非常に複雑な実験室処理と高コストによって大幅に制限されます。条件付きCycleGAN(cCGAN)ネットワークを提案して、H \&E染色画像をIHC染色画像に変換し、同じスライドでの仮想IHC染色を容易にしました。このデータ駆動型の方法では、限られた量のラベル付きデータのみが必要ですが、ピクセルレベルのセグメンテーション結果が生成されます。提案されたcCGANモデルは、カテゴリ条件を追加し、マルチサブドメイン変換を実現し、変換精度も向上させる2つの構造損失関数を導入することにより、元のネットワークzhu_unpaired_2017を改善します。 %ここで理由を説明する必要があります。実験は、提案されたモデルが、マルチサブドメインを使用した対になっていない画像変換において、元の方法よりも優れていることを示しています。また、さまざまな染色技術を使用して、他の組織画像に関連するタスクに適用される画像変換方法への不対画像の可能性を探ります。
Histopathological cancer diagnosis is based on visual examination of stained tissue slides. Hematoxylin and eosin (H\&E) is a standard stain routinely employed worldwide. It is easy to acquire and cost effective, but cells and tissue components show low-contrast with varying tones of dark blue and pink, which makes difficult visual assessments, digital image analysis, and quantifications. These limitations can be overcome by IHC staining of target proteins of the tissue slide. IHC provides a selective, high-contrast imaging of cells and tissue components, but their use is largely limited by a significantly more complex laboratory processing and high cost. We proposed a conditional CycleGAN (cCGAN) network to transform the H\&E stained images into IHC stained images, facilitating virtual IHC staining on the same slide. This data-driven method requires only a limited amount of labelled data but will generate pixel level segmentation results. The proposed cCGAN model improves the original network zhu_unpaired_2017 by adding category conditions and introducing two structural loss functions, which realize a multi-subdomain translation and improve the translation accuracy as well. % need to give reasons here. Experiments demonstrate that the proposed model outperforms the original method in unpaired image translation with multi-subdomains. We also explore the potential of unpaired images to image translation method applied on other histology images related tasks with different staining techniques.