超音波(米国)は、COVID-19グローバルパンデミックのための非侵襲的で効果的な医療診断画像技術です。ただし、米国の画像の複雑な機能の動作と高価な注釈のため、人工知能(AI)支援手法を肺のマルチ症状(マルチラベル)分類に適用することは困難です。これらの困難を克服するために、複雑な機能をモデル化し、反復手順でのラベリングコストを削減する、新しい半教師付き2ストリームアクティブラーニング(TSAL)メソッドを提案します。 TSALのコアコンポーネントはマルチラベル学習メカニズムです。このメカニズムでは、ラベル相関情報を使用して、マルチラベルマージン(MLM)戦略と信頼できる検証を設計し、有益なサンプルと信頼できるラベルを自動的に選択します。これに基づいて、肺症状の特徴的な特徴を学習するためにマルチ症状マルチラベル(MSML)分類ネットワークが提案され、漸進的にラベル付けされたMSMLを微調整するために使用される最終注釈を確認するために人間と機械の相互作用が活用されますデータ。さらに、COVID19-LUSMSという名前の新しい肺米国データセットが構築され、現在、678のビデオからサンプリングされた6,836枚の画像を持つ71人の臨床患者が含まれています。実験的評価によると、20%のデータのみを使用したTSALは、ベースラインおよび最新技術よりも優れたパフォーマンスを実現できることが示されています。定性的に、注意マップとサンプル分布の両方の視覚化は、クリニックの知識との良好な一貫性を確認します。
Ultrasound (US) is a non-invasive yet effective medical diagnostic imaging technique for the COVID-19 global pandemic. However, due to complex feature behaviors and expensive annotations of US images, it is difficult to apply Artificial Intelligence (AI) assisting approaches for lung's multi-symptom (multi-label) classification. To overcome these difficulties, we propose a novel semi-supervised Two-Stream Active Learning (TSAL) method to model complicated features and reduce labeling costs in an iterative procedure. The core component of TSAL is the multi-label learning mechanism, in which label correlations information is used to design multi-label margin (MLM) strategy and confidence validation for automatically selecting informative samples and confident labels. On this basis, a multi-symptom multi-label (MSML) classification network is proposed to learn discriminative features of lung symptoms, and a human-machine interaction is exploited to confirm the final annotations that are used to fine-tune MSML with progressively labeled data. Moreover, a novel lung US dataset named COVID19-LUSMS is built, currently containing 71 clinical patients with 6,836 images sampled from 678 videos. Experimental evaluations show that TSAL using only 20% data can achieve superior performance to the baseline and the state-of-the-art. Qualitatively, visualization of both attention map and sample distribution confirms the good consistency with the clinic knowledge.