医療画像の分析には、通常、強調、セグメンテーション、分類などのいくつかのタスクが含まれます。従来、これらのタスクは個別のタスクに個別の深層学習モデルを使用して実装されていましたが、これは不必要なトレーニングの繰り返しを伴い、より多くの計算リソースを必要とし、比較的大量のラベル付きデータを必要とするため、効率的ではありません。この論文では、統合されたモダリティ固有の特徴表現 (UMS-Rep) を使用して、関連する知識の伝達を通じて個々のタスクが同時に微調整される、医療画像分析のためのマルチタスク トレーニング アプローチを提案します。ターゲットの医用画像タスクのパフォーマンスに対する戦略の影響を示すために、さまざまな微調整戦略を検討します。さまざまな視覚的タスク (たとえば、画像のノイズ除去、セグメンテーション、分類) を試して、胸部 X 線とドップラー心エコー検査という 2 つの画像診断のアプローチで提供される利点を強調します。私たちの結果は、提案されたアプローチが計算リソースの全体的な需要を減らし、ターゲット タスクの一般化とパフォーマンスを向上させることを示しています。さらに、私たちの結果は、医用画像の対象タスクのパフォーマンスが、利用される微調整戦略によって大きく影響されることを証明しています。
Medical image analysis typically includes several tasks such as enhancement, segmentation, and classification. Traditionally, these tasks are implemented using separate deep learning models for separate tasks, which is not efficient because it involves unnecessary training repetitions, demands greater computational resources, and requires a relatively large amount of labeled data. In this paper, we propose a multi-task training approach for medical image analysis, where individual tasks are fine-tuned simultaneously through relevant knowledge transfer using a unified modality-specific feature representation (UMS-Rep). We explore different fine-tuning strategies to demonstrate the impact of the strategy on the performance of target medical image tasks. We experiment with different visual tasks (e.g., image denoising, segmentation, and classification) to highlight the advantages offered with our approach for two imaging modalities, chest X-ray and Doppler echocardiography. Our results demonstrate that the proposed approach reduces the overall demand for computational resources and improves target task generalization and performance. Further, our results prove that the performance of target tasks in medical images is highly influenced by the utilized fine-tuning strategy.