arXiv reaDer
メタ知識共埋め込みによる画質認識型診断
Image Quality-aware Diagnosis via Meta-knowledge Co-embedding
医用画像は通常、臨床現場での画像劣化に悩まされ、深層学習ベースのモデルのパフォーマンス低下につながります。この問題を解決するために、以前のほとんどの研究では、モデルの潜在的な価値を無視しながら、劣化の原因となる低品質の画像を除外することに重点が置かれていました。劣化に関する知識を効果的に学習して活用することで、モデルはその悪影響に抵抗し、誤診を避けることができます。この論文では、より正確で堅牢な診断を達成するために、低品質の画像と画質ラベルを利用することを目的とした画質認識診断の問題を提起します。ただし、画質評価と疾患診断の間の劣化と表面的に無関係なターゲットの多様性により、品質ラベルを効果的に活用して診断を支援することは依然として非常に困難です。したがって、これらの問題に取り組むために、Task Net と Meta Learner の 2 つのサブネットで構成される、新しいメタ知識共埋め込みネットワークを提案します。 Task Net は明示的な品質情報利用メカニズムを構築し、知識の共同埋め込み機能を介して診断を強化します。一方、Meta Learner は、メタ学習とジョイント エンコーディング マスキングを介してこれらの機能の有効性を保証し、セマンティクスを制約します。広く使用されている 4 つの医用画像モダリティを備えた 5 つのデータセットでの優れたパフォーマンスは、この方法の有効性と一般化可能性を示しています。
Medical images usually suffer from image degradation in clinical practice, leading to decreased performance of deep learning-based models. To resolve this problem, most previous works have focused on filtering out degradation-causing low-quality images while ignoring their potential value for models. Through effectively learning and leveraging the knowledge of degradations, models can better resist their adverse effects and avoid misdiagnosis. In this paper, we raise the problem of image quality-aware diagnosis, which aims to take advantage of low-quality images and image quality labels to achieve a more accurate and robust diagnosis. However, the diversity of degradations and superficially unrelated targets between image quality assessment and disease diagnosis makes it still quite challenging to effectively leverage quality labels to assist diagnosis. Thus, to tackle these issues, we propose a novel meta-knowledge co-embedding network, consisting of two subnets: Task Net and Meta Learner. Task Net constructs an explicit quality information utilization mechanism to enhance diagnosis via knowledge co-embedding features, while Meta Learner ensures the effectiveness and constrains the semantics of these features via meta-learning and joint-encoding masking. Superior performance on five datasets with four widely-used medical imaging modalities demonstrates the effectiveness and generalizability of our method.
updated: Mon Mar 27 2023 09:35:44 GMT+0000 (UTC)
published: Mon Mar 27 2023 09:35:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト