COVID-19の最初の波の間、病院は入院患者の数が多いことに圧倒されました。最も可能性の高い個々の疾患の進行を正確に予測することで、限られたリソースの計画を改善し、患者に最適な治療法を見つけることができます。ただし、COVID-19などの新興感染症に対処する場合、患者および疾患に固有の要因(体重や既知の併存疾患など)が疾患の当面の経過に与える影響はほとんど不明です。 COVID-19の場合、肺炎患者の集中治療室(ICU)入院の必要性は、バイタルサイン(呼吸数、血中酸素濃度など)などの急性指標によってのみ決定されることがよくありますが、統計分析および意思決定支援システムは利用可能なすべてのデータを統合することで、早期の予後を可能にすることができます。この目的のために、イメージング情報と非イメージング情報の両方を組み合わせた全体的なグラフベースのアプローチを提案します。具体的には、患者をクラスタリングするための人口グラフを構築するためのマルチモーダル類似性メトリックと、このグラフを処理してCOVID-19患者の転帰を予測するための画像ベースのエンドツーエンドグラフ注意ネットワークを導入します:ICUへの入室、換気の必要性、死亡。さらに、ネットワークは胸部CT画像を補助タスクとしてセグメント化し、画像の特徴とラジオミクスを抽出して、利用可能なメタデータと特徴を融合させます。ドイツ、ミュンヘンのKlinikum rechts der Isarで収集されたデータセットの結果は、私たちのアプローチが単一のモダリティおよびグラフ以外のベースラインよりも優れていることを示しています。さらに、クラスタリングとグラフの注意により、母集団グラフ内の患者の関係についての理解を深め、ネットワークの意思決定プロセスへの洞察を提供できます。
During the first wave of COVID-19, hospitals were overwhelmed with the high number of admitted patients. An accurate prediction of the most likely individual disease progression can improve the planning of limited resources and finding the optimal treatment for patients. However, when dealing with a newly emerging disease such as COVID-19, the impact of patient- and disease-specific factors (e.g. body weight or known co-morbidities) on the immediate course of disease is by and large unknown. In the case of COVID-19, the need for intensive care unit (ICU) admission of pneumonia patients is often determined only by acute indicators such as vital signs (e.g. breathing rate, blood oxygen levels), whereas statistical analysis and decision support systems that integrate all of the available data could enable an earlier prognosis. To this end, we propose a holistic graph-based approach combining both imaging and non-imaging information. Specifically, we introduce a multimodal similarity metric to build a population graph for clustering patients and an image-based end-to-end Graph Attention Network to process this graph and predict the COVID-19 patient outcomes: admission to ICU, need for ventilation and mortality. Additionally, the network segments chest CT images as an auxiliary task and extracts image features and radiomics for feature fusion with the available metadata. Results on a dataset collected in Klinikum rechts der Isar in Munich, Germany show that our approach outperforms single modality and non-graph baselines. Moreover, our clustering and graph attention allow for increased understanding of the patient relationships within the population graph and provide insight into the network's decision-making process.