arXiv reaDer
神経放射線学レポートに基づく画像データセットのラベル付け:検証研究
Labelling imaging datasets on the basis of neuroradiology reports: a validation study
自然言語処理(NLP)は、コンピュータービジョンアプリケーション用の病院規模の神経放射線医学(MRI)データセットのラベル付けを自動化する手段としての可能性を示しています。ただし、これまでのところ、このアプローチの有効性については、レポートラベルの正確さを画像ラベルと比較して決定したり、専門家以外のラベラーのパフォーマンスを調査したりするなど、徹底的な調査は行われていません。この作業では、専用の深層学習ベースの神経放射線学レポート分類子を構築するプロジェクトの一環として、5000を超えるMRI神経放射線学レポートにラベルを付けた神経放射線科医のチームの経験を利用します。私たちの経験では、レポートからの画像のみにバイナリラベル(正常と異常)を割り当てることは非常に正確であることを示しています。ただし、バイナリラベルとは対照的に、より詳細なラベル付けの精度はカテゴリに依存し、この不一致の理由を強調しています。また、専門家以外がトレーニングレポートのラベル付けを実行すると、ダウンストリームモデルのパフォーマンスが低下することも示しています。他の研究者が彼らの研究を加速できるようにするために、私たちは洗練された異常定義とラベリングルールを利用できるようにするとともに、このプロセスを合理化するのに役立つ使いやすい放射線医学レポートラベリングアプリを用意しています。
Natural language processing (NLP) shows promise as a means to automate the labelling of hospital-scale neuroradiology magnetic resonance imaging (MRI) datasets for computer vision applications. To date, however, there has been no thorough investigation into the validity of this approach, including determining the accuracy of report labels compared to image labels as well as examining the performance of non-specialist labellers. In this work, we draw on the experience of a team of neuroradiologists who labelled over 5000 MRI neuroradiology reports as part of a project to build a dedicated deep learning-based neuroradiology report classifier. We show that, in our experience, assigning binary labels (i.e. normal vs abnormal) to images from reports alone is highly accurate. In contrast to the binary labels, however, the accuracy of more granular labelling is dependent on the category, and we highlight reasons for this discrepancy. We also show that downstream model performance is reduced when labelling of training reports is performed by a non-specialist. To allow other researchers to accelerate their research, we make our refined abnormality definitions and labelling rules available, as well as our easy-to-use radiology report labelling app which helps streamline this process.
updated: Tue Mar 09 2021 01:39:06 GMT+0000 (UTC)
published: Wed Jul 08 2020 16:12:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト