arXiv reaDer
Towards Automatic Recognition of Pure & Mixed Stones using Intraoperative Endoscopic Digital Images
目的:臨床現場で取得した術中デジタル内視鏡画像を使用して、純粋な尿路結石と混合尿路結石の形態学的特徴の自動コンピューター支援insitu認識を評価すること。材料と方法:この単一施設の研究では、経験豊富な泌尿器科医が術中に、そして前向きに、遭遇したすべての腎臓結石の表面と切片を調べました。シュウ酸カルシウム一水和物(COM / Ia)、二水和物(COD / IIb)、および尿酸(UA / IIIb)の形態学的基準を収集および分類して、注釈付きデータセットを生成しました。深い畳み込みニューラルネットワーク(CNN)は、純粋な石と混合された石の両方の組成を予測するようにトレーニングされました。ディープニューラルネットワークモデルの予測を説明するために、粗いローカリゼーションヒートマップをプロットして、ネットワークによって識別された主要な領域を特定しました。結果:この研究には、石の表面と石の断面のそれぞれ347と236の観察が含まれていました。表面画像を使用した「純粋なIIIb / UA」タイプでは、98%の最高感度が得られました。最も頻繁に遭遇した形態は、「純粋なIa / COM」タイプの形態でした。表面画像と断面画像を使用して、それぞれ91%と94%の症例で正しく予測されました。混合型「Ia / COM + IIb / COD」のうち、Ia / COMは84%のケースで表面画像を使用して予測され、IIb / CODは70%のケースで、両方とも65%のケースで予測されました。混合Ia / COM + IIIb / UA石に関して、Ia / COMは断面画像を使用した症例の91%、IIIb / UAは69%の症例、両方とも74%の症例で予測されました。結論:この予備研究は、深い畳み込みニューラルネットワークが術中に取得された内視鏡画像から腎臓結石の組成を特定することを約束していることを示しています。純粋な石と混合石の両方の組成を区別することができます。臨床現場で収集された、ディープCNNによって分析された表面および断面画像は、コンピューター支援診断のための石の形態に関する貴重な情報を提供します。
Objective: To assess automatic computer-aided in-situ recognition of morphological features of pure and mixed urinary stones using intraoperative digital endoscopic images acquired in a clinical setting. Materials and methods: In this single-centre study, an experienced urologist intraoperatively and prospectively examined the surface and section of all kidney stones encountered. Calcium oxalate monohydrate (COM/Ia), dihydrate (COD/IIb) and uric acid (UA/IIIb) morphological criteria were collected and classified to generate annotated datasets. A deep convolutional neural network (CNN) was trained to predict the composition of both pure and mixed stones. To explain the predictions of the deep neural network model, coarse localisation heat-maps were plotted to pinpoint key areas identified by the network. Results: This study included 347 and 236 observations of stone surface and stone section, respectively. A highest sensitivity of 98 % was obtained for the type "pure IIIb/UA" using surface images. The most frequently encountered morphology was that of the type "pure Ia/COM"; it was correctly predicted in 91 % and 94 % of cases using surface and section images, respectively. Of the mixed type "Ia/COM+IIb/COD", Ia/COM was predicted in 84 % of cases using surface images, IIb/COD in 70 % of cases, and both in 65 % of cases. Concerning mixed Ia/COM+IIIb/UA stones, Ia/COM was predicted in 91 % of cases using section images, IIIb/UA in 69 % of cases, and both in 74 % of cases. Conclusions: This preliminary study demonstrates that deep convolutional neural networks are promising to identify kidney stone composition from endoscopic images acquired intraoperatively. Both pure and mixed stone composition could be discriminated. Collected in a clinical setting, surface and section images analysed by deep CNN provide valuable information about stone morphology for computer-aided diagnosis.
updated: Sat May 22 2021 10:52:19 GMT+0000 (UTC)
published: Sat May 22 2021 10:52:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト