arXiv reaDer
SERV-CT:内視鏡3D再構成の検証のためのCTからの視差データセット
SERV-CT: A disparity dataset from CT for validation of endoscopic 3D reconstruction
コンピュータビジョンでは、参照データセットはステレオ再構成のアルゴリズム開発を促進するのに非常に成功しています。手術シーンは、明確な角の特徴の欠如、非常に鏡面反射性の表面、および血液と煙の存在を含む特定の問題を引き起こします。公的に利用可能なデータセットは、CTと、内視鏡の視野の比較的狭い領域をカバーするファントム画像または生体組織サンプルのいずれかを使用して作成されています。 CT(SERV-CT)に基づくステレオ内視鏡再構成検証データセットを提示します。 2つのexvivoの小さなブタの完全な胴体の死体を内視鏡の視野内に配置し、内視鏡と標的の解剖学的構造の両方をCTスキャンで確認しました。内視鏡の向きは、手動で立体視に合わせました。参照の視差とオクルージョンは、各サンプルからの8つのステレオペアについて計算されました。 2番目のサンプルでは、RGBサーフェスを取得して、滑らかで特徴のないサーフェスの位置合わせを支援しました。手動での位置合わせを繰り返すと、RMS視差精度が約2ピクセル、深度精度が約2mmでした。参照データセットには、内視鏡画像の大部分とさまざまな組織タイプをカバーする、対応するキャリブレーション、視差、深度、および閉塞を伴う内視鏡画像のペアが含まれています。滑らかな鏡面反射面と、深さが大幅に変化する画像が含まれています。オンラインで利用可能なリポジトリからさまざまなステレオアルゴリズムのパフォーマンスを評価しました。アルゴリズム間には大きな違いがあり、外科的内視鏡画像の課題のいくつかが浮き彫りになっています。 SERV-CTデータセットは、内視鏡画像の大部分をカバーする滑らかな参照視差と深さを備えた外科用途向けの使いやすい立体視検証を提供します。これは既存のリソースを十分に補完し、外科的内視鏡解剖学的再構成アルゴリズムの開発に役立つことを願っています。
In computer vision, reference datasets have been highly successful in promoting algorithmic development in stereo reconstruction. Surgical scenes gives rise to specific problems, including the lack of clear corner features, highly specular surfaces and the presence of blood and smoke. Publicly available datasets have been produced using CT and either phantom images or biological tissue samples covering a relatively small region of the endoscope field-of-view. We present a stereo-endoscopic reconstruction validation dataset based on CT (SERV-CT). Two ex vivo small porcine full torso cadavers were placed within the view of the endoscope with both the endoscope and target anatomy visible in the CT scan. Orientation of the endoscope was manually aligned to the stereoscopic view. Reference disparities and occlusions were calculated for 8 stereo pairs from each sample. For the second sample an RGB surface was acquired to aid alignment of smooth, featureless surfaces. Repeated manual alignments showed an RMS disparity accuracy of ~2 pixels and a depth accuracy of ~2mm. The reference dataset includes endoscope image pairs with corresponding calibration, disparities, depths and occlusions covering the majority of the endoscopic image and a range of tissue types. Smooth specular surfaces and images with significant variation of depth are included. We assessed the performance of various stereo algorithms from online available repositories. There is a significant variation between algorithms, highlighting some of the challenges of surgical endoscopic images. The SERV-CT dataset provides an easy to use stereoscopic validation for surgical applications with smooth reference disparities and depths with coverage over the majority of the endoscopic images. This complements existing resources well and we hope will aid the development of surgical endoscopic anatomical reconstruction algorithms.
updated: Tue Dec 22 2020 01:28:30 GMT+0000 (UTC)
published: Tue Dec 22 2020 01:28:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト