自動化された手術器具の位置特定は、手術プロセスを理解し、それらを分析して、手術中の有意義なガイダンスまたは手術後の外科医への手術指標を提供するための重要な技術です。手術ビデオの自動手術器具ローカリゼーションのための手術器具の運動学的特性を反映する新しいデータセットを紹介します。 hSDB(hutom Surgery DataBase)-機器データセットは、腹腔鏡下胆嚢摘出術の24例とロボット胃切除術の24例からの機器位置特定情報で構成されています。すべての機器のローカリゼーション情報は、オブジェクト検出用のバウンディングボックスの形式で提供されます。楽器間のクラスの不均衡の問題を処理するために、Unityで3Dモデル用にモデル化された合成楽器がトレーニングデータとして含まれています。さらに、3D機器データの場合、ツールのインスタンスセグメンテーションを可能にするポリゴン注釈が提供されます。すべての器具の運動学的特性を反映するために、腹腔鏡器具の場合は頭と体の部分に、ロボット器具の場合は頭、手首、体の部分に別々に注釈が付けられています。手術で頻繁に使用される補助器具(検体バッグ、針など)の注釈データも含まれています。さらに、hSDB機器データセットに関する統計情報と、MMDetectionライブラリによってトレーニングされたオブジェクト検出ネットワークのベースラインローカリゼーションパフォーマンスおよび結果の分析を提供します。
Automated surgical instrument localization is an important technology to understand the surgical process and in order to analyze them to provide meaningful guidance during surgery or surgical index after surgery to the surgeon. We introduce a new dataset that reflects the kinematic characteristics of surgical instruments for automated surgical instrument localization of surgical videos. The hSDB(hutom Surgery DataBase)-instrument dataset consists of instrument localization information from 24 cases of laparoscopic cholecystecomy and 24 cases of robotic gastrectomy. Localization information for all instruments is provided in the form of a bounding box for object detection. To handle class imbalance problem between instruments, synthesized instruments modeled in Unity for 3D models are included as training data. Besides, for 3D instrument data, a polygon annotation is provided to enable instance segmentation of the tool. To reflect the kinematic characteristics of all instruments, they are annotated with head and body parts for laparoscopic instruments, and with head, wrist, and body parts for robotic instruments separately. Annotation data of assistive tools (specimen bag, needle, etc.) that are frequently used for surgery are also included. Moreover, we provide statistical information on the hSDB-instrument dataset and the baseline localization performances of the object detection networks trained by the MMDetection library and resulting analyses.