arXiv reaDer
CholecTriplet2022: ツールを見せてトリプレットを教えてください -- 外科手術動作のトリプレット検出のための内視鏡視覚チャレンジ
CholecTriplet2022: Show me a tool and tell me the triplet -- an endoscopic vision challenge for surgical action triplet detection
使用された器具、実行されたアクション、およびターゲットの解剖学的構造の 3 つの要素として手術活動を形式化することは、手術活動モデリングのゴールドスタンダード アプローチになりつつあります。利点は、この形式化により、ツールと組織の相互作用をより詳細に理解できるようになり、画像誘導手術のためのより優れた人工知能支援を開発するために使用できることです。これまでの取り組みと 2021 年に導入された CholecTriplet チャレンジでは、手術映像からこれらの三つ子を認識することを目的とした技術がまとめられました。トリプレットの空間的位置も推定すると、コンピューター支援介入に対するより正確な術中状況認識型意思決定サポートが提供されます。この論文では、手術動作トリプレット モデリングを認識から検出まで拡張する CholecTriplet2022 チャレンジを紹介します。これには、主要なアクターとして、目に見えるすべての手術器具 (またはツール) の弱く監視された境界ボックスの位置特定と、次の形式での各ツールのアクティビティのモデリングが含まれます。三つ子。この論文では、ベースライン手法と、タスクを解決するための課題で提示された 10 個の新しい深層学習アルゴリズムについて説明します。また、手法の徹底的な方法論的な比較、複数の指標にわたって得られた結果の詳細な分析、視覚的および手順上の課題も提供します。それらの重要性、および将来の研究の方向性と外科分野での応用に役立つ洞察を提供します。
Formalizing surgical activities as triplets of the used instruments, actions performed, and target anatomies is becoming a gold standard approach for surgical activity modeling. The benefit is that this formalization helps to obtain a more detailed understanding of tool-tissue interaction which can be used to develop better Artificial Intelligence assistance for image-guided surgery. Earlier efforts and the CholecTriplet challenge introduced in 2021 have put together techniques aimed at recognizing these triplets from surgical footage. Estimating also the spatial locations of the triplets would offer a more precise intraoperative context-aware decision support for computer-assisted intervention. This paper presents the CholecTriplet2022 challenge, which extends surgical action triplet modeling from recognition to detection. It includes weakly-supervised bounding box localization of every visible surgical instrument (or tool), as the key actors, and the modeling of each tool-activity in the form of triplet. The paper describes a baseline method and 10 new deep learning algorithms presented at the challenge to solve the task. It also provides thorough methodological comparisons of the methods, an in-depth analysis of the obtained results across multiple metrics, visual and procedural challenges; their significance, and useful insights for future research directions and applications in surgery.
updated: Fri Jul 14 2023 19:06:27 GMT+0000 (UTC)
published: Mon Feb 13 2023 11:53:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト