arXiv reaDer
自己教師あり学習と最小限のラベルを使用したプライバシー保護のための手術ビデオの体外フレームの自動検出
Automatic Detection of Out-of-body Frames in Surgical Videos for Privacy Protection Using Self-supervised Learning and Minimal Labels
内視鏡ビデオ録画は、低侵襲のロボット支援手術で広く使用されていますが、内視鏡が患者の体外にある場合、機密情報を含む可能性のある無関係なセグメントをキャプチャできます。これに対処するために、最小限のデータラベルで自己監視を活用することにより、手術ビデオの体外フレームを正確に検出するフレームワークを提案します。大量のラベルのない内視鏡画像を使用して、意味のある表現を自己教師付きの方法で学習します。補助タスクの事前トレーニングと限られた監視による微調整を含む私たちのアプローチは、da Vinci X および Xi 手術システムからキャプチャされた手術ビデオで体外フレームを検出する以前の方法よりも優れています。 F1 の平均スコアは 96.00 から 98.02 の範囲です。驚くべきことに、トレーニング ラベルの 5% のみを使用して、私たちのアプローチは依然として 97 を超える平均 F1 スコア パフォーマンスを維持し、ラベルが 95% 少ない完全に教師ありの方法よりも優れています。これらの結果は、手術ビデオ録画の安全な取り扱いを促進し、低侵襲手術におけるデータ プライバシー保護を強化するフレームワークの可能性を示しています。
Endoscopic video recordings are widely used in minimally invasive robot-assisted surgery, but when the endoscope is outside the patient's body, it can capture irrelevant segments that may contain sensitive information. To address this, we propose a framework that accurately detects out-of-body frames in surgical videos by leveraging self-supervision with minimal data labels. We use a massive amount of unlabeled endoscopic images to learn meaningful representations in a self-supervised manner. Our approach, which involves pre-training on an auxiliary task and fine-tuning with limited supervision, outperforms previous methods for detecting out-of-body frames in surgical videos captured from da Vinci X and Xi surgical systems. The average F1 scores range from 96.00 to 98.02. Remarkably, using only 5% of the training labels, our approach still maintains an average F1 score performance above 97, outperforming fully-supervised methods with 95% fewer labels. These results demonstrate the potential of our framework to facilitate the safe handling of surgical video recordings and enhance data privacy protection in minimally invasive surgery.
updated: Fri Mar 31 2023 14:53:56 GMT+0000 (UTC)
published: Fri Mar 31 2023 14:53:56 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト