arXiv reaDer
VideoSum: 外科ビデオ要約用の Python ライブラリ
VideoSum: A Python Library for Surgical Video Summarization
深層学習 (DL) アルゴリズムのパフォーマンスは、注釈付きデータの量と品質に大きく影響されます。ただし、外科データサイエンスでは、アクセスが制限されています。したがって、注釈付き SDS データの不足を軽減することを目的とした方法を開発するために多大な研究努力が払われていることは驚くべきことではありません。並行して、リリースされるコンピューター支援介入 (CAI) データセットの数も増えていますが、その規模は依然として限られています。こうした前提のもと、データキュレーションは多くの SDS 研究活動の重要な要素になりつつあります。手術ビデオ データセットは厳選することが要求されており、専用のサポート ツールが役立ちます。この研究では、視覚化、注釈、および処理を容易にするために、手術ビデオをストーリーボードまたは代表的なフレームのコラージュに要約することを提案します。ビデオ要約は自然画像に対して十分に確立されています。ただし、最先端の方法は通常、人間が作成したアノテーションでトレーニングされたモデルに依存しており、手術ビデオで評価された方法はほとんどなく、このタスクに使用できるソフトウェア パッケージは限られています。私たちは、さまざまな教師なし手法を含む手術ビデオからストーリーボードを生成する、使いやすいオープンソースの Python ライブラリである videosum を紹介します。
The performance of deep learning (DL) algorithms is heavily influenced by the quantity and the quality of the annotated data. However, in Surgical Data Science, access to it is limited. It is thus unsurprising that substantial research efforts are made to develop methods aiming at mitigating the scarcity of annotated SDS data. In parallel, an increasing number of Computer Assisted Interventions (CAI) datasets are being released, although the scale of these remain limited. On these premises, data curation is becoming a key element of many SDS research endeavors. Surgical video datasets are demanding to curate and would benefit from dedicated support tools. In this work, we propose to summarize surgical videos into storyboards or collages of representative frames to ease visualization, annotation, and processing. Video summarization is well-established for natural images. However, state-of-the-art methods typically rely on models trained on human-made annotations, few methods have been evaluated on surgical videos, and the availability of software packages for the task is limited. We present videosum, an easy-to-use and open-source Python library to generate storyboards from surgical videos that contains a variety of unsupervised methods.
updated: Fri Jul 14 2023 16:49:42 GMT+0000 (UTC)
published: Wed Feb 15 2023 19:09:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト