arXiv reaDer
水中画像の複数種のセグメンテーションのためのポイントラベル対応スーパーピクセル
Point Label Aware Superpixels for Multi-species Segmentation of Underwater Imagery
水中ビークルを使用してサンゴ礁を監視すると、大量の画像を収集することで、海洋調査の範囲と過去の生態学的データの可用性が向上します。この画像の分析は、セマンティックセグメンテーションを実行するようにトレーニングされたモデルを使用して自動化できますが、監視ありモデルをトレーニングするために画像に密にラベルを付けるには、コストと時間がかかりすぎます。この手紙では、エコロジストによってスパースポイントラベルでラベル付けされた写真クワッドラット画像を活用しています。セマンティックセグメンテーションモデルをトレーニングするための拡張グラウンドトゥルースを取得するために、スーパーピクセル領域内でラベルを伝播するためのポイントラベル認識方法を提案します。私たちのポイントラベル認識スーパーピクセルメソッドは、スパースポイントラベルを利用し、学習した機能を使用してピクセルをクラスター化し、雑然とした複雑なサンゴ画像で単一種のセグメントを正確に生成します。私たちの方法は、UCSD Mosaicsデータセットの以前の方法よりもピクセル精度が3.62%、ラベル伝播タスクの平均IoUが8.35%優れており、以前のアプローチで報告された計算時間を76%短縮しています。 DeepLabv3 +アーキテクチャをトレーニングし、セマンティックセグメンテーションの最新技術を、UCSDモザイクデータセットのピクセル精度で2.91%、平均IoUで9.65%、Eilatデータセットのピクセル精度で4.19%、平均IoUで14.32%優れています。 。
Monitoring coral reefs using underwater vehicles increases the range of marine surveys and availability of historical ecological data by collecting significant quantities of images. Analysis of this imagery can be automated using a model trained to perform semantic segmentation, however it is too costly and time-consuming to densely label images for training supervised models. In this letter, we leverage photo-quadrat imagery labeled by ecologists with sparse point labels. We propose a point label aware method for propagating labels within superpixel regions to obtain augmented ground truth for training a semantic segmentation model. Our point label aware superpixel method utilizes the sparse point labels, and clusters pixels using learned features to accurately generate single-species segments in cluttered, complex coral images. Our method outperforms prior methods on the UCSD Mosaics dataset by 3.62% for pixel accuracy and 8.35% for mean IoU for the label propagation task, while reducing computation time reported by previous approaches by 76%. We train a DeepLabv3+ architecture and outperform state-of-the-art for semantic segmentation by 2.91% for pixel accuracy and 9.65% for mean IoU on the UCSD Mosaics dataset and by 4.19% for pixel accuracy and 14.32% mean IoU for the Eilat dataset.
updated: Sun Jul 10 2022 21:42:00 GMT+0000 (UTC)
published: Sun Feb 27 2022 23:46:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト