arXiv reaDer
YouTubeの5位ソリューション-VOSチャレンジ2022:ビデオオブジェクトのセグメンテーション
5th Place Solution for YouTube-VOS Challenge 2022: Video Object Segmentation
ビデオオブジェクトセグメンテーション(VOS)は、ディープラーニングの台頭とともに大きな進歩を遂げました。ただし、類似したオブジェクトは簡単に混乱し、小さなオブジェクトを見つけるのは難しいなど、いくつかの厄介な問題がまだ存在します。これらの問題を解決し、VOSのパフォーマンスをさらに向上させるために、このタスクのシンプルで効果的なソリューションを提案します。このソリューションでは、最初にYoutube-VOSデータセットの分布を分析し、パブリック静的およびビデオセグメンテーションデータセットを導入することでデータセットを補足します。次に、特性の異なる3つのネットワークアーキテクチャを改善し、いくつかのネットワークをトレーニングして、ビデオ内のオブジェクトの異なる特性を学習します。その後、簡単な方法ですべての結果を統合し、さまざまなモデルが相互に補完し合うようにします。最後に、微妙な後処理が実行され、正確な境界を持つ正確なビデオオブジェクトのセグメンテーションが保証されます。 Youtube-VOSデータセットでの広範な実験は、提案されたソリューションがYouTube-VOS 2022テストセットで86.1%の総合スコアで最先端のパフォーマンスを達成することを示しています。これは、Youtubeのビデオオブジェクトセグメンテーショントラックで5位です。 -VOSチャレンジ2022。
Video object segmentation (VOS) has made significant progress with the rise of deep learning. However, there still exist some thorny problems, for example, similar objects are easily confused and tiny objects are difficult to be found. To solve these problems and further improve the performance of VOS, we propose a simple yet effective solution for this task. In the solution, we first analyze the distribution of the Youtube-VOS dataset and supplement the dataset by introducing public static and video segmentation datasets. Then, we improve three network architectures with different characteristics and train several networks to learn the different characteristics of objects in videos. After that, we use a simple way to integrate all results to ensure that different models complement each other. Finally, subtle post-processing is carried out to ensure accurate video object segmentation with precise boundaries. Extensive experiments on Youtube-VOS dataset show that the proposed solution achieves the state-of-the-art performance with an 86.1% overall score on the YouTube-VOS 2022 test set, which is 5th place on the video object segmentation track of the Youtube-VOS Challenge 2022.
updated: Mon Jun 20 2022 06:14:27 GMT+0000 (UTC)
published: Mon Jun 20 2022 06:14:27 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト