arXiv reaDer
ラベル付けされていないビデオ データに基づくパターン化された孤立種の自動個体識別
Automatic Individual Identification of Patterned Solitary Species Based on Unlabeled Video Data
カメラトラップからのビデオの手動処理と分析は時間がかかり、誤ってトリガーされた映像のフィルタリングから個人の識別と再識別まで、いくつかの手順が含まれます。この研究では、手動操作を必要とせずに、カメラ トラップからのビデオを自動的に分析して個人を識別するパイプラインを開発しました。このパイプラインは、ヒョウ (Panthera pardus) など、一意に識別可能な毛皮のパターンと孤独な行動を持つ動物種に適用されます。トリガーされた 1 つのビデオ シーケンス全体で同じ個人が見られたと仮定しました。この仮定により、複数の画像は、事前にラベル付けすることなく、最初のデータベースの充填のために個人に割り当てることができます。パイプラインは、コンピューター ビジョンとディープ ラーニングの確立されたコンポーネント、特に畳み込みニューラル ネットワーク (CNN) とスケール不変特徴変換 (SIFT) 機能に基づいていました。追加のコンポーネントを実装することで、この基盤を強化し、そうでなければ必要な人間の対話を置き換えました。ビデオ素材のフレーム間の類似性に基づいて、未知の総人口のオープン セットの問題を回避する個人を表すクラスターが形成されました。このパイプラインは、パン アフリカン プログラム: The Cultured Chimpanzee (PanAf) によって収集されたヒョウのビデオのデータセットでテストされ、未知の個体間の正確な一致で 83% を超える成功率を達成しました。提案されたパイプラインは、カメラ トラップ データに基づく将来の保護プロジェクトの貴重なツールとなり、ラベル付きデータが利用できない場合に、個人識別のための手動分析の作業を削減します。
The manual processing and analysis of videos from camera traps is time-consuming and includes several steps, ranging from the filtering of falsely triggered footage to identifying and re-identifying individuals. In this study, we developed a pipeline to automatically analyze videos from camera traps to identify individuals without requiring manual interaction. This pipeline applies to animal species with uniquely identifiable fur patterns and solitary behavior, such as leopards (Panthera pardus). We assumed that the same individual was seen throughout one triggered video sequence. With this assumption, multiple images could be assigned to an individual for the initial database filling without pre-labeling. The pipeline was based on well-established components from computer vision and deep learning, particularly convolutional neural networks (CNNs) and scale-invariant feature transform (SIFT) features. We augmented this basis by implementing additional components to substitute otherwise required human interactions. Based on the similarity between frames from the video material, clusters were formed that represented individuals bypassing the open set problem of the unknown total population. The pipeline was tested on a dataset of leopard videos collected by the Pan African Programme: The Cultured Chimpanzee (PanAf) and achieved a success rate of over 83% for correct matches between previously unknown individuals. The proposed pipeline can become a valuable tool for future conservation projects based on camera trap data, reducing the work of manual analysis for individual identification, when labeled data is unavailable.
updated: Wed Apr 19 2023 13:46:16 GMT+0000 (UTC)
published: Wed Apr 19 2023 13:46:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト