教室のビデオで生徒の行動を正確に検出することは、教室でのパフォーマンスを分析し、指導の効果を向上させるのに役立ちます。しかし現状では行動検知の正解率は低い。この課題に対処するために、改良された YOLOv7 に基づいた生徒の教室での行動検出方法を提案します。まず、生徒の教室行動データセット (SCB-Dataset) を作成しました。これには、挙手、読み書き、書き込みの 3 つの行動をカバーする 18.4k のラベルと 4.2k の画像が含まれています。混雑したシーンでの検出精度を向上させるために、biformer tention モジュールと Wise-IoU を YOLOv7 ネットワークに統合しました。最後に、SCB-Dataset で実験が行われ、モデルは 79% の mAP@0.5 を達成し、以前の結果より 1.8% 改善されました。 SCB-Dataset とコードは、https://github.com/Whiffe/SCB-dataset からダウンロードできます。
Accurately detecting student behavior in classroom videos can aid in analyzing their classroom performance and improving teaching effectiveness. However, the current accuracy rate in behavior detection is low. To address this challenge, we propose the Student Classroom Behavior Detection method, based on improved YOLOv7. First, we created the Student Classroom Behavior dataset (SCB-Dataset), which includes 18.4k labels and 4.2k images, covering three behaviors: hand raising, reading, and writing. To improve detection accuracy in crowded scenes, we integrated the biformer attention module and Wise-IoU into the YOLOv7 network. Finally, experiments were conducted on the SCB-Dataset, and the model achieved an mAP@0.5 of 79%, resulting in a 1.8% improvement over previous results. The SCB-Dataset and code are available for download at: https://github.com/Whiffe/SCB-dataset.