この論文は、ホームケージにおけるマウス行動分類のための時空間深層学習アプローチを提示します。パフォーマンスを向上させるためにさまざまな変更を加えた一連のデュアルストリームアーキテクチャを使用して、ネットワーク全体で定期的にストリームを共同で処理する新しい機能共有アプローチを紹介します。単独で飼育されているマウスの公開されているラベル付きデータセットを使用して、機能共有を利用するInceptionベースのネットワークのアンサンブルを使用して86.47%の予測精度を達成します。また、アブレーションスタディを通じて、すべてのモデルで、機能共有アーキテクチャが、個別のストリームを持つ従来のアーキテクチャよりも一貫して優れていることを示しています。最高のパフォーマンスを発揮するモデルは、マウスと人間の両方の他のアクティビティデータセットでさらに評価され、最先端の結果が得られました。今後の作業では、教師なし異常検出ドメインの動作分類における機能共有の有効性を調査します。
This paper presents a spatiotemporal deep learning approach for mouse behavioural classification in the home cage. Using a series of dual-stream architectures with assorted modifications to increase performance, we introduce a novel feature-sharing approach that jointly processes the streams at regular intervals throughout the network. Using a publicly available labelled dataset of singly-housed mice, we achieve a prediction accuracy of 86.47% using an ensemble of Inception-based networks that utilize feature sharing. We also demonstrate through ablation studies that for all models, the feature-sharing architectures consistently perform better than conventional ones having separate streams. The best performing models were further evaluated on other activity datasets, both mouse and human, and achieved state-of-the-art results. Future work will investigate the effectiveness of feature sharing in behavioural classification in the unsupervised anomaly detection domain.