arXiv reaDer
きめの細かいヘビ認識のための効果的な方法論を探求
Explored An Effective Methodology for Fine-Grained Snake Recognition
Fine-Grained Visual Classification(FGVC)は、コンピュータービジョンとパターン認識における長年の根本的な問題であり、さまざまな実世界のアプリケーションを支えています。このペーパーでは、FGVCを使用したSnakeCLEF2022での貢献について説明します。まず、さまざまなメタ情報を利用してきめ細かい識別を支援する強力なマルチモーダルバックボーンを設計します。次に、データセットを使用してロングテール分布を解決するための新しい損失関数を提供します。次に、ラベルのないデータセットを最大限に活用するために、教師あり学習と教師あり学習の共同トレーニングを使用して、事前トレーニング済みモデルを提供します。さらに、いくつかの効果的なデータ処理のトリックも私たちの実験で考慮されています。最後になりましたが、ハードマイニング、アンサンブルされた種類のモデルパフォーマンスを使用して、ダウンストリームタスクで微調整されました。広範な実験は、私たちの方法がきめ細かい認識のパフォーマンスを効果的に改善できることを示しています。私たちの方法では、プライベートデータセットとパブリックデータセットでそれぞれ92.7%と89.4%のマクロf1スコアを達成できます。これは、プライベートリーダーボードの参加者の中で1位です。
Fine-Grained Visual Classification (FGVC) is a longstanding and fundamental problem in computer vision and pattern recognition, and underpins a diverse set of real-world applications. This paper describes our contribution at SnakeCLEF2022 with FGVC. Firstly, we design a strong multimodal backbone to utilize various meta-information to assist in fine-grained identification. Secondly, we provide new loss functions to solve the long tail distribution with dataset. Then, in order to take full advantage of unlabeled datasets, we use self-supervised learning and supervised learning joint training to provide pre-trained model. Moreover, some effective data process tricks also are considered in our experiments. Last but not least, fine-tuned in downstream task with hard mining, ensambled kinds of model performance. Extensive experiments demonstrate that our method can effectively improve the performance of fine-grained recognition. Our method can achieve a macro f1 score 92.7% and 89.4% on private and public dataset, respectively, which is the 1st place among the participators on private leaderboard.
updated: Sun Jul 24 2022 02:19:15 GMT+0000 (UTC)
published: Sun Jul 24 2022 02:19:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト