このペーパーでは、Crowdsensing-based Road Damage Detection Challenge (CRDDC) をまとめています。これは、IEEE International Conference on Big Data'2022 の一部として開催された Big Data Cup です。 Big Data Cup の課題には、リリースされたデータセットと、明確な評価指標を備えた明確に定義された問題が含まれます。チャレンジは、参加者のためのリアルタイムのオンライン評価システムを維持するデータ競争プラットフォームで実行されます。提示されたケースでは、データは、インド、日本、チェコ共和国、ノルウェー、米国、中国から収集された 47,420 の道路画像で構成され、これらの国の道路損傷を自動的に検出する方法を提案しています。この大会には 19 か国から 60 以上のチームが登録しました。提出されたソリューションは、前述の 6 か国の未公開テスト画像のパフォーマンスに基づいて、5 つのリーダーボードを使用して評価されました。このホワイト ペーパーでは、これらのチームによって提案された上位 11 のソリューションを要約します。最高のパフォーマンスを発揮するモデルは、YOLO および Faster-RCNN シリーズ モデルに基づくアンサンブル学習を利用して、6 か国すべてのテスト データを組み合わせて 76% の F1 スコアを生成します。最後に、現在と過去の課題を比較し、将来の方向性を示します。
This paper summarizes the Crowdsensing-based Road Damage Detection Challenge (CRDDC), a Big Data Cup organized as a part of the IEEE International Conference on Big Data'2022. The Big Data Cup challenges involve a released dataset and a well-defined problem with clear evaluation metrics. The challenges run on a data competition platform that maintains a real-time online evaluation system for the participants. In the presented case, the data constitute 47,420 road images collected from India, Japan, the Czech Republic, Norway, the United States, and China to propose methods for automatically detecting road damages in these countries. More than 60 teams from 19 countries registered for this competition. The submitted solutions were evaluated using five leaderboards based on performance for unseen test images from the aforementioned six countries. This paper encapsulates the top 11 solutions proposed by these teams. The best-performing model utilizes ensemble learning based on YOLO and Faster-RCNN series models to yield an F1 score of 76% for test data combined from all 6 countries. The paper concludes with a comparison of current and past challenges and provides direction for the future.