自動運転システムでは、ドライバーと歩行者の安全を確保するために、歩行者を検出することが重要なタスクです。これらのアルゴリズムに含まれるテクノロジーは、環境条件に関係なく、正確で信頼できるものでなければなりません。 RGBカメラだけに頼るだけでは、カメラがシーンを適切にキャプチャできない状況で道路環境を認識するのに十分でない場合があります。一部のアプローチは、RGBカメラをLIDARなどのTOFセンサーと組み合わせることにより、これらの制限を補うことを目的としています。ただし、LIDARによって提供される3D幾何学的情報のみを使用して、この問題に対処する作業はほとんどありません。この論文では、密集した3D点群内の歩行者を検出するためのPointNet ++ベースのアーキテクチャを提案します。目的は、歩行者検出システムにおける幾何学的情報のみの潜在的な貢献を調査することです。また、歩行者と非歩行者のラベルをRGB画像から3Dドメインに転送する半自動ラベリングシステムも紹介します。データセットにポイントクラウドにRGBが登録されているという事実により、結果を検証するための簡単な手動監視だけで、2Dバウンディングボックスからポイントクラウドへの逆投影によるラベル転送が可能になります。結果として得られる3Dラベル付きクラスターのジオメトリを使用してPointNet ++をトレーニングします。評価により、提案された方法の有効性が確認され、約98%の適合率と再現率の値が得られます。
Detecting pedestrians is a crucial task in autonomous driving systems to ensure the safety of drivers and pedestrians. The technologies involved in these algorithms must be precise and reliable, regardless of environment conditions. Relying solely on RGB cameras may not be enough to recognize road environments in situations where cameras cannot capture scenes properly. Some approaches aim to compensate for these limitations by combining RGB cameras with TOF sensors, such as LIDARs. However, there are few works that address this problem using exclusively the 3D geometric information provided by LIDARs. In this paper, we propose a PointNet++ based architecture to detect pedestrians in dense 3D point clouds. The aim is to explore the potential contribution of geometric information alone in pedestrian detection systems. We also present a semi-automatic labeling system that transfers pedestrian and non-pedestrian labels from RGB images onto the 3D domain. The fact that our datasets have RGB registered with point clouds enables label transferring by back projection from 2D bounding boxes to point clouds, with only a light manual supervision to validate results. We train PointNet++ with the geometry of the resulting 3D labelled clusters. The evaluation confirms the effectiveness of the proposed method, yielding precision and recall values around 98%.