学習ベースの3Dポイントクラウド登録のタスクは大幅に進歩しており、既存の方法では、部分から部分へのマッチングシナリオでも、ModelNet40などの標準ベンチマークで優れた結果が得られます。残念ながら、これらの方法は、実際のデータが存在する場合でも苦労します。この作業では、これらの失敗の原因を特定し、その背後にある理由を分析し、それらに取り組むための解決策を提案します。調査結果を一連のガイドラインに要約し、さまざまなベースライン手法であるDCPとIDAMに適用することでその有効性を示します。つまり、私たちのガイドラインは、トレーニングの収束とテストの精度の両方を向上させます。最終的に、これはベストプラクティスの3D登録ネットワーク(BPNet)に変換され、実世界のデータでこれまでに見られなかったオブジェクトを処理できる最初の学習ベースの方法を構成します。合成データのみでトレーニングされているにもかかわらず、私たちのモデルは微調整なしで実際のデータに一般化され、市販のセンサーで取得された見えないオブジェクトの点群で最大67%の精度に達します。
Much progress has been made on the task of learning-based 3D point cloud registration, with existing methods yielding outstanding results on standard benchmarks, such as ModelNet40, even in the partial-to-partial matching scenario. Unfortunately, these methods still struggle in the presence of real data. In this work, we identify the sources of these failures, analyze the reasons behind them, and propose solutions to tackle them. We summarise our findings into a set of guidelines and demonstrate their effectiveness by applying them to different baseline methods, DCP and IDAM. In short, our guidelines improve both their training convergence and testing accuracy. Ultimately, this translates to a best-practice 3D registration network (BPNet), constituting the first learning-based method able to handle previously-unseen objects in real-world data. Despite being trained only on synthetic data, our model generalizes to real data without any fine-tuning, reaching an accuracy of up to 67% on point clouds of unseen objects obtained with a commercial sensor.