視覚ベースの触覚センサーは、視覚的閉塞で対物レンズを特定するための重要な接触形状を提供する可能性があります。ただし、光学的および機械的制約を同時に満たすために、コンパクトなロボットフィンガーの高解像度3D接触形状を測定することは困難です。この作品では、高解像度の3D再構成を実現しながら、ロボットの指のコンパクトな形状を持つように最適化されたGelSightウェッジセンサーを紹介します。さまざまな照明構成で3D再構成を評価し、方法を3つのライトから1つまたは2つのライトに拡張します。センサーを人間の指のサイズに縮小して細かい操作を行うことで、設計の柔軟性を実証します。また、3D空間でのポーズ追跡のための再構築された3Dジオメトリの有効性と可能性を示します。
Vision-based tactile sensors have the potential to provide important contact geometry to localize the objective with visual occlusion. However, it is challenging to measure high-resolution 3D contact geometry for a compact robot finger, to simultaneously meet optical and mechanical constraints. In this work, we present the GelSight Wedge sensor, which is optimized to have a compact shape for robot fingers, while achieving high-resolution 3D reconstruction. We evaluate the 3D reconstruction under different lighting configurations, and extend the method from 3 lights to 1 or 2 lights. We demonstrate the flexibility of the design by shrinking the sensor to the size of a human finger for fine manipulation tasks. We also show the effectiveness and potential of the reconstructed 3D geometry for pose tracking in the 3D space.