arXiv reaDer
高気晴らしのフォトリアリスティック合成データを使用したカスタムオブジェクトの検出とセグメンテーション
Detection and Segmentation of Custom Objects using High Distraction Photorealistic Synthetic Data
合成データを使用してインスタンスのセグメンテーションを実行するための簡単で便利な方法論を示します。この方法論を基本的なケースに適用し、定量分析を通じて洞察を導き出しました。新しい公開データセットを作成しました。検出およびセグメンテーションタスクを目的としたExpoMarkersDatasetです。このデータセットには、対応するピクセルパーフェクトセグメンテーショングラウンドトゥルースを含む5,000の合成フォトリアリスティック画像が含まれています。目標は、カスタムオブジェクトの手動で収集され、注釈が付けられた実際のデータで高いパフォーマンスを実現することです。これを行うには、ターゲットオブジェクトやその他の気を散らす可能性のあるオブジェクトの3Dモデルを作成し、それらをシミュレートされた環境内に配置します。このタスクにはExpoMarkersが選択され、正確なテクスチャ、サイズ、3D形状により、カスタムオブジェクトの要件に適合しました。追加の利点は、結果のテストと検証を容易にするために、世界中のオフィスでこのオブジェクトを利用できることです。ドメインランダム化手法を使用してデータを生成します。この手法は、気晴らしオブジェクトと呼ばれる、シーン内の他の写実的なオブジェクトもシミュレートします。これらのオブジェクトは、視覚的な複雑さ、オクルージョン、および照明の課題を提供し、モデルがトレーニングで堅牢性を獲得するのに役立ちます。また、合成データセットの比較と評価に使用される手動で収集されたデータセットもリリースしています。このホワイトペーパーは、フォトリアリスティックなシミュレーションデータが、手動でキャプチャされたデータよりもスケーラブルで柔軟なソリューションとして、実際のアプリケーションで使用できるという強力な証拠を提供します。コードは次のアドレスで入手できます:https://github.com/DataGenResearchTeam/expo_markers
We show a straightforward and useful methodology for performing instance segmentation using synthetic data. We apply this methodology on a basic case and derived insights through quantitative analysis. We created a new public dataset: The Expo Markers Dataset intended for detection and segmentation tasks. This dataset contains 5,000 synthetic photorealistic images with their corresponding pixel-perfect segmentation ground truth. The goal is to achieve high performance on manually-gathered and annotated real-world data of custom objects. We do that by creating 3D models of the target objects and other possible distraction objects and place them within a simulated environment. Expo Markers were chosen for this task, fitting our requirements of a custom object due to the exact texture, size and 3D shape. An additional advantage is the availability of this object in offices around the world for easy testing and validation of our results. We generate the data using a domain randomization technique that also simulates other photorealistic objects in the scene, known as distraction objects. These objects provide visual complexity, occlusions, and lighting challenges to help our model gain robustness in training. We are also releasing our manually-gathered datasets used for comparison and evaluation of our synthetic dataset. This white-paper provides strong evidence that photorealistic simulated data can be used in practical real world applications as a more scalable and flexible solution than manually-captured data. Code is available at the following address: https://github.com/DataGenResearchTeam/expo_markers
updated: Sun May 23 2021 07:21:05 GMT+0000 (UTC)
published: Tue Jul 28 2020 16:33:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト