arXiv reaDer
ロボット注入のための自己監視型透明液体セグメンテーション
Self-supervised Transparent Liquid Segmentation for Robotic Pouring
液体状態の推定は、注ぐなどのロボット工学のタスクにとって重要です。ただし、透明な液体の状態を推定することは困難な問題です。トレーニングのために手動の注釈や液体の加熱を必要とせずに、静的なRGB画像から水などの透明な液体をセグメント化できる新しいセグメンテーションパイプラインを提案します。代わりに、着色された液体の画像を、着色された透明な液体画像の対になっていないデータセットでのみトレーニングされた、合成的に生成された透明な液体画像に変換できる生成モデルを使用します。着色された液体のセグメンテーションラベルは、バックグラウンド減算を使用して自動的に取得されます。私たちの実験は、手動の注釈を必要とせずに、透明な液体のセグメンテーションマスクを正確に予測できることを示しています。透明なカップ内の液体の高さを認識することによって注入を制御するロボット注入タスクでの透明な液体セグメンテーションの有用性を示します。付属のビデオと補足資料を見つけることができます
Liquid state estimation is important for robotics tasks such as pouring; however, estimating the state of transparent liquids is a challenging problem. We propose a novel segmentation pipeline that can segment transparent liquids such as water from a static, RGB image without requiring any manual annotations or heating of the liquid for training. Instead, we use a generative model that is capable of translating images of colored liquids into synthetically generated transparent liquid images, trained only on an unpaired dataset of colored and transparent liquid images. Segmentation labels of colored liquids are obtained automatically using background subtraction. Our experiments show that we are able to accurately predict a segmentation mask for transparent liquids without requiring any manual annotations. We demonstrate the utility of transparent liquid segmentation in a robotic pouring task that controls pouring by perceiving the liquid height in a transparent cup. Accompanying video and supplementary materials can be found
updated: Thu Mar 03 2022 06:26:04 GMT+0000 (UTC)
published: Thu Mar 03 2022 06:26:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト