arXiv reaDer
緑を乗り越える: 植物の葉を動かしてその後ろを見る方法を学ぶ
Push Past Green: Learning to Look Behind Plant Foliage by Moving It
自律型農業アプリケーション (検査、表現型解析、果実の摘み取りなど) では、植物の葉を操作して葉や枝の裏側を確認する必要があります。部分的な可視性、極度の乱雑さ、薄い構造、植物の未知の幾何学的形状とダイナミクスにより、このような操作は困難になります。私たちはデータ駆動型の手法を通じてこれらの課題に取り組みます。私たちは自己監視を使用して、特定のプラントに対して候補アクションを実行するとどのような空間が現れるかを予測するニューラル ネットワークである SRPNet をトレーニングします。 SRPNet とクロスエントロピー法を使用して、植物の葉の下の空間を明らかにするのに効果的なアクションを予測します。さらに、SRPNet は、どのくらいの空間が露出するだけでなく、どこで露出するかも予測するため、植物の葉の下の空間を徐々に明らかにする一連のアクションを実行できます。私たちは、新しい植物構成への一般化をテストする 2 つの設定を含む 5 つの設定にわたる物理的なテストベッドで、合成植物 (ブドウの木) と本物の植物 (ドラセナ) を実験します。私たちの実験では、競合する手作りの探査方法に対する私たちの全体的な手法である PPG の有効性と、手作りのダイナミクス モデルおよび関連するアブレーションに対する SRPNet の有効性が明らかになりました。
Autonomous agriculture applications (e.g., inspection, phenotyping, plucking fruits) require manipulating the plant foliage to look behind the leaves and the branches. Partial visibility, extreme clutter, thin structures, and unknown geometry and dynamics for plants make such manipulation challenging. We tackle these challenges through data-driven methods. We use self-supervision to train SRPNet, a neural network that predicts what space is revealed on execution of a candidate action on a given plant. We use SRPNet with the cross-entropy method to predict actions that are effective at revealing space beneath plant foliage. Furthermore, as SRPNet does not just predict how much space is revealed but also where it is revealed, we can execute a sequence of actions that incrementally reveal more and more space beneath the plant foliage. We experiment with a synthetic (vines) and a real plant (Dracaena) on a physical test-bed across 5 settings including 2 settings that test generalization to novel plant configurations. Our experiments reveal the effectiveness of our overall method, PPG, over a competitive hand-crafted exploration method, and the effectiveness of SRPNet over a hand-crafted dynamics model and relevant ablations.
updated: Wed Jun 05 2024 17:59:01 GMT+0000 (UTC)
published: Thu Jul 06 2023 17:55:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト