この論文では、農業用の低コストで超コンパクトな3D印刷された自律型フィールドロボットのための、高精度の制御と深層学習ベースのコーンスタンドカウントアルゴリズムを紹介します。現在、出芽率、バイオマス、活力、林分数などの植物形質は手動で測定されています。これは非常に労働集約的であり、エラーが発生しやすいです。 TerraSentiaと呼ばれるロボットは、手動測定の代わりに、効率的な表現型を実現するために植物の形質の測定を自動化するように設計されています。この論文では、オンボードロボットセンサーと、未知の車輪と地形の相互作用の存在下で高精度の経路追跡を保証する学習ベースの非線形モデル予測制御(NMPC)を使用して、主要な地形パラメーターを識別する非線形移動地平線推定器(NMHE)を定式化します。 。さらに、超小型地上ロボットがフィールドを自律的に運転することでトウモロコシの林分を数えることができるように設計されたマシンビジョンアルゴリズムを開発します。このアルゴリズムは、深いネットワークを利用して画像内のトウモロコシ植物を検出し、視覚的な追跡モデルを利用して、さまざまなタイムステップで検出されたオブジェクトを再識別します。出芽後約14日(ステージV3〜V4)のトウモロコシ植物について、さまざまな分野の53のトウモロコシ区画からデータを収集しました。ロボットの予測は、C_robot = 1.02×C_human-0.86および相関係数R = 0.96のグラウンドトゥルースとよく一致しています。アルゴリズムによって与えられる平均相対誤差は-3.78%であり、標準偏差は6.76%です。これらの結果は、トウモロコシやその他の作物に低コストで超小型の地上ロボットを使用した、自律型ロボットベースのリアルタイム表現型に向けた最初の重要なステップを示しています。
This paper presents high precision control and deep learning-based corn stand counting algorithms for a low-cost, ultra-compact 3D printed and autonomous field robot for agricultural operations. Currently, plant traits, such as emergence rate, biomass, vigor, and stand counting, are measured manually. This is highly labor-intensive and prone to errors. The robot, termed TerraSentia, is designed to automate the measurement of plant traits for efficient phenotyping as an alternative to manual measurements. In this paper, we formulate a Nonlinear Moving Horizon Estimator (NMHE) that identifies key terrain parameters using onboard robot sensors and a learning-based Nonlinear Model Predictive Control (NMPC) that ensures high precision path tracking in the presence of unknown wheel-terrain interaction. Moreover, we develop a machine vision algorithm designed to enable an ultra-compact ground robot to count corn stands by driving through the fields autonomously. The algorithm leverages a deep network to detect corn plants in images, and a visual tracking model to re-identify detected objects at different time steps. We collected data from 53 corn plots in various fields for corn plants around 14 days after emergence (stage V3 - V4). The robot predictions have agreed well with the ground truth with C_robot=1.02 ×C_human-0.86 and a correlation coefficient R=0.96. The mean relative error given by the algorithm is -3.78%, and the standard deviation is 6.76%. These results indicate a first and significant step towards autonomous robot-based real-time phenotyping using low-cost, ultra-compact ground robots for corn and potentially other crops.