TERRA-REFプロジェクトの中心的な目的は、フィールド条件下で植物を研究するためのセンシング技術の評価を研究するためのオープンアクセス参照データセットを生成することでした。 TERRA-REFプログラムは、1ヘクタール(〜10 ^ 4 m)を約1 mm ^ 2の空間分解能で週に複数回スキャンすることを目的として、ガントリーシステムに一連の高解像度の最先端テクノロジーセンサーを配備しました。このシステムには、ステレオペアRGBカメラ、サーマルイメージャー、3D構造をキャプチャするレーザースキャナー、および300〜2500nmの波長をカバーする2台のハイパースペクトルカメラを含む同じ場所に配置されたセンサーが含まれています。このセンサーデータは、新しい機械学習モデルのトレーニングに使用できる60種類を超える従来のプラント測定値とともに提供されます。関連する気象および環境測定、農業管理および実験計画に関する情報、および数百の植物品種のゲノム配列が収集されており、センサーおよび植物形質(表現型)データと一緒に利用できます。 4年と10の成長期の間に、TERRA-REFシステムは1PBを超えるセンサーデータと約4500万のファイルを生成しました。パブリックドメインにリリースされたサブセットは、2シーズンを占め、総データ量の約半分を占めています。これは、プロジェクトのコア生物学的範囲をはるかに超えた調査のための前例のない機会を提供します。このホワイトペーパーの焦点は、コンピュータビジョンと機械学習のコミュニティに、利用可能なデータの概要と、この種類のデータのいくつかの潜在的なアプリケーションを提供することです。
A core objective of the TERRA-REF project was to generate an open-access reference dataset for the study of evaluation of sensing technology to study plants under field conditions. The TERRA-REF program deployed a suite of high resolution, cutting edge technology sensors on a gantry system with the aim of scanning 1 hectare (~10^4 m) at around 1 mm^2 spatial resolution multiple times per week. The system contains co-located sensors including a stereo-pair RGB camera, a thermal imager, a laser scanner to capture 3D structure, and two hyperspectral cameras covering wavelengths of 300-2500nm. This sensor data is provided alongside over sixty types of traditional plant measurements that can be used to train new machine learning models. Associated weather and environmental measurements, information about agronomic management and experimental design, and the genomic sequences of hundreds of plant varieties have been collected and are available alongside the sensor and plant trait (phenotype) data. Over the course of four years and ten growing seasons, the TERRA-REF system generated over 1 PB of sensor data and almost 45 million files. The subset that has been released to the public domain accounts for two seasons and about half of the total data volume. This provides an unprecedented opportunity for investigations far beyond the core biological scope of the project. This focus of this paper is to provide the Computer Vision and Machine Learning communities an overview of the available data and some potential applications of this one of a kind data.