arXiv reaDer
衛星データ、回転データ、およびコンテキスト データを階層的に融合することで作物分類を強化
Boosting Crop Classification by Hierarchically Fusing Satellite, Rotational, and Contextual Data
作物生産量の推定と農業区画の監視には、正確な季節の作物タイプの分類が不可欠です。しかし、植物の成長パターンの複雑さとその時空間的変動により、大きな課題が生じます。現在の深層学習ベースの手法は、シングルおよびマルチモーダル時系列からの作物タイプ分類に有望ですが、既存の手法のほとんどは、衛星光学リモートセンシングデータや輪作パターンなどの単一モダリティに依存しています。私たちは、複数の年や国にわたって精度と堅牢性を向上させるために、マルチモーダルな情報をモデルに融合する新しいアプローチを提案します。このアプローチは、Sentinel-2 と Landsat 8 の観測によるリモート センシング時系列、区画作物の輪作、および地域的な作物分布という 3 つの手法を使用しています。私たちのアプローチを評価するために、フランスとオランダの 740 万の農業区画の新しい注釈付きデータセットをリリースします。各区画を時系列の表面反射率 (赤色および NIR) および生物物理学的変数 (LAI、FAPAR) に関連付けます。さらに、有意義なモデル評価のために作物タイプを階層クラス構造に自動的に集約する新しいアプローチと、初期の季節分類のための新しいデータ拡張手法を提案します。マルチモーダルアプローチのパフォーマンスは、151 から 8 の作物タイプまたはグループにわたる意味論的ドメインのさまざまな集約レベルで評価されました。その結果、NL データセットでは 91% ~ 95%、FR データセットでは 85% ~ 89% の精度が得られました。データセットでの事前トレーニングにより、国間のドメイン適応が向上し、クロスドメインのゼロショット学習が可能になり、フランスからオランダまでの数ショット設定でのパフォーマンスの堅牢性が可能になります。私たちが提案したアプローチは、学習方法で見落とされがちなパーセルの時空間コンテキストを使用できるようにすることで、同等の方法よりも優れたパフォーマンスを発揮し、精度を向上させます。
Accurate in-season crop type classification is crucial for the crop production estimation and monitoring of agricultural parcels. However, the complexity of the plant growth patterns and their spatio-temporal variability present significant challenges. While current deep learning-based methods show promise in crop type classification from single- and multi-modal time series, most existing methods rely on a single modality, such as satellite optical remote sensing data or crop rotation patterns. We propose a novel approach to fuse multimodal information into a model for improved accuracy and robustness across multiple years and countries. The approach relies on three modalities used: remote sensing time series from Sentinel-2 and Landsat 8 observations, parcel crop rotation and local crop distribution. To evaluate our approach, we release a new annotated dataset of 7.4 million agricultural parcels in France and Netherlands. We associate each parcel with time-series of surface reflectance (Red and NIR) and biophysical variables (LAI, FAPAR). Additionally, we propose a new approach to automatically aggregate crop types into a hierarchical class structure for meaningful model evaluation and a novel data-augmentation technique for early-season classification. Performance of the multimodal approach was assessed at different aggregation level in the semantic domain spanning from 151 to 8 crop types or groups. It resulted in accuracy ranging from 91% to 95% for NL dataset and from 85% to 89% for FR dataset. Pre-training on a dataset improves domain adaptation between countries, allowing for cross-domain zero-shot learning, and robustness of the performances in a few-shot setting from France to Netherlands. Our proposed approach outperforms comparable methods by enabling learning methods to use the often overlooked spatio-temporal context of parcels, resulting in increased preci...
updated: Fri May 19 2023 21:42:53 GMT+0000 (UTC)
published: Fri May 19 2023 21:42:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト