AiTLAS: Benchmark Arena は、地球観測 (EO) における画像分類のための最先端の深層学習アプローチを評価するためのオープンソース ベンチマーク スイートです。この目的のために、10 の異なる最先端のアーキテクチャから派生した 500 以上のモデルの包括的な比較分析を提示し、それらをさまざまなサイズの 22 のデータセットからのさまざまなマルチクラスおよびマルチラベル分類タスクと比較します。プロパティ。これらのデータセットで完全にトレーニングされたモデルに加えて、事前にトレーニングされたモデルのバリアントを活用して、転移学習のコンテキストでトレーニングされたモデルをベンチマークします。これは通常、実際に実行されます。提示されたすべてのアプローチは一般的なものであり、この研究では考慮されていない他の多くのリモート センシング画像分類タスクに簡単に拡張できます。再現性を確保し、使いやすさの向上とさらなる開発を促進するために、トレーニング済みモデル、モデル構成、データセットの処理の詳細 (モデルのトレーニングと評価に使用される対応する分割を含む) を含むすべての実験リソースは、リポジトリで公開されています。 https://github.com/biasvariancelabs/aitlas-arena
We present AiTLAS: Benchmark Arena -- an open-source benchmark suite for evaluating state-of-the-art deep learning approaches for image classification in Earth Observation (EO). To this end, we present a comprehensive comparative analysis of more than 500 models derived from ten different state-of-the-art architectures and compare them to a variety of multi-class and multi-label classification tasks from 22 datasets with different sizes and properties. In addition to models trained entirely on these datasets, we benchmark models trained in the context of transfer learning, leveraging pre-trained model variants, as it is typically performed in practice. All presented approaches are general and can be easily extended to many other remote sensing image classification tasks not considered in this study. To ensure reproducibility and facilitate better usability and further developments, all of the experimental resources including the trained models, model configurations, and processing details of the datasets (with their corresponding splits used for training and evaluating the models) are publicly available on the repository: https://github.com/biasvariancelabs/aitlas-arena