arXiv reaDer
頭上画像の認識のための変圧器: 現実のチェック
Transformers For Recognition In Overhead Imagery: A Reality Check
変圧器は、オーバーヘッド画像 (衛星画像など) を含むタスクで最先端の認識パフォーマンスを提供するという証拠があります。ただし、競合する深層学習モデル間で偏りのない経験的比較を行うことは困難であり、トランスフォーマーベースのモデルが有益であるかどうか、またどの程度有益であるかは不明です。このホワイト ペーパーでは、変圧器構造をオーバーヘッド画像の最先端のセグメンテーション モデルに追加した場合の影響を体系的に比較します。各モデルには同様の予算の自由パラメーターが与えられ、そのハイパーパラメーターは、一定量のデータと計算時間でベイジアン最適化を使用して最適化されます。 Inria と DeepGlobe という 2 つの大規模な公開ベンチマークを含む大規模で多様なデータセットを使用して実験を行います。特定の変圧器ベースのモデリングの選択の影響を調査するために、追加のアブレーション研究を実行します。私たちの結果は、変圧器が一貫した、しかし適度なパフォーマンスの向上を提供することを示唆しています。ただし、この利点は、畳み込み構造と変換器ベースの構造を組み合わせたハイブリッド モデルでのみ観察されますが、完全な変換器ベースのモデルは比較的低いパフォーマンスを達成します。
There is evidence that transformers offer state-of-the-art recognition performance on tasks involving overhead imagery (e.g., satellite imagery). However, it is difficult to make unbiased empirical comparisons between competing deep learning models, making it unclear whether, and to what extent, transformer-based models are beneficial. In this paper we systematically compare the impact of adding transformer structures into state-of-the-art segmentation models for overhead imagery. Each model is given a similar budget of free parameters, and their hyperparameters are optimized using Bayesian Optimization with a fixed quantity of data and computation time. We conduct our experiments with a large and diverse dataset comprising two large public benchmarks: Inria and DeepGlobe. We perform additional ablation studies to explore the impact of specific transformer-based modeling choices. Our results suggest that transformers provide consistent, but modest, performance improvements. We only observe this advantage however in hybrid models that combine convolutional and transformer-based structures, while fully transformer-based models achieve relatively poor performance.
updated: Mon Oct 31 2022 20:14:54 GMT+0000 (UTC)
published: Sun Oct 23 2022 02:17:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト