このホワイト ペーパーでは、ElegantSeg と呼ばれる超大規模イメージ セマンティック セグメンテーションの新しいパラダイムを紹介します。特大イメージ (ELI) の非常に大きなサイズは、GPU メモリの枯渇を引き起こす傾向があります。この問題に取り組むために、一般的な研究は、グローバルとローカルの融合パイプラインに従うか、多段階の改良を行っています。これらの方法は、一度に限られた情報しか処理できず、ELI の豊富な情報を完全に活用することはできません。以前の方法とは異なり、ElegantSeg はテンソル ストレージを GPU メモリからホスト メモリに拡張することで、全体的な ELISS をエレガントに処理できます。私たちの知る限りでは、ELISS を総合的に実施できるのは初めてです。その上、ElegantSeg は、ELI の特性を利用するために 3 つのモジュールで特別に設計されています。これには、長期依存関係を開発するための複数の大きなカーネル モジュール、全体的なコンテキスト関係を構築するための効率的なクラス関係モジュール、および完全な取得のための境界認識拡張モジュールが含まれます。オブジェクトの境界。 ElegantSeg は、2 つの典型的な ELISS データセットで、以前の最先端技術よりも優れています。エレガントセグが ELISS の新たな展望を開くことができることを願っています。コードとモデルは公開されます。
This paper presents a new paradigm for Extra-large image semantic Segmentation, called ElegantSeg, that capably processes holistic extra-large image semantic segmentation (ELISS). The extremely large sizes of extra-large images (ELIs) tend to cause GPU memory exhaustion. To tackle this issue, prevailing works either follow the global-local fusion pipeline or conduct the multi-stage refinement. These methods can only process limited information at one time, and they are not able to thoroughly exploit the abundant information in ELIs. Unlike previous methods, ElegantSeg can elegantly process holistic ELISS by extending the tensor storage from GPU memory to host memory. To the best of our knowledge, it is the first time that ELISS can be performed holistically. Besides, ElegantSeg is specifically designed with three modules to utilize the characteristics of ELIs, including the multiple large kernel module for developing long-range dependency, the efficient class relation module for building holistic contextual relationships, and the boundary-aware enhancement module for obtaining complete object boundaries. ElegantSeg outperforms previous state-of-the-art on two typical ELISS datasets. We hope that ElegantSeg can open a new perspective for ELISS. The code and models will be made publicly available.