オクルージョン対応のインスタンス依存セグメンテーションは、インスタンスをバウンディングボックスとして近似することにより、一般に領域ベースのセグメンテーションに分割される複雑なタスクです。この近似が成り立たない、高密度で均質なレイアウトのショーケースシナリオに対処します。このシナリオでは、畳み込み層の変換の不変性とデコーダーの複雑さの欠如により、深いエンコーダーをデコードすることにより、遮られていないインスタンスの輪郭を描くことは困難になります。したがって、サブタスク固有の機能の再利用を促進し、デコードプロセス内で学習パスを強化するために、カスケードで結合されたサブタスク固有の軽量デコーダーとエンコーダーデコーダーユニットで構成されるマルチカメラデザインを提案します。さらに、オクルージョン対応インスタンスセグメンテーションの最新のデータセットには、密なオブジェクトレイアウトとは異なり、主に背景を遮るオブジェクトに起因するインスタンスとオクルージョンの少ない実画像が含まれています。したがって、高密度の同種オブジェクトレイアウトの合成データセット、つまりMikadoを導入します。これには、これらのパブリックデータセットよりも多くのインスタンスおよびインスタンスごとのオクルージョンが含まれます。 Mikadoおよびパブリックデータセットに関する広範な実験により、デコードプロセス内の通常のマルチスケールユニットは、位置に敏感な表現をキャプチャするための最先端のデザインパターンよりも効果的であることがわかります。また、ミカドは、微調整のための手作りの注釈の必要性を大幅に削減しながら、実画像に転送可能なパフォーマンス向上表現の学習を可能にするという意味で、実世界の問題に関してもっともらしいことを示します。提案されたデータセットは公開されます。
Occlusion-aware instance-sensitive segmentation is a complex task generally split into region-based segmentations, by approximating instances as their bounding box. We address the showcase scenario of dense homogeneous layouts in which this approximation does not hold. In this scenario, outlining unoccluded instances by decoding a deep encoder becomes difficult, due to the translation invariance of convolutional layers and the lack of complexity in the decoder. We therefore propose a multicameral design composed of subtask-specific lightweight decoder and encoder-decoder units, coupled in cascade to encourage subtask-specific feature reuse and enforce a learning path within the decoding process. Furthermore, the state-of-the-art datasets for occlusion-aware instance segmentation contain real images with few instances and occlusions mostly due to objects occluding the background, unlike dense object layouts. We thus also introduce a synthetic dataset of dense homogeneous object layouts, namely Mikado, which extensibly contains more instances and inter-instance occlusions per image than these public datasets. Our extensive experiments on Mikado and public datasets show that ordinal multiscale units within the decoding process prove more effective than state-of-the-art design patterns for capturing position-sensitive representations. We also show that Mikado is plausible with respect to real-world problems, in the sense that it enables the learning of performance-enhancing representations transferable to real images, while drastically reducing the need of hand-made annotations for finetuning. The proposed dataset will be made publicly available.