arXiv reaDer
OSFormer:トランスフォーマーを使用した1段階のカモフラージュされたインスタンスのセグメンテーション
OSFormer: One-Stage Camouflaged Instance Segmentation with Transformers
カモフラージュされたインスタンスセグメンテーション(CIS)用の最初の1ステージトランスフォーマーフレームワークであるOSFormerを紹介します。 OSFormerは、2つの主要な設計に基づいています。まず、位置誘導クエリとブレンド畳み込みフィードフォワードネットワークを導入することにより、位置ラベルとインスタンス認識パラメーターを取得する位置検出トランスフォーマー(LST)を設計します。次に、LSTエンコーダーとCNNバックボーンからの多様なコンテキスト情報をマージするための粗い融合(CFF)を開発します。これら2つのコンポーネントを結合することで、OSFormerは、カモフラージュされたインスタンスを予測するために、ローカル機能と長距離コンテキストの依存関係を効率的にブレンドできます。 2段階のフレームワークと比較して、OSFormerは41%APに達し、膨大なトレーニングデータ、つまり60エポックでわずか3,040サンプルを必要とせずに、優れた収束効率を実現します。コードリンク:https://github.com/PJLallen/OSFormer。
We present OSFormer, the first one-stage transformer framework for camouflaged instance segmentation (CIS). OSFormer is based on two key designs. First, we design a location-sensing transformer (LST) to obtain the location label and instance-aware parameters by introducing the location-guided queries and the blend-convolution feedforward network. Second, we develop a coarse-to-fine fusion (CFF) to merge diverse context information from the LST encoder and CNN backbone. Coupling these two components enables OSFormer to efficiently blend local features and long-range context dependencies for predicting camouflaged instances. Compared with two-stage frameworks, our OSFormer reaches 41% AP and achieves good convergence efficiency without requiring enormous training data, i.e., only 3,040 samples under 60 epochs. Code link: https://github.com/PJLallen/OSFormer.
updated: Fri Jul 08 2022 07:01:02 GMT+0000 (UTC)
published: Tue Jul 05 2022 18:32:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト