この論文は、シーンテキスト画像のための新しいテキスト認識ネットワークを提案している。多くの最先端の方法では、テキストの位置合わせのために、テキストエンコーダーまたはデコーダーのいずれかでアテンションメカニズムを採用しています。エンコーダベースの注意は有望な結果をもたらしますが、これらのスキームは顕著な制限を受け継いでいます。それらは、特徴抽出(FE)と視覚的注意(VA)を順番に実行します。これにより、注意メカニズムはFEの最終的なシングルスケール出力のみに依存するようになります。さらに、注意プロセスの利用は、単一スケールの機能マップに直接適用するだけで制限されます。これらの問題に対処するために、マルチスケールのFEとVAを並行して実行するテキスト認識用の新しいマルチスケールおよびエンコーダベースの注意ネットワークを提案します。マルチスケールチャネルはまた、相互に定期的に融合して、調整された知識を一緒に開発します。標準ベンチマークでの定量的評価と堅牢性分析は、提案されたネットワークがほとんどの場合、最先端のネットワークよりも優れていることを示しています。
The paper proposes a new text recognition network for scene-text images. Many state-of-the-art methods employ the attention mechanism either in the text encoder or decoder for the text alignment. Although the encoder-based attention yields promising results, these schemes inherit noticeable limitations. They perform the feature extraction (FE) and visual attention (VA) sequentially, which bounds the attention mechanism to rely only on the FE final single-scale output. Moreover, the utilization of the attention process is limited by only applying it directly to the single scale feature-maps. To address these issues, we propose a new multi-scale and encoder-based attention network for text recognition that performs the multi-scale FE and VA in parallel. The multi-scale channels also undergo regular fusion with each other to develop the coordinated knowledge together. Quantitative evaluation and robustness analysis on the standard benchmarks demonstrate that the proposed network outperforms the state-of-the-art in most cases.