arXiv reaDer
CentripetalText:シーンテキスト検出のための効率的なテキストインスタンス表現
CentripetalText: An Efficient Text Instance Representation for Scene Text Detection
シーンテキストの検出は、テキストの曲率、向き、アスペクト比が異なるため、依然として大きな課題です。最も手に負えない問題の1つは、任意の形状のテキストインスタンスをどのように表現するかです。不規則なテキストを柔軟にモデル化するために多くの最先端の方法が提案されていますが、それらのほとんどは単純さと堅牢性を失っています。それらの複雑な後処理とディラックのデルタ分布の下での回帰は、検出性能と一般化能力を損ないます。この論文では、テキストインスタンスをテキストカーネルと求心シフトの組み合わせに分解するCentripetalText(CT)という名前の効率的なテキストインスタンス表現を提案します。具体的には、求心シフトを利用して、外部テキストピクセルを内部テキストカーネルに導くピクセル集約を実装します。緩和操作は求心シフトの密な回帰に統合され、特定の値ではなく、範囲内で正しい予測を可能にします。私たちの方法でのテキストの輪郭の便利な再構成と予測誤差の許容度は、それぞれ高い検出精度と速い推論速度を保証します。さらに、テキスト検出器をプロポーザル生成モジュール、つまりCentripetalText Proposal Network(CPN)に縮小し、Mask TextSpotter v3のSPNを置き換えて、より正確なプロポーザルを生成します。デザインの有効性を検証するために、湾曲したテキストデータセットと多方向のテキストデータセットの両方を含む、一般的に使用されるいくつかのシーンテキストベンチマークで実験を行います。シーンテキスト検出のタスクでは、私たちのアプローチは、他の既存の方法と比較して優れた、または競争力のあるパフォーマンスを実現します。たとえば、Total-Textの40.0 FPSで86.3%のFメジャー、MSRA-TD500の34.8 FPSで86.1%のFメジャー、など。エンドツーエンドのシーンテキスト認識のタスクでは、Total-TextでMask TextSpotter v3を1.1%上回っています。
Scene text detection remains a grand challenge due to the variation in text curvatures, orientations, and aspect ratios. One of the most intractable problems is how to represent text instances of arbitrary shapes. Although many state-of-the-art methods have been proposed to model irregular texts in a flexible manner, most of them lose simplicity and robustness. Their complicated post-processings and the regression under Dirac delta distribution undermine the detection performance and the generalization ability. In this paper, we propose an efficient text instance representation named CentripetalText (CT), which decomposes text instances into the combination of text kernels and centripetal shifts. Specifically, we utilize the centripetal shifts to implement the pixel aggregation, which guide the external text pixels to the internal text kernels. The relaxation operation is integrated into the dense regression for centripetal shifts, allowing the correct prediction in a range, not a specific value. The convenient reconstruction of the text contours and the tolerance of the prediction errors in our method guarantee the high detection accuracy and the fast inference speed respectively. Besides, we shrink our text detector into a proposal generation module, namely CentripetalText Proposal Network (CPN), replacing SPN in Mask TextSpotter v3 and producing more accurate proposals. To validate the effectiveness of our designs, we conduct experiments on several commonly used scene text benchmarks, including both curved and multi-oriented text datasets. For the task of scene text detection, our approach achieves superior or competitive performance compared to other existing methods, e.g., F-measure of 86.3% at 40.0 FPS on Total-Text, F-measure of 86.1% at 34.8 FPS on MSRA-TD500, etc. For the task of end-to-end scene text recognition, we outperform Mask TextSpotter v3 by 1.1% on Total-Text.
updated: Tue Jul 13 2021 09:34:18 GMT+0000 (UTC)
published: Tue Jul 13 2021 09:34:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト