arXiv reaDer
EATEN: Entity-aware Attention for Single Shot Visual Text Extraction
  画像からエンティティを抽出することは、カード、請求書、領収書のエンティティ認識など、多くのOCRアプリケーションの重要な部分です。既存の作品のほとんどは、古典的な検出と認識のパラダイムを採用しています。この論文では、後処理なしでエンティティを抽出するためのエンドツーエンドのトレーニング可能なシステムである、EATENと呼ばれるエンティティ認識アテンションテキスト抽出ネットワークを提案します。提案されたフレームワークでは、各エンティティは、対応するエンティティ認識デコーダによってそれぞれ解析されます。さらに、エンティティ抽出の堅牢性をさらに向上させる状態遷移メカニズムを革新的に導入します。パブリックベンチマークが存在しないことを考慮して、3つの現実のシナリオ(鉄道チケット、パスポート、名刺)で約60万枚の画像のデータセットを構築します。これはで公開されています。 。私たちの知る限り、EATENは画像からエンティティを抽出する最初のシングルショット方式です。これらのベンチマークに関する広範な実験は、EATENの最先端のパフォーマンスを実証しています。
Extracting entity from images is a crucial part of many OCR applications, such as entity recognition of cards, invoices, and receipts. Most of the existing works employ classical detection and recognition paradigm. This paper proposes an Entity-aware Attention Text Extraction Network called EATEN, which is an end-to-end trainable system to extract the entities without any post-processing. In the proposed framework, each entity is parsed by its corresponding entity-aware decoder, respectively. Moreover, we innovatively introduce a state transition mechanism which further improves the robustness of entity extraction. In consideration of the absence of public benchmarks, we construct a dataset of almost 0.6 million images in three real-world scenarios (train ticket, passport and business card), which is publicly available at To the best of our knowledge, EATEN is the first single shot method to extract entities from images. Extensive experiments on these benchmarks demonstrate the state-of-the-art performance of EATEN.
updated: Fri Sep 20 2019 09:12:59 GMT+0000 (UTC)
published: Fri Sep 20 2019 09:12:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト