arXiv reaDer
DUET:スキャンまたはキャプチャされたドキュメントのテキストの拡張を利用した検出
DUET: Detection Utilizing Enhancement for Text in Scanned or Captured Documents
ドキュメント画像のテキスト検出のための新しい深部神経モデルを提示します。ノイズの多いスキャンされたドキュメントでの堅牢なテキスト検出のために、テキスト拡張の補助タスクを追加することにより、マルチタスク学習の利点が採用されています。つまり、提案されたモデルは、テキスト検出だけでなく、ノイズリダクションとテキスト領域の強化を実行するように設計されています。さらに、テキストの検出と拡張のために完全にラベル付けされた合成ドキュメント画像でモデルのトレーニングデータを強化し、ラベル付けされたドキュメント画像データの不足を克服します。合成データと実際のデータを効果的に活用するために、トレーニングプロセスは2つのフェーズに分かれています。最初のフェーズは、完全に監視された方法で合成データのみをトレーニングすることです。次に、第 2 フェーズで検出ラベルのみの実際のデータが追加されます。実際のデータの拡張タスクは、検出ラベルからの情報で弱く監視されています。私たちの方法は、他のテキスト検出方法を超えるパフォーマンスで実際のドキュメント データセットで実証されています。さらに、アブレーションが行われ、その結果は、合成データ、補助タスク、および弱い監視の有効性を確認します。既存のテキスト検出研究は主にシーン内のテキストに焦点を合わせていますが、提案された方法はスキャンされたドキュメント内のテキストのアプリケーションに最適化されています。
We present a novel deep neural model for text detection in document images. For robust text detection in noisy scanned documents, the advantages of multi-task learning are adopted by adding an auxiliary task of text enhancement. Namely, our proposed model is designed to perform noise reduction and text region enhancement as well as text detection. Moreover, we enrich the training data for the model with synthesized document images that are fully labeled for text detection and enhancement, thus overcome the insufficiency of labeled document image data. For the effective exploitation of the synthetic and real data, the training process is separated in two phases. The first phase is training only synthetic data in a fully-supervised manner. Then real data with only detection labels are added in the second phase. The enhancement task for the real data is weakly-supervised with information from their detection labels. Our methods are demonstrated in a real document dataset with performances exceeding those of other text detection methods. Moreover, ablations are conducted and the results confirm the effectiveness of the synthetic data, auxiliary task, and weak-supervision. Whereas the existing text detection studies mostly focus on the text in scenes, our proposed method is optimized to the applications for the text in scanned documents.
updated: Thu Jun 10 2021 07:08:31 GMT+0000 (UTC)
published: Thu Jun 10 2021 07:08:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト