arXiv reaDer
Human-In-The-Loop Document Layout Analysis
ドキュメントレイアウト分析(DLA)は、ドキュメントイメージをさまざまなタイプの領域に分割することを目的としています。 DLAは、ドキュメントコンテンツの理解と情報抽出システムにおいて重要な役割を果たします。効果的なトレーニングのためにより少ないデータを使用できる方法を模索することは、DLAの開発に貢献します。 DLAでは、ヒューマンインザループ(HITL)のコラボレーションインテリジェンスを検討します。私たちのアプローチは、HITLが知識に基づいて少量のデータを追加することにより、未知の問題から学習するようにモデルをプッシュするという事実に触発されました。 HITLは、信頼度を使用して主要なサンプルを選択します。ただし、信頼を使用して主要なサンプルを見つけることは、DLAタスクには適していません。キーサンプル選択(KSS)手法を提案し、エージェントのコラボレーションを通じて高レベルのタスク(セマンティックセグメンテーション)でキーサンプルをより正確に見つけ、コストを効果的に削減します。選択されると、これらの主要なサンプルはアクティブなラベル付けのために人間に渡され、モデルはラベル付けされたサンプルで更新されます。したがって、強化学習から学習システムを再検討し、サンプルベースのエージェント更新戦略を設計しました。これにより、エージェントが新しいサンプルを受け入れる能力が効果的に向上します。ラベル付けされたデータの10%を使用することにより、2つのベンチマーク(DSSE-200(77.1%から86.3%)およびCS-150(88.0%から95.6%))で大幅な改善結果を達成します。
Document layout analysis (DLA) aims to divide a document image into different types of regions. DLA plays an important role in the document content understanding and information extraction systems. Exploring a method that can use less data for effective training contributes to the development of DLA. We consider a Human-in-the-loop (HITL) collaborative intelligence in the DLA. Our approach was inspired by the fact that the HITL push the model to learn from the unknown problems by adding a small amount of data based on knowledge. The HITL select key samples by using confidence. However, using confidence to find key samples is not suitable for DLA tasks. We propose the Key Samples Selection (KSS) method to find key samples in high-level tasks (semantic segmentation) more accurately through agent collaboration, effectively reducing costs. Once selected, these key samples are passed to human beings for active labeling, then the model will be updated with the labeled samples. Hence, we revisited the learning system from reinforcement learning and designed a sample-based agent update strategy, which effectively improves the agent's ability to accept new samples. It achieves significant improvement results in two benchmarks (DSSE-200 (from 77.1% to 86.3%) and CS-150 (from 88.0% to 95.6%)) by using 10% of labeled data.
updated: Wed Aug 04 2021 14:54:29 GMT+0000 (UTC)
published: Wed Aug 04 2021 14:54:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト