arXiv reaDer
混合モデルとドキュメント固有の微調整を使用した中世の写本のオープンソース手書きテキスト認識
Open Source Handwritten Text Recognition on Medieval Manuscripts using Mixed Models and Document-Specific Finetuning
このペーパーでは、ドイツの中世の写本に対する実用的でオープンソースの手書きテキスト認識(HTR)のタスクを扱います。文書固有のトレーニングを行わなくてもすぐに適用できる混合認識モデルを構築する取り組みについて報告しますが、文字起こしされたテキストの数ページで新しいモデルをトレーニングすることにより、微調整の開始点としても機能します(グラウンドトゥルース)。混合モデルをトレーニングするために、35の原稿と約のコーパスを収集しました。広く使用されている2つの手書きスタイル、ゴシックおよびバスタルダ体の筆記体の12.5kテキスト行。目に見えない4つの原稿ですぐに使用できる混合モデルを評価した結果、平均文字エラー率(CER)は6.22%でした。 2、4、最終的には32ページでトレーニングした後、CERはそれぞれ3.27%、2.58%、1.65%に低下しました。ドメイン内での認識とモデルのトレーニング(バスターダモデルからバスターダ素材、ゴシックからゴシック)は当然のことながら最良の結果をもたらしましたが、ドメイン外モデルを見えないスクリプトに微調整することは、ゼロからのトレーニングよりも優れていることが示されました。私たちの新しい混合モデルは、コミュニティに公開されています。
This paper deals with the task of practical and open source Handwritten Text Recognition (HTR) on German medieval manuscripts. We report on our efforts to construct mixed recognition models which can be applied out-of-the-box without any further document-specific training but also serve as a starting point for finetuning by training a new model on a few pages of transcribed text (ground truth). To train the mixed models we collected a corpus of 35 manuscripts and ca. 12.5k text lines for two widely used handwriting styles, Gothic and Bastarda cursives. Evaluating the mixed models out-of-the-box on four unseen manuscripts resulted in an average Character Error Rate (CER) of 6.22%. After training on 2, 4 and eventually 32 pages the CER dropped to 3.27%, 2.58%, and 1.65%, respectively. While the in-domain recognition and training of models (Bastarda model to Bastarda material, Gothic to Gothic) unsurprisingly yielded the best results, finetuning out-of-domain models to unseen scripts was still shown to be superior to training from scratch. Our new mixed models have been made openly available to the community.
updated: Wed Jan 19 2022 15:34:19 GMT+0000 (UTC)
published: Wed Jan 19 2022 15:34:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト