マルチスケールのディープニューラルネットワークに基づくオフライン手書き数式表現認識に向けた堅牢なエンコーダー/デコーダー学習フレームワーク
Robust Encoder-Decoder Learning Framework towards Offline Handwritten Mathematical Expression Recognition Based on Multi-Scale Deep Neural Network
手書きの数式には認識のプロセスで主に2つの問題があるため、オフラインでの手書きの数式認識は困難な作業です。一方では、さまざまな数学記号を正しく認識する方法です。一方、数式に存在する二次元構造を正しく認識する方法です。ディープラーニングの最近の研究に触発されて、マルチスケール畳み込みニューラルネットワーク（CNN）と注意リカレントニューラルネットワーク（RNN）を組み合わせた新しいニューラルネットワークモデルが、2次元の手書きの数式を1次元のLaTeXシーケンスとして識別するために提案されています。その結果、現在の作業で提案されているモデルは、25.715％のWERエラーと28.216％のExpRateを達成しました。
Offline handwritten mathematical expression recognition is a challenging task, because handwritten mathematical expressions mainly have two problems in the process of recognition. On one hand, it is how to correctly recognize different mathematical symbols. On the other hand, it is how to correctly recognize the two-dimensional structure existing in mathematical expressions. Inspired by recent work in deep learning, a new neural network model that combines a Multi-Scale convolutional neural network (CNN) with an Attention recurrent neural network (RNN) is proposed to identify two-dimensional handwritten mathematical expressions as one-dimensional LaTeX sequences. As a result, the model proposed in the present work has achieved a WER error of 25.715% and ExpRate of 28.216%.
updated: Thu May 28 2020 11:06:38 GMT+0000 (UTC)
published: Fri Feb 08 2019 03:29:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト