ドキュメントの視覚的な質問応答タスクを生成、処理、および理解しようとしている研究者および一般的な非深層学習の専門家を対象に、ドキュメント画像とPDFを使用した質問応答ツールであるV-Docを提案します。 V-Docは、ドキュメント画像を使用した抽出と抽象の両方の質問と回答のペアの生成と使用をサポートします。抽出QAは、ドキュメントコンテンツからトークンまたはフレーズのサブセットを選択して回答を予測し、抽象QAはコンテンツ内の言語を認識し、トレーニングされたモデルに基づいて回答を生成します。特に画像形式のドキュメントを理解するには、両方の側面が重要です。抽象QAタスクの質問生成の詳細なシナリオが含まれています。 V-Docは、幅広いデータセットとモデルをサポートし、宣言型のフレームワークに依存しないプラットフォームを通じて高度に拡張可能です。
We propose V-Doc, a question-answering tool using document images and PDF, mainly for researchers and general non-deep learning experts looking to generate, process, and understand the document visual question answering tasks. The V-Doc supports generating and using both extractive and abstractive question-answer pairs using documents images. The extractive QA selects a subset of tokens or phrases from the document contents to predict the answers, while the abstractive QA recognises the language in the content and generates the answer based on the trained model. Both aspects are crucial to understanding the documents, especially in an image format. We include a detailed scenario of question generation for the abstractive QA task. V-Doc supports a wide range of datasets and models, and is highly extensible through a declarative, framework-agnostic platform.