arXiv reaDer
Webページの大規模な視覚的、定性的および定量的データセット
A Large Visual, Qualitative and Quantitative Dataset of Web Pages
ワールドワイドウェブは、現在のコミュニケーションと情報の最も重要なプラットフォームの1つであるだけでなく、科学研究への関心が高まっている分野でもあります。これは、大量のデータを必要とする多くの作業やプロジェクトを動機付けます。ただし、Webページの収集は時間と労力の点でコストのかかる作業であるため、Webページのパラメーターと外観を統合するデータセットはありません。さまざまなコンピューターツールとプログラミングスクリプトのサポートにより、49,438のWebページの大規模なデータセットを作成しました。視覚、テキスト、数値のデータタイプで構成され、世界中のすべての国を含み、アート、エンターテインメント、経済、ビジネス、教育、政府、ニュース、メディア、科学、環境など、さまざまな文化的特徴をカバーする幅広いトピックを考慮しています。さまざまなデザインの好み。このホワイトペーパーでは、無料で入手できる最終製品を収集、デバッグ、および公開するプロセスについて説明します。データセットの有用性を示すために、エラーWebページを検出するためのバイナリ分類モデルとマルチクラスWebサブジェクトベースの分類を公開します。どちらも畳み込みニューラルネットワークを使用した問題です。
The World Wide Web is not only one of the most important platforms of communication and information at present, but also an area of growing interest for scientific research. This motivates a lot of work and projects that require large amounts of data. However, there is no dataset that integrates the parameters and visual appearance of Web pages, because its collection is a costly task in terms of time and effort. With the support of various computer tools and programming scripts, we have created a large dataset of 49,438 Web pages. It consists of visual, textual and numerical data types, includes all countries worldwide, and considers a broad range of topics such as art, entertainment, economy, business, education, government, news, media, science, and environment, covering different cultural characteristics and varied design preferences. In this paper, we describe the process of collecting, debugging and publishing the final product, which is freely available. To demonstrate the usefulness of our dataset, we expose a binary classification model for detecting error Web pages, and a multi-class Web subject-based categorization, both problems using convolutional neural networks.
updated: Sat May 15 2021 01:31:25 GMT+0000 (UTC)
published: Sat May 15 2021 01:31:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト