災害情報学の最近の研究は、ソーシャルメディアコンテンツ(テキストと画像)に基づいて、自然災害時に人命と苦しみを救うための人工知能の実用的で重要な使用例を示しています。テキストを使用して目覚ましい進歩が見られましたが、画像の悪用に関する研究は比較的十分に検討されていません。画像ベースのアプローチを進めるために、MEDIC(https://crisisnlp.qcri.org/medic/index.htmlで入手可能)を提案します。これは、4つに対応する71,198枚の画像で構成される人道的対応のための最大のソーシャルメディア画像分類データセットです。マルチタスク学習セットアップのさまざまなタスク。これは、この種の最初のデータセットです。ソーシャルメディア画像、災害対応、マルチタスク学習研究です。このデータセットの重要な特性は、マルチタスク学習の研究を促進する可能性が高いことです。マルチタスク学習は、最近、機械学習コミュニティから大きな関心を集めており、メモリ、推論速度、パフォーマンス、および一般化機能の点で注目に値する結果を示しています。したがって、提案されたデータセットは、画像ベースの災害管理とマルチタスク機械学習研究を進めるための重要なリソースです。さまざまなディープラーニングアーキテクチャを試し、すべてのタスクの過半数のベースラインを超える有望な結果を報告します。データセットに加えて、関連するすべてのスクリプト(https://github.com/firojalam/medic)もリリースします。
Recent research in disaster informatics demonstrates a practical and important use case of artificial intelligence to save human lives and suffering during natural disasters based on social media contents (text and images). While notable progress has been made using texts, research on exploiting the images remains relatively under-explored. To advance image-based approaches, we propose MEDIC (Available at: https://crisisnlp.qcri.org/medic/index.html), which is the largest social media image classification dataset for humanitarian response consisting of 71,198 images to address four different tasks in a multi-task learning setup. This is the first dataset of its kind: social media images, disaster response, and multi-task learning research. An important property of this dataset is its high potential to facilitate research on multi-task learning, which recently receives much interest from the machine learning community and has shown remarkable results in terms of memory, inference speed, performance, and generalization capability. Therefore, the proposed dataset is an important resource for advancing image-based disaster management and multi-task machine learning research. We experiment with different deep learning architectures and report promising results, which are above the majority baselines for all tasks. Along with the dataset, we also release all relevant scripts (https://github.com/firojalam/medic).