arXiv reaDer
リアルタイムのクラウドソーシング画像と転移学習を使用した損傷建物の検出
Detecting Damage Building Using Real-time Crowdsourced Images and Transfer Learning
大地震の後、最近のスマートフォンの大量使用により、個人やメディア機関がソーシャルメディアプラットフォームに投稿した画像を見ることができます。これらの画像は、地震地域の揺れによる被害に関する情報を一般市民と研究コミュニティの両方に提供し、救助活動を導くために利用できる可能性があります。このペーパーでは、地震後に損傷した建物の画像をTwitterなどのソーシャルメディアプラットフォームから抽出し、そのような画像を含む特定のユーザー投稿を特定する自動化された方法を紹介します。転送学習と約6500の手動でラベル付けされた画像を使用して、シーン内の建物が損傷している画像を認識するディープラーニングモデルをトレーニングしました。トレーニングされたモデルは、さまざまな場所で新たに取得された地震の画像でテストされ、2020年のトルコでのM7.0地震の後、Twitterフィードでほぼリアルタイムで実行されたときに良好なパフォーマンスを達成しました。さらに、モデルがどのように意思決定を行うかをよりよく理解するために、Grad-CAMメソッドを実装して、意思決定を容易にする画像上の重要な場所を視覚化しました。
After significant earthquakes, we can see images posted on social media platforms by individuals and media agencies owing to the mass usage of smartphones these days. These images can be utilized to provide information about the shaking damage in the earthquake region both to the public and research community, and potentially to guide rescue work. This paper presents an automated way to extract the damaged building images after earthquakes from social media platforms such as Twitter and thus identify the particular user posts containing such images. Using transfer learning and ~6500 manually labelled images, we trained a deep learning model to recognize images with damaged buildings in the scene. The trained model achieved good performance when tested on newly acquired images of earthquakes at different locations and ran in near real-time on Twitter feed after the 2020 M7.0 earthquake in Turkey. Furthermore, to better understand how the model makes decisions, we also implemented the Grad-CAM method to visualize the important locations on the images that facilitate the decision.
updated: Tue Oct 12 2021 06:31:54 GMT+0000 (UTC)
published: Tue Oct 12 2021 06:31:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト