気候変動が自然災害の激しさを増すにつれて、社会は適応のためのより良いツールを必要としています。たとえば、洪水は最も頻繁に発生する自然災害であり、洪水リスクを伝達するためのより優れたツールは、洪水に強いインフラストラクチャ開発のサポートを増やす可能性があります。私たちの仕事は、沿岸洪水モデルの出力を衛星画像として視覚化することにより、大規模な気候の影響をより視覚的に伝達できるようにすることを目的としています。合成視覚衛星画像の物理的一貫性を確保するための最初の深層学習パイプラインを提案します。 pix2pixHD と呼ばれる最先端の GAN を進化させ、専門家によって検証された高潮モデル (NOAA SLOSH) の出力と物理的に一致する画像を生成できるようにしました。物理ベースの洪水マップと比較して画像を評価することにより、提案されたフレームワークが、物理的一貫性とフォトリアリズムの両方でベースライン モデルよりも優れていることがわかりました。私たちの取り組みは、気候問題が私たちの景観をどのように形成するかを世界的に視覚化するための第一歩になると考えています。このパスを続けて、提案されたパイプラインが一般化して再植林を視覚化することを示します。また、地球観測における画像から画像への変換を研究するために、25,000 を超えるラベル付き画像トリプレットのデータセットを公開しています。
As climate change increases the intensity of natural disasters, society needs better tools for adaptation. Floods, for example, are the most frequent natural disaster, and better tools for flood risk communication could increase the support for flood-resilient infrastructure development. Our work aims to enable more visual communication of large-scale climate impacts via visualizing the output of coastal flood models as satellite imagery. We propose the first deep learning pipeline to ensure physical-consistency in synthetic visual satellite imagery. We advanced a state-of-the-art GAN called pix2pixHD, such that it produces imagery that is physically-consistent with the output of an expert-validated storm surge model (NOAA SLOSH). By evaluating the imagery relative to physics-based flood maps, we find that our proposed framework outperforms baseline models in both physical-consistency and photorealism. We envision our work to be the first step towards a global visualization of how the climate challenge will shape our landscape. Continuing on this path, we show that the proposed pipeline generalizes to visualize reforestation. We also publish a dataset of over 25k labelled image-triplets to study image-to-image translation in Earth observation.