arXiv reaDer
リモート センシング アプリケーション向けのセグメント エニシング モデル (SAM): ゼロからワンショットまで
The Segment Anything Model (SAM) for Remote Sensing Applications: From Zero to One Shot
セグメンテーションは、リモート センシング画像処理にとって不可欠なステップです。本研究は、メタAIによる革新的な画像セグメンテーションモデルであるSegment Anything Model(SAM)のリモートセンシング画像解析分野への応用を推進することを目的としています。 SAM は、その卓越した一般化機能とゼロショット学習で知られており、さまざまな地理的コンテキストからの航空画像や軌道画像を処理するための有望なアプローチとなっています。私たちの探索には、境界ボックス、個々のポイント、テキスト記述子などのさまざまな入力プロンプトを使用して、マルチスケール データセット全体で SAM をテストすることが含まれていました。モデルのパフォーマンスを向上させるために、テキスト プロンプトから派生した一般的なサンプルとワンショット トレーニングを組み合わせた新しい自動化手法を実装しました。この調整により精度が向上し、リモート センシング画像への展開における SAM の可能性が強調され、手動による注釈の必要性が軽減されました。空間解像度が低い画像では限界があるにもかかわらず、SAM はリモート センシング データ分析に対して有望な適応性を示します。補足的な微調整技術や他のネットワークとの統合を通じてモデルの習熟度を高めるために、将来の研究を推奨します。さらに、オンライン リポジトリで変更を加えたオープンソース コードを提供し、リモート センシング ドメインへの SAM のさらに広範な適応を促進します。
Segmentation is an essential step for remote sensing image processing. This study aims to advance the application of the Segment Anything Model (SAM), an innovative image segmentation model by Meta AI, in the field of remote sensing image analysis. SAM is known for its exceptional generalization capabilities and zero-shot learning, making it a promising approach to processing aerial and orbital images from diverse geographical contexts. Our exploration involved testing SAM across multi-scale datasets using various input prompts, such as bounding boxes, individual points, and text descriptors. To enhance the model's performance, we implemented a novel automated technique that combines a text-prompt-derived general example with one-shot training. This adjustment resulted in an improvement in accuracy, underscoring SAM's potential for deployment in remote sensing imagery and reducing the need for manual annotation. Despite the limitations encountered with lower spatial resolution images, SAM exhibits promising adaptability to remote sensing data analysis. We recommend future research to enhance the model's proficiency through integration with supplementary fine-tuning techniques and other networks. Furthermore, we provide the open-source code of our modifications on online repositories, encouraging further and broader adaptations of SAM to the remote sensing domain.
updated: Thu Jun 29 2023 01:49:33 GMT+0000 (UTC)
published: Thu Jun 29 2023 01:49:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト