Spatial-query-by-sketchは、地理的環境に関する人間の空間知識を探索し、シーンデータベースクエリとの通信をサポートするための直感的なツールです。ただし、従来のスケッチベースの空間検索方法は、メンタルスケッチから隠されたマルチスケールマップの特徴を見つけることができないため、十分に機能しません。この研究では、空間シーンの類似性をより適切に評価するために、深い畳み込みニューラルネットワーク、つまりDeep Spatial Scene Network(DeepSSN)を提案します。 DeepSSNでは、類似性評価をサポートするための包括的な距離メトリックとしてトリプレット損失関数が設計されています。空間推論で定性的制約ネットワークを使用するポジティブおよびネガティブな例のマイニング戦略は、トレーニングプロセス中にトリプレットの区別を一貫して増加させるように設計されています。さらに、提案されたDeepSSNを使用して、プロトタイプの空間シーン検索システムを開発します。このシステムでは、ユーザーがスケッチマップを介して空間クエリを入力し、システムがスケッチトレーニングデータを自動的に拡張できます。提案されたモデルは、データ拡張後の131,300のラベル付きシーンサンプルを含むマルチソースの統合マップデータを使用して検証されます。経験的結果は、DeepSSNが、平均相互ランクおよび精度メトリックを使用して、k最近傍法、多層パーセプトロン、AlexNet、DenseNet、およびResNetを含むベースラインメソッドよりも優れていることを示しています。この研究は、空間シーンクエリに合わせた新しい深層学習手法を導入することにより、地理情報検索研究を前進させます。
Spatial-query-by-sketch is an intuitive tool to explore human spatial knowledge about geographic environments and to support communication with scene database queries. However, traditional sketch-based spatial search methods perform insufficiently due to their inability to find hidden multi-scale map features from mental sketches. In this research, we propose a deep convolutional neural network, namely Deep Spatial Scene Network (DeepSSN), to better assess the spatial scene similarity. In DeepSSN, a triplet loss function is designed as a comprehensive distance metric to support the similarity assessment. A positive and negative example mining strategy using qualitative constraint networks in spatial reasoning is designed to ensure a consistently increasing distinction of triplets during the training process. Moreover, we develop a prototype spatial scene search system using the proposed DeepSSN, in which the users input spatial query via sketch maps and the system can automatically augment the sketch training data. The proposed model is validated using multi-source conflated map data including 131,300 labeled scene samples after data augmentation. The empirical results demonstrate that the DeepSSN outperforms baseline methods including k-nearest-neighbors, multilayer perceptron, AlexNet, DenseNet, and ResNet using mean reciprocal rank and precision metrics. This research advances geographic information retrieval studies by introducing a novel deep learning method tailored to spatial scene queries.