この論文では、概観データからのオブジェクト境界(建物など)がストリートビュー写真測量画像から生成されたファサード3Dポイントのフットプリントと一致する必要があるという仮定に基づいて、完全に自動化された提案によってこの問題に対処することを目指していますクロスビューデータの地理登録方法。これは、グラフマッチングによるグローバル最適化フレームワークの下で、意味的にセグメント化されたオブジェクト境界をビュー不変の特徴として利用します。ステレオ/マルチステレオ衛星画像とストリートから生成されたオーバービューポイントクラウドを取得します。 -入力として単眼ビデオ画像から生成された視点雲、提案された方法は、衛星ベースとストリートビューベースの両方の点群から検出されたグラフのノードとして建物のセグメントをモデル化し、グラフマッチングとしての登録を形成します非厳密な一致を許可するための問題。堅牢なソリューションを可能にし、これらのセグメント間の位相関係を十分に活用するために、信念伝搬アルゴリズムによって解決された共役グラフのグラフマッチング問題に対処することを提案します。一致したノードは、正確な登録を可能にするためにさらに最適化され、続いてストリートビュー画像の制約付きバンドル調整が行われ、2D29 3Dの一貫性が維持されます。これにより、十分に登録されたストリートビュー画像と点群が衛星ポイントに生成されます。雲。
In this paper, based on the assumption that the object boundaries (e.g., buildings) from the over-view data should coincide with footprints of facade 3D points generated from street-view photogrammetric images, we aim to address this problem by proposing a fully automated geo-registration method for cross-view data, which utilizes semantically segmented object boundaries as view-invariant features under a global optimization framework through graph-matching: taking the over-view point clouds generated from stereo/multi-stereo satellite images and the street-view point clouds generated from monocular video images as the inputs, the proposed method models segments of buildings as nodes of graphs, both detected from the satellite-based and street-view based point clouds, thus to form the registration as a graph-matching problem to allow non-rigid matches; to enable a robust solution and fully utilize the topological relations between these segments, we propose to address the graph-matching problem on its conjugate graph solved through a belief-propagation algorithm. The matched nodes will be subject to a further optimization to allow precise-registration, followed by a constrained bundle adjustment on the street-view image to keep 2D29 3D consistencies, which yields well-registered street-view images and point clouds to the satellite point clouds.