arXiv reaDer
盲導犬:ドローンとトランスフォーマーベースのセマンティックセグメンテーションを利用した視覚障害者のための歩行可能な経路発見
Flying Guide Dog: Walkable Path Discovery for the Visually Impaired Utilizing Drones and Transformer-based Semantic Segmentation
周囲の環境を効果的に感知する能力が不足しているため、視覚障害者(BVIP)は、特に都市部で屋外を歩くのが困難になっています。したがって、BVIPを支援するためのツールは非常に重要です。この論文では、ドローンとストリートビューのセマンティックセグメンテーションを使用したBVIP支援のための新しい「空飛ぶ盲導犬」プロトタイプを提案します。セグメンテーション予測から抽出された歩行可能領域に基づいて、ドローンはその動きを自動的に調整し、ユーザーを歩行可能パスに沿って歩くように導くことができます。私たちのプロトタイプは、歩行者用信号機の色を認識することで、ユーザーが安全に通りを横断するのに役立ちます。さらに、信号機認識専用の歩行者および車両信号機(PVTL)という名前の新しいデータセットを紹介します。実際のシナリオでのユーザー調査の結果は、プロトタイプが効果的で使いやすく、BVIP支援への新しい洞察を提供することを示しています。
Lacking the ability to sense ambient environments effectively, blind and visually impaired people (BVIP) face difficulty in walking outdoors, especially in urban areas. Therefore, tools for assisting BVIP are of great importance. In this paper, we propose a novel "flying guide dog" prototype for BVIP assistance using drone and street view semantic segmentation. Based on the walkable areas extracted from the segmentation prediction, the drone can adjust its movement automatically and thus lead the user to walk along the walkable path. By recognizing the color of pedestrian traffic lights, our prototype can help the user to cross a street safely. Furthermore, we introduce a new dataset named Pedestrian and Vehicle Traffic Lights (PVTL), which is dedicated to traffic light recognition. The result of our user study in real-world scenarios shows that our prototype is effective and easy to use, providing new insight into BVIP assistance.
updated: Mon Aug 16 2021 10:32:24 GMT+0000 (UTC)
published: Mon Aug 16 2021 10:32:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト