非常に少数のニューロンと信じられないほど低い故障率で、飛行中に複雑な高速操作を実行できる生物の能力は、資源に制約のあるこれらの生物学的システムの有効性を浮き彫りにします。イベント駆動型ハードウェアは、リソースに制約のある環境で複雑なビジョンタスクを実装するための有望な手段として近年浮上しています。ビジョンベースの自律ナビゲーションと障害物回避は、オプティカル フロー推定、深度推定、同時位置特定とマッピング (SLAM)、物体検出、認識など、いくつかの独立しているが関連するタスクで構成されます。これらのタスク間の一貫性を確保するには、単一のデータセットでトレーニングすることが不可欠です。ただし、既存のデータセットのほとんどは、必要なデータの選択されたサブセットのみを提供します。これにより、ネットワーク間の一貫性を達成することが困難になります。既存のデータセットのもう 1 つの制限は、それらが提供する時間解像度が限られていることです。これらの制限に対処するために、深さ、ポーズ、エゴモーション、オプティカル フローのグラウンド トゥルースを備えた、視覚ベースのタスク向けのこの種初の完全合成データセットである FEDORA を紹介します。 FEDORA は、10Hz、25Hz、50Hz の 3 つの異なる周波数でオプティカル フローを提供する最初のデータセットです。
The ability of living organisms to perform complex high speed manoeuvers in flight with a very small number of neurons and an incredibly low failure rate highlights the efficacy of these resource-constrained biological systems. Event-driven hardware has emerged, in recent years, as a promising avenue for implementing complex vision tasks in resource-constrained environments. Vision-based autonomous navigation and obstacle avoidance consists of several independent but related tasks such as optical flow estimation, depth estimation, Simultaneous Localization and Mapping (SLAM), object detection, and recognition. To ensure coherence between these tasks, it is imperative that they be trained on a single dataset. However, most existing datasets provide only a selected subset of the required data. This makes inter-network coherence difficult to achieve. Another limitation of existing datasets is the limited temporal resolution they provide. To address these limitations, we present FEDORA, a first-of-its-kind fully synthetic dataset for vision-based tasks, with ground truths for depth, pose, ego-motion, and optical flow. FEDORA is the first dataset to provide optical flow at three different frequencies - 10Hz, 25Hz, and 50Hz