arXiv reaDer
バイオインスパイアード偏光イベントカメラ
Bio-inspired Polarization Event Camera
シャコ目(シャコ目)の視覚システムは、最近、パラダイムシフト偏光およびマルチスペクトルイメージングセンサーの設計の青写真を提供し、困難な医療およびリモートセンシングの問題に対するソリューションを可能にしました。ただし、これらのバイオインスパイアードセンサーは、stomatopodビジュアルシステムのハイダイナミックレンジ(HDR)と非同期偏光ビジョン機能を欠いており、時間分解能を\ 〜12 msに、ダイナミックレンジを\ 〜72dBに制限しています。ここでは、最大ナイキストフレームレートを超えて電力とサンプルデータを節約するために、持続的で一時的な生物学的視覚経路を模倣する、新しいシャコに触発された偏光カメラを紹介します。このバイオインスパイアードセンサーは、100万倍の照明範囲にわたって、ミリ秒未満の遅延で同期強度フレームと非同期偏光輝度変化情報の両方を同時にキャプチャします。当社のPDAVISカメラは、2 x 2マクロピクセルで構成された346x260ピクセルで構成されており、45度オフセットされた4つの直線偏光フィルターで入射光をフィルターします。偏波情報は、低コストで遅延のあるイベントベースのアルゴリズムと、より正確で低速なディープニューラルネットワークの両方を使用して再構築されます。私たちのセンサーは、高速で変化するHDR偏光シーンを画像化し、急速な周期的負荷の下でウシ腱の単一コラーゲン繊維の動的特性を観察するために使用されます
The stomatopod (mantis shrimp) visual system has recently provided a blueprint for the design of paradigm-shifting polarization and multispectral imaging sensors, enabling solutions to challenging medical and remote sensing problems. However, these bioinspired sensors lack the high dynamic range (HDR) and asynchronous polarization vision capabilities of the stomatopod visual system, limiting temporal resolution to \~12 ms and dynamic range to \~ 72 dB. Here we present a novel stomatopod-inspired polarization camera which mimics the sustained and transient biological visual pathways to save power and sample data beyond the maximum Nyquist frame rate. This bio-inspired sensor simultaneously captures both synchronous intensity frames and asynchronous polarization brightness change information with sub-millisecond latencies over a million-fold range of illumination. Our PDAVIS camera is comprised of 346x260 pixels, organized in 2-by-2 macropixels, which filter the incoming light with four linear polarization filters offset by 45 degrees. Polarization information is reconstructed using both low cost and latency event-based algorithms and more accurate but slower deep neural networks. Our sensor is used to image HDR polarization scenes which vary at high speeds and to observe dynamical properties of single collagen fibers in bovine tendon under rapid cyclical loads
updated: Thu Dec 02 2021 11:38:02 GMT+0000 (UTC)
published: Thu Dec 02 2021 11:38:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト