感覚神経プロテーゼは、失われた感覚機能を回復したり、人間の能力を増強したりするための有望な技術として浮上しています。しかし、現在のデバイスによって誘発される感覚は、人工的で歪んでいるように見えることがよくあります。現在のモデルは電気刺激に対する神経または知覚の反応を予測できますが、最適な刺激戦略は逆の問題を解決します: 望ましい反応を生み出すために必要な刺激は何ですか?ここでは、これをエンドツーエンドの最適化問題として組み立てます。ディープ ニューラル ネットワーク刺激エンコーダーは、基礎となる生物学的システムを近似する既知の固定フォワード モデルを反転するようにトレーニングされます。概念実証として、視覚神経人工装具におけるこのハイブリッド ニューラル オートエンコーダー (HNA) の有効性を実証します。 HNA は、手書きの数字と日常のオブジェクトのセグメント化された画像を表す忠実度の高い患者固有の刺激を生成し、シミュレートされたすべての患者で従来のエンコード戦略を大幅に上回ることがわかりました。全体として、これは不治の失明とともに生きる人々に高品質の視力を回復させるという長年の課題に向けた重要なステップであり、さまざまな神経補綴技術の有望な解決策となる可能性があります。
Sensory neuroprostheses are emerging as a promising technology to restore lost sensory function or augment human capabilities. However, sensations elicited by current devices often appear artificial and distorted. Although current models can predict the neural or perceptual response to an electrical stimulus, an optimal stimulation strategy solves the inverse problem: what is the required stimulus to produce a desired response? Here, we frame this as an end-to-end optimization problem, where a deep neural network stimulus encoder is trained to invert a known and fixed forward model that approximates the underlying biological system. As a proof of concept, we demonstrate the effectiveness of this Hybrid Neural Autoencoder (HNA) in visual neuroprostheses. We find that HNA produces high-fidelity patient-specific stimuli representing handwritten digits and segmented images of everyday objects, and significantly outperforms conventional encoding strategies across all simulated patients. Overall this is an important step towards the long-standing challenge of restoring high-quality vision to people living with incurable blindness and may prove a promising solution for a variety of neuroprosthetic technologies.