arXiv reaDer
画像認識用スピントロニクス : 超高速データ駆動型シミュレーションによる性能ベンチマーク
Spintronics for image recognition : performance benchmarking via ultrafast data-driven simulations
渦ベースのスピントルク発振器 (STVO) として知られるスピントロニクス ナノ構造に依存するハードウェア ベースのエコー状態ネットワーク (ESN) を使用した画像分類のデモンストレーションを紹介します。私たちのネットワークは、時間的に多重化された単一の STVO を使用して実現されます。このようなナノ構造システムの繰り返し実験操作に伴う課題を回避するために、データ駆動型ティーレ方程式アプローチ (DD-TEA) と呼ばれる超高速データ駆動型シミュレーション フレームワークを使用して STVO ダイナミクスをシミュレーションします。私たちはこのアプローチを使用して、MNIST データセットを使用した画像分類用の STVO ベースの ESN を効率的に開発、最適化、テストします。 EMNIST レターとファッション MNIST データセットを使用して分類の課題を解決するためにソリューションをうまく適用することで、ソリューションの多用途性を示します。シミュレーションを通じて、大規模な ESN 内で STVO ダイナミクスを活性化関数として使用して得られた結果が、reLU やシグモイドなどの他の従来の非線形活性化関数で得られた結果と同等であることがわかりました。 MNIST データセットでは最先端の精度レベルを達成していますが、EMNIST レターとファッション MNIST でのモデルのパフォーマンスは、システム アーキテクチャが比較的単純でタスクが複雑になっているため、低下しています。私たちは、DD-TEA フレームワークにより、より特殊化されたニューラル アーキテクチャの探索が可能になり、最終的には分類精度の向上につながると期待しています。このアプローチは、分類パフォーマンスをさらに向上させるための専用の学習ルールを調査および開発することも期待できます。
We present a demonstration of image classification using a hardware-based echo-state network (ESN) that relies on spintronic nanostructures known as vortex-based spin-torque oscillators (STVOs). Our network is realized using a single STVO multiplexed in time. To circumvent the challenges associated with repeated experimental manipulation of such a nanostructured system, we employ an ultrafast data-driven simulation framework called the data-driven Thiele equation approach (DD-TEA) to simulate the STVO dynamics. We use this approach to efficiently develop, optimize and test an STVO-based ESN for image classification using the MNIST dataset. We showcase the versatility of our solution by successfully applying it to solve classification challenges with the EMNIST-letters and Fashion MNIST datasets. Through our simulations, we determine that within a large ESN the results obtained using the STVO dynamics as an activation function are comparable to the ones obtained with other conventional nonlinear activation functions like the reLU and the sigmoid. While achieving state-of-the-art accuracy levels on the MNIST dataset, our model's performance on EMNIST-letters and Fashion MNIST is lower due to the relative simplicity of the system architecture and the increased complexity of the tasks. We expect that the DD-TEA framework will enable the exploration of more specialized neural architectures, ultimately leading to improved classification accuracy. This approach also holds promise for investigating and developing dedicated learning rules to further enhance classification performance.
updated: Thu Aug 10 2023 18:09:44 GMT+0000 (UTC)
published: Thu Aug 10 2023 18:09:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト