arXiv reaDer
ImageSig:超軽量画像認識のための署名変換
ImageSig: A signature transform for ultra-lightweight image recognition
この論文は、画像認識のための新しい軽量の方法を紹介した。 ImageSigは署名の計算に基づいており、畳み込み構造や注意ベースのエンコーダーを必要としません。 a)64 X 64 RGB画像の精度が、最先端の方法の多くを超え、同時にb)必要なFLOPS、電力、およびメモリフットプリントが桁違いに少ないことは、著者にとって驚くべきことです。事前にトレーニングされたモデルのサイズは、44.2KBまで小さくすることができます。 ImageSigは、RaspberryPiやJetson-nanoなどのハードウェアで前例のないパフォーマンスを示しています。 ImageSigは、画像を複数のチャネルを持つストリームとして扱います。これらのストリームは、空間方向によってパラメーター化されます。署名とラフパス理論の機能に貢献し、一時的なストリームを超えた静止画像のストリームのようなデータとビジョンタスクに貢献します。パラメータが非常に少なく、モデルが小さい場合、主な利点は、これらの「検出器」の多くを同じチップ上に組み立てることができることです。さらに、機能の取得を1回実行して、さまざまなタスクのさまざまなモデル間で共有することができます。これにより、プロセスがさらに加速されます。これは、エネルギー効率とエッジでの組み込みAIの進歩に貢献します。
This paper introduces a new lightweight method for image recognition. ImageSig is based on computing signatures and does not require a convolutional structure or an attention-based encoder. It is striking to the authors that it achieves: a) an accuracy for 64 X 64 RGB images that exceeds many of the state-of-the-art methods and simultaneously b) requires orders of magnitude less FLOPS, power and memory footprint. The pretrained model can be as small as 44.2 KB in size. ImageSig shows unprecedented performance on hardware such as Raspberry Pi and Jetson-nano. ImageSig treats images as streams with multiple channels. These streams are parameterized by spatial directions. We contribute to the functionality of signature and rough path theory to stream-like data and vision tasks on static images beyond temporal streams. With very few parameters and small size models, the key advantage is that one could have many of these "detectors" assembled on the same chip; moreover, the feature acquisition can be performed once and shared between different models of different tasks - further accelerating the process. This contributes to energy efficiency and the advancements of embedded AI at the edge.
updated: Fri May 13 2022 23:48:32 GMT+0000 (UTC)
published: Fri May 13 2022 23:48:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト