arXiv reaDer
AirNet:無線によるニューラルネットワーク伝送
AirNet: Neural Network Transmission over the Air
多くの新しいエッジアプリケーションの最先端のパフォーマンスは、ディープニューラルネットワーク(DNN)によって実現されます。多くの場合、採用されるDNNは場所と時間に依存し、時間に敏感な推論タスクを実行するには、特定のDNNのパラメーターをエッジサーバーからエッジデバイスに迅速かつ効率的に配信する必要があります。これは、最小の歪みでDNN係数を回復することではなく、ダウンストリームタスクで最高の精度を提供する方法でDNN係数を回復することを目的とする、共同ソースチャネルコーディング(JSCC)の問題と見なすことができます。この目的のために、DNNを無線で配信するための新しいトレーニングおよびアナログ伝送方法であるAirNetを紹介します。まず、ワイヤレスチャネルノイズに対抗するために、ノイズ注入を使用してDNNをトレーニングします。また、プルーニングを使用して、利用可能なチャネル帯域幅内で配信できる最も重要なDNNパラメーター、知識の蒸留、および非線形帯域幅の拡張を使用して、最も重要なネットワークパラメーターのエラー保護を強化します。 AirNetは、分離ベースの代替手段と比較して大幅に高いテスト精度を達成し、チャネル品質とともに優雅な劣化を示すことを示します。
State-of-the-art performance for many emerging edge applications is achieved by deep neural networks (DNNs). Often, the employed DNNs are location- and time-dependent, and the parameters of a specific DNN must be delivered from an edge server to the edge device rapidly and efficiently to carry out time-sensitive inference tasks. This can be considered as a joint source-channel coding (JSCC) problem, in which the goal is not to recover the DNN coefficients with the minimal distortion, but in a manner that provides the highest accuracy in the downstream task. For this purpose we introduce AirNet, a novel training and analog transmission method to deliver DNNs over the air. We first train the DNN with noise injection to counter the wireless channel noise. We also employ pruning to identify the most significant DNN parameters that can be delivered within the available channel bandwidth, knowledge distillation, and non-linear bandwidth expansion to provide better error protection for the most important network parameters. We show that AirNet achieves significantly higher test accuracy compared to the separation-based alternative, and exhibits graceful degradation with channel quality.
updated: Wed Feb 09 2022 11:54:22 GMT+0000 (UTC)
published: Mon May 24 2021 09:16:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト