arXiv reaDer
ELSR: モバイル デバイス向けの超低電力超解像度ネットワーク
ELSR: Extreme Low-Power Super Resolution Network For Mobile Devices
スマートフォンやウェアラブル端末などのモバイル端末の普及に伴い、映像超解像の応用には軽量化・高速化が必須となっています。ただし、以前のほとんどの軽量モデルは、デスクトップ GPU でのモデル推論の遅延を減らすことに集中する傾向があり、現在のモバイル デバイスではエネルギー効率がよくない可能性があります。この論文では、モバイルデバイスで少量のエネルギーしか消費しない超低電力超解像度 (ELSR) ネットワークを提案しました。非常に小さなモデルのパフォーマンスを向上させるために、事前トレーニングと微調整の方法が適用されます。広範な実験により、我々の方法が修復品質と消費電力との間の優れたバランスを達成することが示されています。最後に、ターゲットの MediaTek Dimensity 9000 プラントフォームで、PSNR 27.34 dB および電力 0.09 W/30FPS で 90.9 の競争スコアを達成し、モバイル AI & AIM 2022 リアルタイム ビデオ超解像度チャレンジで 1 位になりました。
With the popularity of mobile devices, e.g., smartphone and wearable devices, lighter and faster model is crucial for the application of video super resolution. However, most previous lightweight models tend to concentrate on reducing lantency of model inference on desktop GPU, which may be not energy efficient in current mobile devices. In this paper, we proposed Extreme Low-Power Super Resolution (ELSR) network which only consumes a small amount of energy in mobile devices. Pretraining and finetuning methods are applied to boost the performance of the extremely tiny model. Extensive experiments show that our method achieves a excellent balance between restoration quality and power consumption. Finally, we achieve a competitive score of 90.9 with PSNR 27.34 dB and power 0.09 W/30FPS on the target MediaTek Dimensity 9000 plantform, ranking 1st place in the Mobile AI & AIM 2022 Real-Time Video Super-Resolution Challenge.
updated: Wed Aug 31 2022 02:32:50 GMT+0000 (UTC)
published: Wed Aug 31 2022 02:32:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト