arXiv reaDer
ピラミッド型予測ネットワーク: 予測コーディング理論に基づくビジュアル フレーム予測のモデル
Pyramidal Predictive Network: A Model for Visual-frame Prediction Based on Predictive Coding Theory
ビジュアル フレーム予測は、過去のフレームから将来のフレームを推測するピクセル密度の高い予測タスクです。外観の詳細の欠如、予測精度の低さ、および計算オーバーヘッドの高さは、現在のモデルまたは方法では依然として大きな問題です。この論文では、問題に対処するために、よく知られている予測コーディング理論に触発された新しいニューラル ネットワーク モデルを提案します。予測コーディングは、視覚フレーム予測のための効率的で信頼性の高い予測ネットワーク モデルを設計するために、さまざまなレベルの大脳皮質がさまざまな周波数で振動するなどの他の理論と組み合わされる、興味深く信頼性の高い計算フレームワークを提供します。具体的には、モデルは、それぞれトップダウン ストリームとボトムアップ ストリームを形成する一連の再帰ユニットと畳み込みユニットで構成されます。各層のニューラル ユニットの更新頻度は、ネットワーク レベルの増加に伴って減少し、その結果、より高いレベルのニューロンがより長い時間次元で情報をキャプチャできるようになります。実験結果によると、このモデルはより優れたコンパクトさと既存の研究と同等の予測性能を示しており、計算コストが低く、予測精度が高いことを意味しています。コードは https://github.com/Ling-CF/PPNet で入手できます。
Visual-frame prediction is a pixel-dense prediction task that infers future frames from past frames. Lacking of appearance details, low prediction accuracy and high computational overhead are still major problems with current models or methods. In this paper, we propose a novel neural network model inspired by the well-known predictive coding theory to deal with the problems. Predictive coding provides an interesting and reliable computational framework, which will be combined with other theories such as the cerebral cortex at different level oscillates at different frequencies, to design an efficient and reliable predictive network model for visual-frame prediction. Specifically, the model is composed of a series of recurrent and convolutional units forming the top-down and bottom-up streams, respectively. The update frequency of neural units on each of the layer decreases with the increasing of network levels, which results in neurons of higher-level can capture information in longer time dimensions. According to the experimental results, this model shows better compactness and comparable predictive performance with existing works, implying lower computational cost and higher prediction accuracy. Code is available at https://github.com/Ling-CF/PPNet.
updated: Tue Nov 15 2022 01:42:44 GMT+0000 (UTC)
published: Mon Aug 15 2022 06:28:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト