arXiv reaDer
A stepped sampling method for video detection using LSTM
人間をシミュレートする人工ニューラルネットワークは大きな成功を収めています。人間の記憶法をシミュレートする観点から、「反復入力」に基づくステップサンプラーを提案します。 LSTMモデルにデータを段階的にバッチで繰り返し入力しました。ステップサンプラーは、LSTMの時間情報を融合する機能を強化するために使用されます。 PyTorchに組み込まれているLSTMでステップサンプラーをテストしました。シーケンシャルサンプラー、バッチサンプラーなどのPyTorchの従来のサンプラーと比較して、提案されたステップサンプラーのトレーニング損失はモデルのトレーニングでより速く収束し、収束後のトレーニング損失はより安定しています。その間、それはより高いテスト精度を維持することができます。ステップサンプラーのアルゴリズムを定量化しました。
Artificial neural networks that simulate human achieves great successes. From the perspective of simulating human memory method, we propose a stepped sampler based on the "repeated input". We repeatedly inputted data to the LSTM model stepwise in a batch. The stepped sampler is used to strengthen the ability of fusing the temporal information in LSTM. We tested the stepped sampler on the LSTM built-in in PyTorch. Compared with the traditional sampler of PyTorch, such as sequential sampler, batch sampler, the training loss of the proposed stepped sampler converges faster in the training of the model, and the training loss after convergence is more stable. Meanwhile, it can maintain a higher test accuracy. We quantified the algorithm of the stepped sampler.
updated: Sun Jul 18 2021 15:04:13 GMT+0000 (UTC)
published: Sun Jul 18 2021 15:04:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト