arXiv reaDer
カプセル間の適応ルーティング
Adaptive Routing Between Capsules
 カプセルネットワークは、ディープラーニング分野における最新のエキサイティングな進歩であり、特徴をベクトルに積み重ねることによって位置情報を表します。カプセルネットワークでは動的ルーティングアルゴリズムが使用されますが、複数のレイヤーをスタックできないことや大量の計算など、いくつかの欠点があります。本論文では、上記の問題を解決できる適応型ルーティングアルゴリズムを提案する。まず、低層カプセルは、ルーティングアルゴリズムで方向と長さを適応的に調整し、勾配伝搬に対する結合係数の影響を除去するため、複数の層に積み重ねたときにネットワークが機能します。次に、ルーティングの反復プロセスを簡略化して計算量を減らし、勾配係数λを導入します。さらに、CIFAR10、Fashion-MNIST、SVHN、MNISTで提案された適応型ルーティングアルゴリズムのパフォーマンスをテストし、動的ルーティングアルゴリズムよりも優れた結果を達成しました。
Capsule network is the most recent exciting advancement in the deep learning field and represents positional information by stacking features into vectors. The dynamic routing algorithm is used in the capsule network, however, there are some disadvantages such as the inability to stack multiple layers and a large amount of computation. In this paper, we propose an adaptive routing algorithm that can solve the problems mentioned above. First, the low-layer capsules adaptively adjust their direction and length in the routing algorithm and removing the influence of the coupling coefficient on the gradient propagation, so that the network can work when stacked in multiple layers. Then, the iterative process of routing is simplified to reduce the amount of computation and we introduce the gradient coefficient λ. Further, we tested the performance of our proposed adaptive routing algorithm on CIFAR10, Fashion-MNIST, SVHN and MNIST, while achieving better results than the dynamic routing algorithm.
updated: Tue Nov 19 2019 06:56:36 GMT+0000 (UTC)
published: Tue Nov 19 2019 06:56:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト