arXiv reaDer
On Learning and Learned Data Representation by Capsule Networks
この作業では、以下を調査します。1)ルーティングがCapsNetモデルのフィッティングにどのように影響するか。 2)カプセルを使用した表現がデータ分布のグローバル構造の発見にどのように役立つか、および3)学習したデータ表現が新しいタスクにどのように適応し、一般化するか。調査の結果、CapsNetの最初の論文でいくつか言及されている結果が得られました。それらは次のとおりです。1)ルーティング操作により、カプセルのレイヤーが上のレイヤーに情報を渡す確実性が決まり、適切な確実性レベルはモデルの適合性。 2)既知の2D構造を持つデータを使用して設計された実験では、カプセル表現により、標準の畳み込みニューラルネットワーク(CNN)でニューロンが行うよりも意味のある2D多様体の埋め込みが可能になります。 3)標準のCNNのニューロンと比較して、連続する層のカプセルは結合が少なく、新しいデータ分布により適応します。
In this work, we investigate the following: 1) how the routing affects the CapsNet model fitting; 2) how the representation using capsules helps discover global structures in data distribution, and; 3) how the learned data representation adapts and generalizes to new tasks. Our investigation yielded the results some of which have been mentioned in the original paper of CapsNet, they are: 1) the routing operation determines the certainty with which a layer of capsules pass information to the layer above and the appropriate level of certainty is related to the model fitness; 2) in a designed experiment using data with a known 2D structure, capsule representations enable a more meaningful 2D manifold embedding than neurons do in a standard convolutional neural network (CNN), and; 3) compared with neurons of the standard CNN, capsules of successive layers are less coupled and more adaptive to new data distribution.
updated: Mon Jun 22 2020 03:22:39 GMT+0000 (UTC)
published: Mon Oct 08 2018 03:14:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト