arXiv reaDer
MintNet: Building Invertible Neural Networks with Masked Convolutions
 単純なビルディングブロックと新しい構成ルールのセットを組み合わせることにより、可逆ニューラルネットワークを構築する新しい方法を提案します。これにより、ResNetsに類似したものを含む、豊富な可逆アーキテクチャのセットにつながります。反転は、並列化可能で実際には非常に高速なローカル収束反復手順で実現されます。さらに、ヤコビアンの行列式を分析的かつ効率的に計算できるため、フローモデルとして生成的に使用できます。それらの柔軟性を実証するために、我々の可逆ニューラルネットワークがMNISTおよびCIFAR-10分類のResNetと競合していることを示します。ジェネレーティブモデルとしてトレーニングされた場合、当社の可逆ネットワークは、MNIST、CIFAR-10、ImageNet 32x32でそれぞれ0.98、3.32、4.06の次元ごとのビットで競合する可能性を実現します。
We propose a new way of constructing invertible neural networks by combining simple building blocks with a novel set of composition rules. This leads to a rich set of invertible architectures, including those similar to ResNets. Inversion is achieved with a locally convergent iterative procedure that is parallelizable and very fast in practice. Additionally, the determinant of the Jacobian can be computed analytically and efficiently, enabling their generative use as flow models. To demonstrate their flexibility, we show that our invertible neural networks are competitive with ResNets on MNIST and CIFAR-10 classification. When trained as generative models, our invertible networks achieve competitive likelihoods on MNIST, CIFAR-10 and ImageNet 32x32, with bits per dimension of 0.98, 3.32 and 4.06 respectively.
updated: Tue Oct 29 2019 07:20:45 GMT+0000 (UTC)
published: Thu Jul 18 2019 09:24:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト