arXiv reaDer
ニューラルセルオートマトンマニホールド
Neural Cellular Automata Manifold
ごく最近、神経細胞オートマトン(NCA)が、深いネットワークで形態形成プロセスをシミュレートするために提案されました。 NCAは、固定された単一ピクセルから画像を成長させることを学習します。この作業では、NCAのニューラルネットワーク(NN)アーキテクチャをより大きなNNにカプセル化できることを示します。これにより、NCAのマニフォールドをエンコードする新しいモデルを提案できます。各モデルは、個別の画像を生成できます。したがって、一般化機能を示すCAの埋め込みスペースを効果的に学習しています。これは、オートエンコーダアーキテクチャ内に動的畳み込みを導入することで実現します。これは、エンコーディングとセル環境情報という2つの異なる情報ソースを結合するために初めて使用されます。生物学的には、私たちのアプローチは転写因子の役割を果たし、形態形成の直前に発生する細胞分化を促進する特定のタンパク質への遺伝子のマッピングを調節します。合成絵文字のデータセットとCIFAR10の実際の画像で、アプローチを徹底的に評価します。私たちのモデルは、画像生成を超えた幅広い問題で使用できる汎用ネットワークを導入しています。
Very recently, the Neural Cellular Automata (NCA) has been proposed to simulate the morphogenesis process with deep networks. NCA learns to grow an image starting from a fixed single pixel. In this work, we show that the neural network (NN) architecture of the NCA can be encapsulated in a larger NN. This allows us to propose a new model that encodes a manifold of NCA, each of them capable of generating a distinct image. Therefore, we are effectively learning an embedding space of CA, which shows generalization capabilities. We accomplish this by introducing dynamic convolutions inside an Auto-Encoder architecture, for the first time used to join two different sources of information, the encoding and cells environment information. In biological terms, our approach would play the role of the transcription factors, modulating the mapping of genes into specific proteins that drive cellular differentiation, which occurs right before the morphogenesis. We thoroughly evaluate our approach in a dataset of synthetic emojis and also in real images of CIFAR10. Our model introduces a general-purpose network, which can be used in a broad range of problems beyond image generation.
updated: Tue Mar 02 2021 10:38:43 GMT+0000 (UTC)
published: Mon Jun 22 2020 11:41:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト