arXiv reaDer
Distributed Iterative Gating Networks for Semantic Segmentation
  この論文では、分散反復ゲーティング(DIGNet)の戦略に基づく効率的なフィードバックルーティングメカニズムを使用して、ニューラルネットワークの情報フローを制御するための標準構造を提示します。このメカニズムの構造は、強力な概念的基盤に由来し、フィードバック信号をフィードフォワードアーキテクチャと統合することにより、再帰畳み込みニューラルネットワークに類似した計算の適応制御のための軽量メカニズムを提供します。他のRNN定式化とは対照的に、DIGNetはカスケード方式でフィードバック信号を生成し、上記のすべてのレイヤーからの情報を暗黙的に運びます。プロパゲータゲートによるこのカスケードフィードバック伝搬は、対応するステージまたは前のステージの出力からのフィードバックを使用する他のフィードバックメカニズムと比較して、より効果的であることがわかります。実験では、カスケードフィードバックを使用したこの反復アプローチが、フィードフォワードベースラインや、3つの困難なデータセットであるPASCAL VOC 2012、COCO-Stuff、ADE20Kのピクセル単位のラベリング問題に関するその他の反復モデルに対して提供する高度な機能を明らかにしています。
In this paper, we present a canonical structure for controlling information flow in neural networks with an efficient feedback routing mechanism based on a strategy of Distributed Iterative Gating (DIGNet). The structure of this mechanism derives from a strong conceptual foundation and presents a light-weight mechanism for adaptive control of computation similar to recurrent convolutional neural networks by integrating feedback signals with a feed-forward architecture. In contrast to other RNN formulations, DIGNet generates feedback signals in a cascaded manner that implicitly carries information from all the layers above. This cascaded feedback propagation by means of the propagator gates is found to be more effective compared to other feedback mechanisms that use feedback from the output of either the corresponding stage or from the previous stage. Experiments reveal the high degree of capability that this recurrent approach with cascaded feedback presents over feed-forward baselines and other recurrent models for pixel-wise labeling problems on three challenging datasets, PASCAL VOC 2012, COCO-Stuff, and ADE20K.
updated: Sat Sep 28 2019 01:06:49 GMT+0000 (UTC)
published: Sat Sep 28 2019 01:06:49 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト