arXiv reaDer
Towards Analyzing Semantic Robustness of Deep Neural Networks
さまざまなビジョンタスクでのディープニューラルネットワーク(DNN)の印象的なパフォーマンスにもかかわらず、セマンティックプリミティブ(オブジェクトのポーズなど)に対して誤った高い感度を示します。意味空間におけるDNNロバスト性の理論的に根拠のある分析を提案します。 DNNグローバル動作をセマンティックマップとして視覚化することにより、さまざまなDNNのセマンティックロバスト性を定性的に分析し、一部のDNNの興味深い動作を観察します。これらのセマンティックマップの生成は、セマンティックスペースの次元に応じて適切にスケーリングされないため、DNNのロバストな領域を検出するボトムアップアプローチを開発します。これを達成するために、ネットワークのロバストなセマンティック領域を見つける問題を積分境界を最適化するものとして形式化し、領域境界の更新方向の式を開発します。開発した定式化を使用して、さまざまな一般的なネットワークアーキテクチャのセマンティックな堅牢性を定量的に評価します。広範な実験を通じて、同じデータセットでトレーニングされ、同等の精度を享受している複数のネットワークが、必ずしも意味論的堅牢性で同じように機能するとは限らないことを示しています。たとえば、InceptionV3は、ResNet50よりも意味的に堅牢ではありませんが、より正確です。このツールがDNNのセマンティックな堅牢性を理解するためのマイルストーンとして役立つことを願っています。
Despite the impressive performance of Deep Neural Networks (DNNs) on various vision tasks, they still exhibit erroneous high sensitivity toward semantic primitives (e.g. object pose). We propose a theoretically grounded analysis for DNN robustness in the semantic space. We qualitatively analyze different DNNs' semantic robustness by visualizing the DNN global behavior as semantic maps and observe interesting behavior of some DNNs. Since generating these semantic maps does not scale well with the dimensionality of the semantic space, we develop a bottom-up approach to detect robust regions of DNNs. To achieve this, we formalize the problem of finding robust semantic regions of the network as optimizing integral bounds and we develop expressions for update directions of the region bounds. We use our developed formulations to quantitatively evaluate the semantic robustness of different popular network architectures. We show through extensive experimentation that several networks, while trained on the same dataset and enjoying comparable accuracy, do not necessarily perform similarly in semantic robustness. For example, InceptionV3 is more accurate despite being less semantically robust than ResNet50. We hope that this tool will serve as a milestone towards understanding the semantic robustness of DNNs.
updated: Tue Sep 08 2020 15:53:55 GMT+0000 (UTC)
published: Tue Apr 09 2019 12:26:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト