arXiv reaDer
Sensory Optimization: Neural Networks as a Model for Understanding and Creating Art
 この記事は、視覚芸術の認知科学に関するものです。アーティストは、人物、オブジェクト、イベントを描写する物理的なアーティファクト(彫刻や絵画など)を作成します。これらの描写は通常、写真のようにリアルではなく定型化されています。人間が様式化された表現を理解して作成できるのはどのようにですか?この能力は、一般的な認知能力または芸術に対する進化的適応に依存していますか?学習と文化はどのような役割を果たしますか?機械学習は、これらの質問に光を当てることができます。畳み込みニューラルネットワーク(CNN)をトレーニングして、ビジュアルアートでトレーニングせずにオブジェクトを認識することができます。そのようなCNNが(定型化された表現を作成および理解することにより)視覚芸術に一般化できる場合、CNNは、人間が生来の適応や文化学習なしで芸術を理解する方法のモデルを提供します。 Deep DreamとStyle Transferは、CNNがビジュアルアートの基本的な形を作成でき、人間も同様のプロセスでアートを作成できることを示していると主張します。これは、アーティストが人間のオブジェクト認識システムへの影響を最適化することでアートを作成することを示唆しています。物理的なアーティファクトは、このシステムの実世界のオブジェクトを呼び起こす(たとえば、人や風景を呼び起こす)ために、またこのシステムの超刺激として機能するように最適化されます。
This article is about the cognitive science of visual art. Artists create physical artifacts (such as sculptures or paintings) which depict people, objects, and events. These depictions are usually stylized rather than photo-realistic. How is it that humans are able to understand and create stylized representations? Does this ability depend on general cognitive capacities or an evolutionary adaptation for art? What role is played by learning and culture? Machine Learning can shed light on these questions. It's possible to train convolutional neural networks (CNNs) to recognize objects without training them on any visual art. If such CNNs can generalize to visual art (by creating and understanding stylized representations), then CNNs provide a model for how humans could understand art without innate adaptations or cultural learning. I argue that Deep Dream and Style Transfer show that CNNs can create a basic form of visual art, and that humans could create art by similar processes. This suggests that artists make art by optimizing for effects on the human object-recognition system. Physical artifacts are optimized to evoke real-world objects for this system (e.g. to evoke people or landscapes) and to serve as superstimuli for this system.
updated: Sat Nov 16 2019 18:10:00 GMT+0000 (UTC)
published: Sat Nov 16 2019 18:10:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト