arXiv reaDer
Manipulating Attributes of Natural Scenes via Hallucination
  この調査では、ユーザーが自然なシーンの高レベルの属性を直接操作できるようにするための2段階のフレームワークの構築を検討します。私たちのアプローチの鍵は、深い季節生成ネットワークであり、別の季節(冬など)、天候(曇りの日など)、または時刻(日没など)で撮影したかのようにシーンの画像を幻覚化できます。 )。シーンが指定された属性で幻覚になったら、対応する外観が入力画像に転送されますが、セマンティックの詳細はそのまま保持され、写真のようにリアルな操作結果が得られます。提案されたフレームワークはシーンがどのように見えるかを幻覚化するため、ほとんどの外観またはスタイル転送アプローチで一般的に使用されるような参照スタイル画像を必要としません。さらに、単一のモデル内のさまざまな一時属性に基づいて特定のシーンを同時に操作できるため、翻訳タスクごとに複数のネットワークをトレーニングする必要がなくなります。定性的および定量的な結果の包括的なセットは、競合する方法に対するアプローチの有効性を示しています。
In this study, we explore building a two-stage framework for enabling users to directly manipulate high-level attributes of a natural scene. The key to our approach is a deep generative network which can hallucinate images of a scene as if they were taken at a different season (e.g. during winter), weather condition (e.g. in a cloudy day) or time of the day (e.g. at sunset). Once the scene is hallucinated with the given attributes, the corresponding look is then transferred to the input image while preserving the semantic details intact, giving a photo-realistic manipulation result. As the proposed framework hallucinates what the scene will look like, it does not require any reference style image as commonly utilized in most of the appearance or style transfer approaches. Moreover, it allows to simultaneously manipulate a given scene according to a diverse set of transient attributes within a single model, eliminating the need of training multiple networks per each translation task. Our comprehensive set of qualitative and quantitative results demonstrate the effectiveness of our approach against the competing methods.
updated: Wed Oct 09 2019 06:18:45 GMT+0000 (UTC)
published: Wed Aug 22 2018 16:01:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト