arXiv reaDer
Semantic Image Cropping
自動画像トリミング技術は、画像の美的品質を高めるために一般的に使用されます。それらは、画像の最も美しい部分または最も目立つ部分を検出し、不要なコンテンツを削除して、より視覚的に心地よい小さな画像にすることによってそれを行います。この論文では、トリミング、セマンティクスの問題に追加の次元を紹介します。画像のトリミングは、画像に含まれるセマンティック情報を使用することで、特定のエンティティに対する画像の関連性を高めることもできると私は主張します。私はこの問題をセマンティックイメージクロッピングと呼んでいます。私の主張を裏付けるために、画像ごとに少なくとも2つの異なるエンティティとAmazon MechanicalTurkを使用して収集された4つのグラウンドトゥルースクロッピングを含む100個の画像を含む新しいデータセットを提供します。このデータセットを使用して、美学のみを考慮した最先端のトリミングアルゴリズムが、セマンティック画像のトリミングの問題でうまく機能しないことを示します。さらに、美学だけでなくセマンティクスも考慮して画像のトリミングを生成する新しい深層学習システムを提供し、新しいセマンティックトリミングデータセットを使用してそのパフォーマンスを評価し、画像のセマンティック情報を使用するとより良い制作に役立つことを示していますトリミング。
Automatic image cropping techniques are commonly used to enhance the aesthetic quality of an image; they do it by detecting the most beautiful or the most salient parts of the image and removing the unwanted content to have a smaller image that is more visually pleasing. In this thesis, I introduce an additional dimension to the problem of cropping, semantics. I argue that image cropping can also enhance the image's relevancy for a given entity by using the semantic information contained in the image. I call this problem, Semantic Image Cropping. To support my argument, I provide a new dataset containing 100 images with at least two different entities per image and four ground truth croppings collected using Amazon Mechanical Turk. I use this dataset to show that state-of-the-art cropping algorithms that only take into account aesthetics do not perform well in the problem of semantic image cropping. Additionally, I provide a new deep learning system that takes not just aesthetics but also semantics into account to generate image croppings, and I evaluate its performance using my new semantic cropping dataset, showing that using the semantic information of an image can help to produce better croppings.
updated: Thu Jul 15 2021 06:54:42 GMT+0000 (UTC)
published: Thu Jul 15 2021 06:54:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト