arXiv reaDer
Interior Object Detection and Color Harmonization
あなたのスペースを改修することについて混乱していますか?壁に最適な色を選択することは、常に困難な作業です。 1つは、色の相談といくつかのパッチテストのラウンドを行います。この論文では、部屋やその他の家具の属性に基づいてペイントをピッチングし、壁に視覚化するAIツールを提案します。色の選択プロセスが簡単になります。部屋の画像を取り込み、YOLOオブジェクト検出を使用して家具オブジェクトを検出します。これらのオブジェクトが検出されると、ツールはオブジェクトの色を選択します。後で、このオブジェクト固有の情報が部屋の属性(room_type、room_size、preferred_toneなど)に追加され、壁の色/テクスチャ/壁紙の予測を行うためにディープニューラルネットがトレーニングされます。最後に、これらの予測は、提供された画像から壁に視覚化されます。アイデアは、カラーコンサルタントの知識を取り入れ、壁に合った色をピッチし、家具とのコントラストを良くし、部屋のさまざまな色と調和させることです。 COCOデータセットからのYOLOオブジェクト検出の転移学習が開始点として使用され、重みは後で追加の画像のトレーニングによって微調整されました。モデルは、色を予測するために、部屋と家具の属性をリストした1000件のレコードでトレーニングされました。部屋の画像が与えられると、この方法は壁に最適な配色を見つけます。これらの予測は、画像セグメンテーションを使用して画像の壁に視覚化されます。結果は視覚的に魅力的であり、自動的に色のルックアンドフィールを向上させます。
Confused about renovating your space? Choosing the perfect color for your walls is always a challenging task. One does rounds of color consultation and several patch tests. This paper proposes an AI tool to pitch paint based on attributes of your room and other furniture, and visualize it on your walls. It makes the color selection process easy. It takes in images of a room, detects furniture objects using YOLO object detection. Once these objects have been detected, the tool picks out color of the object. Later this object specific information gets appended to the room attributes (room_type, room_size, preferred_tone, etc) and a deep neural net is trained to make predictions for color/texture/wallpaper for the walls. Finally, these predictions are visualized on the walls from the images provided. The idea is to take the knowledge of a color consultant and pitch colors that suit the walls and provide a good contrast with the furniture and harmonize with different colors in the room. Transfer learning for YOLO object detection from the COCO dataset was used as a starting point and the weights were later fine-tuned by training on additional images. The model was trained on 1000 records listing the room and furniture attributes, to predict colors. Given the room image, this method finds the best color scheme for the walls. These predictions are then visualized on the walls in the image using image segmentation. The results are visually appealing and automatically enhance the color look-and-feel.
updated: Thu Mar 18 2021 13:45:07 GMT+0000 (UTC)
published: Wed Jul 31 2019 21:02:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト