arXiv reaDer
シングルステージ検出器によるインスタンスシャドウ検出
Instance Shadow Detection with A Single-Stage Detector
この論文では、新しい問題であるインスタンスシャドウ検出を定式化します。これは、入力画像に各シャドウを投影するシャドウインスタンスと関連するオブジェクトインスタンスを検出することを目的としています。このタスクに取り組むために、最初に、シャドウインスタンス、オブジェクトインスタンス、およびシャドウオブジェクトの関連付けのマスクを使用して新しいデータセットをコンパイルします。次に、インスタンスシャドウ検出のパフォーマンスを定量的に評価するための評価メトリックを設計します。さらに、エンドツーエンドでインスタンスシャドウ検出を実行するシングルステージ検出器を設計します。ここでは、双方向関係学習モジュールと変形可能なマスクIoUヘッドが検出器に提案され、シャドウインスタンスとオブジェクトインスタンスの関係を直接学習します。予測されたマスクの精度を向上させるため。最後に、インスタンスシャドウ検出のベンチマークデータセットでメソッドを定量的および定性的に評価し、光の方向の推定と写真編集でのメソッドの適用性を示します。
This paper formulates a new problem, instance shadow detection, which aims to detect shadow instance and the associated object instance that cast each shadow in the input image. To approach this task, we first compile a new dataset with the masks for shadow instances, object instances, and shadow-object associations. We then design an evaluation metric for quantitative evaluation of the performance of instance shadow detection. Further, we design a single-stage detector to perform instance shadow detection in an end-to-end manner, where the bidirectional relation learning module and the deformable maskIoU head are proposed in the detector to directly learn the relation between shadow instances and object instances and to improve the accuracy of the predicted masks. Finally, we quantitatively and qualitatively evaluate our method on the benchmark dataset of instance shadow detection and show the applicability of our method on light direction estimation and photo editing.
updated: Mon Jul 11 2022 04:15:42 GMT+0000 (UTC)
published: Mon Jul 11 2022 04:15:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト