arXiv reaDer
K-way Disjointマスキングを使用した一貫性正則化による単眼深度推定の半教師付き学習
Semi-Supervised Learning of Monocular Depth Estimation via Consistency Regularization with K-way Disjoint Masking
半教師あり学習 (SSL) は、画像分類、オブジェクト検出、セマンティック セグメンテーションなど、通常はグラウンド トゥルースを構築するために多くの労力を必要とするさまざまな分野で成功を収めています。特に深度推定タスクでは、トレーニング データに注釈を付けるには非常にコストと時間がかかるため、最近の SSL 体制は魅力的なソリューションのようです。この論文では、初めて、一貫性の正則化を使用して大規模なグラウンドトゥルース深度データへの依存を軽減する、単眼深度推定ネットワークの半教師あり学習のための新しいフレームワークを紹介します。 K-way分離マスキングと呼ばれる新しいデータ拡張アプローチを提案します。これにより、モデルが摂動に対して堅牢になるだけでなく、グローバルに一貫した出力深度マップを生成するように、ネットワークが非表示領域を再構築する方法を学習できます。 KITTI および NYU-Depth-v2 データセットでの実験は、パイプラインの各コンポーネントの有効性、ますます少ない注釈付き画像の使用に対する堅牢性、および他の最先端の半教師あり方法と比較して優れた結果を示しています単眼深度推定用。コードは https://github.com/KU-CVLAB/MaskingDepth で入手できます。
Semi-Supervised Learning (SSL) has recently accomplished successful achievements in various fields such as image classification, object detection, and semantic segmentation, which typically require a lot of labour to construct ground-truth. Especially in the depth estimation task, annotating training data is very costly and time-consuming, and thus recent SSL regime seems an attractive solution. In this paper, for the first time, we introduce a novel framework for semi-supervised learning of monocular depth estimation networks, using consistency regularization to mitigate the reliance on large ground-truth depth data. We propose a novel data augmentation approach, called K-way disjoint masking, which allows the network for learning how to reconstruct invisible regions so that the model not only becomes robust to perturbations but also generates globally consistent output depth maps. Experiments on the KITTI and NYU-Depth-v2 datasets demonstrate the effectiveness of each component in our pipeline, robustness to the use of fewer and fewer annotated images, and superior results compared to other state-of-the-art, semi-supervised methods for monocular depth estimation. Our code is available at https://github.com/KU-CVLAB/MaskingDepth.
updated: Thu Dec 22 2022 02:37:48 GMT+0000 (UTC)
published: Wed Dec 21 2022 06:56:22 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト