近年、学習にグラウンドトゥルースを必要としない自己教師付き単眼深度推定が注目されています。エッジデバイスに展開できるように、軽量で効果的なモデルを設計することは非常に重要です。多くの既存のアーキテクチャは、モデル サイズを犠牲にしてより重いバックボーンを使用することで恩恵を受けています。この論文では、軽量アーキテクチャで同等の結果を達成しています。具体的には、CNN と Transformer の効率的な組み合わせを調査し、ハイブリッド アーキテクチャの Lite-Mono を設計します。 Consecutive Dilated Convolutions (CDC) モジュールと Local-Global Features Interaction (LGFI) モジュールが提案されています。前者は豊富なマルチスケール ローカル フィーチャを抽出するために使用され、後者はセルフアテンション メカニズムを利用して長距離グローバル情報をフィーチャにエンコードします。実験では、トレーニング可能なパラメーターが約 80% 少なく、完全なモデルが Monodepth2 よりも精度が大幅に優れていることが示されています。
Self-supervised monocular depth estimation that does not require ground-truth for training has attracted attention in recent years. It is of high interest to design lightweight but effective models, so that they can be deployed on edge devices. Many existing architectures benefit from using heavier backbones at the expense of model sizes. In this paper we achieve comparable results with a lightweight architecture. Specifically, we investigate the efficient combination of CNNs and Transformers, and design a hybrid architecture Lite-Mono. A Consecutive Dilated Convolutions (CDC) module and a Local-Global Features Interaction (LGFI) module are proposed. The former is used to extract rich multi-scale local features, and the latter takes advantage of the self-attention mechanism to encode long-range global information into the features. Experiments demonstrate that our full model outperforms Monodepth2 by a large margin in accuracy, with about 80% fewer trainable parameters.