arXiv reaDer
気管支鏡による深さ推定のための敵対的ドメイン特徴の適応
Adversarial Domain Feature Adaptation for Bronchoscopic Depth Estimation
単眼画像からの深度推定は、気管支鏡ナビゲーションのローカリゼーションおよび3D再構成パイプラインにおける重要なタスクです。さまざまな教師ありおよび自己教師ありの深層学習ベースのアプローチが、自然画像のこのタスクで証明されています。ただし、ラベル付けされたデータの欠如と気管支組織の特徴の乏しいテクスチャにより、これらの方法の利用は気管支鏡のシーンでは効果がありません。この作業では、代替のドメイン適応アプローチを提案します。私たちの新しい2段階構造は、最初に、教師ありの方法でラベル付けされた合成画像を使用して深度推定ネットワークをトレーニングします。次に、教師なしの敵対的ドメイン機能適応スキームを採用して、実際の画像のパフォーマンスを向上させます。我々の実験の結果は、提案された方法が実像でのネットワークの性能をかなりのマージンで改善し、3D再構成パイプラインで使用できることを示しています。
Depth estimation from monocular images is an important task in localization and 3D reconstruction pipelines for bronchoscopic navigation. Various supervised and self-supervised deep learning-based approaches have proven themselves on this task for natural images. However, the lack of labeled data and the bronchial tissue's feature-scarce texture make the utilization of these methods ineffective on bronchoscopic scenes. In this work, we propose an alternative domain-adaptive approach. Our novel two-step structure first trains a depth estimation network with labeled synthetic images in a supervised manner; then adopts an unsupervised adversarial domain feature adaptation scheme to improve the performance on real images. The results of our experiments show that the proposed method improves the network's performance on real images by a considerable margin and can be employed in 3D reconstruction pipelines.
updated: Fri Sep 24 2021 08:11:34 GMT+0000 (UTC)
published: Fri Sep 24 2021 08:11:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト