arXiv reaDer
ハイブリッドスキップ:生物学的に着想を得たUNetアーキテクチャのスキップ接続
Hybrid Skip: A Biologically Inspired Skip Connection for the UNet Architecture
この作品では、2つの画像を同時にエンコードする画像であるハイブリッド画像の知覚的錯覚に依存する、生物学的に着想を得たUNetアーキテクチャの長距離スキップ接続を紹介します。初期のエンコーダー機能とより深いデコーダー機能の融合により、UNetモデルはよりきめ細かい高密度の予測を生成できます。セグメンテーションタスクで証明されていますが、これらの長距離スキップ接続がさらにテクスチャ転送アーティファクトをもたらすため、ネットワークの利点は高密度回帰タスクに対してダウンウェイトされます。特に深度推定の場合、これは滑らかさを損ない、深度マップの区分的に滑らかな性質のためにタスクに有害な誤検知エッジを導入します。提案されたHybridSkip接続は、エッジの保存と、滑らかさを損なうテクスチャ転送アーティファクトの最小化との間のトレードオフのバランスをとる上で、パフォーマンスが向上していることを示しています。これは、Hybrid-Skip接続が高周波数と低周波数、エンコーダーとデコーダーの機能の間でそれぞれ提供する情報の適切でバランスの取れた交換によって達成されます。
In this work we introduce a biologically inspired long-range skip connection for the UNet architecture that relies on the perceptual illusion of hybrid images, being images that simultaneously encode two images. The fusion of early encoder features with deeper decoder ones allows UNet models to produce finer-grained dense predictions. While proven in segmentation tasks, the network's benefits are down-weighted for dense regression tasks as these long-range skip connections additionally result in texture transfer artifacts. Specifically for depth estimation, this hurts smoothness and introduces false positive edges which are detrimental to the task due to the depth maps' piece-wise smooth nature. The proposed HybridSkip connections show improved performance in balancing the trade-off between edge preservation, and the minimization of texture transfer artifacts that hurt smoothness. This is achieved by the proper and balanced exchange of information that Hybrid-Skip connections offer between the high and low frequency, encoder and decoder features, respectively.
updated: Mon Jul 11 2022 09:00:09 GMT+0000 (UTC)
published: Mon Jul 11 2022 09:00:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト