arXiv reaDer
人工マーカー除去のためのオブジェクト認識識別によるブラインドインペインティング
Blind Inpainting with Object-aware Discrimination for Artificial Marker Removal
医用画像には、医師が追加した人工マーカーが含まれていることが多く、AI ベースの診断の精度に悪影響を及ぼす可能性があります。この問題に対処し、失われたビジュアル コンテンツを回復するには、修復技術が非常に必要です。ただし、既存の修復方法ではマスクを手動で入力する必要があるため、適用シナリオが制限されます。この論文では、画像内のターゲット領域のマスクを指定せずに視覚コンテンツを自動的に完成させる、新しいブラインド修復方法を紹介します。提案されたモデルには、マスクのない再構成ネットワークとオブジェクト認識弁別器が含まれています。再構成ネットワークは、破損した領域を人工マーカーで予測し、同時に失われた視覚的内容を回復する 2 つの分岐で構成されます。オブジェクト認識弁別器は、高密度オブジェクト検出器の強力な認識機能に依存して、再構成された画像のマーカーがどのローカル領域でも検出されないようにします。その結果、再構成された画像は可能な限りクリーンな画像に近づけることができます。提案された方法は、超音波(US)、磁気共鳴画像法(MRI)、電子顕微鏡法(EM)などの複数の画像診断法をカバーするさまざまな医用画像データセットで評価され、さまざまな未知の欠落領域パターンに対して効果的で堅牢であることを示しています.
Medical images often contain artificial markers added by doctors, which can negatively affect the accuracy of AI-based diagnosis. To address this issue and recover the missing visual contents, inpainting techniques are highly needed. However, existing inpainting methods require manual mask input, limiting their application scenarios. In this paper, we introduce a novel blind inpainting method that automatically completes visual contents without specifying masks for target areas in an image. Our proposed model includes a mask-free reconstruction network and an object-aware discriminator. The reconstruction network consists of two branches that predict the corrupted regions with artificial markers and simultaneously recover the missing visual contents. The object-aware discriminator relies on the powerful recognition capabilities of the dense object detector to ensure that the markers of reconstructed images cannot be detected in any local regions. As a result, the reconstructed image can be close to the clean one as much as possible. Our proposed method is evaluated on different medical image datasets, covering multiple imaging modalities such as ultrasound (US), magnetic resonance imaging (MRI), and electron microscopy (EM), demonstrating that our method is effective and robust against various unknown missing region patterns.
updated: Mon Mar 27 2023 11:56:20 GMT+0000 (UTC)
published: Mon Mar 27 2023 11:56:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト