arXiv reaDer
Branched-GAN を使用した加法クラス識別マップ
Additive Class Distinction Maps using Branched-GANs
2 つのクラスの画像間の正確な区別マップを作成するための新しいモデル、トレーニング手順、およびアーキテクチャを提示します。目的は、クラスの固有の特性をピクセル単位の解像度で理解することです。これらのマップは、Explainable AI (XAI) の新機能に加えて、自己監視セグメンテーションとオブジェクト検出を容易にします。私たちが提案するアーキテクチャは画像分解に基づいており、出力は複数の生成ネットワーク (分岐 GAN) の合計です。クラス間の区別は、専用のブランチに分離されています。このアプローチにより、各クラスの固有の特性を明確かつ正確に解釈可能な形で視覚化できます。 MRI脳腫瘍の抽出、航空写真での車の分離、女性的および男性的な顔の特徴の取得など、さまざまなタスクのいくつかのモダリティで一般的な方法を使用する方法を示します。これは、私たちの最初の調査結果と結果の暫定的なレポートです。
We present a new model, training procedure and architecture to create precise maps of distinction between two classes of images. The objective is to comprehend, in pixel-wise resolution, the unique characteristics of a class. These maps can facilitate self-supervised segmentation and objectdetection in addition to new capabilities in explainable AI (XAI). Our proposed architecture is based on image decomposition, where the output is the sum of multiple generative networks (branched-GANs). The distinction between classes is isolated in a dedicated branch. This approach allows clear, precise and interpretable visualization of the unique characteristics of each class. We show how our generic method can be used in several modalities for various tasks, such as MRI brain tumor extraction, isolating cars in aerial photography and obtaining feminine and masculine face features. This is a preliminary report of our initial findings and results.
updated: Thu May 04 2023 15:09:54 GMT+0000 (UTC)
published: Thu May 04 2023 15:09:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト