ジェネレーティブ テクノロジーの目覚ましい進歩にもかかわらず、Janus が直面している知的財産保護と悪意のあるコンテンツの監視の問題が発生しています。合成画像を一連の潜在的なソース モデルに帰属させることにより、合成画像を管理するための努力が払われてきました。ただし、クローズド セットの分類設定は、任意のモデルによって生成されたコンテンツを処理するための実際のシナリオでのアプリケーションを制限します。この研究では、挑戦的なタスク、つまり Open-Set Model Attribution (OSMA) に焦点を当て、画像を既知のモデルに帰属させ、未知のモデルからそれらを識別することを同時に行います。セマンティックな新規性に焦点を当てた既存のオープン セット認識 (OSR) タスクと比較して、OSMA は、既知のモデルと未知のモデルの画像の区別が視覚的に認識できない痕跡にしか存在しない可能性があるため、より困難です。この目的のために、私たちはプログレッシブ オープン スペース拡張 (POSE) ソリューションを提案します。これは、クローズド セットのサンプルと同じセマンティクスを維持しながら、異なる知覚できないトレースが埋め込まれたオープン セットのサンプルをシミュレートします。多様性の制約によって導かれるオープン スペースは、一連の軽量拡張モデルによって徐々にシミュレートされます。 3 つの現実世界のシナリオを検討し、さまざまなランダム シード、アーキテクチャ、および既知のものからのデータセットでトレーニングされた未知のモデルを含む、OSMA ベンチマーク データセットを構築します。データセットでの広範な実験により、POSE が既存のモデル帰属方法と市販の OSR 方法の両方よりも優れていることが実証されています。
Despite the remarkable progress in generative technology, the Janus-faced issues of intellectual property protection and malicious content supervision have arisen. Efforts have been paid to manage synthetic images by attributing them to a set of potential source models. However, the closed-set classification setting limits the application in real-world scenarios for handling contents generated by arbitrary models. In this study, we focus on a challenging task, namely Open-Set Model Attribution (OSMA), to simultaneously attribute images to known models and identify those from unknown ones. Compared to existing open-set recognition (OSR) tasks focusing on semantic novelty, OSMA is more challenging as the distinction between images from known and unknown models may only lie in visually imperceptible traces. To this end, we propose a Progressive Open Space Expansion (POSE) solution, which simulates open-set samples that maintain the same semantics as closed-set samples but embedded with different imperceptible traces. Guided by a diversity constraint, the open space is simulated progressively by a set of lightweight augmentation models. We consider three real-world scenarios and construct an OSMA benchmark dataset, including unknown models trained with different random seeds, architectures, and datasets from known ones. Extensive experiments on the dataset demonstrate POSE is superior to both existing model attribution methods and off-the-shelf OSR methods.