データの変動の要因を明らかにする、解釈可能で人間が制御可能な表現を学習することは、表現学習における継続的な重要な課題であり続けます。弱い監督を持つ要因のグループの学習グループ解きほぐされた表現を調査します。この課題に対処するための既存の手法は、共有グループの観測値を平均化することにより、おおよその事後を制約するだけです。その結果、共通のバリエーションのセットを持つ観測値は、別個の潜在表現にエンコードされ、解きほぐして下流のタスクに一般化する能力が低下します。以前の作品とは対照的に、一貫性のある解きほぐされた表現を強制するために、共有潜在表現全体でシンプルで効果的なカルバックライブラー(KL)発散ベースの正則化であるGroupVAEを提案します。私たちは徹底的な評価を行い、GroupVAEがグループの解きほぐしを大幅に改善することを実証します。さらに、学習グループの解きほぐされた表現は、公正な分類や、再構成、分類、転移学習などの3D形状関連タスクを含む下流のタスクを改善し、教師あり方法と競合することを示します。
Learning interpretable and human-controllable representations that uncover factors of variation in data remains an ongoing key challenge in representation learning. We investigate learning group-disentangled representations for groups of factors with weak supervision. Existing techniques to address this challenge merely constrain the approximate posterior by averaging over observations of a shared group. As a result, observations with a common set of variations are encoded to distinct latent representations, reducing their capacity to disentangle and generalize to downstream tasks. In contrast to previous works, we propose GroupVAE, a simple yet effective Kullback-Leibler (KL) divergence-based regularization across shared latent representations to enforce consistent and disentangled representations. We conduct a thorough evaluation and demonstrate that our GroupVAE significantly improves group disentanglement. Further, we demonstrate that learning group-disentangled representations improve upon downstream tasks, including fair classification and 3D shape-related tasks such as reconstruction, classification, and transfer learning, and is competitive to supervised methods.