影響力の大きい複数のアプリケーションにまたがるビッグデータの出現により、複雑な異質性という課題に直面することがよくあります。新しく収集されたデータは通常、複数のモダリティで構成され、複数のラベルで特徴付けられるため、複数のタイプの異質性が共存します。最先端の技術は、十分なラベル情報を使用して複雑な異質性をモデル化するのに優れていますが、そのようなラベル情報を実際のアプリケーションで取得するには非常にコストがかかる可能性があり、これらの技術を使用すると最適なパフォーマンスが得られません。パフォーマンスを向上させるために豊富なラベルなしデータを利用する対照学習の機能に触発されて、この論文では、加重教師なし対照損失と加重教師あり対照損失の両方を組み合わせて複数のタイプの異質性をモデル化する、統一された異種学習フレームワークを提案します。また、提案された加重教師あり対照損失が同じクラスの2つのサンプルの相互情報量の下限であり、加重教師なし対照損失が2つのビューの非表示表現間の相互情報量の下限であることを示す理論的分析を提供します。同じサンプル。実世界のデータセットでの実験結果は、複数のタイプの不均一性をモデル化する提案された方法の有効性と効率を示しています。
With the advent of big data across multiple high-impact applications, we are often facing the challenge of complex heterogeneity. The newly collected data usually consist of multiple modalities and characterized with multiple labels, thus exhibiting the co-existence of multiple types of heterogeneity. Although state-of-the-art techniques are good at modeling the complex heterogeneity with sufficient label information, such label information can be quite expensive to obtain in real applications, leading to sub-optimal performance using these techniques. Inspired by the capability of contrastive learning to utilize rich unlabeled data for improving performance, in this paper, we propose a unified heterogeneous learning framework, which combines both weighted unsupervised contrastive loss and weighted supervised contrastive loss to model multiple types of heterogeneity. We also provide theoretical analyses showing that the proposed weighted supervised contrastive loss is the lower bound of the mutual information of two samples from the same class and the weighted unsupervised contrastive loss is the lower bound of the mutual information between the hidden representation of two views of the same sample. Experimental results on real-world data sets demonstrate the effectiveness and the efficiency of the proposed method modeling multiple types of heterogeneity.