arXiv reaDer
不確実性を意識したマルチビュー表現学習
Uncertainty-Aware Multi-View Representation Learning
さまざまなデータビューから、それらの間の基礎となる補足情報を探索することによって学習することで、表現に強力な表現力を与えることができます。ただし、高次元の特徴にはノイズが含まれる傾向があり、さらに、データの品質は通常、サンプルごとに異なります(ビューが異なる場合でも)。つまり、あるビューは1つのサンプルに役立つ場合がありますが、別のサンプルには当てはまりません。したがって、教師なし設定でマルチビューのノイズの多いデータを統合することは非常に困難です。従来のマルチビュー方式では、各ビューを同じ重要度で処理するか、さまざまなビューの重みを固定値に調整します。これは、マルチビューデータの動的ノイズをキャプチャするには不十分です。この作業では、動的不確実性認識ネットワーク(DUA-Nets)と呼ばれる新しい教師なしマルチビュー学習アプローチを考案します。生成の観点から推定されたデータの不確実性に導かれて、複数のビューからの固有の情報が統合され、ノイズのない表現が得られます。不確実性の助けを借りて、DUA-Netはデータ品質に従って個々のサンプルの各ビューを重み付けし、ノイズの多いサンプル(またはビュー)からの影響を軽減しながら、高品質のサンプル(またはビュー)を十分に活用できるようにします。私たちのモデルは、広範な実験で優れたパフォーマンスを実現し、ノイズの多いデータに対する堅牢性を示しています。
Learning from different data views by exploring the underlying complementary information among them can endow the representation with stronger expressive ability. However, high-dimensional features tend to contain noise, and furthermore, the quality of data usually varies for different samples (even for different views), i.e., one view may be informative for one sample but not the case for another. Therefore, it is quite challenging to integrate multi-view noisy data under unsupervised setting. Traditional multi-view methods either simply treat each view with equal importance or tune the weights of different views to fixed values, which are insufficient to capture the dynamic noise in multi-view data. In this work, we devise a novel unsupervised multi-view learning approach, termed as Dynamic Uncertainty-Aware Networks (DUA-Nets). Guided by the uncertainty of data estimated from the generation perspective, intrinsic information from multiple views is integrated to obtain noise-free representations. Under the help of uncertainty, DUA-Nets weigh each view of individual sample according to data quality so that the high-quality samples (or views) can be fully exploited while the effects from the noisy samples (or views) will be alleviated. Our model achieves superior performance in extensive experiments and shows the robustness to noisy data.
updated: Sat Jan 15 2022 07:16:20 GMT+0000 (UTC)
published: Sat Jan 15 2022 07:16:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト