既存のマルチビュー表現学習方法は通常、固有のパイプラインに従い、各ビューから潜在的な特徴を抽出し、それらを融合または整列して、統一されたオブジェクト表現を取得します。ただし、フュージョン関数を手動で事前に指定し、ビュー プライベートの冗長情報をフィーチャに混在させると、派生表現の品質が低下する可能性があります。それらを克服するために、表現が均一から特定の方法で学習される、新しいバイレベル最適化ベースのマルチビュー学習フレームワークを提案します。具体的には、メタ学習者、つまりMetaViewerをトレーニングして、フュージョンを学習し、外部レベルの最適化でビュー共有メタ表現をモデル化します。このメタ表現から始めて、ビュー固有の基本学習者は、内部レベルで対応するビューを迅速に再構築する必要があります。 MetaViewer は最終的に、すべてのビューにわたって均一から特定への再構成プロセスを観察することによって更新し、ビュー プライベート情報を分離して除外する最適な融合スキームを学習します。分類やクラスタリングなどのダウンストリーム タスクにおける広範な実験結果は、この方法の有効性を示しています。
Existing multi-view representation learning methods typically follow a specific-to-uniform pipeline, extracting latent features from each view and then fusing or aligning them to obtain the unified object representation. However, the manually pre-specify fusion functions and view-private redundant information mixed in features potentially degrade the quality of the derived representation. To overcome them, we propose a novel bi-level-optimization-based multi-view learning framework, where the representation is learned in a uniform-to-specific manner. Specifically, we train a meta-learner, namely MetaViewer, to learn fusion and model the view-shared meta representation in outer-level optimization. Start with this meta representation, view-specific base-learners are then required to rapidly reconstruct the corresponding view in inner-level. MetaViewer eventually updates by observing reconstruction processes from uniform to specific over all views, and learns an optimal fusion scheme that separates and filters out view-private information. Extensive experimental results in downstream tasks such as classification and clustering demonstrate the effectiveness of our method.