arXiv reaDer
再考、再検討、改訂:ゼロショット学習のためのスパイラル強化自己改訂ネットワーク
Rethink, Revisit, Revise: A Spiral Reinforced Self-Revised Network for Zero-Shot Learning
ゼロショット学習(ZSL)への現在のアプローチは、複雑な相関関係をキャプチャできる一般化可能なセマンティック知識を学習するのに苦労しています。知識を再考することによって学習プロセスを強化するスパイラルカリキュラムに触発されて、属性グループのシーケンス(たとえば、色と形の組み合わせグループ)に基づいて視覚的表現を再検討するスパイラル学習の形式を提案します。スパイラル学習は、一般化されたローカル相関を学習し、モデルがグローバル学習を徐々に強化して、複雑な相関を理解できるようにすることを目的としています。私たちの実装は、プレビューとレビューという2段階のReinforced Self-Revised(RSR)フレームワークに基づいています。 RSRは、最初に視覚情報をプレビューして、弱く監視された方法で多様な属性グループを構築します。次に、属性グループに基づいて洗練されたローカリティをスパイラルに学習し、ローカリティを使用してグローバルなセマンティック相関を修正します。私たちのフレームワークは、ゼロショットと一般化されたゼロショット設定の両方で、4つのベンチマークデータセットの最先端のアルゴリズムよりも優れています。これは、一般化可能で複雑な相関関係の学習におけるスパイラル学習の有効性を示しています。また、広範な分析を実施して、属性グループと強化された意思決定プロセスが補完的なセマンティック情報をキャプチャして、予測を改善し、説明を容易にすることができることを示します。
Current approaches to Zero-Shot Learning (ZSL) struggle to learn generalizable semantic knowledge capable of capturing complex correlations. Inspired by Spiral Curriculum, which enhances learning processes by revisiting knowledge, we propose a form of spiral learning which revisits visual representations based on a sequence of attribute groups (e.g., a combined group of color and shape). Spiral learning aims to learn generalized local correlations, enabling models to gradually enhance global learning and thus understand complex correlations. Our implementation is based on a 2-stage Reinforced Self-Revised (RSR) framework: preview and review. RSR first previews visual information to construct diverse attribute groups in a weakly-supervised manner. Then, it spirally learns refined localities based on attribute groups and uses localities to revise global semantic correlations. Our framework outperforms state-of-the-art algorithms on four benchmark datasets in both zero-shot and generalized zero-shot settings, which demonstrates the effectiveness of spiral learning in learning generalizable and complex correlations. We also conduct extensive analysis to show that attribute groups and reinforced decision processes can capture complementary semantic information to improve predictions and aid explainability.
updated: Wed Dec 01 2021 10:51:57 GMT+0000 (UTC)
published: Wed Dec 01 2021 10:51:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト