arXiv reaDer
1つの表現のみを学習します:複数のタスクのための統合ネットワーク
You Only Learn One Representation: Unified Network for Multiple Tasks
人々は、視覚、聴覚、触覚、そして過去の経験を通じて世界を「理解」します。人間の経験は、通常の学習(形式知と呼びます)または無意識のうちに(暗黙知と呼びます)学習することができます。通常の学習を通じて、または無意識のうちに学習されたこれらの経験は、エンコードされて脳に保存されます。これらの豊富な経験を巨大なデータベースとして活用することで、人間はこれまで目に見えなかったデータでも効果的に処理することができます。本論文では、人間の脳が通常の学習と潜在意識の学習から知識を学習できるように、暗黙知と形式知を一緒にエンコードする統合ネットワークを提案します。統合ネットワークは、さまざまなタスクを同時に処理するための統合表現を生成できます。畳み込みニューラルネットワークでカーネル空間の調整、予測の改良、マルチタスク学習を実行できます。結果は、暗黙知がニューラルネットワークに導入されると、すべてのタスクのパフォーマンスに利益をもたらすことを示しています。提案された統合ネットワークから学習した暗黙の表現をさらに分析し、さまざまなタスクの物理的な意味を捉える優れた能力を示しています。この作品のソースコードはhttps://github.com/WongKinYiu/yolorにあります。
People ``understand'' the world via vision, hearing, tactile, and also the past experience. Human experience can be learned through normal learning (we call it explicit knowledge), or subconsciously (we call it implicit knowledge). These experiences learned through normal learning or subconsciously will be encoded and stored in the brain. Using these abundant experience as a huge database, human beings can effectively process data, even they were unseen beforehand. In this paper, we propose a unified network to encode implicit knowledge and explicit knowledge together, just like the human brain can learn knowledge from normal learning as well as subconsciousness learning. The unified network can generate a unified representation to simultaneously serve various tasks. We can perform kernel space alignment, prediction refinement, and multi-task learning in a convolutional neural network. The results demonstrate that when implicit knowledge is introduced into the neural network, it benefits the performance of all tasks. We further analyze the implicit representation learnt from the proposed unified network, and it shows great capability on catching the physical meaning of different tasks. The source code of this work is at : https://github.com/WongKinYiu/yolor.
updated: Mon May 10 2021 09:03:11 GMT+0000 (UTC)
published: Mon May 10 2021 09:03:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト