arXiv reaDer
ディープラーニングが心を変えるとき:アクティブラーニングの学習ダイナミクス
When Deep Learners Change Their Mind: Learning Dynamics for Active Learning
アクティブラーニングは、学習アルゴリズムのパフォーマンスを最大に向上させる注釈付きのサンプルを選択することを目的としています。多くの方法は、サンプルの有益性を測定することによってこの問題に取り組み、サンプルのネットワーク予測の確実性に基づいてこれを行います。ただし、ニューラルネットワークはその予測に過度に自信を持っているため、サンプルの有益性を評価するための信頼できない情報源であることはよく知られています。本論文では、新しい有益性に基づく能動学習法を提案する。私たちの尺度は、ニューラルネットワークの学習ダイナミクスから導き出されます。より正確には、アルゴリズムのトレーニング中に、ラベルなしデータプールのラベル割り当てを追跡します。ラベル分散と呼ばれるメトリックを使用して学習ダイナミクスをキャプチャします。これは、ネットワークのトレーニング中にネットワークがサンプルに同じラベルを一貫して割り当てる場合は低く、割り当てられたラベルが頻繁に変更される場合は高くなります。ラベル分散がネットワークの不確実性の有望な予測因子であることを示し、ラベル分散に基づく能動学習アルゴリズムが優れた結果を取得することを2つのベンチマークデータセットで示します。
Active learning aims to select samples to be annotated that yield the largest performance improvement for the learning algorithm. Many methods approach this problem by measuring the informativeness of samples and do this based on the certainty of the network predictions for samples. However, it is well-known that neural networks are overly confident about their prediction and are therefore an untrustworthy source to assess sample informativeness. In this paper, we propose a new informativeness-based active learning method. Our measure is derived from the learning dynamics of a neural network. More precisely we track the label assignment of the unlabeled data pool during the training of the algorithm. We capture the learning dynamics with a metric called label-dispersion, which is low when the network consistently assigns the same label to the sample during the training of the network and high when the assigned label changes frequently. We show that label-dispersion is a promising predictor of the uncertainty of the network, and show on two benchmark datasets that an active learning algorithm based on label-dispersion obtains excellent results.
updated: Fri Jul 30 2021 15:30:17 GMT+0000 (UTC)
published: Fri Jul 30 2021 15:30:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト