arXiv reaDer
ProtoAttend: Attention-Based Prototypical Learning
  プロトタイプと呼ばれるいくつかの関連する例に基づいて決定を下す、本質的に解釈可能な新しい機械学習方法を提案します。 ProtoAttendの方法は、事前に訓練されたモデルを含む広範なニューラルネットワークアーキテクチャに統合できます。プロトタイプを決定するために、エンコードされた表現をサンプルに関連付けるアテンションメカニズムを利用します。結果として得られるモデルは、元のモデルの精度を犠牲にすることなく、3つの影響の大きい問題で最新技術を上回っています。 (2)プロトタイプラベル全体の不一致を定量化することにより、最先端の信頼性推定を実現します。 (3)分布不一致検出の最新技術を取得します。これはすべて、最小限の追加テスト時間と実用的なトレーニング時間の計算コストで実現できます。
We propose a novel inherently interpretable machine learning method that bases decisions on few relevant examples that we call prototypes. Our method, ProtoAttend, can be integrated into a wide range of neural network architectures including pre-trained models. It utilizes an attention mechanism that relates the encoded representations to samples in order to determine prototypes. The resulting model outperforms state of the art in three high impact problems without sacrificing accuracy of the original model: (1) it enables high-quality interpretability that outputs samples most relevant to the decision-making (i.e. a sample-based interpretability method); (2) it achieves state of the art confidence estimation by quantifying the mismatch across prototype labels; and (3) it obtains state of the art in distribution mismatch detection. All this can be achieved with minimal additional test time and a practically viable training time computational cost.
updated: Thu Sep 26 2019 01:39:46 GMT+0000 (UTC)
published: Sun Feb 17 2019 17:12:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト