arXiv reaDer
ワンショットの機械教示: より速く収束するためのコストが非常に少ない例
One-shot Machine Teaching: Cost Very Few Examples to Converge Faster
人工知能とは、人間のような行動を機械に教えることです。インテリジェントな教育を実現するために、機械学習コミュニティは、機械教育と呼ばれる有望なトピックについて考えるようになりました。このトピックでは、教師がターゲット モデルと特定の学習者に与えられた最適な (通常は最小限の) 教育セットを設計する必要があります。ただし、以前の作業では通常、学習者が収束するように導くために、多数の教育例と大規模な反復が必要であり、コストがかかります。このホワイト ペーパーでは、収束を高速化するために必要な例が少なくて済む、ワンショット マシン ティーチングと呼ばれる、よりインテリジェントなティーチング パラダイムを検討します。典型的な教育とは異なり、この高度なパラダイムは、教育セットからモデル パラメータへの扱いやすいマッピングを確立します。理論的には、このマッピングが全射的であることを証明します。これは、最適な教師セットの存在保証に役立ちます。次に、教育セットからパラメーターへの全射マッピングに依存して、適切な設定の下で最適な教育セットの設計戦略を開発します。そのうちの 2 つの一般的な効率指標である教育次元と反復教育次元がその 1 つです。広範な実験により、私たちの戦略の効率性が検証され、この新しい教育パラダイムの知性がさらに実証されました。
Artificial intelligence is to teach machines to take actions like humans. To achieve intelligent teaching, the machine learning community becomes to think about a promising topic named machine teaching where the teacher is to design the optimal (usually minimal) teaching set given a target model and a specific learner. However, previous works usually require numerous teaching examples along with large iterations to guide learners to converge, which is costly. In this paper, we consider a more intelligent teaching paradigm named one-shot machine teaching which costs fewer examples to converge faster. Different from typical teaching, this advanced paradigm establishes a tractable mapping from the teaching set to the model parameter. Theoretically, we prove that this mapping is surjective, which serves to an existence guarantee of the optimal teaching set. Then, relying on the surjective mapping from the teaching set to the parameter, we develop a design strategy of the optimal teaching set under appropriate settings, of which two popular efficiency metrics, teaching dimension and iterative teaching dimension are one. Extensive experiments verify the efficiency of our strategy and further demonstrate the intelligence of this new teaching paradigm.
updated: Tue Dec 13 2022 07:51:17 GMT+0000 (UTC)
published: Tue Dec 13 2022 07:51:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト