コンピューターはピアノ奏者のスキルレベルを判断できますか?この評価は、プレーヤーのパフォーマンスの視覚的分析に基づいて行うのが望ましいですか、それとも耳を信頼する必要がありますか?現在のCNNは長いビデオビデオの処理が難しいため、プレーヤーのスキルレベルを最もよく反映するために、短いクリップをどのようにサンプリングできますか?この作業では、ピアノ奏者のスキルレベルの評価に焦点を当てたマルチモーダルスキル評価のための初めてのデータセットを収集してリリースし、質問に答え、ピアノ演奏スキルの自動評価の作業を開始し、将来の作業のベースラインを提供します。データセットは、https://github.com/ParitoshParmar/Piano-Skills-Assessmentから入手できます。
Can a computer determine a piano player's skill level? Is it preferable to base this assessment on visual analysis of the player's performance or should we trust our ears over our eyes? Since current CNNs have difficulty processing long video videos, how can shorter clips be sampled to best reflect the players skill level? In this work, we collect and release a first-of-its-kind dataset for multimodal skill assessment focusing on assessing piano player's skill level, answer the asked questions, initiate work in automated evaluation of piano playing skills and provide baselines for future work. Dataset is available from: https://github.com/ParitoshParmar/Piano-Skills-Assessment.