arXiv reaDer
全自動ページで実際のスコアをオンにする
Fully Automatic Page Turning on Real Scores
記号表現なしで、実際のスコア、つまりシート画像に直接作用する自動ページめくりシステムのプロトタイプを提示します。私たちのシステムは、入力として完全なシート画像ページを観察し、入ってくる音楽演奏を聞き、画像内の対応する位置を予測するマルチモーダルニューラルネットワークアーキテクチャに基づいています。システムの位置推定を使用して、単純なヒューリスティックを使用して、シート画像内の特定の場所に到達するとページめくりイベントをトリガーします。概念実証として、システムを実際のマシンと組み合わせて、コマンドでページを物理的にめくります。
We present a prototype of an automatic page turning system that works directly on real scores, i.e., sheet images, without any symbolic representation. Our system is based on a multi-modal neural network architecture that observes a complete sheet image page as input, listens to an incoming musical performance, and predicts the corresponding position in the image. Using the position estimation of our system, we use a simple heuristic to trigger a page turning event once a certain location within the sheet image is reached. As a proof of concept we further combine our system with an actual machine that will physically turn the page on command.
updated: Fri Nov 12 2021 10:23:14 GMT+0000 (UTC)
published: Fri Nov 12 2021 10:23:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト