Teaching music notation by a game

Abstract

This thesis addresses the lack of music literacy training in rhythm games by focus- ing on sight-reading in Common Western Music Notation (CWMN). It presents a game that teaches the mapping of musical symbols and piano keys, emphasizing correct pitch recognition at all levels of notation complexity over full-piece performance. A procedu- ral generator was developed using a machine learning model trained on MusicXML data, supplying varied notation content. The game is implemented in Unity, with the generator as a Python server, and the game as its client. The game supports MIDI keyboards as well as the PC keyboard as inputs. The game with procedurally generated sheet music offers an engaging way to learn and practice reading music notation.

Tato práce se zabývá nedostatečnou výukou hudební gramotnosti v rytmických hrách a zaměřuje se na čtení moderní hudební notace. Představuje hru, která učí mapování mezi symboly hudební notace a klávesami klavíru. Klade důraz na správné rozpoznávání výšky tónu na všech úrovních složitosti notového zápisu před učením hraní celých skladeb. Byl vyvinut procedurální generátor využívající model strojového učení trénovaný na datech MusicXML, který dodává rozmanitý obsah hudební notace. Hra je implementována v Unity a generátor jako server v jazyce Python, jehož klientem je hra. Hra podporuje jako vstupy MIDI klávesy i klávesnici počítače. Hra s procedurálně generovanými notami nabízí poutavý způsob, jak se učit a procvičovat čtení notového zápisu.