Music Impro App - challenges in developing a musical network of mobile terminals

Abstract

Det finnes mye forskning på bruken av mobiltelefon som et musikkinstrument. Derimot har det blitt gjort mindre forskning på bruk av mobile enheter til å skape et musikalsk nettverk som gir en gruppe mennesker muligheten til å samarbeide om å spille, improvisere og skape musikk på en enkel måte. Denne masteroppgaven beskriver en undersøkelse av hvordan en mobil plattform kan utnyttes til å utvikle en applikasjon for musikalsk samskaping og samarbeid. Utviklingen har blitt utført basert på den første prototypen av applikasjonen "Music Impro App". Målet har vært å realisere konseptet som er vist gjennom prototypen i en fullt fungerende mobilapplikasjon for iOS-plattformen. For å gjennomføre dette så har flere utfordringer vært nødvendige å løse. Applikasjonen må muliggjøre kommunikasjon med andre instanser i et nettverk, og musikalske parametre må koordineres og synkroniseres for å sikre en helhetlig musikalsk opplevelse. Det har blitt gjort beslutninger om nettverkstopologi, kommunikasjonsprotokoll og meldinger. Utviklingen har blitt utført i lys av begrepet "sammenkoblede musikalske nettverk". Sanntids respons er viktig i musikkutøving. Et mål har vært å ha nøyaktig synkronisering av avspilling på alle enhetene. Synkroniseringen har blitt målt for å avdekke tidsavvik. Resultatet er brukt til å diskutere mulige kilder til forsinkelse og hvordan synkroniseringen kan forbedres. Målet med studien er å beskrive hvordan systemet er utviklet, å påpeke viktige beslutninger som må gjøres under utviklingen, og å identifisere utfordringer knyttet til implementeringen av synkronisert avspilling.

A lot of research exist on using the mobile phone as a musical instrument. Unfortunately, less research has been done on using mobile devices to create a collaborative musical network that enables a group of people to easily play, improvise and create music collectively. This thesis is an investigation into how to utilize a mobile platform to develop an application for musical cocreation and collaboration. A development has been conducted based on the first prototype of the Music Impro App. The aim has been to realize the concept demonstrated by the prototype in a fully functional mobile application running on the iOS platform. To accomplish this, several challenges had to be solved. The application must enable communication with other instances in a network, and musical parameters must be coordinated and synchronized to allow a coherent musical experience. Decisions on network topology, communication protocol and messages have been made. The development has been carried out in light of the term interconnected musical networks. In a musical performance, real-time response is required. Accurate synchronization of playback on all devices has been a goal. A measurement was done on the synchronization to detect timing inaccuracies. The result was used to discuss possible sources of latency and how to make improvements to the synchronization. The aim of the study is to describe how such a system is developed, to point out the important decisions to make when constructing the system, and to identify challenges in implementing playback synchronization.