Forskere ved Universitetet i Oslo har utviklet helt ny programvare som gjør det mulig for deg å lage din egen personlige vri på musikken.

– Med det nye systemet kan du bruke smarttelefonen og bevegelsene dine til å styre hvordan moderne komposisjoner skal høres ut, sier postdoktor Kristian Nymoen ved Institutt for informatikk.

– Komponistens oppgave blir å lage et musikklandskap med mange musikalske overganger. Så styrer du hvilke musikalske overganger du ønsker å bevege deg i. Du skal altså selv kunne bestemme hvordan du vil vandre innenfor de ulike lydlandskapene, forteller postdoktor Nymoen, som også har en mastergrad i musikkvitenskap.

Systemet skal også kunne fange opp det musikkbildet du liker.

– Ved å utnytte sensorene i smarttelefonen din, kan du etter hvert lage dine egne musikkuttrykk som er tilpasset humøret ditt.

Poenget er at alle smarttelefoner har sensorer som gjenkjenner bevegelse. Sensorene i mobilen kan tolke hvordan du beveger deg.

– Måten du beveger deg på, kan si noe om humøret ditt. Når du er i godt humør, beveger du deg annerledes enn når du er i dårlig humør. Vi ønsker derfor at teknologien skal sanse hvordan du er som person og legge til rette for at du får det du ønsker deg med den sinnsstemningen du er i akkurat nå, sier Nymoen.

Hvis du er sur og grinete, kan du få musikk som motarbeider stemningen.

– Mobilen kan da lage musikk som enten forsterker eller stopper følelsene dine.

For å gi en enda bedre beskrivelse av kroppsbevegelsene, bruker forskerne en sensor som kan registrere fotbevegelsene og trykket i skoen, kombinert med en utregningsmetode som analyserer hvordan du går.

Inspirert av naturen

For å komme i mål med persontilpasset musikk, har forskerne latt seg inspirere av naturen.

De har blant annet laget appen Pheromusic som gjør det mulig for deg å bestemme hvordan musikkbildet skal endre seg, på samme måte som maur går etter spesielle luktstoffer for å sanke mat.

Maur legger igjen luktstoffer på stien, slik at andre maur kan finne veien til matfatet. Desto flere maur på stien, desto større mengder luktstoff. Etter hvert vil maurene finne et nytt område med mat. Da vil luktstoffene på stien til det gamle matfatet gradvis fordampe. Mengden lukt på stien er derfor avhengig av mengden mat.

– Vi har brukt det samme prinsippet til å lage en regel om hvordan lytteren beveger seg mellom lydlandskaper, forteller Nymoen.

Lytteren kan bruke smarttelefonen til å legge på «luktstoffer» på overganger mellom lydbilder. Jo flere «luktstoffer», desto større er sannsynligheten for at musikken skifter mellom disse lydbildene.

– Vi kan også legge inn en «fordampingsfunksjon» som gjør at disse overgangene forvitrer hvis brukeren ikke gjør et aktivt grep og legger på enda flere «luktstoffer».

Det betyr: Komponisten setter rammen, mens brukeren kan styre musikken innenfor denne rammen.

– Utfordringen er å gjøre dette musikalsk samtidig som vi må greie å finne en metode som ikke krever for mye regnekraft, sier Nymoen.

Påvirker konsertarena

Forskerne har også laget et eget musikalsk system for smarttelefonen, der de har latt seg inspirere av ildfluer. Ildfluer har lysende haler. De blitzer samtidig. Ildfluene har med andre ord en mekanisme som gjør at de kan synkronisere blitzingen.

Forskerne vil bruke denne ideen til å få mange smarttelefoner til å samarbeide uten at smarttelefonene styres fra en sentral enhet.

– Vi kan bruke lyden fra hver enkelt smarttelefon til å få dem til å synkronisere med hverandre. Den enkelte telefonen skal lytte og bruke kunnskapen den fanger, til å komme i synk med de andre, sier Nymoen.

Da kan alle smarttelefonene på en konsertarena brukes som høyttalere. Og som om dette ikke er nok: Smarttelefonen din kan også brukes, sammen med alle de andre smarttelefonene til resten av publikum, til å påvirke musikken på en scene.

– Selv om vi foreløpig bare har laget et system som skal fungere for noen få brukere, er det spennende å tenke seg hvordan systemet kan brukes i en sal med mange mennesker. Tenk deg en konsert med hundrevis av deltakere: Hvis mange nok rister på telefonen samtidig, kan publikum også påvirke lyden fra selve hovedhøyttaleren, poengterer Nymoen.