Konsert for joystick og fullt orkester

Hva er forholdet mellom bevegelse og lyd? Og hvordan kan bevegelse brukes til ? lage musikk med et webkamera, en joystick eller h?ndkonsollen til et dataspill? Dette forsker Alexander Refsum Jensenius p?.

Av Johannes W. L?vhaug
Publisert 1. feb. 2012

NY MUSIKK: Med h?ndkonsollen til et dataspill og fingrene over et webkamera, lager Alexander Refsum Jensenius nye klanger. Foto: Ola S?ther(?)

Alexander Refsum Jensenius sitter og flagrer med fem fingre foran et lite webkamera. I den andre h?nden holder han en elektronisk penn som han lager dramatiske krusseduller med p? en elektronisk skriveflate. Slikt blir det musikk av. Jensenius er stipendiat ved Institutt for musikk og teater, men er ogs? ut?vende musiker. Selv om han fortsatt kan sette seg ned p? krakken foran et helt vanlig piano, er det andre h?yteknologiske virkemidler han helst bruker for ? lage lyd. Favorittinstrumentene er en joystick eller h?ndkonsollen til et dataspill, en s?kalt gamepad. Eller webkameraet og den elektroniske skriveflaten. Eller ganske enkelt en laptop. Poenget for Jensenius er ? utforske forholdet mellom bevegelse og lyd for s? ? bruke bevegelse til ? lage lyd ved hjelp av hverdagslig hitech-utstyr. P? ?rets 澳门葡京手机版app下载storg viser han fram sine musikalske leket?y.

Naturlig lyd

– Jeg er opptatt av forholdet mellom menneskelige gester og lyd. Vi lager lyd hele tiden og er omgitt av lyd. Alle lyder i naturen kommer etter en bevegelse, for eksempel lyden av et n?kkelknippe som faller i bakken. Vi vet mye om slik lyd. Dette er fordi vi gjennom oppveksten og seinere har utviklet et stort "mentalt register" over lyder, deres klangfarger og tilh?rende bevegelser. Vi beh?ver for eksempel ikke se at n?kkelknippet faller for ? vite hva som har for?rsaket lyden. Kanskje vi til og med kan si noe om hvor mange n?kler det var p? knippet og fra hvilken h?yde det falt uten ? ha sett det. Samtidig kan vi se en bevegelse uten ? h?re en lyd, men vi vil likevel forvente at det kommer en bestemt lyd etter bevegelsen, forteller Jensenius.

Og siden lyd unektelig er grunnsteinen i all musikk, har studiet av bevegelse og lyd relevans for musikkforskeren Jensenius. Hans doktorgradsprosjekt er tredelt. For ? studere forholdet mellom bevegelse og lyd, tar Jensenius blant annet i bruk videoanalyse. Med bruk av digital video og infrar?de kameraer m?ler han bevegelse i et rom og kobler det til lydhendelsene som kommer etterp?. Slik finner han ut hvordan korrelasjonen mellom lyd og bevegelse er. P? bakgrunn av disse analysene lager han fysiske modeller for bevegelse og lyd.

– Det er gjort noen studier p? dette innen fysikk og psykologi, men innen musikkvitenskapen er dette nytt. B?de bevegelse og lyd er studert tidligere hver for seg, men oppsiktsvekkende f? har fors?kt ? se disse to fenomenene i sammenheng, sier Jensenius, som har matematikk, fysikk, informatikk og musikk i fagkretsen. Egentlig hadde han tenkt ? bli astrofysiker, men endte alts? som musikkforsker i stedet.

Intuitiv forst?else

Det siste ledd i prosjektet er ? bruke de fysiske modellene av bevegelse og lyd til ? lage musikk. Og det er her joysticken og de andre hjelpemidlene kommer inn. Ved ? skape bevegelse – for eksempel skyve joysticken raskt fram og dra den sakte tilbake til venstre – lager man lyd av en bestemt karakter.

– Spillkonsollen er kjempefin til ? styre lyd med. M?let er at bevegelsene vi gj?r og lyden som kommer, skal henge naturlig sammen, at de skal v?re et mest mulig intuitivt forhold mellom bevegelsen og lyden. Dette forholdet finner jeg ved ? studere bevegelse og lyd slik vi hele tiden opplever det rundt oss, forteller Jensenius, som kaller dette for intuitive parametere.

Gjennom dataprogrammer gjenskapes bevegelsen til lyd i henhold til disse parameterene. N?r Jensenius vifter med fingrene foran et webkamera, registreres bevegelsen til fingrene og h?nda som kaster seg fram og tilbake, opp og ned, og alt dette blir fortolket via datamaskinen til lyd.

– Poenget er at dette ikke blir mekanisk, men fungerer ”live”. Vi m? ikke miste den levende dynamikken som finnes i all musikk. Men med bruk av denne teknologien ?pner det seg helt nye lydbilder enn i tradisjonell musikk. Det utvikles helt nye klanger, forklarer Jensenius.

Han sier at man i nyere musikk er mer fokusert p? klangfarger. Og det er her joysticken kommer inn i bildet. Under ?rets Ultima-festival spiller Jensenius en konsert sammen med Oslo Simfonietta hvor han styrer lydbildet med, nettopp, en joystick. Han spiller ogs? jevnlig konserter med ”laptop-orkestre” i forskjellige sammenhenger.

Fakta

Musikk og bevegelse

Alexander Jensenius er en av forskerne knyttet til prosjektet ”Musical Gestures” ved Institutt for musikk og teater ved Universitetet i Oslo. Dette prosjektet startet i sommer og unders?ker forbindelsen mellom musikk og bevegelser. Fire vitenskapelige ansatte og to stipendiater er knyttet til prosjektet som ledes av professor Rolf Inge God?y.

Se: www.hf.uio.no/imt/forskning/musicalgestures/

Emneord: Spr?k og kultur, Musikkvitenskap
Publisert 1. feb. 2012 12:01 - Sist endret 7. nov. 2025 15:09