fourMs-lab

«fourMs-lab'en (Music, Mind, Motion, Machines)  er det eneste laboratoriet i Norge for å kombinere flerkanal-opptak av lyd og bilde sammen med bevegelsessporing og fysiologiske målinger. Det er også mulig å gjøre sonifisering av data i sann tid over en multikanals høytalerrigg. Lab'en er bygget som en fleksibel "black box", hvor det er mulig å holde mindre konserter med et publikum. Dette brukes til både observasjons- og intervensjonsstudier.»

Fysiske lokaler og utstyr/kamera-løsninger

Det stasjonære laboratoriet er utstyrt med et QUALISYS Motion Capture system med 11 infrarøde kameraer (7 Oqus300, 1 Oqus310, 4 Oqus400). Kameraene har opp til 500 FPS i full oppløsning og kan komme helt opp i 10 000 FPS ved redusert oppløsning. Kameraene kan også fange video og kalkulerer markørenes posisjon i sann tid før data sendes trådløst både inne i laboratoriet og ute i felt. Laboratoriet bruker QUALISYS sitt eget program hvor lisensen ligger på lokal server. QUALISYS er et proprietært system men som tillater eksport av både .tsv- og .csv – filer. Motion Capture laben har også 4 Cannon HD videokameraer men ser for seg en oppgradering til kameraer som kan ta 240 FPS. Lyden i Motion Capture datasettene kommer fra kameraene, men laben har også avanserte  mikrofoner til å ta opp eventuelle lydspor da laben tar opp mye musikk.

fourMs-laben har, i tillegg, portable laber med 8 stk Optitrack Flex 13 kameraer som har tilsvarende funksjonalitet som QUALISYS kameraene i den stasjonære laben bortsett fra at rekkevidden på kameraene er halvert og at kameraene har maksimum 120 FPS.

Laboratoriet har også portable eyetracker laber fra Pupil Labs. 4 stk kit pupil core headset med 200 Hrtz sampling frekvens på eyetrackeren og 30 hrtz ved 1080 oppløsning på videokameraet (60hrtz@720p og 120hrtz@480p). En kan låne rimeligere AIX eyetrackers som har opp til 60 hrtz samplingfrekvens. Laboratoriet har også mer stasjonære eyetrackers som fungerer som en list under skjermen med samplingfrekvens opp til 1200 hrtz. I tillegg har laben 360 graders kameraer som kan lånes eller leies ut avhengig av tilhørigheten til leietaker.

Laben har også mange biometriske måleapparater som måler muskelspenning, pust, svette, blodtrykk og annet.

Data, lagring og datahåndtering

Forskere ved fourMs-lab kan selv velge navngivings strategi av filer så lenge de ikke bruker spesialtegn eller personidentifiserende informasjon i filnavnet. Metadata blir håndtert ved at forskningspersonell manuelt fyller ut en tekstfil med metadata etter Dublin Core metadatastandard. Datastrømmene er komplekse og sammensatt av mange forskjellige datatyper fra forskjellige instrumenter. Dataene til fourMs-lab er for det meste gule.

Nøkkelkompetanse / UiO-oppgaver

fourMs-lab har fått internasjonal annerkjennelse for innovativ forskning og arbeid mot åpen forskning og FAIR datahåndtering i tråd med Universitetets strategier. Laben har også nøkkelkompetanse i kombinering av mange og komplekse datastrømmer samt publisering av slike datasett. Laben er godt oppdatert på opphavsrett både innen kunstnerisk og akademisk virksomhet.

Laben har også egenutviklede retningslinjer for datahåndtering:

https://www.uio.no/ritmo/english/research/labs/fourms/handbook/data-management/

Kapasitet

Labene hos fourMs-lab har god kapasitet men er også i mye bruk, spesielt mot semesteravslutning. Ved semesterstart er det ofte bedre kapasitet i de forskjellige labene.

Utfordringer og løsninger

Synkronisering av datastrømmer er en utfordring som laboratoriet har løst ved en 5 volts bryter som starter datastrømmene samtidig. Skulle laboratoriet ha behov for høyere grad av synkronisering vil de gå over til å bruke kun en PC til å fange alle datastrømmene for å sikre at datastrømmene blir tidstagget med samme dataklokke. SMI eyetracking var tidligere populært ved Universitetet. Men programvaren til SMI krevde Windows 7 og måtte derfør kjøre på gamle maskiner.

Det er også avgjørende for forskere ved fourMs-lab som jobber med fMRI ved sykehus å teste oppsettet av utstyret før de ankommer pasienten/subjektet.

Laben har i flere tilfeller opplevd at de kjøper utstyr fra en leverandør som senere går konkurs. Dette er problematisk om utstyret trenger support.

fourMs-laben sin PC som tar imot datastrømmene er ikke koblet til et nettverk av sikkerhetsgrunner men dataen kan overføres til en PC som står ved siden av som er koblet til et lokalt nettverk som tillater opplasting til lagringshotellet og TSD.

Bruk av eyetracking er relativt simpelt og kan raskt læres bort, men bruk av Motion Capture laben er mer komplisert både med tanke på oppsett og rensing av dataene i etterkant. Om en markør blir borte fra de infrarøde kameraene så kan bevegelsen til markøren manuelt plottes inn ved hjelp av videofilene.

Laben tar sikte på å ha alle sine data åpent, hvor de undersøker muligheter som:

a) OSF as a solution that gives us DOIs + sharing ++

b) NSD for curated data archiving

c) Domain-specific archives like PhysioNet

Kontaktinformasjon         

Nettsted: https://www.uio.no/ritmo/english/research/labs/fourms/

fourMs-laben sin leder er Professor Alexander Refsum Jensenius. Henvendelser kan gjøres til: contact@ritmo.uio.no.