Lydsporer (avsluttet)

Målet er å utvikle en app for å søke i store musikkbiblioteker ved hjelp av å bevege mobiltelefonen i luften.

Foto: Alexander Refsum Jensenius

Om prosjektet

Fra tidligere studier vet vi at mennesker er flinke til lydsporing, det vil si å bevege kroppen til lydlige egenskaper mens de hører på musikk. Dette kan være rytmiske bevegelser som passer til de rytmiske figurene i musikken, eller vertikale bevegelser som følger en melodilinje. Målet med dette prosjektet er å gjøre det motsatte: bruke håndbevegelser til å gjøre søk i en stor lyddatabase ved Nasjonalbiblioteket.

I dag er søkene i lyddatabaser begrenset til å søke med ord i de tekstlige beskrivelsene av lyden. Vi ønsker å utvikle verktøy for å trekke ut egenskaper fra selve lydfilene, og gjøre disse egenskapene tilgjengelig for søk. Tanken er at brukeren vil “tegne” en lydlig kvalitet i luften med mobiltelefonen sin. Dette kan f.eks. være en rask, oppadgående bevegelse med litt skjelving på slutten. Egenskapene fra denne “tegningen” vil deretter brukes for å søke opp lydfiler med lignende egenskaper. Den nærmeste lydfilen vil umiddelbart spilles av, og brukeren vil kunne navigere seg gjennom andre lydfiler med lignende egenskaper ved å bevege mobiltelefonen i rommet.

Innovasjonsprosjektet er støttet av UiO og utføres i samarbeid med Nasjonalbiblioteket. Målet er å presentere en fungere prototype ved prosjektslutt.