Sonifikaatio – miten se toimii?
Ääni vie elämän uusiin ulottuvuuksiin. Sonifikaatio on tekniikkaa, joka käsittelee dataa mahdollistaen datan tuntemisen, kuulemisen ja kokemisen.
Akseli Gallen-Kallela: Clouds Above a Lake, 1904-1906. The Gallen-Kallela Museum. Photo: Gallen-Kallela Museum / Jukka Paavola
The image is modified with coloured dots, to explain how the sonification works with the painting. Modification made by Samsung.
Väridatasta äänidataan
Samsungin Sound of Art tuo perinteisten taideteosten väreistä ja sävyistä dataa, jolla on tietyt arvot äänen muodossa. Sonifikaatiotekniikka muuttaa värit ja sävyt erityisiksi kuulonkorkeusdataksi. Eri värit luovat erilaisia ääniä. Tummat ja himmeät värit luovat matalia sävyjä, kun taas vaaleammat värit luovat korkeita sävyjä. Teknologia ei ainoastaan mahdollista perinteisten taideteosten kääntämistä auditiivisiksi taiteiksi. Perinteisestä taideteoksesta tulee myös eräänlainen musiikki-instrumentti, sillä kuulotulokset vaihtelevat sen mukaan, mitä teoksen osia tarkalleen analysoidaan. Kun sävelkorkeudet on kartoitettu, kaikki tiedot tuodaan ääniohjelmaan, jossa virtuaalinen instrumentti käsittelee sävelen sekvenssin ja muuntaa ne musiikiksi.
"Sonifikaatiota voidaan käyttää visualisoinnin täydentäjänä. Se yksinkertaistaa tietojen ymmärtämistä tarjoamalla enemmän tietoa ja parantamalla näön antamaa vaikutelmaa. Minulle tämä yhteistyö Samsungin kanssa on erittäin mielenkiintoista, koska minulla on mahdollisuus jakaa sonifikaatiotutkimukseni entistä laajemmalle yleisölle tutkimusmaailman ulkopuolella.
Niklas Rönnberg Sonifikaatioasiantuntija ja Linköpingin yliopiston lehtori
Niklas Rönnberg Sonifikaatioasiantuntija ja Linköpingin yliopiston lehtori
