Prikkelt het web wel echt al onze zintuigen? Wordt het horen van/luisteren naar het web niet verwaarloosd? Alexander Ljung de CEO van Soundcloud denkt er het volgende van: “We want to unmute the web. We think the web is very silent at the moment”. Deze visie heeft me sinds The Next Web en na het lezen van een artikel in de NYT wel aan het denken gezet. Wordt audio, zoals hij beweert, echt groter dan video en op welke manier dan?

Natuurlijk zijn er websites die het nut van sounddesign in zien, is er volop video met geluid op het web en zijn er veel muziekservices, maar volgens mij wordt er al en kan er veel meer met audio bereikt worden. Google heeft al stappen gezet met het inzetten van audio binnen haar services. Denk aan het zoeken naar  en vertalen van content via Google Voice. Ook zijn er genoeg apps die inzetten op entertainment zoals met maken van muziektracks met je stem (Songmaker). Maar ik zit meer te denken aan het creëren van waarde door gebruik te maken van audio uit de omgeving.

Ik zie dit gebeuren op de volgende 2 manieren:

• Het verrijken van de context -> Geeft data waarvan de context al bepaald is een extra laag door audio toe te voegen
• Het bepalen van de context -> Gebruikt audio om hieruit context te bepalen en zet dit om in content

Het verrijken van de context gebeurt in veel gevallen doordat GPS de locatie bepaald heeft en vervolgens de context duidelijker wordt door dat er audio aan wordt toegevoegd. Ik sta bijvoorbeeld in de stad, maar doordat ik audio aan mijn tweet toevoeg hoort men dat ik op een festival sta. Volgens Alexander Jung is “sound a speeddial to the emotions“.  Deze quote geeft dat mooi weer: “If you want to stop being scared when watching a horror movie, you mute the sound. Sound is the emotional carrier. Human beings derive richer layers of meaning from a voice than a written sentence. The background sounds when you call someone give them an instant impression of your situation. So why not do status updates in sound? Social sounds.”

Soundcloud heeft uiteraard een eigen mobiele app die geluid kan delen met verschillende “sociale” platformen, maar ook de Nederlandse startup Shoudio, Citysounds.fm en Audioboo.fm. Ik denk zelf dat de drempel om bijvoorbeeld status-updates op te nemen en te delen vrij hoog is. Omgevingsgeluiden als de vogeltjes in het park, het geluid van die dikke harley of die kicken set van de dj in de strandtent daarentegen wel. Maar ik denk dat de mic’s van de telefoons nog wel mee moeten groeien met deze ontwikkeling.

Interessanter vind ik zelf de ontwikkeling waar de context bepaald wordt door audio. Zoals Google via Goggles aan de hand van een foto kan bepalen wat hetgeen is dat voor de camera staat, lijkt mij het geweldig als een app op basis van het geluid van de omgeving kan bepalen waar ik ben, wat ik zoek, wat ik nodig heb etc. Een mooie voorbeeld hiervan is de app Color, dat onlangs een investering van 41 miljoen ophaalde, die op basis van geluid bepaalt dat foto’s en video’s door mensen in het zelfde gebied genomen worden en deze automatisch bundelt in een groep. Dus bijvoorbeeld alle foto’s en video’s van een bepaald concert bij elkaar zetten zonder dat daar een actie van een gebruiker aan vooraf gaat.

De bekendste apps die context toe kennen aan geluid zijn de music discovery apps Shazam en Soundhound. Je hoort een fantastische track, knalt de app aan en na een minuut weet je, mits het nummer in de database staat, welk nummer het is. Een andere toffe app is RjDj. Deze app is een soort digitale drugs zoals ze het zelf omschrijven. “Drugs affect our sensory perception, so does RjDj. RjDj is a mind twisting hearing sensation”. Het is een soort mp3-speler die muziek genereert of afspeelt dat gerelateerd is aan de geluiden uit de omgeving.

Maar ook op het gebied van tv-kijken zijn er 2 apps die audio gebruiken. Zo is er de app Into_Now die aan het geluid herkent welk programma je aan het kijken bent en op deze manier kan je het makkelijk delen en met gelijkgestemden erover babbelen. Ook de Amerikaanse televisiezender ABC heeft voor het programma Generation Now een iPad app gemaakt die op basis van het geluid kan bepalen waar je in de aflevering zit en sluit hier de content direct op aan. Superrelevant. Een ander tof voorbeeld is de Inception app, augmented sound, die eerder hier op Frank-ly gepost werd.

Zou het zo kunnen zijn dat op een gegeven moment audio een brug vormt tussen offline en online. Dat geluiden massaal gedeeld worden en dat er daardoor gigantisch veel audio-data in user generated bibliotheken te vinden zijn op het web. Op basis van omgevingsgeluiden en andere api’s kan bepaald worden waar je bent, wat daar gebeurt, wie daar ook zijn, wat jullie gemeenschappelijk hebben etc. De verborgen social graph wordt zichtbaar. Relevante informatie wordt op basis van jouw omgeving, maar ook op basis van jouw sociale data getoond. Apps worden aangeboden, aanbiedingen geserveerd, tips voorgeschoteld, mensen om te connecten komen voorbij etc.

Wat denken jullie? Mogelijk?

Hebben jullie nog toffe apps die audio gebruiken om context ergens aan toe te kennen?

Foto in de header: Mike Lao