Frank-ly

Al jaren, decennia – nee zelfs eeuwen is de mens constant op zoek naar verdieping en verbreding van hetgeen hij kan bevatten. In 1849 experimenteerde Richard Wagner (nee, niet die van de kleine pizza’s) met het effect van licht en geluid in een verduisterd theater op het publiek.Het bleek de start van een wilde achtbaanrit vol technologische ontwikkelingen waar we nog dagelijks mee te maken hebben.  Via virtual reality in 1989 (kennen we die nog), zijn we nu terecht gekomen in het tijdperk van de “augmented reality” (AR), oftewel, de verrijkte, toegevoegde realiteit. Maar: hoe veel verder zijn we sinds 1989 daadwerkelijk? Biedt de huidige techniek genoeg om consumenten een meerwaarde te bieden? Bij Rhinofly hebben we genoeg leuke ideeen over Augmented Reality en volgen we de trend graag. Waar staan we nu? Tijd voor een Augmented Reality-check!

Aug-u-wattes?

Voor diegenen die nog niet helemaal up-to-speed zijn, een korte introductie van AR. Bij AR wordt datgene wat je met je blote of bebrilde oog ziet uitgebreid met computer-gegeneerde data. In plaats van gebruik te maken van klassieke, op zich zelfstaande schermen (monitoren) voor deze informatie, wordt deze geprojecteerd in het gezichtsveld van de gebruiker – als ware het een extra laag over datgene wat je al ziet. Vaak worden hier dan zogenaamde “head-mounted” of “heads-up”-displays (HMD of HUD) voor gebruikt. Recente ontwikkelingen maken gebruik van de webcam voor pc/laptop en de mobiele telefoon met camera. Richard Azuma schrijft in zijn white-paper dat een AR-applicatie aan 3 eisen moet voldoen om ook daadwerkelijk zo te worden gekwalificeerd:

• De applicatie moet virtualiteit en realiteit met elkaar combineren en eigenlijk vermengen
• De applicatie is real-time interactief
• De applicatie beweegt zich in 3 dimensies

Technologisch vooruitstrevende experimenten worden gedaan op het gebied van productieprocessen (Boeing heeft een “virtueel productieproces” als test-scenario), medisch onderzoek en in de militaire sector.  Sinds 1998 worden er diverse internationale workshops en symposia georganiseerd om de groei van AR te stimuleren.

Realiteit in de blender

AR is niet een nieuwe, op zich zelfstaande technologie. Volgens de theorie van Milgram is het is een onderdeel van de zogenaamde “MR subset” (Mixed Reality), die dan weer volledig onder de term “Virtual Reality” valt. Binnen de MR-subset vinden we naast Augmented Reality ook de zogenaamde Augmented Virtuality. Waar AR zich grondvest in de realiteit – we mixen computerdata met het eggie - worden er bij AV juist elementen uit de echte wereld toegevoegd aan een virtualiteit. Denk hierbij aan bijvoorbeeld live video op je website of, een stap verder, een live video-avatar op bijv. Twitter. Volgens Milgram bevindt AR zich dan ook als een VN-soldaat tussen een compleet synthetische wereld (virtual enviroment) en telepresence: de realiteit.

Ook de techniek is nog verder te ontleden, maar voor nu wil ik niet al te veel inzoomen op termen als  Fiduciary markers”, “Exponential map” of “Structure from motion”

Mobiele realiteit

We leven in exponentiële tijden als het gaat om technische vooruitgang en algemene acceptatie van nieuwe technologieën. Ook AR plukt hier de vruchten van. Juist omdat AR een mix tussen realiteit en virtualiteit is, moet de toepassing mobiel kunnen zijn. Waar Virtual Reality voornamelijk betekende dat je je verplaatste in het virtuele, maar in de realiteit op één plek (of een loopband) stond, biedt AR juist de mogelijkheid om je vrij te verplaatsen door de echte wereld. Toegegeven, de eerste HUD’s voor AR waren nou ook niet bepaald ergonomisch verantwoord, maar waren al een hele verbetering in vergelijking met de “VR-centers” die nodig waren om mensen virtuele realiteit te laten ervaren.

Intussen zijn we zo ver dat we AR-applicaties kunnen laten functioneren op onze mobiele telefoons indien gewenst. Een succesvolle toepassing van AR op een mobiel platform hangt echter af van een aantal zaken waaraan voldaan moet worden. Daniel Wagner zet ze uit in zijn thesis uit 2007:

• Lage kosten:
  je applicatie moet kunnen draaien op “off-the-shelf” hardware. De gebruiker moet niet tegen extra kosten aan lopen.
• Robuust en “fool-proof”:
  Naast dat de techniek voor menig gebruiker nieuw is en dus je interface intuïtief moet zijn, moet de applicatie ook robuust zijn. Onnodige strubbelingen veroorzaken tomeloos hoge drempels.
• Online/offline:
  Je applicatie moet zowel online (hetzij via 3G of Wifi) als offline (er zijn nog steeds mensen zonder flat-fee) relevantie bieden voor de gebruiker
• Tracking support: 
  Real-time tracking is eigenlijk het meest fundamentele belang van een mobiele AR-applicatie. Op basis van de huidige generatie mobiele telefoons kan hiervoor gebruik worden gemaakt van positiebepaling via GSM-masten, Wifi of GPS natuurlijk.
• Rapid prototyping:
  Als ontwikkelaar zul je snel moeten kunnen inspringen op veranderende situaties, aangezien de markt en de techniek nog zo in beweging zijn. Bereid je developers dus goed voor, als het op ontwikkelen aankomt.
• Content creatie / relevantie:
  Na het eerste “Woah, fuck!”-moment zul je de gebruiker moeten weten te binden met (praktische) relevantie. Dit kan door bijvoorbeeld content creatie te integreren.

AR voor jou en mij

Wat moet er nu voor gaan zorgen dat AR voor ons echt leuk wordt? Want zoals Wagner in zijn thesis schrijft:

“Augmented Reality (AR) aims at developing new user interfaces.
Although research has produced a large number of
application prototypes and AR frameworks in the last 20 years, no project has yet been practical enough to create a mass market success.”

Dat laatste deel lijkt in de meest recente ontwikkelingen tegengesproken te gaan worden. Er verschijnen steeds meer toepassingen op de markt die door een (iets) groter publiek worden opgepakt. Dat is deels te danken aan het feit dat AR, in tegenstelling tot zijn familielid VR, niet afhankelijk hoeft te zijn van absurde hardware.
Alle drie de aspecten die Azuma in zijn white-paper bestempeld als criteria voor AR kunnen worden bereikt met een hedendaagse computer met webcam aansluiting. Onze eigen kerst-actie in 2008 was daarvan een prima voorbeeld. Wanneer er echter wel een stap verder gezet qua hardware, zit men al snel in een wat complexere oplossing, zoals TNO’s ”Roze bril” in de bouwsector. In dit experiment kregen bezoekers op een bouwplaats een speciale bril op en werden 3D beelden van het uiteindelijk op te leveren bouwwerk geprojecteerd over de huidige werkzaamheden.

Tussen gimmick en functioneel, vindt je fun!

Vooralsnog kunnen we de huidige generatie AR-toepassingen makkelijk indelen in 3 groepen:

• Gimmick
  Het gebruik van AR wordt gebruikt voor positionering. De toepassing heeft geen intrinsieke relevantie voor de gebruiker behalve de “woah, cool gedaan”-reactie.
  Je ziet deze toepassing vaak in act iemarketing, zoals tijdens de lancering van de nieuwe Ford Ka of onze eigen kerstkaart.
• Functioneel
  Hierbij wordt de projectie vooral gedaan om de gebruiker te ondersteunen. Zoals bijvoorbeeld BMW een navigatiesysteem de route laat projecteren op de voorruit van de auto. Of visualisatie van verborgen objecten (tijdens medisch onderzoek of operaties met een röntgenbeeld). En natuurlijk tijdens simulaties in bijvoorbeeld het onderwijs of voertuigbeheersing.
• Fun
  AR als pleziermaker! Gebruik AR voor games, zoals Sony met de PSP Game “Invizimals” wil doen, of gebruik het om een extra fun-dimensie toe te voegen aan een klassiek “feel-good”-product als de TOPPS baseball cards.

De scheidingslijn tussen wat “gimmick” en wat “fun” is, is erg dun. Maar vaak wordt er bij “fun” al snel een “return-moment” gecreeerd, waarbij de gebruiker de applicatie nogmaals zal gebruiken omdat het zo verrekte leuk is. Deze relevantie komt minder snel naar voren bij een “gimmick”, al zal een gimmick naar alle waarschijnlijkheid evenveel gedeeld worden onder vrienden en bekende als een fun-applicatie.

Voorbeeldcases van AR:

Een verzameling maken van cases is op zijn zachtst gezegd onbegonnen werk. De technologie is volop in beweging en daarom ontspruiten de goede, leuke en mooie dingen links en rechts. Ik heb het toch geprobeerd, met hulp van mijn collega’s bij Rhinofly en een klein stukje crowdsource-beleving via Twitter. De lijst hieronder is verre van compleet, maar is een aardig startpunt voor meer. Heb jij goede cases? Klap ze dan vooral in de comments, zodat ze niet verloren gaan!

Functioneel:

• Wikitude AR
• BMW HUD in de M5
• Toepassen van AR bij het ontwikkelen van 3D characters
• TNO’s toepassing van AR in de bouwsector
• AR navigatiesysteem (concept)

Fun:

• TOPPS 3D Baseball Cards
• Sony PSP Game “Invizimals”
• ARhhhr The AR-shooter
• Sony PS3 Game “Eye of Judgement”
• Lego-AR
• Jan van Nuenen’s ”Pshysics distorter

Gimmick:

• Toepassing in Allard Pierson Musuem, Amsterdam
• 3D Ford Ka via markers op print-media
• 3D Nissan Cube op autoshow
• Total Immersion presentatie
• De kerstman doet het anders – de Rhinofly kerstgroet
• ING Wegwijzer, vindt een pinautomaat met via AR

Nederlandse initiatiefnemers

We waren er bij Rhinofly rap mee, maar heus niet de eerste of de enige. Ook in ons kikkerlandje wordt er hard gestoeid met AR. Maar welke concullega’s zijn er dan zoal bezig met leuke AR-speelsels? Ook voor deze lijst geldt weer dat aanvullingen of toelichtingen van harte welkom zijn in de comments, natuurlijk!

Rhinofly
In 2008 maakte Rhinofly speciaal voor de jaarlijkse kerstactie een AR-kerstkaart.

SPRX Mobile
SPRX Mobile maakte begin dit jaar samen met Mobilizy (van Wikitude) de ING Wegwijzer, een applicatie om met AR de dichtsbijzijnde ING-pinautomaat te vinden.

.bone & jaaap
Maakte in april 2009 bekend samen een AR-divisie op te starten. Opereren vanuit hetzelfde pand en delen de visie dat AR “de missing link tussen print, outdoor, mobile en online” is.

Touching Media
In 2007 opgericht door Jeroen Mol en bekend als een van de eerste pioniers in Nederland. Vooral bekend van actie met TotaalTV, waarbij er AR werd toegepast op advertenties binnen een magazine.

Strafwerk
Strafwerk was, zover ik me kan heugen, een van de eerste Nederlandse bureau’s die met AR-voorbeeld via Flash kwamen.  Hun video trok indertijd veel bekijks, maar ik kan helaas niet achterhalen of ze nu ook al campagnematig iets hebben opgeleverd met AR.

Concluderend?

Augmented Reality is een interessante technologie die op dit moment veel opzien baart en daarmee de aandacht trekt. De kleine schare “echte”cases werden bijna allemaal opgepikt door grote nationale en internationale weblogs en kregen als gevolg daarvan veel exposure. Het merendeel van de voorbeelden waren tot nu toe steeds gimmicks of fun. Vraag is in hoeverre AR in de toekomst ook functioneler kan worden ingezet zodat het daadwerkelijk een meerwaarde oplevert voor bijvoorbeeld adverteerders of consumenten. In vele opzichten is AR nog lang niet volgroeid terwijl er soms ook al grenzen aan het medium zijn te ontdekken. In welke realiteit je ook went of keert, het is een spannende techniek en een mooie trend om te blijven volgen!