Technische mogelijkheden omtrent ons concept

Wat hebben we nodig?

Het is de bedoeling dat de kinderen met een bepaald boek dus naar de installatie gaan. Dat is eigenlijk de eerste stap. Het boek moet dus gescand worden. Dit doen we als volgt:

Augmented Reality in combinatie met Flash code (FLAR-toolkit) en een webcam. De webcam scant een marker op het boek, Flash herkent de marker en stuurt eigenlijk de beleving aan. We werken waarschijnlijk maar een paar boeken uit maar de marker voorop moet wel verschillend zijn.

Nu kan de beleving dus eigenlijk beginnen. Er worden beelden getoond en muziek afgespeeld, helemaal vanuit Flash. Op bepaalde momenten stopt het even en kan de gebruiker kiezen om bepaalde spelletjes te doen. Vanuit Flash worden de spelletjes ook opgestart (worden ook in Flash gemaakt, zijn simpele spelletjes). D.m.v. een kinect-sensor kunnen we de muis vervangen door handgebaren en zijn ook simpele spelletjes ineens veel leuker. Wat moeten we dus uitzoeken:

Flash bestand koppelen aan MAX-MSP en MAX-MSP weer koppelen aan de kinect-sensor. Het kan allemaal. Het komt er dus op neer dat we beelden, geluid en spelletjes vanuit Flash inladen en dat beweging gedetecteerd wordt door MAX-MSP en de kinect-sensor.

Daarnaast moeten we voor een extra beleving nog lampen aansturen (max. 4 stuks) en ventilatoren. Ook dit kan met MAX-MSP maar hierbij komen de Arduino-lessen van Thijs en Norbert goed van pas. Met behulp van MAX-MSP en Arduino’s moeten we de lampen en ventilatoren aan kunnen sturen. Dus als bepaalde dingen in het verhaal gebeuren gaan de ventilatoren blazen enz. Dit programmeren we van tevoren in Flash. Het moet alleen aangestuurd worden op het juiste moment:

Aansturing lampen, ventilatoren, geurmachine met MAX-MSP en Arduino in combinatie met een stukje code.

Nadat de gebruiker het verhaal heeft bekeken en spelletjes omtrent het verhaal heeft gespeeld is het afgelopen en verlaat hij of zij de installatie.