Stelt u zich nu eens voor dat u een vlieginstructeur bent. Hoewel het niet erg gebruikelijk is om hoog in de lucht een ander vliegtuig in te halen, vormen scanpatronen toch een erg belangrijk aspect van het besturen van een vliegtuig. Een piloot kan namelijk soortgelijke fouten maken als de bestuurder van een auto, door bijvoorbeeld bepaalde instrumenten in de cockpit niet te checken. Maar tijdens een vliegopleiding kan de instructeur aan uw hoofdbewegingen niet zien dat u naar de snelheids- of de hoogtemeter kijkt – daarvoor liggen deze instrumenten te dicht naast elkaar.
De technische oplossing
Er is dus onvoldoende en onbetrouwbare informatie om de scanpatronen van piloten in opleiding te beoordelen. Een objectieve manier om dit te monitoren zou hier uitkomst kunnen bieden. Logisch dus dat eyetracking (een technologie die registreert waar iemand naar kijkt) de afgelopen decennia steeds populairder is geworden, maar beschikt de instructeur daarmee over alle informatie die hij nodig heeft? Nee.
Ik hoop dat piloten het met mij eens zijn dat het uitvoeren van een nadering en landing ander scangedrag vereist dan het verhelpen van een motorstoring. De informatie die aan de instructeur wordt gepresenteerd moet daarom aansluiten bij het scenario dat wordt geoefend. Helaas zijn er te veel onderzoekers en eyetrackingbedrijven die zich alleen concentreren op het technische deel van de oplossing. Volgens mij is het belangrijk dat we beginnen in te zien dat als we de toepassing niet afstemmen op de specifieke training, instructeurs een tool overhouden die (op den duur) nutteloos en complex aanvoelt, in plaats van ondersteunend en intuïtief.
De geïntegreerde oplossing
Wij hebben daarom een tool ontwikkeld die instructeurs ondersteunt met realtime, objectieve informatie over de scanpatronen van hun leerlingen binnen het specifieke oefenscenario: het Augmented Eye. Deze tool faciliteert performance-based training en kan uiteindelijk resulteren in een persoonlijkere en adaptievere opleiding. Met die kennis zal het u niet verbazen dat alle instructeurs die tot nu toe hebben mogen werken met het Augmented Eye net zo enthousiast erover waren als wij!
Een groot pluspunt voor de gebruiksvriendelijkheid is dat de instructeur achter de piloten plaatsneemt en kan zien waar de leerlingen kijken, zonder dat hij met zijn hoofd naar een tablet of instructeursscherm hoeft te draaien. Dit is mogelijk dankzij Augmented Reality: de eyetrackinggegevens worden virtueel op het beeld van de echte omgeving geprojecteerd. Op deze manier is het niet nodig dat de leerlingen een speciale bril dragen en kunnen ze precies doen wat ze ook zonder tool zouden doen, zoals wiebelen op hun stoel.
Prachtig, maar wat gebeurt er in de toekomst?
Of instructeurs nu wel of niet het Augmented Eye of een andere nieuwe applicatie gaan gebruiken, ik ben ervan overtuigd dat innovatieve opleidingsconcepten altijd gericht moeten zijn op een combinatie van technische mogelijkheden en concrete trainingsbehoeften – net als het Augmented Eye. En dat is precies wat wij willen verbeteren
Best paper award ITEC 2019
Jeanine is onderscheiden met de ITEC 2019 Best Paper Award voor haar paper ‘Making the invisible visible – Towards increasing pilot training effectiveness by visualizing scan patterns of trainees through AR’. De paper van Jeanine werd als beste gekozen uit 67 inzendingen.
„Uw presentatie was zeer professioneel en uw onderzoeksonderwerp geeft goed weer hoe het mogelijk is mensen via technologie met elkaar te verbinden door zinvol ontwerp van interoperabiliteit.”
De paper beschrijft de ontwikkeling en evaluatie van een monitoringsysteem voor scanpatronen dat gebruik maakt van augmented reality. Met dit systeem kunnen instructeurs scanpatronen van piloten monitoren doordat de oogbewegingen van de piloot op een niet-storende manier worden gevolgd en via augmented reality zichtbaar worden gemaakt voor de instructeur. Volgens de experts (vlieginstructeurs) biedt deze toepassing een ondersteunende tool voor debriefing. Verdere ontwikkeling zou zich moeten richten op het creëren van een tabletversie voor gebruik tijdens de debriefing, en op de beste manieren om deze tool te implementeren in de pilotenopleiding.