Weet u nog wat u hier dacht? Een onderzoek naar de bijdrage van observaties en verbalisaties aan het detecteren van problemen en de mate waarin persoonskenmerken en de conditie RTE en RTA daar invloed op hebben.

Abstract

Om websites te verbeteren en problemen op het spoor te komen, kan gebruikersonderzoek worden ingezet. Zo kunnen proefpersonen bijvoorbeeld aan de hand van een scenario een taak op de website uitvoeren en vlak na of tijdens de taak de gedachten verbaliseren. In dit onderzoek is gekeken naar de retrospectieve hardop denkmethodes RTA en RTE. Onderzocht is wat observaties en verbalisaties bijdragen aan het detecteren van problemen. Daarbij is gekeken of persoonskenmerken als leeftijd, geslacht en opleidingsniveau invloed hebben op de verbalisaties en de observaties. Ook is er onderzocht wat voor problemen proefpersonen in de RTA en RTE conditie detecteren en of daar een verschil te vinden is tussen geobserveerde en geverbaliseerde problemen. Geconcludeerd kan worden dat persoonskenmerken nauwelijks invloed hebben op de taakuitvoering en op de problemen die gedetecteerd zijn met observaties en verbalisaties. Door de hoge datadichtheid van de oogbewegingen zouden er meer problemen moet worden gedetecteerd met observaties (Guan, 2006) maar dat blijkt niet het geval. Problemen met betrekking tot de relevantie van de inhoud, de structuur, het gebruiksgemak en overige problemen worden vaker geverbaliseerd dan dat ze worden geobserveerd. Problemen die vaker worden geobserveerd dan geverbaliseerd, zijn de navigatieproblemen. Er zijn wel unieke problemen gevonden met behulp van observaties in de dimensie bereikbaarheid, maar met verbalisaties worden op iedere subdimensie (inhoud, bereikbaarheid en vormgeving) meer unieke problemen gedetecteerd. Observaties zijn ook minder geschikt voor het signaleren van inhoudsproblemen. Proefpersonen kunnen met verbalisaties heel specifiek aangeven wat voor moeilijkheden ze met de inhoud hebben ervaren. Er zijn wel inhoudsproblemen gevonden met observaties maar deze zijn ook met verbalisaties te detecteren; met observaties komen geen unieke inhoudsprobleem aan het licht. In de RTA conditie zijn meer problemen geverbaliseerd met betrekking tot de vormgeving en de navigatie dan in de RTE conditie. Wanneer een proefpersoon de eigen oogbewegingen niet ziet, is deze in staat om meer navigatie en meer vormgevingsproblemen te verbaliseren. Ook het totaal aantal verbalisaties is hoger in de RTA conditie waardoor het wederom bevestigd lijkt dat oogbewegingen de proefpersoon afleidt tijdens het verbaliseren.