Online dataverzameling is onmiskenbaar de kern van ons bedrijf. We hebben meer dan 650.000 mensen in onze online panels en voeren meer dan 7 miljoen interviews per jaar. Daarom is het absoluut essentieel dat we bij het ontwerpen van online vragenlijsten voldoen aan de verwachtingen van de respondenten of deze zelfs overtreffen. Dit zijn onze belangrijkste ontwerpprincipes.
Bij het ontwerpen van een vragenlijst houden we altijd de ervaring van de respondent in gedachten. Daarom moet dit artikel beginnen met de psychologie van enquêtereacties.
Er is veel nuttige literatuur beschikbaar, maar wij gebruiken het model dat Roger Tourangeau (2000) heeft ontwikkeld in The psychology of survey response. Het is een hulpmiddel voor algemeen gebruik dat helpt om de kwaliteit van een vragenlijst gemakkelijk te beoordelen.
Volgens dit model moet de menselijke geest vier stappen doorlopen om een passend antwoord te geven wanneer een vraag wordt gesteld.
Laten we deze stappen uitleggen aan de hand van een voorbeeld: “Hoeveel Aspirinetabletten neem je per maand?”
Met behulp van dit model kun je proberen te anticiperen op de mentale processen van je respondenten voor elke vraag in je vragenlijst. Het maakt echt niet uit of het een open vraag, een single select, een meerkeuze of een ander type vraag is.
Het is onnodig om te zeggen dat het voltooien van de vier bovenstaande stappen concentratie vereist en de respondenten uiteindelijk zal vermoeien. Hoe meer vragen je na elkaar stelt, hoe meer je de aandacht en concentratie van de respondent opgebruikt. Eenvoudig gezegd is enquêtemoeheid het resultaat van de vereiste mentale inspanning en de lengte van de vragenlijst – dus je moet jouw vragenlijst kort of eenvoudig houden, of nog beter; kort en eenvoudig.
En dat brengt ons bij het belang van datakwaliteit. Iedereen heeft een eigen limiet aan cognitieve belasting die ze aankunnen. Als de vermoeidheid de mentale capaciteit overschrijdt, zullen de hersenen op zoek gaan naar kortere wegen en hulpmiddelen om de last te verminderen. Je kunt bijvoorbeeld minder moeite doen om informatie op te halen en alleen het eerste gebruiken dat in je opkomt. Je kunt ook gewoon de antwoordoptie “Weet niet” kiezen. In elk geval leidt dit zogenaamde satisficinggedrag tot minder nauwkeurige antwoorden en, in de meest extreme vormen, tot onzinnige data.
Kortom, goede vragenlijsten behouden de aandacht en concentratie van de respondenten door de cognitieve belasting van deelname te verminderen. Daardoor helpen ze om een hoge datakwaliteit te bereiken. Dit is precies waar we naar streven bij het ontwerpen van online vragenlijsten.
Als je een vragenlijst wilt verbeteren, kun je twee strategieën gebruiken: de mentale inspanning van de respondenten voor elke afzonderlijke vraag verminderen of de vragenlijst in zijn geheel inkorten.
Laten we beginnen met de eerste strategie. Om de mentale inspanning te verminderen, moet je al je vragen optimaliseren voor elk van de vier stappen.
Deze verbeteringen zijn overduidelijk! Maar er is nog iets dat je moet doen: de bruikbaarheid van je vragenlijst optimaliseren. Als de bruikbaarheid van je vragenlijst niet intuïtief is, zal de respondent mentale moeite moeten doen om de vragenlijst in te vullen. En dat gaat natuurlijk ten koste van de datakwaliteit van je enquête.
Het is niet genoeg om alleen de beproefde benaderingen uit het verleden te behouden. Omdat je de lay-out van je vragenlijst tot nu toe nooit hebt veranderd, betekent dat niet dat de data die je eruit haalt nog steeds van hoge kwaliteit is. De manier waarop mensen omgaan met internet is veranderd en je vragenlijst moet altijd de nieuwe gebruikspatronen weerspiegelen.
Daarom werken we de lay-out en functionaliteit van onze enquêtemotor voortdurend bij. We houden onder andere rekening met de nieuwste technische standaarden, nieuwe apparaten en hun specificaties en veranderingen in het gebruiksgedrag.
Laten we eens kijken naar de tweede strategie om een vragenlijst te verbeteren: inkorten, om de duur van de mentale inspanning te verminderen.
Helaas zijn online vragenlijsten vaak te lang. De afwezigheid van een dure interviewer maakt het gemakkelijk om irrelevante vragen toe te voegen, gewoon om meer data te verzamelen als je eenmaal bezig bent. Dit is lange tijd niet echt als een probleem beschouwd, maar mobiele vragenlijsten hebben deze discussie onlangs nieuw leven ingeblazen.
We weten dat de kwaliteit van data meestal afneemt na 20 minuten (een beetje afhankelijk van het onderwerp en andere factoren) en dat er geen effectieve remedie tegen is. Soms wordt ons gevraagd om de stimulans te verhogen. Hoewel dit de respondent kan motiveren om een lange vragenlijst in te vullen, is het niet geschikt om de mentale capaciteit te vergroten of de cognitieve belasting te verminderen. Dus je kunt de bereidheid om deel te nemen behouden, maar prikkels verbeteren de kwaliteit van de data niet.
Allereerst moet je dus alle irrelevante vragen en batterij-items verwijderen. Dat is waarschijnlijk de moeilijkste taak, maar als vuistregel geldt dat je alleen data moet verzamelen die je echt nodig hebt om je onderzoeksvraag te beantwoorden. Ten tweede, kort de vraagteksten zelf in (Tip: Een maximum van 140 karakters zoals bij Twitter zou ideaal zijn). Als de teksten te lang zijn, lezen respondenten ze misschien niet grondig en raden ze gewoon de vraag door de antwoordopties te lezen of te zoeken naar sleutelwoorden.
Zodra je de vragenlijst hebt ingekort tot een redelijke lengte, moet je de volgorde van de vragen optimaliseren. Ervan uitgaande dat de oplettendheid en concentratie van de respondenten aan het begin nog goed is en tegen het einde afneemt, moeten de belangrijkste vragen zo vroeg mogelijk gesteld worden. Omgekeerd, plaats vragen over de demografische achtergrond aan het einde van de vragenlijst, aangezien respondenten in staat zullen zijn om ze correct te beantwoorden, zelfs als ze een zekere vermoeidheid voelen.
En dat brengt ons bij het laatste punt. Sluit mobiele gebruikers niet uit, alleen omdat de bruikbaarheid van je vragenlijst slecht is of de enquête te lang is, want dit zal de resultaten van je onderzoek vertekenen.
Op het eerste gezicht moeten mobiele gebruikers meer moeite doen om een vragenlijst in te vullen: hun scherm is aanzienlijk kleiner en ze bevinden zich mogelijk in situaties die hun aandacht gedeeltelijk opeisen. De verrassende waarheid is dat mobiel onderzoek heel vaak hand in hand gaat met een uitstekende datakwaliteit, omdat onderzoekers actief ontwerpen voor een geoptimaliseerde onderzoekservaring. Het volgen van de bovenstaande principes lijkt gewoon aannemelijker als je de beperkingen van een mobiel apparaat in gedachten houdt.
Eerlijk gezegd: Mobielvriendelijk bestaat niet. Een vragenlijst is gebruiksvriendelijk of niet.
Dit artikel verkent de kunst van het ontwerpen van online vragenlijsten met een focus op de psychologie van enquêtereacties. Het introduceert een vierstappenmodel om te begrijpen hoe respondenten vragen verwerken en benadrukt het belang van het minimaliseren van cognitieve belasting om datakwaliteit te behouden. De strategieën voor verbetering omvatten het optimaliseren van de duidelijkheid van de vraag, aanwijzingen voor het ophalen van informatie, het vermijden van beïnvloeding van het oordeel en het bieden van uitgebreide antwoordopties. Gebruiksvriendelijkheid en lay-out updates voor moderne internet gebruikspatronen worden ook benadrukt. Daarnaast is het belangrijk om vragenlijsten in te korten door irrelevante vragen te verwijderen en de lengte en volgorde van vragen te optimaliseren. Uiteindelijk onderstreept het artikel het belang van het enquêteontwerp voor het behoud van de datakwaliteit en de betrokkenheid van respondenten.
Ontdek de top 5 principes voor het effectief ontwerpen van een vragenlijst: Leer om veelgemaakte fouten te vermijden bij online, telefonische of persoonlijke interviews om je onderzoeksvaardigheden te verbeteren.
Er kunnen veel dingen misgaan in de wereld van onderzoek. Een slecht ontwerp van een vragenlijst hoeft daar niet bij te horen en kan gemakkelijk worden vermeden. We hebben een aantal van de meest voorkomende fouten op een rijtje gezet.
