Er kunnen veel dingen misgaan in de wereld van onderzoek. Een slecht ontwerp van een vragenlijst hoeft daar niet bij te horen en kan gemakkelijk worden vermeden. We hebben een aantal van de meest voorkomende fouten op een rijtje gezet.
Verrassend vaak worden vragenlijsten niet ontworpen voor de juiste doelgroep en er zijn een paar dingen die mis kunnen gaan.
Laten we beginnen met de samenstelling van de steekproef: Als je de hele markt van je product wilt begrijpen, is het niet voldoende om alleen (frequente) gebruikers van het product te vragen. Deze mensen hebben zeker een goed idee van hoe je product eigenlijk werkt, maar ze hebben al een bepaalde mate van betrokkenheid bij het merk. Hun perspectief is gebaseerd op eerdere ervaringen met je merk en kan niet worden verondersteld voor alle consumenten in het relevante segment. De mensen die je product al gebruiken zullen je niet helpen om de redenen en motivaties te begrijpen van consumenten die je product afwijzen, de verborgen behoeften van consumenten die je product niet relevant vinden of hoe je potentiële consumenten kunt bereiken die zich nog helemaal niet bewust zijn van je product of merk. Het punt is dat de meeste steekproeven meer moeten bevatten dan de kerndoelgroep van het onderwerp in kwestie. Misschien moeten ze zelfs representatief zijn voor de hele bevolking. Anders kan de feedback erg eenzijdig zijn.
Een andere veelgemaakte fout is de verkeerde steekproefgrootte selecteren. Als je dataset te klein is, is het erg moeilijk om betrouwbare conclusies te trekken op basis van de data. Dit geldt vooral als je verschillende subgroepen van je steekproef wilt vergelijken, bijvoorbeeld de merkbekendheid onder lezers van een bepaald tijdschrift (waarin je merk wordt gepromoot) vergelijken met de merkbekendheid onder niet-lezers. Alle segmenten moeten met een behoorlijke steekproefomvang vertegenwoordigd zijn in het totale onderzoek als je er niet over wilt gaan speculeren bij het interpreteren van de data.
Maar zelfs als je de steekproef goed doet, betekent dat nog niet dat je vragenlijst volledig is afgestemd op je doelgroep. Als je de mening van kinderen of praktisch geschoolde wilt horen, moet je speciale aandacht besteden aan taal. Je kunt zelfs overwegen om complexe ideeën en concepten te illustreren met afbeeldingen om ze begrijpelijker te maken. Als je je daarentegen richt op zakelijke besluitvormers, moeten de toon en het uiterlijk van de vragenlijst anders zijn. Kortom, je vragenlijst moet aanslaan bij je doelgroep. Dit argument is misschien wat aan de kwalitatieve kant en vereist enig inlevingsvermogen. De volgende hoofdstukken geven ons een aantal meer algemene principes om een goede respondentgerichte gebruikerservaring te creëren.
Net zoals ze geen aandacht besteden aan de toon van een enquête, maken veel mensen de fout om de gebruikerservaring te verwaarlozen bij het opstellen van vragenlijsten. Onze ervaring leert dat je altijd een respondentgerichte aanpak moet toepassen bij het ontwerpen van enquêtes waarbij de gebruikerservaring is de sleutel.
Als je er niet in slaagt om je vragenlijst te ontwerpen voor een geweldige gebruikerservaring, zul je er niet in slagen om je doelgroep(en) aan je te binden. Enquêtes beantwoorden kan vervelend zijn, doe wat je kunt om Het spannend te maken. De vragen kort en eenvoudig te houden. Om de respondent betrokken te houden, helpt het om de vraagtypes te variëren en ook interactieve opties te gebruiken zoals schuifbalken of beeldkaarten. Als het past bij het type enquête, kan je zelfs illustraties, video’s of andere elementen gebruiken om de interesse en motivatie van de respondent hoog te houden.
En hoewel de visuele elementen erg belangrijk zijn, mag je niet vergeten om ook aandacht te besteden aan de tekstelementen. Probeer ze zo duidelijk mogelijk te houden. Vooral de eerste paar pagina’s van een enquête bepalen of de respondent zijn interesse verliest of doorgaat. Daarom is deeerste indruk van de vragenlijst is heel belangrijk en je moet altijd proberen om het begin zo boeiend mogelijk te maken. Denk eraan om aan het begin van het onderzoek geen vragen te stellen die veel denkwerk of lezen vereisen om te voorkomen dat mensen afhaken. Probeer ook geen lange lijsten te gebruiken die veel scrollen vereisen of veel herhalende vragen aan het begin. Begin met wat gemakkelijke vragen als opwarmertje en probeer – indien mogelijk – de open vragen verder naar achteren te schuiven. Nog beter is het als je ze vrijwillig kunt laten beantwoorden. Zorg er ook voor dat je je respondenten niet dwingt om een standpunt in te nemen als ze dat niet willen. Zorg altijd voor een neutrale middenpositie in schuifbalken en een ‘weet niet’ optie in de meerkeuzevragen.
Mobielvriendelijk is gewoon een ander woord voor gebruiksvriendelijk. ‘Mobiel eerst‘ zou geen holle frase moeten zijn als het gaat om enquêtes.
Aangezien velen van ons de online wereld meestal via een mobiel apparaat bezoeken, zou dit echt van het grootste belang moeten zijn. Als je je enquêtes niet ontwerpt voor mobiel bereik je waarschijnlijk grote delen van de bevolking niet en sluit je waarschijnlijk vooral de moeilijk te bereiken doelgroepen (zoals jongeren) uit. Even belangrijk bij het optimaliseren voor mobiel is nadenken over de technische functionaliteit van mobiele apparaten en rekening houden met een aantal technische bijzonderheden bij het nadenken over functionele kwesties zoals hoveren op touchscreens.
Net zo belangrijk als de technische aspecten zijn de conceptuele aspecten van de vragenlijst. Met mobiel in gedachten moet je rekening houden met de algemene lengte van de enquête, omdat de spanningsboog korter wordt. Een ander belangrijk punt om te overwegen is de lengte van de individuele vragen. Niemand houdt van eindeloos scrollen en zoals hierboven al is gezegd, moet je er aandacht aan besteden om ze zo kort en duidelijk mogelijk te houden. Dit geldt natuurlijk ook voor alle andere apparaten waarmee de enquête kan worden geopend.
We moeten meningen niet behandelen alsof ze een gegarandeerde kennis van respondenten zijn die kan worden verkregen door ze simpelweg te vragen.
Je kunt demografische informatie op deze manier behandelen (“Wat is je leeftijd?” – “achtendertig”), maar meningen, gevoelens, sensaties of smaken (“In welke mate ben je het hiermee eens?”) zijn iets heel anders. Er is niets mis met opiniepeilingen in het algemeen, maar we moeten voorzichtig zijn met antwoorden te letterlijk nemen. De meeste antwoorden moeten worden gezien als een indicatie van vage denkbeelden die geleidelijk aan bewust worden tijdens het onderzoeksproces, in plaats van kant-en-klare feiten.
Als je vragenlijsten met dit in je achterhoofd benadert, kun je ervoor zorgen dat je niet alles klakkeloos aanneemt. Dit zal je ook helpen om rekening te houden met de zeer menselijke aanleg dat enquêtes soms beantwoord worden op een manier die respondenten wenselijk achten. Dit kan op zijn beurt leiden tot een discrepantie tussen wat respondenten zeggen te doen in enquêtes en wat ze daadwerkelijk doen in hun dagelijks leven.
Maar respondenten leugenaars noemen, alleen omdat hun expliciete antwoorden op een vragenlijst niet overeenkomen met hun gedrag, is een beetje te hard. Natuurlijk weten we als onderzoekers dat houding en gedrag een enorm verschil kunnen maken. We weten dat intenties niet altijd in daden worden omgezet en dat cognitieve vooroordelen onze (zelf)waarneming vervormen. Dit alles betekent niet dat respondenten opzettelijk liegen, integendeel: de meesten antwoorden oprecht. Het feit dat hun gedrag niet overeenkomt met hun houding is het normale geval en geen afwijking ervan. Omdat we allemaal wel eens beter willen zijn dan we werkelijk zijn. Het verklaren van de kloof tussen houding en gedrag is ons probleem, niet dat van hen en daar moeten we ons bewust van zijn.
Tegelijkertijd moet ook bewust valsspelen worden overwogen en er zijn een paar manieren om dat te doen. Red herring-vragen zijn bijvoorbeeld een goede manier en de belangrijkste reden waarom we respondenten blijven vragen welk apparaat ze momenteel gebruiken is niet onze oprechte interesse in het apparaat, maar om te controleren of ze de waarheid vertellen voordat de eigenlijke enquête begint. Het vergelijken van metadata met het gegeven antwoord kan ons helpen om respondenten op te sporen die opzettelijk liegen.
Als bedrijf dat data verzamelt, werken we hand in hand met onze klanten. In een typisch project leveren zij ons de vragenlijst, doen wij al het veldwerk en leveren we de interviewdata. We nemen de vragenlijst echter niet zomaar over en leggen hem op het veld, ongeacht de inhoud. We adviseren onze klanten ook om ervoor te zorgen dat ze het beste uit hun studie halen. En door deze vier valkuilen in gedachten te houden – doelgroep, gebruikerservaring, apparaat en de menselijke fout – kunt u boeiende enquêtes ontwerpen voor uw respondenten.
Ontdek de top 5 principes voor het effectief ontwerpen van een vragenlijst: Leer om veelgemaakte fouten te voorkomen bij online, telefonische of persoonlijke interviews om je onderzoeksvaardigheden te verbeteren.
Word succesvol in online datacollectie: Ontdek onze cruciale ontwerpprincipes om de verwachtingen van respondenten te overtreffen en uit te blinken in het maken van online vragenlijsten.
Onze uitgebreide oplossing voor dataverzameling ondersteunt je in elke fase, van het definiëren van jouw doelgroep tot het schrijven van enquêtescripts en het leveren van resultaten. Beheerd met expertise, flexibiliteit en jouw specifieke behoeften in het achterhoofd.
