La psicología de la respuesta a encuestas
Al diseñar un cuestionario, siempre tenemos en mente la experiencia del encuestado. Por eso, este artículo debe empezar con la psicología de la respuesta a encuestas.
Hay mucha bibliografía útil disponible, pero nosotros nos basamos en el modelo desarrollado por Roger Tourangeau (2000) en The Psychology of Survey Response. Es una herramienta de propósito general que ayuda a evaluar fácilmente la calidad de un cuestionario.
Según este modelo, la mente humana debe completar cuatro pasos para dar una respuesta adecuada cada vez que se formula una pregunta.
Expliquemos estos pasos con un ejemplo: “¿Cuántos comprimidos de Aspirina toma al mes?”
- Comprender la pregunta identificando pistas: Usted aporta contexto a la pregunta al añadir “Aspirina”, por lo que es posible deducir el significado. Sin contexto, el encuestado podría no estar seguro de si la pregunta se refiere a una tableta electrónica o a un comprimido medicinal. Sin embargo, por el contexto, la expresión “tomar un comprimido al mes” se refiere a medicación.
- Recuperar información relevante de la memoria: Una vez que el encuestado ha entendido la pregunta, empezará a recuperar información relevante de su memoria. Si le resulta demasiado difícil recordar exactamente cuándo fue la última vez, podría utilizar otro enfoque y estimar con qué frecuencia compra, de media, un paquete de Aspirina.
- Integrar la información disponible en un juicio: Supongamos que el encuestado llega a la conclusión de que compra un paquete con 20 comprimidos al año. Eso significaría que el encuestado toma, de media, unos dos comprimidos al mes, lo cual le parece plausible.
- Trasladar el juicio a la respuesta y dar una contestación: Según el tipo de pregunta, el encuestado introducirá ahora “2” en el campo de texto abierto o seleccionará la respuesta correcta entre las opciones proporcionadas.
Con la ayuda de este modelo, puede intentar anticipar los procesos mentales de sus encuestados para todas y cada una de las preguntas de su cuestionario. Realmente no importa si se trata de una pregunta abierta, de selección única, de opción múltiple o de cualquier otro tipo de pregunta.
Fatiga de la encuesta
No hace falta decir que completar los cuatro pasos anteriores requerirá concentración y, con el tiempo, cansará a los encuestados. Cuantas más preguntas haga seguidas, más consumirá la atención y la concentración del encuestado. En términos sencillos, la fatiga de la encuesta es el producto del esfuerzo mental requerido y la longitud del cuestionario; por tanto, debería mantener su cuestionario corto o sencillo, o mejor aún, corto y sencillo.
Y eso nos lleva a la importancia de la calidad de los datos. Cada persona tiene un límite individual de carga cognitiva que puede soportar. Si el nivel de fatiga supera la capacidad mental, el cerebro empezará a buscar atajos y heurísticas para reducir la carga cognitiva. Por ejemplo, podría dedicar menos esfuerzo a recuperar información y usar solo lo primero que le venga a la mente. O podría simplemente seleccionar la opción de respuesta “No lo sé”. En cualquier caso, este llamado comportamiento de satisfacción conduce a respuestas menos precisas y, en sus formas más extremas, a datos sin sentido.
En resumen, los buenos cuestionarios preservan la atención y la concentración de los encuestados al reducir la carga cognitiva de participar. En consecuencia, ayudan a lograr una calidad de datos superior. Esto es exactamente lo que buscamos al diseñar cuestionarios online.
¿Qué puede hacer para mejorar su cuestionario?
Si desea mejorar un cuestionario determinado, puede utilizar dos estrategias: reducir el esfuerzo mental de los encuestados en cada pregunta o acortar el cuestionario en su conjunto.
Reducir el esfuerzo mental
Empecemos por la primera estrategia. Para reducir el esfuerzo mental, debería optimizar cada una de sus preguntas para cada uno de los cuatro pasos.
- Utilice un lenguaje neutral y comprensible. Sea claro e inequívoco en su redacción y no utilice preguntas entrelazadas ni dobles negaciones.
- Proporcione pistas para facilitar la recuperación de información relevante. Pueden ser textos, ilustraciones o fotos, pero también respuestas anteriores del encuestado (“En una pregunta anterior, ha dicho que no le gusta el diseño del producto. ¿Qué podemos mejorar?”)
- No influya en el juicio del encuestado. Posiblemente la tarea más difícil, porque cada detalle puede tener un impacto. Al menos intente ser prudente y evite cualquier influencia activa sobre el encuestado (p. ej., preguntas capciosas).
- Proporcione un conjunto completo de opciones de respuesta. Ofrezca una lista de opciones de respuesta mutuamente excluyentes y exhaustivas, o permita comentarios sinceros.
¡Estas mejoras son bastante obvias! Pero hay otra cosa que debería hacer: optimizar la usabilidad de su cuestionario. Si la usabilidad de su cuestionario no es intuitiva, el encuestado tendrá que dedicar esfuerzo mental a completarlo. Y eso, por supuesto, perjudicará la calidad de los datos de su encuesta.
No basta con mantener los enfoques probados del pasado. Que hasta ahora no haya cambiado el diseño de su cuestionario no significa que los datos que obtiene sigan siendo de alta calidad. La forma en que las personas interactúan con internet ha cambiado, y su cuestionario siempre debería reflejar los nuevos patrones de uso.
Por eso actualizamos constantemente el diseño y la funcionalidad de nuestro motor de encuestas. Entre las muchas cosas que tenemos en cuenta están los últimos estándares técnicos, los nuevos dispositivos, sus especificaciones y los cambios en el comportamiento de uso.
Acortar cuestionarios
Veamos la segunda estrategia para mejorar un cuestionario: acortarlo para reducir la duración del esfuerzo mental.
Por desgracia, muy a menudo los cuestionarios online son demasiado largos. La ausencia de un entrevistador costoso facilita añadir preguntas irrelevantes, solo por recopilar más datos ya que se está en ello. Durante mucho tiempo esto no se consideró realmente un problema, pero los cuestionarios móviles han reavivado recientemente este debate.
Sabemos que la calidad de los datos suele disminuir a partir de los 20 minutos (dependiendo ligeramente del tema y de otros factores) y que no existe un remedio eficaz contra ello. A veces se nos pide aumentar el incentivo. Aunque esto puede motivar al encuestado a completar un cuestionario largo, no sirve para aumentar la capacidad mental ni para reducir la carga cognitiva. Así, puede mantener la disposición a participar, pero los incentivos no mejoran la calidad de los datos.
Así que, en primer lugar, debería eliminar todas las preguntas irrelevantes y los ítems de batería. Probablemente sea la tarea más difícil, pero como regla general, solo debería recopilar los datos que realmente necesitará para responder a su pregunta de investigación. En segundo lugar, acorte los propios textos de las preguntas (Consejo: un máximo de 140 caracteres, como Twitter, sería ideal). Si los textos son demasiado largos, es posible que los encuestados no los lean detenidamente y simplemente deduzcan la pregunta leyendo las opciones de respuesta o buscando palabras clave.
Una vez que haya acortado su cuestionario a una longitud razonable, debería optimizar el orden de las preguntas. Suponiendo que la atención y la concentración de los encuestados siguen siendo buenas al principio y disminuyen hacia el final, las preguntas más importantes deberían formularse lo antes posible. Por el contrario, las preguntas sobre el perfil demográfico deberían dejarse para el final del cuestionario, ya que los encuestados podrán responderlas correctamente incluso si sienten cierta fatiga.
El caso de las encuestas móviles
Y eso nos lleva al último punto. No excluya a los usuarios móviles solo porque la usabilidad de su cuestionario sea deficiente o la encuesta sea demasiado larga, ya que esto sesgará los resultados de su estudio.
A primera vista, los usuarios móviles tienen que hacer un mayor esfuerzo para completar un cuestionario: su pantalla es considerablemente más pequeña y pueden encontrarse en situaciones que consumen parcialmente su atención. La sorprendente verdad es que la investigación móvil muy a menudo va de la mano de una excelente calidad de los datos, porque los investigadores diseñan activamente para una experiencia de encuesta optimizada. Seguir los principios anteriores parece simplemente más plausible cuando se tienen presentes las limitaciones de un dispositivo móvil.
Francamente, no existe eso de “adaptado a móviles”. O un cuestionario es fácil de usar, o no lo es.
Conclusión
Este artículo explora el arte de diseñar cuestionarios online con un enfoque en la psicología de la respuesta a encuestas. Presenta un modelo de cuatro pasos para comprender cómo los encuestados procesan las preguntas y destaca la importancia de minimizar la carga cognitiva para mantener la calidad de los datos. Las estrategias de mejora incluyen optimizar la claridad de las preguntas, proporcionar pistas para la recuperación de información, evitar influir en el juicio y ofrecer opciones de respuesta exhaustivas. También se hace hincapié en la usabilidad y en las actualizaciones del diseño para adaptarse a los patrones modernos de uso de internet. Además, se subraya la importancia de acortar los cuestionarios eliminando preguntas irrelevantes y optimizando la longitud y el orden de las preguntas. En última instancia, el artículo subraya la importancia del diseño de encuestas para preservar la calidad de los datos y el compromiso de los encuestados.