A psicologia das respostas em pesquisas
Ao criar um questionário, a gente sempre pensa na experiência do respondente. É por isso que esse artigo precisa começar falando sobre a psicologia das respostas em pesquisas.
Tem muita literatura útil disponível, mas a gente segue o modelo desenvolvido por Roger Tourangeau (2000) no livro *The Psychology of Survey Response*. É uma ferramenta versátil que ajuda a avaliar facilmente a qualidade de um questionário .
De acordo com esse modelo, a mente humana precisa passar por quatro etapas para dar uma resposta adequada sempre que uma pergunta é feita.
Vamos explicar essas etapas com um exemplo: “Quantos comprimidos de aspirina você toma por mês?”
- Entenda a pergunta identificando pistas: você acrescenta contexto à pergunta ao incluir “Aspirina”, o que permite deduzir o significado. Sem contexto, quem responde poderia ficar na dúvida se a pergunta se refere a um tablet eletrônico ou a um comprimido médico. No entanto, pelo contexto, a expressão “tomar um comprimido por mês” se refere a um medicamento.
- Recuperar informações relevantes da memória: assim que o entrevistado entender a pergunta, ele vai começar a recuperar informações relevantes da memória. Se for muito difícil lembrar exatamente quando foi a última vez, ele pode usar outra abordagem e estimar com que frequência, em média, compra um pacote de Aspirina.
- Incorpore as informações disponíveis na sua avaliação: digamos que o entrevistado chegue à conclusão de que compra uma embalagem com 20 comprimidos por ano. Isso significaria que ele toma, em média, cerca de dois comprimidos por mês, o que parece plausível para ele.
- Avalie a resposta e dê uma resposta: dependendo do tipo de pergunta, o respondente vai agora digitar “2” no campo de texto aberto ou selecionar a resposta certa entre as opções oferecidas.
Com a ajuda desse modelo, você pode tentar antecipar os processos mentais dos seus entrevistados para cada uma das perguntas do seu questionário. Não importa se é uma pergunta aberta, de resposta única, de múltipla escolha ou qualquer outro tipo de pergunta.
Cansaço com pesquisas
Não precisa nem dizer que seguir os quatro passos acima vai exigir concentração e, com o tempo, vai cansar quem está respondendo. Quanto mais perguntas você fizer seguidas, mais vai esgotar a atenção e a concentração do entrevistado. Em termos simples, o cansaço de responder a pesquisas é resultado do esforço mental exigido e do tamanho do questionário — então, você deve manter seu questionário curto ou simples, ou melhor ainda, curto e simples.
E isso nos leva à importância da qualidade dos dados. Todo mundo tem um limite individual de carga cognitiva com o qual consegue lidar. Se o nível de cansaço ultrapassar a capacidade mental, o cérebro vai começar a procurar atalhos e heurísticas para reduzir a carga cognitiva. Você poderia, por exemplo, se esforçar menos para buscar informações e usar apenas a primeira coisa que vier à cabeça. Ou poderia simplesmente escolher a opção de resposta “Não sei”. De qualquer forma, esse comportamento, conhecido como “satisficing”, leva a respostas menos precisas e, nas formas mais extremas, a dados sem sentido.
Resumindo, bons questionários mantêm a atenção e a concentração dos respondentes, reduzindo a carga cognitiva da participação. Com isso, ajudam a garantir uma qualidade superior dos dados. É exatamente isso que buscamos ao criar questionários online.
O que você pode fazer para melhorar seu questionário?
Se você quiser melhorar um determinado questionário, pode usar duas estratégias: reduzir o esforço mental dos respondentes em cada pergunta ou encurtar o questionário como um todo.
Reduzindo o esforço mental
Vamos começar pela primeira estratégia. Para reduzir o esforço mental, você deve otimizar cada uma das suas perguntas para cada uma das quatro etapas.
- Use uma linguagem neutra e compreensível. Seja claro e direto na forma como se expressa e não use perguntas encadeadas nem negações duplas.
- Dá algumas dicas para facilitar a recuperação de informações relevantes. Podem ser textos, ilustrações ou fotos, mas também respostas anteriores do entrevistado (“Em uma pergunta anterior, você disse que não gosta do design do produto. O que podemos melhorar nele?”)
- Não influencie o julgamento do entrevistado. Talvez seja a tarefa mais difícil, porque cada detalhe pode fazer diferença. Pelo menos tenta ser cuidadoso e evitar qualquer influência direta sobre o entrevistado (por exemplo, perguntas tendenciosas).
- Ofereça um conjunto completo de opções de resposta. Apresente uma lista completa e bem definida de opções de resposta ou permita que as pessoas deem um feedback sincero.
Essas melhorias são bem óbvias! Mas tem outra coisa que você deveria fazer: otimizar a usabilidade do seu questionário. Se a usabilidade do seu questionário não for intuitiva, o respondente vai ter que se esforçar mentalmente para preenchê-lo. E isso, claro, vai prejudicar a qualidade dos dados da sua pesquisa.
Não basta apenas manter as abordagens já testadas e comprovadas do passado. Só porque você nunca mudou o layout do seu questionário até agora, isso não significa que os dados que você obtém com ele ainda sejam de alta qualidade. A forma como as pessoas interagem com a internet mudou, e seu questionário deve sempre refletir os novos padrões de uso.
É por isso que atualizamos constantemente o design e as funcionalidades do nosso mecanismo de pesquisas. Entre os muitos aspectos que levamos em conta estão os padrões técnicos mais recentes, novos dispositivos, suas especificações e mudanças no comportamento dos usuários.
Reduzindo a extensão dos questionários
Vamos dar uma olhada na segunda estratégia para melhorar um questionário: encurtá-lo para reduzir o tempo que exige de esforço mental.
Infelizmente, muitas vezes os questionários online são muito longos. Como não tem um entrevistador, que custa caro, fica fácil incluir perguntas irrelevantes, só pra coletar mais dados já que a gente tá fazendo isso mesmo. Isso não era visto como um problema há muito tempo, mas os questionários para celular trouxeram um novo fôlego a essa discussão recentemente.
Sabemos que a qualidade dos dados geralmente diminui depois de 20 minutos (ligeiramente, dependendo do tema e de outros fatores) e que não há nenhuma solução eficaz para isso. Às vezes, nos pedem para aumentar o incentivo. Embora isso possa motivar o respondente a preencher um questionário longo, não é adequado para aumentar a capacidade mental ou reduzir a carga cognitiva. Então, você pode manter a disposição de participar, mas os incentivos não melhoram a qualidade dos dados.
Então, antes de mais nada, você deve eliminar todas as perguntas irrelevantes e os itens de preenchimento. Essa é provavelmente a tarefa mais difícil, mas, como regra geral, você só deve coletar os dados de que realmente vai precisar para responder à sua questão de pesquisa. Em segundo lugar, encurta o texto das próprias perguntas (Dica: o ideal seria um máximo de 140 caracteres, como no Twitter). Se os textos forem muito longos, os entrevistados podem não lê-los com atenção e acabar adivinhando a pergunta só de ler as opções de resposta ou procurar palavras-chave.
Depois de reduzir o seu questionário a um tamanho razoável, você deve otimizar a ordem das perguntas. Partindo do princípio de que a atenção e a concentração dos entrevistados ainda estão boas no início e vão diminuindo à medida que o questionário avança, as perguntas mais importantes devem ser feitas o mais cedo possível. Por outro lado, as perguntas sobre o perfil demográfico devem ficar no final do questionário, já que os respondentes conseguirão respondê-las corretamente, mesmo que já estejam um pouco cansados.
O caso das pesquisas por celular
E isso nos leva ao último ponto. Não exclua os usuários de dispositivos móveis só porque a usabilidade do seu questionário é ruim ou a pesquisa é muito longa, pois isso vai distorcer os resultados do seu estudo.
À primeira vista, os usuários de dispositivos móveis precisam se esforçar mais para preencher um questionário: a tela deles é bem menor e podem estar em situações que ocupam parte da atenção deles. O que é surpreendente é que as pesquisas em dispositivos móveis costumam vir acompanhadas de uma excelente qualidade de dados, porque os pesquisadores se empenham em criar uma experiência de pesquisa otimizada. Seguir os princípios acima parece simplesmente mais faz sentido quando a gente leva em conta as limitações de um dispositivo móvel.
Falando francamente, não existe essa coisa de “otimizado para celular”. Ou um questionário é fácil de usar, ou não é.
Conclusão
Este artigo explora a arte de criar questionários online com foco na psicologia das respostas a pesquisas. Ele apresenta um modelo de quatro etapas para entender como os respondentes processam as perguntas e destaca a importância de minimizar a carga cognitiva para manter a qualidade dos dados. As estratégias de melhoria incluem otimizar a clareza das perguntas, fornecer pistas para a recuperação de informações, evitar influenciar o julgamento e oferecer opções de resposta abrangentes. Também são enfatizadas atualizações de usabilidade e layout para se adequar aos padrões modernos de uso da internet. Além disso, é muito importante encurtar os questionários, eliminando perguntas irrelevantes e otimizando o comprimento e a ordem das perguntas. No fim das contas, o artigo destaca a importância do planejamento da pesquisa para garantir a qualidade dos dados e o envolvimento dos entrevistados.