QUESTIONRIOS

COMO ANALISAR RESPOSTAS

Observing The User Experience | Mike Kuniavsky
ALUNA: BIANCA GALVO | PROFESSOR: LUIZ AGNER
DISCIPLINA: FERRAMENTAS DE COLETA DE DADOS
CURSO: ERGODESIGN DE INTERFACES
INTRODUO
ARTE CINCIA
Analisar resultados de questionrios uma tarefa que tangencia tanto a arte como
a cincia, j que a interpretao humana une-se tabulao dos nmeros. Devido
possibilidadede de erros determinada por ambiguidades, exageros nas respostas
ou perguntas mal formuladas, o ideal que sejam usados mtodos mais simples de
anlise, como: contagem e comparao.
CONTAGEM | MDIA
Antes de fazer a contagem sempre interessante analisar o resultado cru da pesquisa,
pois dessa maneira j possvel ter uma ideia das tendncias antes de obter resultados.
Depois de somar todas as respostas, para obter o resultado possvel calcular a mdia,
a moda e a mediana.
A mdia calculada a partir
da soma dos valores (variveis)
multiplicados pelo nmero de
suas ocorrncias e divididos
pelo nmero total de respostas
(N). Porm, a mdia pode ser
influenciada caso algumas
respostas apresentem valores
extremos. Por isso importante
considerar a anlise pura da
pesquisa.
MDIA
(X . 2) + (Y . 3) + ... + (Z . 5)
N
CONTAGEM | MODA
A moda pode ser usada para avaliar se a
mdia est distorcida por uma minoria,
pois faz o mesmo clculo usando apenas
o valor mais comum nas respostas. Se
o site atrai dois perfis diferentes de
pessoas, os valores da mdia e da moda
sero diferentes. A diferena entre a
mdia e a moda importante para
identificar se h um grupo homogneo
ou vrios subgrupos na amostra.
MODA
(W . 8)
N
CONTAGEM | MEDIANA
A mediana o valor encontrato na
posio do meio do somatrio de
respostas. Somando o nmero de
respostas (N) a 1 e dividindo por 2
decobre-se o elemento cujo valor
encontra-se na metade dos resultados.
Da mesma forma, a mediana tambm
pode mostrar se a mdia est afetada,
caso seu valor seja diferente da mesma.
MEDIANA
(N + 1)
2
COMPARAO
A comparao o verdadeiro poder dos questionrios para alcanar o resultado
desejado. Como exemplo, pode-se comparar as perguntas: Com que frequncia visita
o site? e Porque est visitando o site hoje?. Uma das tcnicas de comparao que
pode ser usada para isso a tabulao cruzada, que funciona da seguinte maneira:
IDENTIFICAR AS VARIVEIS INDEPENDENTES
Aquelas que afetam o sujeito da pergunta.
AGRUPAR AS RESPOSTAS
De acordo com as diferentes variveis independentes.
TABULAR AS RESPOSTAS DAS VARIVEIS DEPENDENTES
Para cada varivel independente, quais as dependentes.
GERAR UMA TABELA
Com os valores de ambas as variveis a fim de compar-las.
1.
2.
3.
4.
COMPARAO
Com a tabulao cruzada possvel comparar os resultados de duas variveis, no caso
entre duas perguntas, e assim entender como uma afeta a outra. A tabela abaixo cruza
os dados das duas perguntas para determinar como a frequncia de visitao afeta o
objetivo do usurio ao acessar um site de e-commerce.
INDEPENDENTES
DEPENDENTES
Ver
novidades
10
74
35
50
5
55
60
1
10
120
80
100
Comprar
produto
Indicar
produto
1 vez por ms 1 vez por semana 1 vez por dia TOTAL
ESTIMANDO ERROS | ERRO PADRO
Como toda pesquisa usa apenas uma amostra do total de usurios, qualquer resultado
encontrado apenas uma estimativa. Porm, existem formas de calcular se o resultado
alcanado est prximo ou no do real. O erro padro uma forma de medir a preciso
dos clculos.
Na equao, o P a porcentagem
de respostas adquiridas, o Q
(1 - P) e o N o nmero de
amostras (usurios) estudados
no total. Quanto menor o valor
do erro padro, mais preciso o
resultado.
ERRO PADRO
P . Q
N
=
ESTIMANDO ERROS | DESVIO PADRO
O desvio padro uma medida de confiana. Ele mostra a probabilidade de a resposta
real estar ou no na poro definida pelo erro padro. A partir de uma distribuio
normal, os valores utilizados para a anlise so: 68% de chance de o valor real estar
dentro da variao de um erro padro, 95% de chance de o mesmo estar dentro da
variao de dois erros padres e 99% de estar dentro de trs erros padres.
O intervalo de confiana
mostra como o erro padro
e o desvio padro relacio-
nam-se.
O valor adquirido na per-
gunta (50%) fica no centro e
a porcentagem encontrada
como erro padro (3%) gera
os intervalos que determi-
nam o desvio padro.
DESVIO PADRO
68%
95%
99%
50% 47% 44% 41% 53% 56% 59%
ERROS DE MEDIO
Mesmo que a partir desses clculos esteja provada a preciso do resultado, ainda assim
possvel ocorrer erros sistemticos, que podem afetar os dados de forma geral. Se
as perguntas apresentarem ambiguidade e consequentemente erros de interpretao,
sistematicamente o resultado estar errado, pois o mesmo no estar respondendo
corretamente dvida inicial da pesquisa.
TIRANDO CONCLUSES
O importante do questionrio que as perguntas feitas no incio da pesquisa sejam
respondidas. Antes de chegar a qualquer concluso necessrio avaliar se o resultado
cumpriu tal propsito. Assim sendo, quando tira-se concluses sobre os dados, alguns
proplemas podem ocorrer:
CONFUNDIR CORRELAO COM CASUALIDADE
Dois eventos simultneos podem no estar relacionados.
NO DIFERENCIAR SUBPOPULAES
As tendncias podem vir de mais de um grupo de usurios.
CONFUINDIR CRENA COM VERDADE
As respostas podem representar o que o usurio apenas
acredita ser verdade, e no a verdade de fato.
1.
2.
3.
TIRANDO CONCLUSES
Alm disso, existem os problemas de natureza das respostas das pessoas, que devem
ser levados em considerao ao interpretar os resultados:
AS PESSOAS QUEREM TUDO
Alguns no priorizam, marcam todas as opes possveis.
AS PESSOAS VO RESPONDER SEM TER CERTEZA
Alguns tem medo de no ter opinio.
AS PESSOAS EXAGERAM
Alguns dizem ser o que no so.
AS PESSOAS TENTAM ADVINHAR O MOTIVO DA PESQUISA
Alguns tentam responder o que a pesquisa quer.
AS PESSOAS MENTEM
Alguns sentem vergonha ou no esto confortveis.
1.
3.
2.
4.
5.
CONCLUINDO A PESQUISA
Aps a anlise do questionrio, no se deve considerar a pesquisa completa. Os
questionrios mostram como as pessoas se sentem e pensam sobre si mesmas ou
sobre o produto, mas so limitados para dizer porque elas se sentem assim. Por isso
so necessrios outros tipos de pesquisa qualitativa como:
grupos de foco, para entender os valores das pessoas;
investigao contextual, para entender o comportamento das pessoas;
testes de usabilidade, para entender as decises e percepes das pessoas.
Outras dicas para concluir a pesquisa de forma satisfatria so:
rastrear os questionrios apresentando o mesmo repetidamente para grupos de
pessoas similares;
refinar as caractersticas do grupo que participa dos questionrios;
lanar questionrios pr e ps algum evento ou mudana para avaliar os
resultados dos mesmos.