TIPOS DE ERRORES EN LAS ENCUESTAS

Las encuestas estn diseadas para producir estadsticas sobre una

poblacin objetivo . El proceso por el cual se hace esto se basa en inferir
las caractersticas de la poblacin objetivo de las respuestas dadas por
una muestra de los encuestados . En este captulo se describen los dos
tipos de inferencias que se requieren. Tambin se describen los dos tipos
de errores , el sesgo y la variabilidad , que pueden limitar la exactitud de
esas inferencias.
Dos de los principales objetivos de la metodologa de la encuesta son
reducir al mnimo el error en los datos recogidos por las encuestas y
medir el error que necesariamente forma parte de cualquier encuesta .
Los captulos 3 a 9 describen en detalle las estrategias para reducir al
mnimo y el error de medicin. Para apreciar esos captulos , y para
comprender la metodologa de encuestas , primero es necesario
entender lo que entendemos por error.
Como hemos dicho , el propsito de la encuesta es proporcionar
estimaciones estadsticas de las caractersticas de una poblacin
objetivo , un conjunto de personas. Para hacer eso designamos un
subconjunto de esa poblacin , una muestra , de quien tratamos de
recopilar informacin . Una premisa fundamental del proceso de la
encuesta es que mediante la descripcin de la muestra de personas que
realmente responden , se puede describir la poblacin objetivo. La
esperanza es que las caractersticas de la encuesta est diseada para
describir estn presentes en el mismo grado , y se distribuyen de la
misma manera , en la muestra de la respuesta como en la poblacin
objetivo en su conjunto.
La otra caracterstica definitoria de una encuesta es que los encuestados
responden las preguntas . Las respuestas a las preguntas que se utilizan
para describir las experiencias, opiniones y otras caractersticas de los
que respondieron a las preguntas. Una segunda premisa fundamental
del proceso de investigacin de la encuesta es que las respuestas que
da la gente se pueden utilizar para describir con precisin las
caractersticas de los encuestados . El grado en que esas respuestas no
son medidas precisas es la segunda fuente fundamental de error en las
encuestas .
Figura 2.1 muestra en forma grfica el anlisis de forma de obras de
datos de la encuesta y las inferencias sobre el que se basa. El objetivo
es aprender las caractersticas de la poblacin objetivo. El material con
que tenemos que trabajar se compone de las respuestas de los
encuestados dieron en la encuesta. Tabulamos las respuestas y nos
gustara hacer la suposicin de que las respuestas son las medidas
precisas de las caractersticas de los encuestados que estamos tratando
de describir. A continuacin gustara ser capaz de asumir , adems, que
mediante la descripcin de la muestra de los encuestados , que estamos
describiendo con precisin toda la poblacin objetivo.

CARACTERISTI
CAS DE LA
POBLACION
Asunto
Cuan cercanos estn los
ejemplos de gente similar
EJEMPLOS DE MIEMBROS
DE LA POBLACION QUE
RESPONDEN LA S
PREGUNTAS

RESPUESTAS
QUE DAN LOS
ENCUESTADOS

Asunto
Que tan bien las
respuestas miden las
caractersticas a ser
medidas

Algunos aspectos de la metodologa de la encuesta estn diseados

para hacer frente a cmo de cerca una muestra de los encuestados
refleja la poblacin. Algunos aspectos de la metodologa de la encuesta
estn diseados para hacer frente a lo bien que las respuestas a las
preguntas recogidas en la encuesta sirven como medidas de lo que se
pretende medir. El diseo de la encuesta y la forma en que se recogen
los datos, puede afectar a uno o ambos de estos posibles fuentes de
error .
Error asociado a QUIEN RESPONDE
Cada vez que una muestra se extrae de una poblacin ms grande , slo
por azar la muestra puede diferir de la poblacin total de la que se ha
elaborado . Un ejemplo sencillo que los estadsticos gusta usar es lanzar
una moneda , que es cara de un lado y cruz en el otro. Incluso si la
moneda es perfectamente justa, una muestra de 10 vueltas, no siempre
produce 5 caras y 5 cruz . Mientras 5 caras y 5 cruz sern ms comn ,
un cierto nmero de muestras de 10 lanzamientos produce 6 caras o 4
caras ; 3 y 7 caras sern menos comn; 8 2 caras sern an menos
comn ; an ms extremas distribuciones sern cada vez menos
frecuentes , pero incluso los que se producirn si suficientes muestras

de 10 lanzamientos de una moneda en realidad son intentados. De la

misma manera , si una poblacin se compone de 50 % hombres y 50 %
mujeres , cualquier muestra particular puede por casualidad tener ms o
menos las mujeres de lo que cabra esperar de la poblacin en su
conjunto .
En una encuesta por muestreo , por lo general slo tenemos una nica
muestra de la que generalizar. Por casualidad, esa muestra puede y va a
diferir ligeramente de lo que se vera como si se refleja perfectamente la
distribucin de las caractersticas de la poblacin. Uno de los objetivos
de la metodologa de encuesta es reducir al mnimo las diferencias
aleatorias entre la muestra y la poblacin. La forma en que la muestra
se ha diseado y seleccionado puede afectar de cuan cerca cerca es
probable que refleje las caractersticas de la poblacin de la que se
extrajo la muestra .
Un tipo de error de preocupacin para encuestar metodlogos es esta
variacin aleatoria de las verdaderas caractersticas de la poblacin .
Esta variacin , el posible error que se deriva slo del hecho de que los
datos se recogen de una muestra ms que de cada miembro de la
poblacin , se denomina error de muestreo. Un segundo tipo de error
que afecta a la relacin entre una muestra de los encuestados y de la
poblacin es el sesgo . Bias significa que de alguna manera sistemtica
las personas que responden a una encuesta son diferentes de la
poblacin objetivo en su conjunto.
Hay tres pasos en el proceso de recoleccin de datos de una muestra ,
cada uno de los cuales podra , potencialmente , introducir un sesgo en
la muestra :
1. El primer paso consiste en elegir el marco de la muestra , los que en
realidad tienen la oportunidad de ser seleccionado. Si hay algunas
personas en la poblacin objetivo que no tienen ninguna posibilidad en
absoluto de ser seleccionados para la muestra , y si son de alguna
manera consistentemente diferente de aquellos que tienen la
oportunidad de ser seleccionados , la muestra resultante se har con
preferencia en esas formas. A modo de ejemplo , la mayora de las
encuestas en los Estados Unidos dejan de lado las personas que viven
en hogares de grupo, como las crceles , conventos y residencias de
ancianos , y dejan a las personas que no tienen domicilio en absoluto. La
mayora de las encuestas telefnicas dejan fuera los que no tienen
ningn servicio telefnico en absoluto. Para las variables sobre las que
las personas que se incluyen son diferentes de los que se quedan
sistemticamente , las muestras de la que se recogen los datos se har
con preferencia tambin.

2. Si de alguna manera el proceso de seleccin que est en la muestra

no es aleatoria , el resultado podra ser una muestra de los encuestados
que son diferentes a la poblacin objetivo en su conjunto. Por ejemplo ,
si una muestra se compone de personas que trabajan como voluntarios
para estar en una encuesta, es probable que tenga un perfil diferente de
los intereses que los que no son voluntarios .
3.

Por ltimo , el hecho de recopilar respuestas de todo el mundo

seleccionados para estar en la muestra es una tercera fuente potencial
de sesgo. Algunas personas no estn disponibles para contestar
preguntas ; algunas personas no son capaces de responder a las
preguntas , debido a su salud o sus habilidades lingsticas ; algunas
personas se niegan a responder a las preguntas . En la medida en que
los que no estn disponibles , no pueden , o no quieren responder a las
preguntas son diferentes del resto de la poblacin en formas que afectan
a las respuestas de la encuesta , los resultados de la encuesta pueden
estar sesgadas .
Es importante entender la distincin entre los dos tipos de errores en los
datos . El error de muestreo , el primer tipo de error que se discuti , es
el error aleatorio . Por casualidad, a veces habr demasiadas mujeres en
la muestra , a veces demasiado pocos , pero en promedio, una serie de
muestras adecuadamente dibujados tendr muy cerca del mismo
porcentaje de las mujeres que la poblacin en su conjunto. Un reto para
los especialistas en metodologa es reducir al mnimo la variabilidad de
muestra a muestra para aumentar la probabilidad de que las
caractersticas de cualquier muestra dada son muy cercanos a los de la
poblacin como un todo.
Por el contrario , las caractersticas del diseo o la ejecucin de una
encuesta que las muestras de polarizacin puede, en promedio ,
producir estimaciones que son sistemticamente diferentes de la
poblacin objetivo en su conjunto. As que, cuando las muestras se
tomen slo de aquellos que viven en hogares , con exclusin de los que
no tienen hogar y viven en alojamientos de grupo , el ingreso promedio
es probable que sea mayor en aquellos que responden que entre los que
no tuvo oportunidad de responder . Los que estn en los hogares
tambin tienen ms probabilidades de casarse y tener puestos de
trabajo que los que no tienen hogar. Las estimaciones de los que
respondieron a las encuestas basadas en los dueos de casa
sobrestimar sistemticamente el porcentaje de la poblacin que tiene
esas caractersticas.
Un ltimo punto a destacar es que la variabilidad aleatoria de
estimaciones de la muestra , el error de muestreo , y el sesgo asociado
con una muestra, no estn necesariamente relacionados en absoluto. Si

un plan encuesta deja sistemticamente , o es poco representativo ,

algunas personas que son distintivas de manera relevante a los
objetivos de la encuesta , es muy posible tener una estimacin muy
consistente y estable , con muy poco margen de error , es
consistentemente sesgada y infra o sobrestima algunas caractersticas
de la poblacin .
ERROR ASOCIADO A LAS RESPUESTAS
Para entender de error asociado con las respuestas a las preguntas de la
encuesta , uno primero tiene que entender lo que se est midiendo. En
teora , uno podra dividir lo que las encuestas tratan de medir en dos
categoras: los hechos objetivos y estados subjetivos . Hechos objetivos
incluyen la altura de una persona, sea o no una persona trabaja en un
puesto de trabajo , y si es o no una persona vot en las ltimas
elecciones . Estados subjetivos incluyen la cantidad de tiempo que la
persona se ha sentido cansado y si es o no una persona tiene ideas
polticas liberales o conservadores.
Conceptualmente, la forma en que evaluamos las respuestas a una
pregunta es medir qu tan bien se corresponden a la "verdad ". Si
estamos pidiendo a los encuestados acerca de hechos objetivos , como
su altura o si o no estn empleados en un trabajo , en teora podramos
obtener informacin independiente contra el cual evaluar las respuestas
a la pregunta de la encuesta . Podramos medir la altura de la parte
demandada ; podramos comprobar el estado del empleo examinado
registros . Podramos evaluar directamente la precisin de las
respuestas. Por el contrario , no hay forma objetiva de verificar o evaluar
el informe de una persona acerca de cmo gran parte del tiempo que l
o ella se ha sentido cansado. Psicometra , los que se especializan en la
medicin de los estados psicolgicos , piensa en respuestas como que
consta de dos componentes: la puntuacin verdadera , lo que un
reportero perfecto con perfecto conocimiento dara como respuesta ,
adems de algn elemento de error.
xi =ti +ei
donde xi es la respuesta dada por el individuo i
yti es el valor real del individuo i
ei es el error en la respuesta dad por el individuo i

Los errores pueden ser causados por todo tipo de cosas: no entender la
pregunta , no teniendo la informacin necesaria para responder, y

distorsionando respuestas para lucir bien son slo unos pocos ejemplos.
Algunos de los encuestados podran no saber exactamente su altura ;
otros podran redondear su altura arriba o hacia abajo , pensando que al
ser ms alto o ms podra ser ms atractivo . Estimaciones de lo
cansado que han sido durante la semana pasada los encuestados
pueden verse afectados por lo cansado que se sienten en el momento
en que estn respondiendo a las preguntas. El punto es que en la
medida en que las respuestas se ven afectados por factores distintos de
los hechos en los que debera basarse la respuesta, hay un error en la
respuesta.
La validez es el trmino que los psiclogos utilizan para describir la
relacin entre una respuesta y alguna medida de la puntuacin
verdadera . En cuanto a la ecuacin, el objetivo de la psicometra y el
metodlogo encuesta es hacer que el trmino de error ( e) tan pequeo
como sea posible para que las respuestas reflejan principalmente el
resultado cierto.
En cierto modo, el trmino de error en la psicometra es similar al error
de muestreo discutido previa- mente . Si el error asociado con
respuestas es al azar , dando lugar a respuestas que se desvan a veces
en una sola direccin , a veces en otra direccin, el resultado es menor
certeza o confianza en lo bien que las respuestas estn midiendo lo que
queremos medir. Cuanto mayor sea el valor de e ( en la ecuacin ) ,
mayor es la probabilidad de que la respuesta de cualquier individuo
estar en error. Sin embargo, a travs de muchas respuestas de entre
los individuos , la respuesta promedio debe ser el mismo que el valor
verdadero de la media.
Para preguntas diseadas para medir hechos objetivos , pero no los
estados subjetivos , tambin existe la posibilidad de que las respuestas
sern sesgados. De una manera completamente anloga al sesgo con
respecto a las muestras , lo que sesgo significa en este contexto es que ,
en promedio, los errores en las respuestas , la forma en que las
respuestas difieren de la puntuacin verdadera , son ms propensos a
estar en una direccin que en otra . Como ejemplos , los encuestados
sobre subregistro promedio cuntos cigarrillos que fuman y la cantidad
de alcohol que beben, mientras que tienden a sobre- estado o no
votaron . Las estimaciones de estos comportamientos es probable que
sean sesgados - sistemticamente diferentes de las puntuaciones
verdaderas .
La idea de la validez de las medidas subjetivas no se puede observar
directamente, sino que se infiere de los estudios sobre cmo las
respuestas estn relacionadas con otras medidas similares . Los clculos
son ms complicados , pero los resultados finales de las estimaciones de

validez son los mismos: una estimacin de lo bien respuestas reflejan la

construccin que estn diseados para medir ( Cronbach y Meehl , 1955;
Saris y Andrews , 1991) . Por el contrario, porque no podemos medir
directamente el valor real de los estados subjetivos , tampoco podemos
medir el sesgo - el grado en el que responde a diferir sistemticamente
de una puntuacin verdadera en una direccin.
Recapitulando LA NATURALEZA DE ERROR EN LAS ENCUESTAS
INFERENCIA, AL AZAR Y PARCIAL
Tabla 2.1
inferencia
Desde
ejemplo
poblacin

Al azar
a Error
muestreo

Desde respuestas a invalidez

caractersticas reales

sesgo
de Ejemplo: los que son
mayores de 65 aos son
consistentemente menos
propensos a responder a las
encuestas telefnicas , y
por lo tanto estn poco
representadas en los datos
de encuesta telefnica
Ejemplo: Nmero de
cigarrillos fumados posee
una baja constante en la
denuncia de las encuestas.

As, por tanto de las inferencias claves que son crticos para la calidad de
las estimaciones de la encuesta , la inferencia de que las respuestas se
pueden utilizar para describir con precisin una muestra de los
encuestados y que podemos generalizar con precisin a partir de una
muestra de encuestados a una poblacin entera , hay dos tipos anlogos
de error: variabilidad aleatoria en torno a los valores verdaderos y
(sesgados) diferencias sistemticas entre la muestra de entrevistados y
toda la poblacin o entre las respuestas que se dan y los verdaderos
valores para los que estn respondiendo. A lo largo del libro, como se
est discutiendo de error, los lectores deben estar seguros de que saben
qu tipo de error que se quiere decir. Es el problema de la
generalizacin de la muestra de los encuestados en la poblacin o la
generalizacin de las respuestas a la la realidad queremos describir? Es
la preocupacin con respecto al error de centrado en minimizar la
variacin aleatoria, la variacin que pueden por casualidad que nuestras
muestras o nuestras respuestas diferentes de los verdaderos valores de

la poblacin, o hay algn tipo de error sistemtico (sesgo-ando) en

nuestra de datos, ya sea proveniente de tener algunos elementos de la
poblacin insuficientemente representadas en la muestra de los
encuestados o de alguna distorsin sistemtica de respuestas a las
preguntas que nos planteamos? Tabla 2.1 muestra grficamente cuatro
tipos de errores que afectan a nuestras estimaciones de la encuesta.
Cuando se trata de evaluar la confianza se puede tener en las
estimaciones basadas en encuestas , es importante tener en cuenta
todos los cuatro de este tipo de error. Ellos son diferentes , por lo
general son el resultado de los diferentes aspectos de la forma en que se
ejecuta una encuesta , y tienen diferentes impactos en la capacidad de
una encuesta para abordar las cuestiones que est diseado para
responder. Dada esta orientacin a los diversos significados de error ,
ahora procedemos a discutir la importancia de la forma en que una
encuesta se ha diseado y ejecutado por la confianza se puede tener en
los resultados de la encuesta .