Fiabilidad y validez en la investigacin

[11.1] Cmo estudiar este tema?

[11.2] Errores en los sistemas de medida
[11.3] Fiabilidad de un instrumento. Consistencia interna
[11.4] Validez de un instrumento

TEMA

11

[11.5] Control en la investigacin

Esquema

TEMA 11 Esquema

Fiabilidad y validez en la investigacin

Errores en los sistemas de medida

Error aleatorio
Error sistemtico

Fiabilidad de un instrumento
Estabilidad
Consistencia interna
Equivalencia

Control de la investigacin

Validez interna

Validez externa
Amenazas

Factores histricos
Seleccin de sujetos
Maduracin
Sensibilizacin
Fluctuacin de los
instrumentos de medida
Contaminacin
Reactividad

Falta de
representatividad
de la muestra

Mtodos de Investigacin Cientfica y Artstica

Validez de un instrumento
Validez de contenido
Validez de criterio
Validez de constructo

Mtodos de Investigacin Cientfica y Artstica

Ideas clave
11.1. Cmo estudiar este tema?
Para estudiar esta leccin lee las Ideas Clave que se presentan a continuacin.
Los puntos ms relevantes de este tema son:
Todos los instrumentos de medida tienen en la medicin un componente de error
que puede ser de dos tipos: errores sistemticos y errores aleatorios.
Las caractersticas que determinan la calidad de un instrumento de medida son la
fiabilidad y la validez que pueden ser estimadas por varios mtodos.
La validez de un estudio se analiza en dos aspectos: validez interna que se refiere a
la validez acerca de los resultados y validez externa o capacidad para generalizar
dichos resultados
Es necesario analizar las posibles amenazas a la validez que pueden producir sesgos
en los resultados de un estudio.
Con el estudio de este tema, el alumno debe:
Conocer los principales errores en los sistemas de medida
Definir y distinguir los conceptos de validez interna y validez externa
Conocer los factores que pueden comprometer la validez de un estudio

11.2. Errores en los sistemas de medida

Los instrumentos de medicin no son infalibles. El valor obtenido en dicha
medicin se descompone en un componente verdadero (que nunca se conoce,
puesto que siempre hay error) y uno errneo o error de medicin (que tampoco se
conoce, pero puede ser estimado).

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

Podemos clasificar los errores de medida en dos tipos:

Errores aleatorios
Errores sistemticos
Errores aleatorios: estn relacionados con el azar. Son debidos a numerosas causas
incontrolables e imprevisibles, que dan lugar a resultados distintos cuando se
repite la medida en las mismas condiciones. Se producen durante la recogida de
datos cuando se utilizan muestras.
Este error desaparece cuando se trabaja con toda la poblacin. Suelen ser errores
graves y fcilmente reconocibles por sus consecuencias en los resultados. Se
atribuyen a factores personales y transitorios como la fatiga o el estado de nimo.
Tambin estn causados por situaciones puntuales: la presencia de otras personas,
la diferente forma de usar los instrumentos de medida, al empleo de diferentes
personas para hacer la entrevista y a fallos en el registro de datos.
Errores sistemticos. Son debidos a factores constantes como consecuencia de
emplear un mtodo que no es adecuado, un instrumento incorrecto o a
emplearlo en situaciones en las que no est indicado. Puede deberse a factores tales
como la inteligencia, carcter y cultura de los sujetos estudiados y de los que
realizan la investigacin. Estos errores se cometen en todas las medidas realizadas y
son evitables. Ejemplo: la tendencia de los participantes a dar una impresin favorable
de s mismos (es un factor frecuente que hay que tener en cuenta).
Tambin es causa de error sistemtico la estructura del instrumento de medida.
Por ejemplo, las preguntas abiertas pueden proporcionar distinta informacin que las
cerradas o las respuestas orales pueden no coincidir con la respuesta escrita a la misma
pregunta. Incluso el orden en que aparecen las preguntas puede influir en la recogida
de la informacin.

11.3. Fiabilidad de un instrumento

Fiabilidad y validez son unas caractersticas que determinan la calidad del
instrumento de medida (ambas se evalan en grados). La fiabilidad es una

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

condicin previa para determinar la validez de un instrumento, pero no es una

condicin suficiente para establecerla.
La fiabilidad (o confiabilidad) de un instrumento para medir datos cuantitativos es la
precisin y constancia de los resultados en sucesivas mediciones, es decir,
que los resultados sean comparables en situaciones comparables. Es, tambin, el grado
de congruencia con el que se mide el atributo. La fiabilidad se puede estimar por
distintos mtodos, los que han sido objeto de mayor estudio son:
La estabilidad: es el grado en que se pueden obtener los mismos resultados en
aplicaciones repetidas, en las mismas condiciones y en los mismos sujetos.
Se puede evaluar aplicando en dos ocasiones una misma prueba a una
muestra de individuos, en intervalo de dos-cuatro semanas (fiabilidad de una
segunda medida).
Se utiliza el coeficiente de
correlacin (r) para estimar la
confiabilidad,

utilizndose

los

datos de las dos pruebas. Un

coeficiente
puede

superior

07

considerarse

satisfactorio. Cuanto menor sea

la diferencia entre las dos pruebas
este coeficiente se acercar ms a
uno (correlacin perfecta si las
dos medidas fueran idnticas).
Es un procedimiento fcil y directo para calcular la confiabilidad pero tiene algunas
desventajas:
o Algunos rasgos estudiados cambian con el tiempo.
o Opiniones, conductas, conocimientos... pueden modificarse cuando hay alguna
experiencia entre la primera y segunda prueba.
o Los sujetos pueden recordar las preguntas y sus respuestas de la primera
prueba.
o Los sujetos pueden experimentar un cambio solo por el hecho de
realizar la primera prueba (reflexin y cambio de opinin).

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

Es adecuado para valorar caractersticas perdurables como la personalidad y

las aptitudes u otras relativamente constantes como la autoestima.
Consistencia interna. Se dice que un instrumento tiene congruencia interna u
homogeneidad cuando todas las subpartes que lo integran miden una misma
caracterstica. Se estima por la evaluacin de las correlaciones o de la
covarianza de todos los tems simultneamente. Cuanto ms correlacionados
estn los tems mayor es la consistencia interna del instrumento.
o Alfa de Cronbach. Es la utilizada ms frecuentemente cuando existen varias
opciones para establecer las puntuaciones (como en la escala Likert). El valor
mnimo aceptable de este coeficiente es 0,7. Valores menores indican que la
consistencia interna del instrumento es baja.
o Correlacin tem- total de tems. Establece el grado de correlacin entre
cada enunciado individual de una escala de medida y la puntuacin total de la
misma.
Equivalencia para estimar la fiabilidad:
o Cuando diferentes observadores o investigadores utilizan un mismo
instrumento para medir el mismo fenmeno.
o Cuando se aplican a la par dos instrumentos que se cree paralelos.
En cuanto al primer caso la formacin de los observadores, su carga interpretativa,
lleva a mayor o menor error en los resultados. La fiabilidad entre observadores o entre
un mismo observador en dos ocasiones se puede estimar de varias maneras:
Calculando la proporcin de los juicios atribuidos a las mismas categoras por
los mismos evaluadores.
Correlacionando los resultados proporcionados por los observadores para cada
enunciado.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

11.4. La validez de un instrumento

La validez de un instrumento se mide en grados. Es decir, no se puede decir que
una herramienta posee o carece de validez. No se valida un instrumento sino la
aplicacin del mismo.
Ejemplo: la medicin de la ansiedad, que puede ser vlida en caso de cantantes antes de
un concierto, puede no serlo en un grupo de estudiantes antes de realizar un examen
final.
La validez tiene relacin con la exactitud con la que se mide un concepto. La
validez depende del error sistemtico representado, sobre todo, por factores personales
que son constantes en los participantes.
Un dispositivo de medicin que no sea fiable de ningn modo puede ser
vlido (no son cualidades independientes). Sin embargo, un instrumento puede
ser fiable sin ser vlido.
Ejemplo: pretendemos medir la inteligencia con el permetro craneal. Podran
obtenerse mediciones muy exactas y precisas pero no seran indicadores vlidos de
inteligencia.
Una elevada fiabilidad no es prueba de la validez de un instrumento para un
propsito concreto.
Validez de contenido
Se refiere a si un conjunto de enunciados es representativo del concepto (constructo)
que se va a medir. Para que exista una validez de contenido:
Los enunciados se deben plantear a partir de un campo de estudio o de un marco
terico.
Ha de conceptualizarse (identificando los componentes del concepto) y definirse
perfectamente el constructo.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

La validez de contenido de un instrumento se basa en el criterio del investigador,

pues no existe mtodo completamente objetivo. Tambin se puede recurrir a la
validacin por expertos.
Validez de criterio
Un instrumento de medida para un concepto puede ser vlido (tener relacin) tambin
con otro criterio. Es decir, si sus resultados presentan una alta correlacin con otro
criterio.
En este caso, el instrumento constituye un predictor. Se aplica cuando el
investigador quiere hacer inferencia (sacar conclusiones) con los resultados de la
prueba en otra variable denominada criterio. Se predice sobre el criterio en base
al puntaje alcanzado en la prueba. Ejemplo: puntaje de admisin en el
conservatorio con referencia al rendimiento acadmico posterior.
Una vez que se selecciona un criterio, la validez puede evaluarse correlacionando los
puntajes del instrumento predictor con los de la variable criterio.
Ejemplo: se disea una escala para evaluar la capacidad docente de un profesor de
direccin.
El instrumento de medida se aplica a una muestra de sujetos a los que se solicita al
mismo tiempo que indiquen el nmero de conciertos que han dirigido. La variable
conciertos dirigidos sera la que se toma como variable criterio pensando que puede
correlacionar con la puntuacin obtenida con el instrumento elaborado para valorar la
capacidad de formar alumnos en direccin.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

Validez de constructo. El instrumento mide el concepto abstracto que

estamos investigando?
Cuanto ms abstracto es el concepto ms difcil ser determinar la validez
de constructo. La validez de constructo se relaciona con la teora y con la
conceptualizacin terica. Para determinar la validez de constructo se utilizan
algunas de estas tcnicas:
Tcnica de grupos conocidos. El instrumento se aplica a grupos en los que se
supone que diferirn con respecto al atributo de inters, por poseer una
caracterstica diferente conocida.
Anlisis factorial. Es una tcnica estadstica que agrupa en factores los tems de
una escala.
Adaptacin y validacin de instrumentos de medida
Para utilizar una escala en otro idioma debe validarse por la tcnica de doble
traduccin. Consiste en hacer una traduccin que posteriormente se retraduce
a la lengua original comparndose las dos versiones en varias ocasiones
hasta conseguir el mayor grado de perfeccin. Hay que tener en cuenta tambin los
factores culturales y sociales. La utilizacin de una escala creada para una
poblacin diana diferente puede tener valores diferentes de fiabilidad y validez si se
usa con otra poblacin.

11.5. El anlisis de contenido

El investigador debe analizar si los mecanismos de control de la investigacin y el
diseo utilizado aportan un cierto grado de validez interna y externa al estudio.
Validez interna
Un estudio tiene validez interna cuando los resultados obtenidos son debidos a las
variables que han sido estudiadas y no a otras variables externas. Es decir, cuando se
han excluido otras posibles explicaciones de los resultados y estos solo son
atribuibles al efecto de la variable independiente sobre la variable de inters.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

Los estudios, por tanto, que tienen mayor grado de validez interna son los
estudios experimentales ya que, este tipo de diseo tiene como objetivo controlar
las variables extraas y descartar cualquier alternativa que pueda explicar los
resultados.
En otros diseos cuasiexperimentales, el investigador tiene que valorar los factores
que amenazan la validez interna. Algunos de estos factores son:
Factores histricos: se refiere a factores externos, hechos o situaciones que
aparecen en el transcurso de la investigacin y que pueden afectar a la variable
dependiente que interesa en la investigacin.
Seleccin de sujetos. La asignacin de los sujetos a los grupos no se hace
de forma aleatoria, hay que tener presente que los grupos pueden, de partida no
ser equivalentes y pueden mostrar diferencias que no tienen que ver con las que se
producen como efecto de la intervencin.
Maduracin: se refiere a los cambios que experimentan los sujetos participantes
en el transcurso del tiempo que dura el estudio y no son producidos por el efecto de
la intervencin.
Estos cambios no son solo debidos a la edad o a procesos de desarrollo, sino a
cualquier cambio que sufran los individuos por el paso del tiempo. Por
ejemplo, en un programa para estimular el desarrollo motor en nios, adems de los
logros debidos al programa, el propio proceso de madurez influye tambin en dicho
desarrollo.
Sensibilizacin: esta amenaza aparece en diseos en los que se aplica una
preprueba antes de la intervencin; sobre todo cuando se plantean a los sujetos
cuestiones controvertidas que habitualmente no son planteadas, y que son los datos
proporcionados por los propios sujetos. Estos se sensibilizan con una cuestin que
antes ni siquiera se haban planteado y esto puede producir cambios de actitudes
aun en el caso de que no se realizara la intervencin.
Fluctuacin en los instrumentos de medida o la diferente manera de tomar los
datos y los distintos observadores pueden tener efectos indeseados sobre los
resultados.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

La contaminacin: este sesgo se produce cuando los grupos experimental y

control no estn aislados y hay una filtracin de informacin acerca de la
intervencin que puede influir en los resultados del grupo control.
Efecto de reactividad: los participantes pueden reaccionar solo por el hecho de
conocer que estn siendo estudiados (efecto Hawthorrne).
Validez externa
La validez externa se refiere a la posibilidad de generalizar los resultados a otras
poblaciones y a otros contextos diferentes a los considerados en el estudio.
Aunque hay estudios que no pretenden esta generalizacin, es caracterstica de la
investigacin reconocer relacin entre factores que sean extensibles a otras
poblaciones y que aporten una mejora para la condicin humana.
El investigador est obligado a analizar a qu poblaciones, ambientes y
condiciones son aplicables sus resultados. Las amenazas a la validez externa
tienen que ver con la representatividad de los individuos de la muestra y con
el proceso de recogida de datos. El trabajo de investigacin debe tener en cuenta
un buen sistema de muestreo, a ser posible aleatorio, pensado y diseado para que
asegure la validez externa.
Sesgos
Son las condiciones que hacen que los resultados de un estudio resulten
falseados. Las fuentes de sesgo son: el investigador, la muestra, los instrumentos de
medida y los datos. Una de las funciones del diseo es precisamente descubrir las
posibles fuentes de sesgo y eliminarlas del estudio.

TEMA 11 Ideas clave

Mtodos de Investigacin Cientfica y Artstica

Lo + recomendado
No dejes de leer
Validez y fiabilidad
En esta presentacin de Laura Martnez se exponen los conceptos de fiabilidad y
validez de forma clara y comprensible, a pesar de tratarse de un material enmarcado en
las ciencias de la salud.
Accede al recurso a travs del aula virtual o desde la siguiente direccin web:
http://www.cochrane.es/files/ValidezFiabilidad_0.pdf

No dejes de ver
Anlisis de datos mediante la Teora Fundamentada
Este vdeo contiene una clase impartida por el profesor de la Universidad Politcnica de
Cartagena, Dr. Gregorio Snchez Marn, enmarcada dentro del Curso de Metodologa
de Investigacin y que versa sobre la Fiabilidad y la Validez.

Accede al vdeo a travs del aula virtual o desde la siguiente direccin web:
https://www.youtube.com/watch?v=RvUIIIoY7w4

TEMA 11 Lo + recomendado

Mtodos de Investigacin Cientfica y Artstica

+ Informacin
A fondo
La fiabilidad de los test y las escalas
El siguiente documento se trata de un material didctico del profesor Pedro Morales
que se encuentra disponible para su consulta en la pgina web de la Universidad
Pontificia de Comillas. El alumno que desee consultar este interesante documento
encontrar informacin acerca de la fiabilidad y validez desde el contexto de las
ciencias sociales. Aborda estos temas en profundidad, haciendo un recorrido por las
diferentes formas de medir la fiabilidad y aspectos que influyen sobre la misma.
Accede al artculo a travs del aula virtual o desde la siguiente direccin web:
http://web.upcomillas.es/personal/peter/estadisticabasica/Fiabilidad.pdf

Webgrafa
Pedro Morales
Se trata de la pgina web del profesor Pedro Morales Vallejo de la Universidad
Pontificia Comillas de Madrid. El alumno que decida consultar esta web encontrar
numerosos e interesantes materiales didcticos relacionados con la metodologa de la
investigacin cuantitativa que, sin duda, le podrn resultar de mucho inters y le
aportar informacin expuesta de manera sistemtica y aclaratoria.

Accede a la pgina web a travs del aula virtual o desde la siguiente direccin:
http://web.upcomillas.es/personal/peter/

TEMA 11 + Informacin

Mtodos de Investigacin Cientfica y Artstica

Bibliografa
Bell, J. (2002). Cmo hacer tu primer trabajo de investigacin. Barcelona: Gedisa.
Hernndez Sampieri, C.R., Fernndez, C. & Baptista, P. (1991). Metodologa de la
Investigacin. Mxico: McGraw-Hill
Morales, P. (2007). La fiabilidad de los tests y escalas. Universidad Pontificia de
Comillas.
Morales, P. (2013). Investigacin experimental, diseos y contrastes de medias.
Madrid: Universidad Pontificia de Comillas.

TEMA 11 + Informacin

Mtodos de Investigacin Cientfica y Artstica

Test
1. Un error aleatorio en la medida con un instrumento
A. Ocurre siempre y es evitable.
B. Es inevitable pero puede que no ocurra.
2. Un error sistemtico en la medida con un instrumento
A. Ocurre siempre y es evitable.
B. Es inevitable pero puede que no ocurra.
3. Indica si considera verdadera o falsa la siguiente afirmacin: El error aleatorio en
la medida desaparece a media que aumenta el tamao de la muestra.
A. Verdadera.
B. Falsa.
4. Indica si consideras verdadera o falsa la siguiente afirmacin: La validez es una
condicin previa para determinar la fiabilidad de un instrumento, pero no es una
condicin suficiente para establecer la fiabilidad.
A. Verdadera.
B. Falsa.
5. La precisin de un instrumento para medir datos cuantitativos y la constancia de
los resultados en sucesivas mediciones Qu los resultados obtenidos con el
instrumento sean comparables en situaciones comparables. Estas afirmaciones se
estn refiriendo a:
A. La fiabilidad de un instrumento.
B. La validez de un instrumento.
6. La exactitud con la que se mide un concepto. Esta afirmacin se est refiriendo a:
A. La fiabilidad de un instrumento.
B. La validez de un instrumento.
7. El alfa de Cronbach es un coeficiente que:
A. Mide la consistencia interna de un instrumento de medida.
B. Se calcula mediante anlisis de covarianza de todos los tems de un instrumento.
C. Las dos anteriores son ciertas.

TEMA 11 Test

Mtodos de Investigacin Cientfica y Artstica

8. Si tuvieras que explicar con palabras sencillas qu es la fiabilidad de un instrumento,

cul de las siguientes afirmaciones elegiras?
A. Es que si se aplica el instrumento

a los mismos sujetos y en las mismas

condiciones obtendra los mismos resultados.

B. Es cuando todas las preguntas o tems de las que est compuesto el instrumento
miden lo mismo.
C. Las dos definiciones anteriores se aplican al concepto de

fiabilidad de un

instrumento.
9.

Al estudiar la fiabilidad de un instrumento de medida calculamos el alfa de

Cronbach con un resultado de 0,4:

A. La fiabilidad del instrumento es baja.
B. Tiene una aceptable fiabilidad.
10. Cuando los resultados obtenidos pueden atribuirse a las variables estudiadas y se
excluyen otras posibles explicaciones de los resultados, nos estamos refiriendo a:
A. Validez externa.
B. Validez interna.
11. El muestreo, la representatividad de los individuos seleccionados en la muestra y la
recogida de datos, son aspectos que pueden amenazar
A. La validez externa.
B. La validez interna.
12. La contaminacin y la reactividad son fenmenos que pueden ser amenazas a:
A. La validez externa.
B. a validez interna.

TEMA 11 Test