Вы находитесь на странице: 1из 65

Curso Evaluacin de Programas III

Mdulo 1:
Validacin de
instrumentos
05 de diciembre de 2014

RELATOR: Osvaldo Blanco


www.socialis.cl
@_socialis
contacto@socialis.cl

JORNADA: 1

VARIABLES LATENTES
(CONSTRUCTOS) Y
VARIABLES MANIFIESTAS

Variables latentes (constructos)


variables observadas (manifiestas).

v/s

Una variable manifiesta es directamente


observable (por ejemplo: sexo) y puede ser
medida con relativa facilidad.

Una variable latente o constructo no es


directamente observable.
Ms bien es inferida a partir de otras
variables observadas .

Tratemos de medir el concepto Actitud


hacia la violencia contra las mujeres.
Antes de hacerlo, necesitamos decidir
qu consideraremos como indicadores
vlidos de la actitud (positiva o negativa)
hacia el fenmeno.

Veamos una variable compleja: la


satisfaccin respecto de la atencin
recibida
en
determinado
servicio
pblico.
Decidir qu es o no es satisfactorio en
relacin a la atencin del servicio
pblico es algo complejo y abstracto.

A las variables latentes


(constructos) es necesario
hacer surgir mediante tems o
indicadores manifiestos.

Las variables manifiestas (directamente


observables) pueden operacionalizarse
en forma relativamente simple.
Slo
requerimos
una
definicin
operacional lo suficientemente clara.
La relacin entre el dato y la variable es,
habitualmente, unvoca (relacin lineal
con un indicador).

Los constructos en cambio pueden medirse, pero su


medicin es compleja.
Lo primero que necesitamos hacer, es identificar, sobre
la base de nuestro conocimiento terico, la naturaleza
matemtica de la variable. Es cuantitativa ( continua)
o cualitativa ( categrica)?.
Ej.: Nivel Socio Econmico

Luego, necesitamos identificar indicadores de la


variable latente (consecuencias o antecedentes
observables de la variable latente).

RELACIONES ENTRE CONSTRUCTOS E


INDICADORES

Tres consideraciones bsicas:


1. Cuntos indicadores utilizar?
2. Qu tipo de relacin entre las
variables latente y los
constructos?
3. Cul es la direccin causal de la
relacin?

CUNTOS INDICADORES?
En algunos casos se utiliza un indicador.
Lo habitual es preferir indicadores
mltiples; normalmente se recomiendan
tres.
Ejemplo: Nivel Socio Econmico
Ingreso Mensual, en pesos
Nivel Educacional (aos de estudio)
Nmero de bienes

OPERACIONALIZACIN

OPERACIONALIZACIN

OPERACIONALIZACIN

La operacionalizacin consiste en los


siguientes pasos:
1.Representacin terica del concepto.
2.Especificacin del concepto
descomponindolo en distintas
dimensiones.
3.Eleccin de indicadores (preguntas de la
encuesta) para cada dimensin.

Es importante distinguir entre la definicin


sustantiva o terica de una variable y la
definicin operacional.
La definicin sustantiva o terica es la
definicin derivada desde la teora y que
demarca los lmites conceptuales del
constructo.

ESCALAS DE
ACTITUDES

La
escala
LIKERT

La
escala
Likert
es
un
instrumento muy til para
medir un tipo especial de
constructo: las actitudes.

ESCALA LIKERT
La escala Likert se emplea para medir el grado
en que se da una actitud o disposicin de
nimo permanente respecto a cuestiones
especficas en un sujeto determinado.
Dada su condicin numrica como instrumento
de medida, se pueden aplicar tcnicas
estadsticas de mayor precisin, as como
tambin hacen ms viables el contraste y
comprobacin en nuevas investigaciones.
Las escalas de actitud pueden usarse bien de
forma independiente o bien pueden insertarse
al interior de un cuestionario.

ESCALA LIKERT
ACTITUD: disposiciones de nimo ms menos
permanentes formadas por un conjunto de
convicciones y sentimientos que hacen que el
sujeto acte y se exprese en actos y opiniones.
Las actitudes comprenderan tres elementos:
1.Un factor ideolgico (ideas, prejuicios,
convicciones)
2.Un factor sentimental (simpata / antipata
hacia cosas o personas)
3.Un factor reactivo que impulsa a pensar y
actuar en diversas situaciones sociales en
consonancia con las convicciones y
sentimientos profesados.

ESCALA LIKERT

En este sentido, las actitudes, al


tener
un
componente
multifactorial,
desarrollan
manifestaciones
que
hacen
presentes en distintos aspectos o
temas de la vida social y cotidiana
(familia, educacin, religin, ocio,
econmico, etc.).

ESCALA LIKERT

Desde
nuestro
objetivo
de
investigacin nosotros podamos
establecer las actitudes, sus
elementos o componentes, para
luego redactar los tems.
En la prctica es posible construir
escalas
uni-dimensionales
y
escalas multi-dimensionales.

REDACCIN DE LOS TEMS

La escala Likert est estructurada por tems.


TEMS = frases que representan actitudes
favorables y desfavorables sobre el tema que
se quiere medir.
La cantidad mxima de tems pueden ser muy
alta, mientras que la mnima es tres (3).
Los tems son distintos, pero todos tienen el
mismo sistema de categoras de respuesta.

REDACCIN DE LOS TEMS


Generalmente se usan sistemas de categoras
con 5 respuestas:
a) Totalmente en Desacuerdo
b) Desacuerdo
c) Indiferente
d) De acuerdo
e) Totalmente de acuerdo.

Estas categoras se le asignan cdigos


(nmeros), por ejemplo, de 1 a 5 de 0 a 4.

CATEGORAS
Totalmente de acuerdo
De acuerdo
Indiferente
Desacuerdo
Totalmente en
desacuerdo

VALOR
5
4
3
2
1

CATEGORAS
Totalmemte de acuerdo
Parcialmente de acuerdo
Parcialmente en
desacuerdo
Totalmente en desacuerdo

VALOR
4
3
2
1

X
X
X
X
X
X
X

.
.

.
.
.

A cada persona se le aplica la


escala y se le pide que por cada
tem se identifique con la
respuesta que mejor representa
su actitud.
Se pueden crear ndices o bien
caracterizar mediante grficos o
tablas.

FIABILIDAD Y
VALIDEZ

REQUISITOS DE UN BUEN INSTRUMENTO

CUATRO CRITERIOS DE VALIDEZ DE UNA


INVESTIGACIN

1. Criterio de validez
2. Criterio de validez
3. Criterio de validez
(contenido).
4. Criterio de validez

interna.
externa.
de constructo
estadstica.

VALIDEZ INTERNA
Un diseo de investigacin tendr validez
interna cuando todas las posibles
explicaciones
alternativas
quedan
controladas.
Los resultados de la investigacin tendrn
una interpretacin inequvoca, ya sea
porque
la
relacin
o
relaciones
investigadas se comprueban o bien porque
se rechazan.

Diseo de Investigacin Tradicional


VARIABLE
INDEPENDIENTE
Se manipula
Supone relacin con Va. Dep

VARIABLE DEPENDIENTE
Supone afectada por Va. Ind
Se observa o mide

VARIABLES INTERVINIENTES
Se deben controlar
Pueden afectar la relacin de Va. Ind. y Va Dep

VALIDEZ INTERNA
Es un ideal a alcanzar.
Una investigacin tiene validez interna cuando todas
las posibles explicaciones alternativas a la relacin
entre variables quedan controladas.
Implica que los resultados de la investigacin den
cuenta de una interpretacin indiscutible, dndonos la
confianza de que la relacin entre las variables no se
debe a terceras variables no tomadas en consideracin
por nuestro estudio, ni por nuestros objetivos de
investigacin.
En
la
validez
interna
no
existen
variables
perturbadoras, pues estn controladas.

VALIDEZ EXTERNA
Tiene que ver cuando los resultados
pueden ser generalizados a otras unidades
de anlisis, otras situaciones o contextos,
as como a otros momentos distintos a
aqul en que se realiz a investigacin.
La generalizacin de los resultados no se
remite nicamente a problemas de
muestreo representativo.

VALIDEZ EXTERNA
Para alcanzar la validez externa se debe realizar
las siguientes estrategias a priori:
1. Usar mtodos de muestreo aleatorio.
2. Formar grupos heterogneos de unidades de
observacin
3. Uso de casos modales (se controlan casos con las
mismas caractersticas bsicas).
4. Determinar caractersticas de las unidades de anlisis y
momentos a los que se quiere generalizar.

VALIDEZ DE CONSTRUCTO
Referido al grado en que un instrumento refleja
un dominio especfico de contenido de lo que se
mide.
Es el grado en que la medicin representa al
concepto medido.
Por ejemplo, una prueba de conocimientos
sobre las canciones de un grupo musical no
deber basarse solamente en sus 2 primeros
discos, sino que debe incluir canciones de todos
sus discos.

VALIDEZ DE CONSTRUCTO
Se refiere a la adecuacin conseguida en la medicin de los
conceptos centrales de la investigacin.
Un concepto permite distintas posibilidades de medicin (esto
es, un mismo concepto lo podemos operacionalizar de diversas
maneras).
Por lo mismo, cualquier operacionalizacin de un concepto es
difcil que cubra todas las dimensiones del concepto.
Habr entonces que procurar operacionalizar los conceptos
tericos lo ms rigurosamente posible, al menos los conceptos
fundamentales de la investigacin para fin de evitar la duda de si
se habran alcanzado los mismos resultados con una
operacionalizacin distinta del concepto.

VALIDEZ DE CONSTRUCTO
El criterio central pasa por preguntarse: a
qu constructo puede generalizarse la
operacionalizacin que nosotros hemos
llevado a cabo o tenemos previsto realizar?
La misma pregunta, pero en otros
trminos:
realmente
nuestra
operacionalizacin responde a nuestra
conceptualizacin?

VALIDEZ DE CONSTRUCTO
La validez de constructo es un problema de
medicin y operacionalizacin.
Los elementos que van en contra de la
validez de constructo son dos grandes
problemas:
1. No haber incluido dimensiones importantes del
constructo en el proceso de operacionalizacin.
2. Utilizacin de dimensiones irrelevantes en la
operacionalizacin.

VALIDEZ ESTADSTICA
Al hacer uso de pruebas de hiptesis con
determinados niveles de significacin podemos
equivocarnos al hacer nuestras conclusiones.
Antes de usar una determinada tcnica
estadstica se debe comprobar si la informacin
recabada satisface los supuestos exigidos para
dicha tcnicas.
Por su puesto, las tcnicas paramtricas son las
que
exigen
mayor
rigurosidad
en
el
cumplimiento de tales supuestos (normalidad,
homocedasticidad, entre otros).

PARA LOGRAR LA VALIDEZ


INTERNA

EXTERNA

DE
CONSTRUCTO

ESTADSTICA

- Creacin de varios
grupos de
comparacin
equivalentes al de la
observacin.

- Seleccin de las
unidades de la
muestra mediante
procedimientos
aleatorios.

- Delimitacin clara y
precisa de los
conceptos tericos.

- Aumentar el tamao
de la muestra

Operacionalizacin
mltiple de los
conceptos.

- Formar grupos
internamente poco
heterogneos.

- Efectuar varias
mediciones.

- Controlar todo
suceso externo e
interno ala
investigacin que
puedan afectar a sus
resultados.

- Formar grupos
heterogneos de
unidades de
observacin que
incluyan varios
contextos temporales
y espaciales.

- Empleo de varias
tcnicas de obtencin
de informacin.

FIABILIDAD

VALIDEZ Y FIABILIDAD

1. VALIDEZ: Es la capacidad real de la


escala para medir lo que pretende
medir.
2. FIABILIDAD: Es la capacidad del
instrumento
para
proporcionar
resultados similares en distintas
aplicaciones.

FIABILIDAD
Es decir, la Fiabilidad de un instrumento
(encuesta, test, escala de actitud) es su
capacidad para proporcionar resultados
iguales al ser aplicado repetidas veces, en
condiciones similares, a las mismas
unidades de observacin.
Pero, a su vez, esta fiabilidad est
directamente
relacionada
con
su
consistencia interna.

FIABILIDAD

Si el instrumento es fiable, puedo aplicarlo en


diversas oportunidades y siempre podremos
confiar que est midiendo aquello para lo cual
fue diseado.
Es decir, un instrumento de medida ser fiable
cuando su reiterada aplicacin incluso por
diferentes investigadores- arroje los mismos
resultados bajo las mismas condiciones.

FIABILIDAD

Si los tems estn fuertemente


relacionados entre s entonces permiten
medir el mismo fenmeno.
Por tanto, la fiabilidad de mi
instrumento de medicin depende de la
consistencia interna, es decir, de que los
tems midan un slo objeto de actitud.

FIABILIDAD
Tcnicas que buscan evaluar la fiabilidad
de los instrumentos de medida y que
determinan el grado de validez y fiabilidad
de los instrumentos:
1.
2.
3.
4.

Mtodo test-retest
Mtodo alternativo.
Mtodo de las dos mitades.
Coeficiente de consistencia interna Alpha de
Cronbach.

ALFA DE
CRONBACH ()

ALFA DE CRONBACH ()
El Alfa de Cronbach se usa cuando se
construye una escala o un ndice para
contar con una estimacin de su
fiabilidad.
Obviamente, la fiabilidad medida por es
un indicador de la precisin de una
medida de actitud.
En la prctica, la fiabilidad indica cuan
libre de error de medida se encuentra
una escala o ndice

ALFA DE CRONBACH ()
Alfa de Cronbach estima el lmite
inferior del coeficiente de fiabilidad.
Es decir, entrega el valor mnimo de
fiabilidad para una determinada
escala o test (lower bound reliability).

ALFA DE CRONBACH ()

Alfa mide la fiabilidad del test en funcin de dos


trminos:
1. el nmero de tems (o longitud de la prueba)
2. la proporcin de varianza total de la prueba debida a la
covarianza entre sus partes (tems).

Ello significa que la fiabilidad depende de la


longitud de la prueba y de la covarianza entre sus
tems.

ALFA DE CRONBACH ()

Alfa
est
directamente
relacionado con el nmero de
tems y de las correlaciones
entre ellos.
Ello implica que vamos a
obtener diferentes valores de
alfa segn si le agregamos o le
sacamos un tem.

ALFA DE CRONBACH ()

El Alfa de Cronbach puede entenderse como el


coeficiente de determinacin (r 2 ) de la correlacin
entre la puntuacin verdadera y la puntuacin
observada.
Mide cuanta varianza comn hay entre lo observado y
lo verdadero (ideal)

ALFA DE CRONBACH ()
PUNTAJE VERDADERO = es el valor que se
obtendra al tomar el universo de todos
los posibles tems asociados a ese
constructo o variable latente.
El valor mximo de Alfa es 1, cuando toda
la varianza observada es atribuible a la
varianza verdadera
Su valor mnimo es 0, cuando no hay
varianza verdadera y toda la varianza
emprica es debida a error de medida.

ERROR DE MEDIDA
ERROR DE MEDIDA = Para la estimacin del constructo en un
sujeto particular, es la diferencia entre el valor del puntaje
observado en el instrumento y el valor hipottico o puntaje
verdadero.

XV=e

VALORES DEL ALFA DE CRONBACH


Cuanto ms cercano est el valor del a 1, mayor es la
consistencia interna de los tems que componen el instrumento de
medida.
Es decir, ms confiable es la medicin.

La mayor parte de los textos especializados indican ms menos la


siguiente escala de criterios para considerar una escala como
fiable o no-fiable:

El valor de debe
ser igual o mayor
que 0,80 para
considerar una
escala como
fiable.

ALFA DE CRONBACH
EN EXCEL

C o m e n za mo s co n n u e s t ra b a s e d e d a to s q u e d e b e te n e r e l s i g u i e nte fo r m ato .
L o s s u j eto s e n f i l a s y l o s te m s e n co l u m n a s .

=SUMA(C5:H5)

Lo primero es calcular los totales por cada sujeto.


Hacer la misma operacin para todos los sujetos (en este
ejemplo, 10).

Siguiendo las instrucciones recin dichas, aqu ya tenemos los


totales para cada uno de los 10 sujetos.

=VAR(C5:C14)

A continuacin, calculamos la varianza para cada tem o


pregunta, en sentido columna.
Hacer la misma operacin para todos los tems.

Como puede ver, ya tenemos los totales para cada individuo y


las varianzas para cada tem.

=VAR(I5:I14)

A continuacin obtenga la varianza de los sujetos.

=6/5*(1-(C15+D15+E15+F15+G15+H15)/I15)
O b te n ga e l A l fa d e C ro n b a c h
O j o : k ( n m e ro d e te m s ) e s i g u a l a 6 .
F r m u l a e s = k / k - 1 * ( 1 - ( v a r 1 + va r 2 + v a r x ) / S u m Va r s u j e t o s )

POR LTIMO

Luego, debe interpretar la fiabilidad de la escala.


El Alfa de Cronbach = 0,8
Qu puede decir Ud. al respecto?
Habra alta, media o baja consistencia interna de la escala?

Вам также может понравиться