Академический Документы
Профессиональный Документы
Культура Документы
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
ndice
Antecedentes del estudio..................................................................................................... 6
1.
1.1.
2.
2.1.
2.2.
2.2.1.
Supuestos ............................................................................................................ 12
2.2.2.
Ventajas ............................................................................................................... 13
2.2.3.
Limitaciones ........................................................................................................ 14
2.3.
2.3.1.
2.3.2.
2.3.3.
2.3.4.
Parmetros .......................................................................................................... 20
2.3.5.
2.3.6.
Modelos ................................................................................................................. 22
2.3.7.
2.3.8.
2.3.9.
2.3.10.
2.3.11.
2.3.12.
2.4.
2.5.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.6.
2.6.1.
2.7.
Tipo de evaluacin................................................................................................ 32
2.8.
2.9.
Confiabilidad ........................................................................................................... 33
2.10.
Validez ....................................................................................................................... 37
2.11.
2.12.
2.13.
2.14.
2.15.
2.16.
3.
3.1.
3.2.
Variables................................................................................................................... 47
3.3.
3.4.
3.5.
Poblacin .................................................................................................................. 49
3.6.
Muestra ..................................................................................................................... 49
3.7.
RESULTADOS.............................................................................................................................. 52
4.
4.1.
4.2.
Calidad Mtrica del Test BAVEL desde la perspectiva de la Teora
Clsica de los Test ................................................................................................................ 53
4.2.1.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
4.2.2.
4.3.
Calidad mtrica del Test BAVEL desde la perspectiva de la Teora de
Respuesta al tem ................................................................................................................ 57
4.3.1.
4.3.2.
CONCLUSIONES ......................................................................................................................... 63
Bibliografa ......................................................................................................................................... 68
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
RESUMEN
La construccin y anlisis de Test, se fundamenta en el importante uso
que se entrega a la informacin que de estos instrumentos se obtiene; por ello,
ponderar adecuadamente variables como Validez y Confiabilidad permiten tanto
a investigadores, docentes y profesionales de distintas reas, tomar decisiones
ms acertadas.
Segn
lo
anterior,
esta
investigacin
corresponde
un
estudio
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Un mbito de
la
Evaluacin est
referido
la construccin de
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
1. Objetivo General
Determinar la calidad mtrica del Test BAVEL desde las perspectivas
analticas de la Teora Clsica de los Test (TCT) y la Teora de Respuesta al tem
(TRI), para explorar la calidad del Test y de sus tems.
1.1.
Objetivos Especficos
1. Establecer
la
calidad
mtrica
del
Test
BAVEL
segn
el
anlisis
2. Establecer la calidad mtrica de los tems del Test BAVEL identificando los
parmetros de Dificultad, Discriminacin y Curvas Caractersticas del
tem desde la perspectiva de la TRI.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2. Aproximacin terica
Si se parte del supuesto de que todo objeto es medible o mensurable, se
debe establecer adems que cada objeto medido o evaluado necesitar de un
instrumento apropiado para tales fines. Segn ello la medicin de estatura ser
establecida a travs de un instrumento que registre centmetros y metros.
Ahora bien, la medicin de otros atributos o constructos sociales, psicosociales,
psicolgicos, no ser precisada a travs de instrumentos convencionales, sino
por el contrario, a travs de test bien diseados (Abad, Garrido, Olea, y
Ponsoda, 2006). Pero, es necesaria la delimitacin conceptual de aquel objeto
medible, para determinar qu entendemos por aquello que deseamos observar
y en definitiva, evaluar.
Es imprescindible establecer cul es el instrumento de evaluacin o
medicin adecuado para cada constructo o atributo. Segn lo anterior, el
evaluador educacional, cual especialista mtrico, es hbil en definir qu es lo
medible y a travs determinado de un instrumento. El desarrollo de la
psicometra ha permitido un avance notable en la elaboracin de test, pues
desde inicios del siglo XX los esfuerzos intelectuales han visto cmo cada
disciplina, junto con establecer su objeto de estudio, ha procurado proporcionar
instrumentos de medicin cada vez ms precisos.
La construccin de test y su estudio a travs de la psicometra, ha tenido
un notable desarrollo terico y prctico, por tanto nos enfrentamos al estudio
de instrumentos provenientes desde esta disciplina para determinar, por
ejemplo, hasta qu punto un grupo de alumnos poseen actitudes que les
permitan lograr una produccin diferente a lo que ya exista, esto es, el uso de
la originalidad o pensamiento divergente. Los test, permiten la recoleccin de
informacin sobre la conducta o atributos de un determinado constructo. El
punto est en definir cmo ser o cules sern las caractersticas de aquel test
o conjunto de tems, para poder recoger los atributos que se intentan
evidenciar.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.1.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.2.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.2.1.
Supuestos
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
cometidos en otro test. Esto es: no hay ninguna razn para pensar que los
errores cometidos en una ocasin vayan a covariar sistemticamente con los
cometidos en otra ocasin (Muiz, 2010, p. 61).
Cada supuesto establecido desde la teora, requiere necesariamente su
contraste con la realidad, principio en el cual se fundamenta esta investigacin.
En este punto es necesario establecer las siguientes conclusiones
respecto a esta teora, (Murat, 1985, citado en Tornimbeni, Prez, y Olaz,
2008).
1.
Como
la
desviacin
estndar
no
puede
modificarse,
deben
2.2.2.
Ventajas
Puede
ser explicado
no
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.2.3.
Limitaciones
Segn lo expuesto hasta este punto, es posible advertir que esta teora
presenta algunas limitaciones, entre las que se puede contar que no permite
entregar una diferencia entre las caractersticas del examinado de las propias
del Test. Por tanto, la dificultad del tem ser estimada a travs de la cantidad
de examinados que respondan correctamente, por lo mismo la posibilidad de
establecer las mediciones mtricas de validez y confiabilidad se tornan inciertas
o al menos dificultosas, pues ellas sern precisadas solamente en torno a la
escala de puntuacin realizada para ese test en especfico. Por lo tanto se
dificulta la comparacin con examinados que puedan haber rendido otros test.
Adems, si la finalidad de un test es determinar las habilidades de cada sujeto
medido, en el caso de la Teora Clsica, no entrega informacin precisa de las
habilidades individuales, pues solo asume un valor medio de las varianzas.
La teora clsica de los Test, plantea tres situaciones limitantes, lo
anterior se expresa de la siguiente forma:
En primer lugar, la literatura seala que las puntuaciones no son
invariantes respecto del instrumento utilizado (Muiz, 2001, en Tornimbeni,
Edgardo, y Olaz, 2008, p. 213). En otras palabras, se afirma que las mediciones
pueden variar respecto al instrumento utilizado. Esto se refiere a que si son
utilizados tres instrumentos diferentes para medir un determinado constructo a
tres diferentes sujetos, los resultados no podrn ser comparables. A modo de
ejemplo: si un psiclogo evala la inteligencia a diferentes personas con
instrumentos distintos, no podr determinar con certeza cul de ellos es ms
inteligente. Ello es as en tanto que cada test tiene su propia puntuacin. En
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
otras palabras, cada test posee su propia escala. Para efectuar las necesarias
comparaciones hechas por los psiclogos ser pertinente transformar las
puntuaciones a escalas similares, es decir, estandarizar los resultados.
Lamentablemente, si bien este proceder no es errneo, igualmente descansa en
un supuesto frgil, pues no siempre se garantiza que las escalas de diferentes
test sean homologables en la prctica, pues se asume que los grupos
normativos en los que se elaboraron los baremos de los distintos test son
equiparables, lo cual es difcil de garantizar en la prctica. Si eso falla la
comparacin se viene abajo (Muiz, 2010). Afortunadamente, la Teora de
Respuesta al tem, como ser revisado ms adelante, propone una solucin
cientfica a esta dificultad.
En segundo lugar, existe una limitacin referida a las propiedades
mtricas asociadas, pues se da la ausencia de invarianza de las propiedades de
los test respecto de las personas utilizadas para estimarlas, esto es: las
propiedades psicomtricas importantes de los test, tales como la dificultad de
los tems, o la fiabilidad del test, estaban en funcin del tipo de personas
utilizadas para calcularlas, lo cual resulta inadmisible desde el punto de vista de
una medicin rigurosa (Muiz, 2010, p. 62).
Por ejemplo, se seala que existe una dependencia circular entre los
sujetos que rinden el test y sus resultados. Esto es, si quienes respondieron la
prueba son hbiles, los tems de dicho instrumento sern considerados fciles;
por el contrario, si los sujetos no son hbiles, se podra concluir que los mismos
tems son difciles. En sntesis, la dificultad del tem depende de la distribucin
de la habilidad de los sujetos con que se calcule (Chvez lvarez y Antonio,
2008).
La habilidad de los sujetos que responden una prueba, inferida a partir
del puntaje observado, depender de la dificultad de los tems que componen
dicho instrumento. Segn lo anterior, un mismo sujeto tendr diferentes
puntuaciones en tres versiones distintas de una prueba si stas difieren en la
distribucin de dificultad de los tems que la componen.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.
el
costo
agregado
asumido
ha
sido
el
desarrollo
de
un
modelo
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.1.
Ventajas de la TRI
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.2.
Desventajas de la TRI
2.3.3.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.4.
Parmetros
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
d) Parmetro c
Este parmetro se refiere a las posibilidades que tienen de acertar un
tem las personas con un nivel de habilidad baja en el rasgo o constructo
medido. Su equivalente en la TCT es justamente la probabilidad de acertar el
tem al azar. En este caso se supone que el sujeto evaluado responde casi al
azar, por tanto se denomina tcnicamente parmetro de pseudo-azar (Muiz,
2005).
2.3.5.
La
denominada
Curva
Caracterstica
del
tem
es
una
forma
de
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.6.
Modelos
2.3.7.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.8.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.3.9.
2.3.10.
Supuestos de la TRI
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Independencia local: Indica que los modelos asumen que las Respuestas
de las personas a un tem son independientes de las respuestas a los
otros tems.
2.3.11.
Ventajas y desventajas
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
no se
cumplen
los
supuestos. Adems de
ello,
para
Se
ha
comprobado
que
hay
teoras
que
son
claramente
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
La medicin en gran escala implica que los alumnos medidos han sido
sometidos a diferentes experiencias educativas, lo que transgrede el
supuesto de experiencias educacionales similares, lo que a su vez,
atenta contra el supuesto de invarianza de las preguntas.
2.3.12.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.4.
La TRI permite estimar la precisin con que cada tem y cada test
mide los diferentes niveles de habilidad. Dicho de otra forma, la TRI no asume
como si lo hace la TCT, el supuesto de igualdad de errores de medida.
d)
Lo
anteriormente
expuesto
permite
construir
desde
la
TRI
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
de parsimonia, esto es, que el test estime con mayor precisin aquello que
mide empleando un nmero mnimo de tems.
2.5.
2.6.
Teoras
Hasta ahora se han establecido las definiciones conceptuales de cada
teora, sin embargo es tarea pendiente determinar y caracterizar qu es lo que
se medir y de qu forma. Para ello es necesario sealar cmo se define la
medicin de atributos en psicologa, conocido esto como atributo o constructo,
pero adems caracterizar las propiedades mtricas a travs de los cuales sern
medidos los instrumentos trabajados.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.6.1.
Constructo
respuestas a estas
interrogantes.
Por tanto es posible afirmar que los constructos pueden abordar
diferentes comportamientos humanos, por lo mismo su explicacin y alcance es
de vital importancia para los propsitos del presente trabajo. En la medida que
se
conocen
las
caractersticas
del
constructo,
as
como
tambin
sus
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.7.
Tipo de evaluacin
Segn (Elosua, 2003), existen distintos usos relacionados con los test.
Cada uso est determinado por la intencionalidad y naturaleza con el cual fue
confeccionado el instrumento. Segn lo anterior, en el contexto de la
interpretacin de los resultados de un test ya no basta justificar cada puntaje,
sino que es menester adems delimitar los fundamentos tericos de un
contexto interno, con relacin al propsito o interpretacin propuesta. Como
consecuencia de lo anterior, es necesario especificar las condiciones de la
situacin de medida en relacin a la relevancia y utilidad de las puntuaciones
para los fines propuestos.
Segn la clasificacin propuesta por la autora y para el caso especfico de
esta investigacin, BAVEL es una evaluacin colectiva cuyo propsito es la
evaluacin de politicas o intervenciones educativas, pues es un instrumento o
procedimiento de obervacin que permite medir y evaluar la Eficacia Lectora en
el marco de las herramientas curriculares (Marco Curricular de OF/CMO y
Programas de Estudio).
2.8.
constructos,
posee
dos
variables
que
legitiman
su
campo
conceptual
para
situar
estos
dos
trminos,
sealar
sus
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.9.
Confiabilidad
este
trabajo,
se
podr
determinar
comparativamente
el
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
como
la
consistencia
entre
dos
conjuntos
de
puntuaciones
que
sean
capaces
de
comprobar
la
confiabilidad
del
test
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
homologable a este tipo de test que relevan al sujeto respecto del constructo
medido, pues la puntuaciones ya no se expresan en torno al grupo, sino que
hacen referencia al grado en el que el sujeto domina el campo o criterio a
evaluar (Muiz, et. al 2005).
En tal sentido, se establece que los TRC se tratan de tests utilizados
fundamentalmente en el mbito educativo y en la evaluacin en contextos
laborales. Su objetivo es determinar si las personas dominan un criterio
concreto o campo de conocimiento, por tanto no pretenden tanto discriminar
entre las personas, como la mayora de los tests psicolgicos, sino evaluar en
qu grado conocen un campo de conocimiento denominado criterio, de ah su
nombre (Muiz, 2010). Estos test de rendimiento en un dominio especfico de
conocimiento son pertinentes en Lenguaje o Matemtica por ejemplo, ac
interesa fundamentalmente comprobar la confiabilidad de las clasificaciones
establecidas mediante su utilizacin respecto a la maestra de dominio de los
individuos que estn aprendiendo un dominio (expertos v/s no expertos),
(Tornimbeni, Edgardo, y Olaz, 2008).
Por ltimo es necesario consignar que respecto a la fiabilidad, tambin se
puede hacer esta estimacin desde la TRI. Hasta ahora, se ha descrito un
procedimiento que se refiere al test completo. Sin embargo, desde la Teora de
Respuesta al tem en vez de ofrecer una estimacin global de la fiabilidad
mediante un coeficiente de fiabilidad, se puede establecer una Funcin de
informacin para cada uno de los tems (Muiz, et. al 2005). En efecto, esta
funcin indica la precisin con la que el tem est midiendo a cada nivel la
variable evaluada, ahora bien la suma de las funciones individuales proporciona
la informacin del global del instrumento. El avance de este enfoque respecto al
clsico se refiere a que ahora la estimacin de fiabilidad, antes medida por el
coeficiente de fiabilidad desde la TCT, permite precisa informacin desagregada
del test, el cual puede ser fiable para sujetos con puntuaciones altas, pero poco
fiable para quienes obtienen puntuaciones bajas.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.10.
Validez
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
2.11.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
respuestas? Para cumplir con este objetivo desde la Teora Clsica de los Test,
se han definido algunos indicadores que colaboran en este propsito, a saber:
a)
Dificultad.
b)
Discriminacin.
c)
Fiabilidad.
d)
Validez.
2.12.
Clculo de Dificultad
de
dificultad
menor,
en
otras
palabras,
ms
sujetos
contestan
correctamente el tem.
El ndice de dificultad sirve para cuantificar el grado de dificultad de cada
tem ID (Abad, Garrido, Olea, y Ponsoda, 2006) y se define como el cociente
entre el nmero total de sujetos que han acertado el tem A y el nmero total
de sujetos que lo han intentado resolver N, omitiendo de este ltimo dato todos
aquellos sujetos que no contestaron el tem.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
ID A
N
La conceptualizacin clsica ha definido a este indicador como dificultad,
no obstante lo anterior su interpretacin puede conducir a errores en cuanto a
su interpretacin, es por eso que existen autores, entre ellos (Caro y Trujillo,
2009) quienes tambin hablan de facilidad definindolo como el porcentaje de
estudiantes que abord una pregunta y la respondi bien. A propsito de lo
anterior, los autores proponen una escala para evaluar esta caracterstica:
Tabla 1.
Interpretacin Nivel de Dificultad de los tems y del Test
Categoras
Interpretacin
Menos de 21,0%
Muy Difcil
21,0% a 40,9%
Difcil
41,0% a 60,9%
Apropiada
61,0% a 80,9%
Fcil
81,0% o ms
Muy Fcil
2.13.
Clculo de Discriminacin
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla 2.
Categoras e interpretacin ndice de Discriminacin
Categoras
Interpretacin
Menos de 0,19
0,20 a 0,29
0,30 a 0,39
Razonablemente bueno
0,40 o superior
Alta discriminacin
2.14.
Clculo de Confiabilidad
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Donde:
= Coeficiente alfa de Cronbach
2i
2X
b)
de manera consistente.
c)
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
interpretar esta
caracterstica es la siguiente:
Tabla 3
Valores e interpretacin del Nivel de Confiabilidad del Test
Categoras
Interpretacin
Menos de 0,51
No Aceptable
0,51 0,60
Nivel Pobre
0,61 0,70
Dbil
0,71 0,80
Aceptable
0,81 0,90
Buena
0,91 o ms
Excelente
2.15.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
3. Metodologa de Investigacin
3.1.
3.2.
Variables
3.3.
Definicin conceptual
a) Dificultad: se entiende como que tan fcil o difcil resulta un tem para el
conjunto de sujetos que rinde la prueba. Por lo general esto se calcula a
partir de la cantidad de sujetos que responden acertadamente al tem.
Segn (Garca Cueto, 2005), la dificultad de un tem se refiere a
determinar qu tan fcil o difcil es ste, un tem es difcil o fcil.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
3.4.
Definicin operacional
ID A
N
basado
en
grupos
extremos.
As,
siguiendo
las
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
3.5.
Poblacin
3.6.
Muestra
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
3.7.
Lectora
La
investigacin
se
centra
en
la
revisin
comparacin
del
evaluacin
de
Programas
Educativos
Evaluacin
de
politicas
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
RESULTADOS
Confiabilidad
Alfa de Cronbach
N de elementos
,692
19
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
4.2.
indicador
tem, siendo en este caso la Dificultad una proporcin obtenida entre las
personas que intentaron responder el tem y aquellas que efectivamente lo
respondieron correctamente.
Desde el punto de vista de las puntuaciones, para aquellos tems
dicotmicos el acierto es 1, mientras que para aquellos tems politmicos que
utilizan rbrica, el acierto corresponde a quien responde y es calificado con el
puntaje mximo del tem.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla 5.
Categorizacin del Grado de Dificultad de los tems
tem
GD (%)
Dificultad
19.Argumentacin
560
65
11,6
Muy difcil
560
81
14,5
Muy difcil
560
83
14,8
Muy difcil
560
95
17
Muy difcil
10.Argumentacin
560
119
21,3
Difcil
560
166
29,6
Difcil
560
205
36,6
Difcil
18.Incremento de Vocabulario
560
240
42,9
Apropiada
560
249
44,5
Apropiada
560
251
44,8
Apropiada
4.Inferencia
560
279
49,8
Apropiada
5.Inferencia
560
296
52,9
Apropiada
560
339
60,5
Apropiada
17.Incremento de Vocabulario
560
348
62,1
Fcil
6.Incremento de Vocabulario
560
350
62,5
Fcil
11.Parafraseo
560
363
64,8
Fcil
560
369
65,9
Fcil
560
440
78,6
Fcil
560
482
86,1
Muy fcil
Total Test
560
42
254
45,3
Apropiada
Nota. tem = tipo de reactivo ordenado segn grado de dificultad; N = total de alumnos que respondieron el
Test BAVEL; n = puntaje total posible de cada tem; f = nmero de estudiantes que acertaron el tem; GD
(%) Grado de dificultad del tem expresado en porcentaje.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
4.2.2.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla 6.
ndice de Discriminacin de tems del Test BAVEL e interpretacin
tem
ndice de Discriminacin
Interpretacin
0,14
Deficiente
0,17
Deficiente
0,19
Deficiente
19.Argumentacin
0,19
Deficiente
0,21
Regular
0,25
Regular
0,26
Regular
0,4
Alta discriminacin
0,42
Alta discriminacin
10.Argumentacin
0,42
Alta discriminacin
0,43
Alta discriminacin
0,43
Alta discriminacin
0,45
Alta discriminacin
17.Incremento de Vocabulario
0,47
Alta discriminacin
0,5
Alta discriminacin
4.Inferencia
0,52
Alta discriminacin
11.Parafraseo
0,52
Alta discriminacin
18.Incremento de Vocabulario
0,56
Alta discriminacin
5.Inferencia
0,63
Alta discriminacin
6.Incremento de Vocabulario
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
4.3.
4.3.1.
Tabla7.
Cantidad de casos necesarios segn modelo de anlisis
Modelo
Nmero de sujetos
requeridos
Alrededor de 100
Rasch
100
2 parmetros
250 500
3 parmetros
Ms de 1000
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla8.
Resultados desde la perspectiva TRI, segn modelo de 2 parmetros
tem
muestra
RC
GD
LOGIT
CPBA
CB
560,0
490,0
87,5
-1,95
0,380
0,610
560,0
488,0
87,1
-1,91
0,189
0,301
560,0
482,0
86,1
-1,82
0,204
0,318
560,0
440,0
78,6
-1,30
0,378
0,532
P10.Argumentacin
560,0
422,0
75,4
-1,12
0,359
0,491
560,0
369,0
65,9
-0,66
0,212
0,274
560,0
364,0
65,0
-0,62
0,398
0,512
P11.Parafraseo
560,0
363,0
64,8
-0,61
0,295
0,380
560,0
351,0
62,7
-0,52
0,257
0,328
P6.Incremento de Vocabulario
560,0
350,0
62,5
-0,51
0,205
0,262
P17.Incremento de Vocabulario
560,0
348,0
62,1
0,50
0,293
0,373
560,0
339,0
60,5
-0,43
0,220
0,279
P19.Argumentacin
560,0
333,0
59,5
-0,38
0,262
0,332
P5.Inferencia
560,0
296,0
52,9
-0,11
0,321
0,403
P4.Inferencia
560,0
281,0
50,2
-0,01
0,273
0,342
560,0
251,0
44,8
0,21
0,169
0,213
560,0
249,0
44,5
0,22
0,034
0,043
P18.Incremento de Vocabulario
560,0
240,0
42,9
0,29
0,284
0,357
560,0
205,0
36,6
0,55
0,224
0,287
Nota. tem = reactivos del Test BAVEL ordenados segn Grado de Dificultad; Muestra = alumnos
que rinden el Test BAVEL; RC = Respuestas Correctas a cada reactivo; GD = Grado de Dificultad;
CPBA = Correlacin punto Biserial ajustada; CB = Correlacin Biserial.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
4.3.2.
a) Parmetro a discriminacin
Valores
Interpretacin
1,34 o ms
Alta discriminacin
1,33 a 0,65
Moderada discriminacin
0,64 a 0,3
Escasa discriminacin
0,29 o menos
Deficiente
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla 10.
Categorizacin parmetro a
tem
Valor a
Interpretacin
1,613
Alta discriminacin
1,287
Moderada discriminacin
1,278
Moderada discriminacin
P10.Argumentacin
1,154
Moderada discriminacin
P5.Inferencia
0,954
Moderada discriminacin
P11.Parafraseo
0,884
Moderada discriminacin
P18.Incremento de Vocabulario
0,875
Moderada discriminacin
P17.Incremento de Vocabulario
0,835
Moderada discriminacin
P4.Inferencia
0,783
Moderada discriminacin
P19.Argumentacin
0,775
Moderada discriminacin
0,716
Moderada discriminacin
0,688
Moderada discriminacin
0,682
Moderada discriminacin
0,664
Moderada discriminacin
0,635
Baja discriminacin
P6.Incremento de Vocabulario
0,584
Baja discriminacin
0,571
Baja discriminacin
0,531
Baja discriminacin
0,272
Deficiente
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
b) Parmetro b dificultad
Tabla 11.
Valores referenciales y clasificacin Parmetro b
Valores
Interpretacin
-1,5 a -3,0
Muy Fcil
0 a -1,5
Fcil
0 a 1,5
Difcil
1,5 a 3,0
Muy Difcil
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Tabla 12.
Valores referenciales e interpretacin del Parmetro b
tem
Valor b
Interpretacin
-3,030
Muy Fcil
-2,796
Muy Fcil
-1,703
Fcil
-1,312
Fcil
P10.Argumentacin
-1,213
Fcil
-1,131
Fcil
P6.Incremento de Vocabulario
-0,942
Fcil
-0,838
Fcil
-0,805
Fcil
P11.Parafraseo
-0,804
Fcil
P17.Incremento de Vocabulario
-0,682
Fcil
-0,631
Fcil
P19.Argumentacin
-0,558
Fcil
P5.Inferencia
-0,140
Fcil
P4.Inferencia
-0,008
Fcil
P18.Incremento de Vocabulario
0,387
Difcil
0,420
Difcil
0,833
Difcil
0,912
Difcil
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
CONCLUSIONES
estudio,
investigacin.
organizado
Junto
lo
por
anterior,
objetivos
sern
especficos
expuestas
las
pregunta
de
limitaciones
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Los supuestos que subyacen a la Teora Clsica de los Test son dbiles y
fciles de cumplir, por lo tanto no son en ningn caso un impedimento al
momento de analizar y tomar decisiones respecto al test o sus respectivos
tems. Sin embargo, este modelo carece de la invariabilidad de los estadsticos,
pues stos dependen de la muestra.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
grfica
es
un
importante
insumo
de
informacin
que
permite
mayoritariamente
evala
habilidades
taxonmicas
de
orden
inferior, pues son stas las que agrupan la mayor cantidad de reactivos.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Bibliografa
ABAD, F., GARRIDO, J., OLEA, J., y PONSODA, V. (2006). Introduccin a la
Psicometra: Teora Clsica de los Test y Teora de Respuesta al tem.
Madrid: UAM.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
GONZLEZ, M. C., ROLDN, C., ARREZ, D., GUTIRREZ, N., SEGURA, A., y
FERNNDEZ, A. (2010). Eficiencia Lectora: Comparacin alumnos
universitarios de ciencias tcnicas, ciencias experimentales yletras, y
alumnos de EE.UU. (Ciencias y letras). I Jornadas sobre Innovacin Docente
y Adaptacin al EEES en las Titulaciones Tcnicas (pgs. 137-140).
Granada: Godel Impresores Digitales S.L.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
MUIZ, J. (2010). Las Teoras de los Test: Teora clsica y Teora de Respuesta al
tem. Papeles del Psiclogo (31), 57-66.
MUIZ, J., FERNNDEZ-HERMIDA, J., FONSECA-PEDRERO, E., CAMPILLOLVAREZ, A., y PEA-SUREZ, E. (2011). Evaluacin de tests editados.
Papeles del psicolgo, 113-128.
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores
Ms informacin en:
jovenesinvestigadores@upla.cl
www.upla.cl/jovenesinvestigadores