ANEXO 1

NORMAS PARA LA ELABORACIN Y REVISIN DE

INVESTIGACIONES INSTRUMENTALES.

JUSTIFICACIN DEL ESTUDIO (A)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

A.1. Los antecedentes sobre los que se asienta la justifica-
cin son relevantes.
A.2. La creacin/adaptacin del instrumento va a suponer
una aportacin significativa para al rea de estudio.
A.3. El objetivo general de evaluacin del test est
claramente especificado.
A.4. Se concreta la poblacin a la que ir destinado el test.
A.5. Se especifica el propsito o finalidad para el que van
a usarse las puntuaciones del test.
A.6. El proceso de creacin/adaptacin resulta viable.

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________

DELIMITACIN CONCEPTUAL DEL CONSTRUCTO A EVALUAR (B)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

B.1 Aparecen claramente especificados los intentos de
conceptuacin ms relevantes del constructo de
inters.
B.2. Las distintas propuestas conceptuales se presentan
integradas en uno o varios marcos tericos de
referencia.
B.3 Se hace una revisin de los principales instrumentos
de evaluacin encargados de evaluar a ste o a
constructos relacionados.
B.4. Tras la revisin se realiza una propuesta operativa de
las facetas o componentes operativos del constructo a
evaluar, la cual es sometida a evaluacin a travs de
expertos.
B.5. Se presenta detalladamente la informacin
relacionada con el juicio de expertos (seleccin de
 expertos, material utilizado, forma de evaluar, etc.)
B.6. Considerando los resultados de la evaluacin de los
expertos, los datos de investigacin y los marcos
tericos de referencia, se concreta definitivamente la
definicin operativa del constructo.
B.7. Teniendo en cuenta la definicin adoptada del
constructo, se concretan las relaciones esperadas
entre ste y otras variables.
B.8. Las relaciones predichas para la puntuacin total en
el constructo estn adecuadamente justificadas.
B.9. En el caso de que el constructo est compuesto por
distintas facetas o componentes tambin son
establecidas las relaciones esperadas para cada uno
de estos componentes.
B.10. Las relaciones predichas se presentan claras,
especificndose cuando el constructo va ser variable
predictora, cuando predicha y cuando covariada.

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________

CONSTRUCCIN Y EVALUACIN CUALITATIVA DE TEMS (C)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

C.1. La informacin que justifica el tipo de tems a
construir (incluyendo formato, tipo de redaccin,
escala de respuesta, etc.) es presentada con claridad.
C.2. El autor hace uso de una tabla de
especificaciones de los tems para guiar la
elaboracin de stos.
C.3. La tabla de especificaciones de los tems recoge
toda la informacin necesaria para la construccin de
stos.
C.4. Se justifica adecuadamente el nmero de tems
final de la escala a crear/adaptar.
C.5. La batera de tems inicial est compuesta por al
menos el doble de tems por componente de los que
finalmente pretenden usarse.
C.6. En caso de traducir los tems, se ha usado una
estrategia que asegura la equivalencia conceptual
 entre los originales y los traducidos.
C.7. En caso de haber traducido los tems, el autor
proporciona nuevos tems vinculados a los
componentes del constructo a evaluar.
C.8. Se presentan las evidencias de validez de
contenido proporcionadas por la valoracin de un
grupo de jueces acerca de la batera inicial de tems.
C.9. Aparece toda la informacin relacionada con el
procedimiento seguido para la valoracin de los tems
por parte de un grupo de jueces.
C.10. La valoracin de los tems por parte de un
grupo de jueces ha sido llevada a cabo adecuada-
mente.
C.11. Los tems eliminados una vez terminado el
proceso de valoracin llevado a cabo por un grupo de
jueces estn claramente especificados.
C.12. Los tems conservados una vez terminado el
proceso de valoracin llevado a cabo por un grupo de
jueces estn claramente especificados.

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________

ANLISIS ESTADSTICO DE LOS TEMS (D)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

D1. La delimitacin del trabajo es clara (primer estudio
de los tems, estudio piloto o validacin cruzada)
D.2. Los objetivos del anlisis aparecen claramente
especificado (homogeneidad y consistencia de la
escala frente a validez de criterio).
D.3. Es facilitada toda la informacin referente a los
tems, instrucciones, a los participantes, contexto de
aplicacin, etc.
D.4. La muestra de estudio tiene caractersticas similares a
las de la poblacin objetivo del test.
D.5. El tamao de la muestra es adecuado para los
objetivos del estudio.
D.6. El procedimiento de evaluacin es similar al que se
 tiene planificado para la escala definitiva (muestreo).
C.7. Se especifican con claridad los criterios a considerar
para la seleccin-eliminacin de los tems.
C.8. Los clculos estadsticos efectuados resultan
pertinentes.
C.9. Los resultados (cualitativos y cuantitativos) se
discuten con claridad.
C.10. Las decisiones sobre los tems tienen en cuenta
cuestiones tericas.
C.11. Se especifica claramente que tems son eliminados y
por qu.
C.12. Los tems seleccionados quedan claramente
delimitados.

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________

ESTUDIO DE LA DIMENSIONALIDAD DEL INSTRUMENTO (ESTRUCTURA

INTERNA) (E)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

E.1. La delimitacin del trabajo es clara (primer
estudio de dimensionalidad de la escala o
validacin cruzada de resultados previos).
E.2. Los objetivos del anlisis aparecen
claramente especificados (estudio
exploratorio frente a anlisis confirmatorio,
o ambos).
E.3. La informacin presentada sirve para
justificar con claridad los objetivos
propuestos.
E.4. Es facilitada toda la informacin necesaria
para que el lector conozca los antecedentes
que justifican la escala y la dimensionalidad
esperada de sta.
E.5. La informacin sobre la muestra es
completa y pertinente.
E.6. La muestra de estudio tiene caractersticas
similares a las de la poblacin objetivo del
 test.
E.7. El tamao de la muestra es adecuado para
los objetivos del estudio.
E.8. El procedimiento de muestreo seguido es
correcto para los objetivos del estudio.
E.9. En el caso de usarse un procedimiento
exploratorio de anlisis factorial, aparece
justificada su necesidad.
E.10. Se razona con claridad el por qu ha
decidido usarse un tipo concreto de anlisis
factorial exploratorio y no otro.
E.11. E.11. Con anterioridad a la aplicacin del
anlisis factorial exploratorio, el autor,
informa sobre la adecuacin de la matriz de
correlaciones (esfericidad de Barlett e
ndice de Kaiser-Meyer-Olkin).
E.12. La interpretacin de la dimensionalidad de
la escala es efectuada sobre la solucin
factorial rotada.
E.13. El procedimiento de rotacin factorial usado
es justificado correctamente.
E.14. El procedimiento de rotacin factorial usado
es adecuado.
E.15. La informacin facilitada sobre la solucin
factorial resultante es la adecuada (nmero
de factores, saturaciones factoriales
relevantes de los tems que los integran,
porcentaje de varianza explicada y
comunalidad).
E.16 Los procedimientos estadsticos usados para
discutir cules son los factores relevantes a
tener en cuenta son adecuados.
E.17. La discusin sobre los factores a tener en
cuenta es enmarcada en la investigacin
terica y emprica previa.
E.18. En el caso de aplicarse un procedimiento
basado en el anlisis factorial confirmatorio,
el modelo de medida (forma de distribuirse
los tems) a analizar es claramente
delimitado.
E.19. En el estudio, junto al modelo de referencia,
se someten a diagnstico comparativo
propuestas alternativas.
E.20. Se justifica el procedimiento de estimacin
usado.
E.21. El procedimiento de estimacin elegido en
el estudio resulta adecuado.
E.22. Para el diagnstico del modelo el autor usa
simultneamente varios ndices.
E.23. En el trabajo se informa sobre el por qu de
 los ndices seleccionados y sobre cules van
a ser los valores de corte a considerar para
estimar la bondad de ajuste del modelo.
E.24. En el trabajo se presentan con claridad los
resultados para los distintos ndices de
bondad de ajuste.
E.25. E.25. Si el autor hace modificaciones para
mejorar el ajuste, las decisiones estn
claramente fundamentadas (terica y
empricamente) y aparecen con claridad en
el estudio.
E.26. El autor presenta el diagrama (path
diagram) donde aparece la distribucin de
los tems por factor, el grado en el que
cada uno de stos es percibido por el factor
de pertenencia, y, en general, todos los
parmetros considerados relevantes en la
especificacin inicial del modelo.

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________

ESTIMACIN DE LA FIABILIDAD (F)

ITEM CRITERIO DE JUICIO SI DUDOSO NO

F1 En el trabajo se justifica el procedimiento
de estimacin de la fiabilidad
a usar (adecuacin terica).

F2 El mtodo de estimacin de la fiabilidad

empleado se considera
adecuado.

F3 Si en el informe se usa el mtodo test-retest,

son proporcionados y
discutidos los aspectos ms significativos
que afectan a este clculo
aparte de las cuestiones tericas (intervalo
temporal, condiciones de
 evaluacin, correspondencia muestral, etc.).

F4 Teniendo en cuenta los aspectos ms

significativos que afectan a la
aplicacin del mtodo test-retest (intervalo
temporal, condiciones de
evaluacin, correspondencia muestral, etc.),
sta se considera adecuada.

F5 Si en el informe se usa el mtodo de formas

paralelas, son
proporcionados y discutidos los aspectos
ms significativos que afectan
a este clculo aparte de las cuestiones
tericas (datos sobre la
equivalencia de las pruebas, adems de la
informacin comn al testretest,
como intervalo temporal, condiciones de
evaluacin,
correspondencia muestral, etc.).

F6 Teniendo en cuenta los aspectos ms

significativos que afectan a la
aplicacin de las formas paralelas
(equivalencia de las pruebas,
intervalo temporal, condiciones de
evaluacin, correspondencia
muestral, etc.), sta se considera adecuada.

F7 Si en el informe se usa el ndice alpha de

Cronbach basado en la
consistencia interna, son proporcionados y
discutidos los aspectos ms
significativos que afectan a este clculo
aparte de las cuestiones tericas
(nmero de tems por componente del
constructo y formato de stos).

F8 Teniendo en cuenta los aspectos ms

significativos que afectan a la
aplicacin del alpha de Cronbach (nmero
de tems por componente del
constructo y formato de stos), sta se
considera adecuada.

F9 Si en el informe se usa un procedimiento

basado en la obtencin de dos
mitades de un test para el clculo de la
consistencia interna, son
proporcionados y discutidos los aspectos
 ms significativos que afectan
a este clculo aparte de las cuestiones
tericas (procedimiento para
obtener las dos partes y nmero de tems
que las integran).
discutidas las estrategias a adoptar.

F10 Teniendo en cuenta los aspectos ms

significativos que afectan a la
aplicacin del procedimiento basado en la
obtencin de dos mitades de
un test (nmero de tems y formato de
stos), sta se considera
adecuada.
fiabilidad, en el
trabajo son
F11 El tamao de la muestra de estudio es
adecuado para los objetivos de la
investigacin.

F12 Las caractersticas de los participantes son

adecuadas en funcin de los
objetivos del test y finalidad de las
puntuaciones.

F13 El procedimiento de evaluacin utilizado es

adecuado en funcin de las
caractersticas de la prueba.

F14 Los resultados derivados de la estimacin

de la fiabilidad se muestran
con claridad.

F15 La discusin de los resultados se hace

teniendo en cuenta tanto aspectos
metodolgicos como tericos.

F16 En el caso de obtenerse unos datos

deficientes de fiabilidad, en el trabajo son
discutidas las estrategias a adoptar

OPINIONES, SUGERENCIAS Y/O COMENTARIOS:

______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________
______________________________________________________________________