Evaluacin de programas, centros y profesores. 5 Pedagoga.

2013-2014

TEMA 1. LA EVALUACIN EDUCATIVA: del control a la mejora

Escudero Escorza, T (2003). Desde los tests hasta la investigacin evaluativa actual. Un
siglo, el XX, de intenso desarrollo de la evaluacin en Educacin. En RELIEVE:
v. 9, n. 1, pp.11-43

1. Evaluacin educativa: del control a la mejora

2. Funciones y tipos de evaluacin
3. El proceso evaluativo

1.

EVALUACIN EDUCATIVA: DEL CONTROL A LA MEJORA

Han sido muchos los debates mantenidos y las reflexiones realizadas hasta llegar a
considerar la EVALUACIN como un proceso de recogida de informacin orientado
a la emisin de juicios de mrito o de valor respecto de algn sujeto, objeto o
intervencin (Mateo, 2002: 21).
Como seala Escudero (2003) la evaluacin es una disciplina que ha sufrido grandes
transformaciones conceptuales y funcionales a lo largo de la historia, y sobre todo, a lo
largo del siglo XX. Son muchos los autores que hacen referencia a estos cambios y
sealan distintas pocas en el desarrollo de esta disciplina en el mbito educativo; as
pues y segn Mateo, Hernndez , Scriven, Stufflebeam, Manaus, es posible distinguir
seis pocas:
1.
2.
3.
4.
5.
6.

poca de la reforma (1800 1900)

poca de la eficiencia y del testing (1900 1930)
poca de Tyler (1930-1945)
poca de la inocencia (1946 1956)
poca de la expansin (1957 1972)
poca de la profesionalizacin (Desde 1973)

Otros autores (Cabrera, 1986 y Salvador 1992) sealan tres pocas en el desarrollo de la
evaluacin tomando como referente las propuestas de Tyler (1945), as pues distinguen:
poca precedente, poca de Tyler y poca de desarrollo.

Guba y Lyncoln (1989) sealan cuatro periodos o generaciones:

1.
2.
3.
4.

Generacin de la medicin (Hasta el 1940)

Generacin de la descripcin (Desde 1940 hasta 1960)
Generacin del juicio o valoracin. (Desde 1960 hasta 1990)
Cuarta generacin, apoyada en el enfoque constructivista y en las necesidades de
los demandantes e implicados en la evaluacin (stakeholders) como base para
determinar la informacin necesaria. poca actual.

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

Un hito importante en el desarrollo conceptual y metodolgico de la evaluacin

educativa lo constituye Tyler quien hacia el 1940 plantea la necesidad de una
evaluacin cientfica que sirva para perfeccionar la calidad de la educacin. Sus
opiniones y creencias sobre evaluacin han estado vigentes hasta su muerte en 1994.
No es hasta la dcada de los sesenta cuando se empieza a tomar en cuenta las llamadas
de atencin de Tyler en relacin a la eficacia de los programas y el valor de la
evaluacin para la mejora. Es en esta dcada cuando se establece la necesidad de que la
evaluacin aborde no slo al alumnado sino tambin a los programas y a la prctica
educativa en general. La evaluacin comienza a ser la gran demandada.
Paralelamente a estos cambios, a finales de los sesenta entra en la escena
norteamericana un nuevo movimiento: la era de la Accountability, la era de la
rendicin de cuentas; este movimiento aparece avalado por la gran preocupacin por la
eficacia y el rendimiento de las grandes cantidades de dinero invertido en la mejora del
sistema escolar, social, sanitario,. Este hecho y otros paralelos consolidaron los
nuevos mbitos de la evaluacin: los programas, los centros, los recursos,
Como resultado de estas nuevas necesidades de la evaluacin, se inicia durante esta
poca un periodo de reflexin y de propuestas tericas con el propsito de clarificar la
multidimensionalidad del proceso evaluativo (Escudero, 2003). Estas reflexiones
enriquecieron conceptual y metodolgicamente a la evaluacin, lo que unido a la gran
expansin de la evaluacin de programas, sobre todo sociales, ocurrida durante estos
aos, dar lugar al nacimiento de una nueva modalidad de investigacin aplicada y
enmarcada en el paradigma para el cambio y la mejora, nos referimos a la
INVESTIGACIN EVALUATIVA definida como un proceso riguroso, controlado y
sistemtico de recogida y anlisis de informacin fiable y vlida que nos permita tomar
decisiones sobre el objeto valorado.
En este proceso evolutivo y de consolidacin de la Investigacin evaluativa tuvieron
gran influencia los trabajos de Cronbach (1963) y los de Scriven (1967) a travs de los
cuales se presentan, entre otras, las siguientes ideas evaluativas:
Para Cronbach:
-

Es necesario asociar el concepto de evaluacin a la toma de decisiones

Es mejor evaluar un programa mientras ste se est desarrollando
La evaluacin tiene que ser criterial.

Para Scriven:
-

Hay que distinguir entre la evaluacin como actividad metodolgica (sta es

igual sea lo que fuere lo que estemos evaluando) y las funciones de la evaluacin
en un contexto particular y que tienen que ver con el uso que se hace de la
informacin recogida.
Son dos las funciones de la evaluacin: Formativa (proceso de evaluacin al
servicio de la mejora de un programa en desarrollo); y Sumativa (proceso
evaluativo orientado a comprobar la eficacia de un programa y tomar decisiones
sobre su continuidad).
La evaluacin debe centrarse tanto en saber si se han cumplido o no lo objetivos
como en saber el grado en que stos han sido alcanzados.
2

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

Estas ideas influyeron decisivamente en la comunidad de evaluadores, se empieza a

considerar que el evaluador no slo analiza y describe la realidad, adems la valora y la
juzga con relacin a distintos criterios.
A partir de estas aportaciones son muchos los autores que se suman a un debate y una
lnea reflexiva que ha ido en aumento y que ha ayudado a la consolidacin de la
Investigacin Evaluativa.
La preocupacin por dotar de contenido conceptual terico y metodolgico a una
prctica cada vez ms presente en el mbito de las Ciencias Sociales hace que asistamos
en los aos setenta y ochenta a lo que Mateo (1986) denomin una eclosin de
modelos, en los que se reflejan diferentes concepciones sobre evaluacin que han dado
lugar a un amplio abanico terico y metodolgico y a una apertura y pluralidad
conceptual en el mbito de la evaluacin:
-

La coexistencia de diferentes conceptos de evaluacin: a) la evaluacin como

proceso que permite determinar el grado de congruencia entre las realizaciones y
los objetivos previamente establecidos (modelos orientados a la consecucin de
metas, (Tyler); b) la evaluacin como proceso que permite proporcionar
informacin relevante para tomar decisiones (modelos orientados a la toma de
decisiones, Stufflebeam, MacDonald , Cronbach,) y c) la evaluacin como
proceso que permite estimar el valor o merito de algo (modelos que insisten en
la diferencia entre el mrito, vinculado a las caractersticas intrnsecas de lo
que se evala y el valor, vinculado a la utilidad en un contexto determinado,
Scriven, Cronbach, Guba y Lyncold,)
La coexistencia de diferentes criterios: los objetivos para los modelos orientados
a la consecucin de metas, el criterio establecido por el que toma las decisiones
en los modelos orientados a la toma de decisiones, los criterios estndares,
para los modelos centrados en el mrito y las necesidades del contexto, las
expectativas y los valores del grupo destinatario en los modelos centrados en
determinar el valor.
Pluralidad de procesos evaluativos.
Pluralidad de objetos de evaluacin
Pluralidad, reconocida, de las funciones de la evaluacin
Diferentes roles de evaluador: externo e interno.
Pluralidad de audiencias, pluralidad de informes de evaluacin
Pluralidad metodolgica

Estos modelos evaluativos clsicos surgidos en los 70 y 80 y los nuevos modelos que
emergen a partir de las necesidades de la evaluacin aplicada a los programas sociales,
orientan y fundamentan las decisiones que se han de ir tomando a lo largo del proceso
evaluativo.
A pesar de la gran cantidad de literatura sobre Investigacin evaluativa, todava existe
cierta debilidad terica al respecto; no existe unanimidad al considerar las distintas
propuestas como modelos, diseos o mtodos de evaluacin, a pesar de que durante
mucho tiempo se trataban indistintamente. Como seala Escudero (2003) el problema al
plantearnos una investigacin evaluativa es que no contamos con unos modelos bien
fundamentados, definidos, estructurados y completos entre los que elegir; pero s
tenemos distintos enfoque modlicos que ayudan a configurar un plan global de
evaluacin, un modelo que permita llevar a cabo nuestra evaluacin.
3

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

Stufflebeam establece unas recomendaciones para llevar a cabo buenos estudios

evaluativos:
1. Los planes evaluativos deben cumplir los requerimientos del Joint Commitee:
utilidad, factibilidad o viabilidad, probidad o legitimidad y precisin
2. Deben proporcionar orientaciones para la mejora
3. Debe tener un componente sumativo y otro formativo
4. Deben basarse en la comunicacin e inclusin de los implicados
5. Deben emplear mltiples perspectivas, mtodos y estrategias
6. Deben ser llevados a cabo por profesionales de la evaluacin.

EL PROCESO DE LA EVALUACIN
Como seala Martnez Olmo (2004), desde un punto de vista funcional la evaluacin es
un proceso complejo que incluye las siguientes actividades:
1. Establecer el propsito de la evaluacin
2. Definir el objeto de la evaluacin
3. Especificar las audiencias que habra que atender
4. Especificar el tipo de juicios a emitir
5. Determinar los indicadores y las fuentes de informacin
6. Elegir y adaptar el modelo de evaluacin
7. Establecer los agentes que efectuaran la evaluacin
8. Establecer un calendario de todo el proceso evaluativo
9. Disear las tcnicas de recogida de informacin
10. Recoger la informacin
11. Analizar la informacin
12. Formular juicios
13. Elaborar los primeros informes
14. Negociar con las audiencias
15. Tomar decisiones
16. Difundir los resultados
17. Realizar un seguimiento
18. Evaluar el proceso de evaluacin (metaevaluacin)
En el siguiente grfico y de forma muy general, reflejamos ese proceso con mayor
simplicidad:

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

Qu se pretende con la evaluacin?

Dar a conocer los resultados

Informacin que necesito: dnde

est, cundo recogerla, cmo
conseguirla

Disear instrumentos

Recoger informacin

Tomar decisiones

Formular juicios

Analizar la informacin

El proceso evaluativo est al servicio de una toma de decisiones, ello implica el carcter
instrumental de la evaluacin, es un medio para un fin.
Toda evaluacin implica un juicio de valor sobre el objetivo evaluado y por
consiguiente un criterio de comparacin. Estos componentes son los elementos
nucleares del proceso evaluativo.
Por lo tanto, la evaluacin es un proceso sistemtico, no improvisado, en el cual pueden
distinguirse tres pasos fundamentales:
a. El primer paso implica una especificacin de las decisiones a tomar
con los resultados y una especificacin de los criterios a travs de los
cuales van a ser valorados.
b. El segundo paso es el momento propiamente de la recogida de la
informacin.
c. En un tercer paso, se compara la informacin recogida con el criterio
adoptado en orden a emitir un juicio de valor sobre el objetivo
evaluado.
Sin embargo, segn Mateo (2000), el carcter instrumental de la evaluacin ha
dado paso a una visin iluminativa en la que se reconoce su carcter cultural y
poltico, y es que el proceso evaluativo es, sobre todo, un proceso generador de
cultura evaluativa, es decir, consiste en un proceso de construccin de valores que
han de ser asumidos e integrados en la cultura de la persona, del colectivo y de la
institucin.
FUNCIONES DE LA EVALUACIN
En cuanto a las funciones que se le han atribuido a la evaluacin, han sido: la
mejora de los procesos (funcin formativa) y exigir responsabilidades (funcin
sumativa).
5

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

Segn Scriven (1967):

Los resultados de la evaluacin permiten tomar, bsicamente, dos tipos de
decisiones: modificar el fenmeno educativo objeto de la evaluacin, o bien
aceptarlo como es o sustituirlo por otro alternativo. El primer tipo de decisin lleva
implcita la idea de perfeccionamiento, al ayudar a los encargados de tomar
decisiones a hacerlo de una manera ms justificable, los evaluadores mejoran la
calidad de la empresa educativa, y eso es precisamente lo que se supone que deben
de hacer (Popham, 1983); el segundo tipo tras una valoracin global y definitiva
del objeto, ya sea positiva o negativa, supone la idea de mantenimiento o de cambio.
La mayora de los autores, consideran que toda evaluacin participa de ambas
funciones, aunque en la actualidad se tiende a poner el nfasis en lo formativo.
De acuerdo con Pozo Llorente (2007), la evaluacin es una accin conceptualmente
nica que dependiendo del momento o de la necesidad adopta funciones diversas
(Diagnstica-formativa o sumativa). Funciones que se necesitan mutuamente; es
importante saber utilizarlas complementariamente, como seala Mateo (2004: 345)
desconocer el valor formativo de la evaluacin sumativa nos parece una incongruencia
o ignorar la aportacin sumativa de la evaluacin formativa, un error.
Cols y Rebollo (1993) siguiendo a Gross y Humphreys (1985) y Sanz Oro (1990)
identifican las funciones de la evaluacin desde una perspectiva externa y/o poltica,
realizada desde fuera, por expertos e interna y/o cientfica, realizada por personal de las
instituciones responsables del objeto a evaluar o por personas implicadas directamente
en su mejora.
Fernndez Ballesteros (1995), refirindose a la evaluacin de programas, y tomando
como referencia las originarias aportaciones de Scriven, Stuffllebean y Levine (1975)
presenta tres tipologas que responden a cundo, para qu y desde dnde se realiza la
evaluacin:
1. Evaluacin sumativa / evaluacin formativa.
2. Evaluacin proactiva / evaluacin retroactiva
3. Evaluacin desde dentro / evaluacin desde fuera.
Evaluacin sumativa / evaluacin formativa.- La evaluacin formativa, tambin
denominada de seguimiento o de proceso, es la realizada durante la aplicacin del
programa y su objetivo es la mejora y el perfeccionamiento del mismo. La evaluacin
sumativa, denominada tambin evaluacin de resultados es la que se lleva a cabo una
vez finalizado el programa, sus objetivos no difieren a los de la evaluacin formativa,
persigue la mejora del programa, su justificacin como eficiencia. No son tipos de
evaluacin opuestos, la evaluacin sumativa tiene un valor formativo muy importante
que no podemos ignorar, igual que la aportacin sumativa de la evaluacin formativa.
Evaluacin proactiva / evaluacin retroactiva.- El propsito de la evaluacin
proactiva o de asistencia es asistir o ayudar a la toma de decisiones sobre el programa;
la evaluacin retroactiva o de ejecucin pretende la contabilidad de ste, es decir ofrecer
informacin sobre su eficacia, eficiencia y efectividad.
Evaluacin desde dentro y evaluacin desde fuera.- La evaluacin de un programa
puede ser realizada por expertos y desde fuera de la institucin responsable del mismo
(Evaluacin externa), sus objetivos en este caso son: proporcionar informacin sobre el
programa, sobre su rentabilidad, ayudar a su desarrollo y expansin, ayudar a configurar
6

Evaluacin de programas, centros y profesores. 5 Pedagoga. 2013-2014

polticas, apoyar innovaciones, informar a la comunidad educativa, ayudar a la

distribucin de recursos. Cuando la evaluacin se realiza desde la institucin
responsable (Evaluacin interna) sus propsitos son comprobar si el programa est
dando respuesta a las necesidades de partida, la mejora constante, ofrecer informacin
sobre la marcha del programa y aportar informacin especfica de determinados
aspectos del programa.
Prez Juste (2006) propone un modelo mixto en el que la evaluacin interna se
convierte en la primera etapa de un proceso ms amplio y complejo, contemplndose en
varios momentos del proceso evaluativo el dilogo y discusin entre evaluadores
internos y externos.
Por su parte, Fernndez Ballesteros (1995) propone tomar la decisin tras valorar las
ventajas e inconvenientes de una y otra (lo que no implica una oposicin polar entre
ellas), as la optimizacin de la mejora del programa, una mejor predisposicin de los
implicados en el mismo, su menor coste y la mayor influencia sobre el programa son
algunas de las ventajas de la Evaluacin interna; maximizar la objetividad, la
credibilidad de la evaluacin y la utilizacin de estndares son algunas de las ventajas
de la evaluacin externa.