Вы находитесь на странице: 1из 34

TEMA 4 CONTROL Y EJECUCIN DE LA

EVALUACIN DEL PROYECTO


Caso prctico
ngela, Pedro, Esther y Noelia cuando disearon sus proyectos saban que era
necesario evaluarlos, por qu? Han ido viendo que durante el proceso de accin
socioeducativa deben recoger datos, hacer anotaciones sobre el propio proceso de
preparacin y ejecucin de la prctica, pero tambin tendrn que ver el cumplimiento o
no de los objetivos marcados, sobre el nivel de satisfaccin de las personas usuarias,
sobre si la organizacin lgica de las actividades y los tiempos previstos para realizarlas
son correctos y acertados, sobre los recursos utilizados, etc., etc., etc. Tambin saben
que necesitan unos soportes documentales y un sistema peridico de recogida de
informacin, que para poder determinar si una actividad o servicio es de calidad o no
deben elaborar unos indicadores.

Pues bien, ahora se plantean cmo deben llevar a cabo la evaluacin...

Objetivos y funciones de la evaluacin

Como hemos visto en la unidad anterior en los procesos de accin socioeducativa, desde
una simple actividad a un programa amplio, hemos de revisar continuamente lo que
hacemos y los efectos que produce. Han de recogerse informaciones y datos tiles y
prcticos, ya que se trata de realizar un seguimiento de las actuaciones, de extraer datos
para la mejora de la labor que llevamos a cabo.

La evaluacin durante la accin permite poner a prueba la capacidad del equipo para
adaptarse a posibles modificaciones, a procesar la informacin y a actuar en
consecuencia.

Empezaremos por ver qu es evaluar:

Evaluar es atribuir cierto valor a una cosa. De esta manera damos con lo que viene a
ser el elemento esencial de la evaluacin: la valoracin de algo (Ventosa, 1992:13).

Si damos una vuelta de rosca al concepto para ir acercndolo a nuestro terreno, Ander-
Egg (1985:148) define la evaluacin como una "Serie de procedimientos destinados a
comprobar si se han obtenido los objetivos propuestos". Definicin que nos es ms
familiar porque surge de un contexto socioeducativo y cultural. Pero en la accin
socioeducativa no importan tanto los resultados como los procesos desencadenados para
llegar a aquellos.

La evaluacin tiene diversos sentidos en funcin del paradigma de referencia del que se
parta y de la filosofa y objetivos de las personas que van a evaluar. Dentro de los
procesos de atencin socioeducativa es imposible ubicarse exclusivamente dentro un
paradigma cuantitativo y de resultados por la complejidad del hecho social. Nos
ubicamos en una perspectiva que contempla tanto la perspectiva cuantitativa como la
cualitativa (que permite analizar los fenmenos y explicarlos). En este sentido, la
evaluacin es un proceso de conocimiento y medicin sistemtico que permite
valorar.

1
La evaluacin es un proceso de medicin de:

La pertinencia: Si es adecuada esa accin y en el momento que se propone.


Segn Ander-Egg (1990) es la capacidad que tiene el proyecto para resolver la
situacin-problema que le dio origen.
La idoneidad: Si la forma de llevarlo a cabo, la metodologa y las actividades
son coherentes con los objetivos que se quieren conseguir.

La efectividad: Si se han conseguido los objetivos propuestos.

La eficiencia: Si se ha conseguido un mximo u ptimo resultado con el mnimo


de medios, y con el menor coste de recursos humanos y materiales.

En resumen, la evaluacin mide:


1. Si la accin es PERTINENTE, adecuada al momento y la ms adecuada para resolver
el problema que da origen al proyecto.
2. Si la metodologa es IDNEA, coherente con los objetivos.
3. Si EFECTIVAMENTE se consiguen los objetivos previstos.
4. Si hemos sido EFICIENTES, consiguiendo los mejores resultados con el mnimo
costo.

Caractersticas de la evaluacin

Qu caractersticas piensas que debe tener la evaluacin?

Debe ser FIABLE, es decir, basada en datos recogidos cientficamente y


analizados seriamente.
Debe ser VIABLE, es decir, conveniente, posible de realizar y que los
resultados de la evaluacin sirvan para mejorar el proyecto o cambiar proyectos
futuros.

Debe ser VLIDA, es decir, que sus resultados tengan garanta de haber sido
extrados con instrumentos que realmente miden lo que dicen medir.

La evaluacin debe facilitar la toma de decisiones, debe aportar informaciones que


posibiliten a las personas responsables y participantes del programa decidir qu se debe
hacer a continuacin y si es necesario redisear la accin o complementarla. Tambin
puede ocurrir que tras una evaluacin preliminar se decida concretar y priorizar slo una
determinada rea.

Si no existe un proceso continuo de evaluacin que aporte datos sobre el mismo, las
decisiones pueden ser precipitadas y no basadas en la realidad de los hechos.

La evaluacin debe posibilitar analizar la prospectiva. Es decir, debe sugerirnos


caminos futuros que se deben seguir despus de la realizacin del programa o proyecto
que nos ocupa. Debe abrir puertas que indiquen, tras el anlisis de las experiencias
desarrolladas, cules deben ser los objetivos prioritarios de futuras intervenciones o las
bases metodolgicas a tener en cuenta con esa comunidad, y todas aquellas
informaciones pertinentes para las futuras acciones.

2
El resultado de la evaluacin debe ser una descripcin clara y sistemtica de lo
sucedido, una interpretacin profesional y objetiva, y una serie de propuestas a realizar
en el futuro en funcin de los resultados obtenidos.

La evaluacin es una de las herramientas bsicas de la persona que trabaja en el mbito


comunitario. Es el proceso por el que recabamos los datos necesarios para mantener el
programa tal y como estaba diseado, abandonarlo o modificarlo. Las tcnicas son el
medio para medir o comprender las actuaciones, pero deben ser siempre flexibles y
adaptadas al objetivo. Debe dar claves para proponer, desarrollar y valorar un proyecto
de atencin a la infancia.

Autoevaluacin
Una evaluacin es efectiva cuando...
Consigue los mximos resultados con los mnimos medios.
Se consiguen los objetivos propuestos.
Si la metodologa es coherente con los objetivos.
El proyecto tiene la capacidad para resolver la situacin-problema que le dio origen.
Te has confundido, en este caso estaramos hablando de la eficiencia!
Efectivamente, se ha conseguido el efecto deseado! Se consiguen los objetivos
propuestos. ! Esto es la idoneidad!
No es correcta, la capacidad que tiene el proyecto para resolver la situacin-problema
que le dio origen mide si la evaluacin es pertinente.

Objetivos y funciones de la evaluacin (I)

Y para qu sirve la evaluacin? Cules pueden ser sus objetivos?

La evaluacin puede tener diversos objetivos dependiendo de las personas interesadas


en la misma y de la situacin y el tipo de proyecto o programa. Sin embargo, y
siguiendo a Cembrano, Bustelo y Montesinos (1999), en los proyectos podemos decir
que los objetivos de la evaluacin deben estar dirigidos a cinco reas principales:

1. El anlisis de las necesidades y la fijacin de objetivos: Es decir, el anlisis de


las condiciones de partida.
2. El seguimiento de programas y la verificacin de los modelos de accin: Se
trata de ajustar la informacin y entender los procesos para poder tomar
decisiones, para solucionar problemas que surjan, para poder explicitar las fases
del proceso y comprender los fenmenos implicados, etc.

3. Valorar los objetivos marcados y las necesidades detectadas: Estudiar la


idoneidad del proyecto, detectar los fallos de idoneidad y por qu, analizar las
actividades en funcin de las expectativas.

4. Averiguar los resultados y el impacto del programa o proyecto: Valorando


los resultados y los recursos para conseguirlos (eficiencia). Valorando los
resultados en funcin de los objetivos planteados (eficacia). Y hacer saber a las
personas participantes su contribucin.

3
5. Fomentar el anlisis prospectivo para indicar acciones futuras.

Objetivos y funciones de la evaluacin (II)

Entonces...qu funciones tiene la evaluacin?

Las funciones bsicas que ha de tener la evaluacin en el contexto de la educacin


infantil son:

1. Facilitar la toma de decisiones: si despus de una reunin a la que han acudido


muy pocas de las personas convocadas, analizamos la situacin y concluimos
que el problema estuvo en hacer la difusin tarde o en haber escogido un da en
el que haba un partido de ftbol importante, esto sirve para tomar la decisin de
controlar las retransmisiones de ftbol para la prxima convocatoria y realizar la
convocatoria con un poco ms de antelacin.
2. Valorar si es adecuada la accin y el momento en que se propone (la
pertinencia): si dentro de las propuestas de actividades para las mujeres estn:
talleres, cursos, excursiones, escuela de padres y madres, etc.; el equipo
(educadora o educador y mujeres representativas) deber decidir cules son las
acciones ms adecuadas al momento, los recursos, los espacios disponibles, etc.

3. Analizar si la metodologa y las actividades son coherentes con los objetivos


(la idoneidad): si el objetivo era conseguir un tiempo libre ms placentero y
diversificado para las nias y nios de un barrio marginal, habr que analizar si
el mtodo propuesto y las actividades previstas o realizadas son las ms
adecuadas para este colectivo, si hemos tenido en cuenta su nivel cultural, su
capacidad de concentracin, etc.

4. Estudiar si se han conseguido los objetivos propuestos (ha sido eficaz?): si


el objetivo fue lograr un grupo de madres y padres que colabore con la
asociacin en el tema de medio ambiente, se trata de saber si se consigue o no.

5. Valorar si los resultados se han conseguido con el menor coste posible (ha
sido eficiente?): debemos analizar si para conseguir ese grupo podramos
haberlo hecho con menor coste (por ejemplo obviando un curso de 50 horas que
nos ha costado demasiado) y en menos tiempo.

6. Aportar pautas para las acciones futuras: si las conclusiones de la evaluacin


es que se debera contar desde el principio con todas las madres y padres, o que
el tipo de actividades programadas exige demasiado coste de organizacin para
los resultados obtenidos, estas conclusiones habrn de tenerse en cuenta en
futuros proyectos.

Como seala Ventosa (1992), la evaluacin cumple con otras dos funciones
fundamentales: la de motivar a las personas responsables y participantes en el
proyecto a medida que son conscientes de los avances que se producen; y la formativa,

4
pues se ha demostrado que la reflexin sobre la accin produce un aprendizaje grupal e
individual que posibilita el avanzar en conocimiento y habilidades que son
posteriormente generalizables a otros terrenos.

Autoevaluacin
Cul no sera una funcin bsica a tener en cuenta en la evaluacin en el contexto
de la educacin infantil?
Facilitar la toma de decisiones.
Aportar pautas para las acciones futuras.
Buscar a las personas responsables de que nuestro proyecto no se est desarrollando
como se ha planificado.
Valorar si los resultados se han conseguido con el menor coste posible.
sta no es la opcin correcta ya que s es una de las funciones de la evaluacin.
sta no es la opcin correcta, ya que s es una de las funciones de la evaluacin, que nos
ayuda a decidir los cambios a introducir en las acciones que realicemos posteriormente.
Correcto!, ya que la evaluacin no trata de buscar culpables, sino de corregir
procedimientos y desviaciones de lo planificado.
sta no es la opcin correcta ya que s es una de las funciones de la evaluacin ver si
podamos haber realizado la misma accin con menos gasto, es lo que se llama eficacia)

Fases de la evaluacin (I)

Caso prctico
ngela, Pedro, Noelia y Esther comprenden la utilidad de la evaluacin en cuanto a
los datos tan valiosos que aporta para la mejora y el mejor funcionamiento de sus
proyectos, pero no tienen claro en qu momento se lleva a cabo. Generalmente
tendemos a evaluar resultados, a medir si conseguimos nuestros objetivos o no y en qu
medida,... pero, de qu nos sirve saber qu no se han conseguido los objetivos en la
medida que esperbamos si no sabemos determinar por qu ha ocurrido? Es necesario
realizar una evaluacin de todo el proceso, desde que diseamos el proyecto, hasta que
se pone en marcha, y por supuesto tambin, qu resultados hemos obtenido.
Cuando diseamos un proyecto, lo que hacemos es formular hiptesis sobre resultados
deseables, sobre la intervencin ms coherente dentro de las posibilidades de actuacin
y la forma de llevarlo a cabo. Pero, qu valor tendr nuestra intervencin sin
mecanismos para confirmar o rechazar hiptesis? Cmo podemos mejorar la
implementacin, la gestin de los recursos, nuestra profesionalidad si no determinamos
los controles adecuados que permitan conocer el resultado de las prcticas que llevamos
a cabo?

Necesitamos evaluar y entender dicha evaluacin como un proceso, porque es parte


esencial del proyecto y como tal debe estar presente en su diseo y en su ejecucin, y no
slo en su momento final. Por tanto, en la evaluacin de tu proyecto debes llevar a cabo
una evaluacin formativa frente a la evaluacin sumativa.

Al mismo tiempo que diseas el proyecto debes ir contemplando el diseo de su


evaluacin. El hecho de disear la evaluacin cuando el proyecto ya est en marcha
conlleva desventajas como las siguientes:

5
Que no seas capaz de aplicar un seguimiento y unos controles sistemticos desde
el inicio del proyecto.
Que en el momento de evaluar no dispongas de los datos o valoraciones que son
necesarias y que deberan haberse registrado con anterioridad.

Puede existir el riesgo de manipulacin de los resultados por parte de los


responsables en cuanto que pueden centrar la evaluacin en los aspectos
positivos del proyecto, obviando los negativos.

Fases de la evaluacin (II)

Insistimos por tanto en la necesidad de que disees la evaluacin como parte esencial
del diseo del proyecto y debe contemplar en cada momento, qu evaluar y cmo
hacerlo. En la figura que acompaa al texto se muestran las diferentes fases en la
evaluacin de proyectos:

Como ves las fases son las etapas, los momentos de la evaluacin y se han organizado
en cuanto al desarrollo temporal del proyecto:

Fase inicial: Se est llevando a cabo el anlisis de la realidad y diseando el


proyecto. En esta fase se identifican las partes interesadas, se organizan los
grupos de trabajo, se delimita qu se va a evaluar y de qu manera. Se van
tomando decisiones sobre el diseo, el mtodo y la medicin.
Fase de ejecucin o implementacin: bsicamente recogemos los datos
previamente definidos. Se tienen en cuenta referencias cuantitativas y
referencias valorativas o subjetivas a travs de reuniones, entrevistas,... No se
deben contraponer como contrarios los registros de los datos cuantitativos y
cualitativos, sino que deben ser aspectos complementarios en toda evaluacin.

Fase final: Se realiza un resumen sistemtico de los datos y se analizan.


Elaboramos estadsticas y tabulamos los datos, y a travs de un debate donde

6
participen los diferentes integrantes del proyecto se contrastan las hiptesis y se
redacta el informe. Se decide cmo utilizar y aplicar los resultados obtenidos y
se decide tambin sobre la difusin de los mismos.

La evaluacin de impacto, tiene como misin describir y juzgar los resultados de un


programa de intervencin, relacionndolo con los objetivos y las necesidades, para
evaluar el mrito y vala del programa en su conjunto. Sirve para evaluar los efectos que
ha producido el programa, no slo los pretendidos y positivos, sino tambin los no
buscados o negativos. Adems valoran los efectos del proyecto a largo plazo, una vez
que ha pasado un tiempo desde que la accin finaliz, si se mantienen los resultados e
incluso si se ha generalizado.

Indicadores de evaluacin (I)

Caso prctico

Noelia, Esther, ngela y Pedro se encuentran ahora con algunos obstculos que
dificultan la evaluacin: Qu criterios concretos debemos seguir para realizar nuestras
valoraciones? Habra que definir ahora los indicadores que vimos en la unidad anterior?
Cules seran los ms adecuados para nuestro proyecto? Estn relacionados con los
objetivos que nos hemos marcado? Cmo se definen?
El paso anterior nos ayudar a delimitar los indicadores, que son la definicin concreta
de aquello que queremos evaluar. Constituyen las "unidades de anlisis" de una
evaluacin, en base a las cuales se puede llegar a establecer un juicio fundado.

Los indicadores estn relacionados con los objetivos especficos del proyecto. Por
ejemplo: si el objetivo general es "fomentar las actividades culturales en un determinado
barrio", el indicador podra ser: grado de aumento de las actividades culturales durante
tal perodo de tiempo.

Si queremos concretar ms y decidir cul es el objetivo especfico alcanzable realmente


por el proyecto, el objetivo puede ser: "conseguir que se realice en determinado espacio
de tiempo al menos una actividad cultural de cada uno de los campos artsticos
destacados por el colectivo en cuestin como interesantes" En la deteccin de
necesidades; los indicadores se pueden determinar fcilmente:

tipos de actividades culturales realizadas.

grado de conexin con los campos de inters del colectivo.

Todo ello quiere decir, que en la medida que el proyecto tiene unos objetivos claros,
definidos especficamente, que permitan saber qu es lo que realmente se espera
conseguir de una forma concreta con el proyecto, la definicin de los indicadores ser
fcil.

Sin embargo, en la prctica esto no suele ser as:

Un diseo participativo de la evaluacin en el que se necesita saber exactamente qu es


lo que queremos evaluar, ayudar al grupo impulsor del proyecto a especificar qu
quiere conseguir exactamente con las acciones que quiere llevar a cabo.

7
Para Alvira (1991) los indicadores deben tener dos condiciones fundamentales:

responder adecuadamente a los objetivos del proyecto y de la evaluacin.


ser factibles de recogerse durante el proceso del proyecto de un modo fiable y
vlido.

Todo proyecto de atencin a la infancia debe contar con indicadores cuantitativos y


cualitativos que permitan tener una visin real. Los indicadores cuantitativos se suelen
expresar en porcentajes, grados o escalas numricas. Los indicadores cualitativos
indican la calidad de las acciones, estimndola en trminos de apreciaciones, relaciones,
categoras o calificativos. Se trata no slo de saber un nmero, sino si los procesos se
estn haciendo en la lnea propuesta por la comunidad, si las personas participantes
estn satisfechas, el tipo de relaciones que se establecen o la percepcin que sobre lo
que se est haciendo tienen las personas implicadas.

Indicadores de evaluacin (II)

Atendiendo al contenido y al momento en que se introducen los indicadores dentro de


una evaluacin, podemos distinguir:

Indicadores de contexto: sirven para calcular los antecedentes o factores


previos a la intervencin y la influencia que stos pueden tener sobre la
valoracin global del proyecto. La formulacin de estos indicadores se suele
hacer en trminos de "congruencia", "identificacin", "participacin", y se
aplican a la historia o antecedente, a la organizacin previa, al contexto social,
diseo, clima organizativo o de trabajo,...
Indicadores de proceso: calcula la eficiencia del proceso estimada en
dimensiones tales como la productividad o la relacin entre recursos necesarios-
entradas (o inputs) y resultados (outputs o salidas), el ritmo de trabajo, el grado
de coordinacin interna y externa,...

Indicadores de producto: tratan de calcular la eficacia (relacin entre


prestaciones o resultados y objetivos). Se conceptualizan en torno a diferentes
dimensiones:

o Cantidad de actividades realizadas.

o Duracin de las mismas.

o Nmero de participantes.

o Nivel de adaptacin a la demanda y/o necesidades.

o Grado de satisfaccin de las personas usuarias.

o Accesibilidad de la oferta.

o Nivel de percepcin de la calidad del producto.

8
o Barreras u obstculos para la recepcin del producto por parte del
pblico.

o Condicionamientos (horarios, duracin, precios, situacin,...).

Indicadores de impacto: se dirigen a los efectos o a la repercusin que un


determinado programa o proyecto ha tenido en el medio grupal o social en el que
se realiz. Algunos criterios que nos pueden ayudar a formular indicadores de
este tipo seran:

o Asimilacin del programa o proyecto por parte del colectivo o


comunidad receptora.

o Transferencias: del programa al grupo, del grupo al medio,


consolidaciones grupales, procesos multiplicadores...

o Continuidad, generalizacin o consolidacin de los resultados.

o Modificacin de hbitos y actitudes en la poblacin.

o Apertura del grupo al medio social: nmero de salidas, reuniones,


coordinacin, representacin social.

o Integracin de la asociacin o entidad en el entorno.

Debes conocer
Adjuntamos, a modo de ejemplo, tabla tipolgica basada en una que Ventosa (1992:63)
ha elaborado intentando resumir los tipos de indicadores, y que puede servir de gua
para la seleccin, construccin y aplicacin de los mismos.

9
Autoevaluacin
En relacin a los indicadores, elige la opcin correcta.
No estn relacionados con los objetivos.
Cuanto ms generales sean los objetivos, ms fcil ser determinar los indicadores.
Las dos primeras opciones son correctas.
Los indicadores estn relacionados con los objetivos especficos del proyecto.
sta no es correcta ya que los indicadores los realizamos a partir de los objetivos
propuestos.
Esta opcin no es correcta ya que en la medida que el proyecto o programa tiene unos
objetivos claros, definidos especficamente, la definicin de los indicadores ser ms
fcil.
No es correcta, ya que las opciones anteriores no describen cualidades de los
indicadores.
Correcto! Ya que los indicadores deben responder a los objetivos del proyecto.

Indicadores de evaluacin (III)

10
A que te vendra bien ver ahora un ejemplo de niveles de evaluacin e indicadores para
cada nivel?

1. ENTORNO:

Existencia de recursos comunitarios y de qu tipo.

Grado de conocimiento de las instituciones y asociaciones que trabajan en el


tema.

2. PROGRAMA:

Calidad del diseo en cuanto a la coherencia con las necesidades e intereses


detectados.

Adecuacin de la metodologa escogida a los objetivos, destinatarios y recursos.

Resultados obtenidos respecto a los objetivos previstos.

Grado de consecucin de los objetivos.

3. METODOLOGA:

Grado de flexibilidad ante la realidad.

Nivel de adecuacin a los objetivos.

Rentabilidad de las actividades realizadas.

4. PERSONAS DESTINATARIAS;

Nivel de participacin en el diseo de proyecto, la ejecucin, las actividades y la


evaluacin.

Grados de satisfaccin ante las tareas y los resultados.

Nmero de personas directamente beneficiadas y colectivos a los que


pertenecen.

Impacto real en la poblacin diana.

5. PROFESIONALES:

Nivel de satisfaccin ante las tareas realizadas.

Grado de eficacia en la ejecucin de las tareas.

Capacidad para adaptarse a los recursos y al entorno.

Grado de conocimiento y habilidades para ejecutar sus tareas.

11
6. RECURSOS:

Han sido suficientes o no.

Idoneidad de los mismos para la correcta ejecucin.

Indicadores de evaluacin (IV)

Toda evaluacin cualitativa tiene que tener un grado suficiente de validez y fiabilidad.
Esto se consigue con el mtodo denominado TRIANGULACIN, es decir,
comparando la percepcin y la opinin que merece el mismo hecho por parte de todas
las personas implicadas, haciendo un anlisis crtico y objetivo que permita tener una
visin realista de lo que est pasando o ha pasado.

Por ejemplo, si desarrollamos un proyecto cultural para las nias y nios del barrio X
durante seis meses que, de cara a las personas destinatarias, se centra en acciones
culturales durante los dos meses de julio y agosto, a la hora de evaluar se deber
comparar el nivel de satisfaccin de las madres y padres del barrio, de los nios y nias
que asisten a las actividades, de las educadoras y educadores, de los organizadores y
organizadoras, de las instituciones colaboradoras y de las personas o entidades
promotoras del proyecto. Si cruzamos todos estos datos se podr decidir con bastante
fiabilidad y validez si el proyecto ha sido o no satisfactorio. Con el mtodo de
triangulacin estamos incorporando una tercera (o cuarta, etc.) visin que viene a
aportar mayor objetividad, validez y fiabilidad, porque el informe de resultados no se
limita, en el ejemplo, a lo que opinan o analizan las madres y padres y el educador o
educadora, sino que se cruzan los datos entre todas las personas participantes en el
proyecto.

Autoevaluacin
Elige la opcin que relaciona correctamente el indicador con el nivel de la
evaluacin:
Indicador: Existencia de recursos comunitarios y de qu tipo. Nivel: profesionales.
Indicador: Impacto real en la poblacin diana. Nivel: personas destinatarias.
Indicador: Idoneidad de los recursos para la correcta ejecucin del proyecto. Nivel:
Profesionales
Indicador: Capacidad para adaptarse a los recursos y al entorno. Nivel:
Metodologa.
No es correcta ya que el indicador mencionado hace relacin al entorno.
Correcto! Ya que nivel e indicadores estn relacionados en este caso.
Incorrecto, ya que este indicador hace alusin claramente a los recursos.
No es correcto, ya que el indicador hace alusin a una caracterstica de los
profesionales.

Tcnicas e instrumentos

Caso prctico

12
Una vez que hemos decidido qu vamos a evaluar, nos surge otra duda cmo vamos a
hacerlo? Esther y Noelia cuando disearon su proyecto ya determinaron cmo iban a
controlar los diferentes aspectos de la implementacin del mismo, por eso elaboraron
hojas de registro donde recoger la informacin que les sera de utilidad en el futuro. As
disearon un tipo de entrevista con los padres y madres para recoger las impresiones y
grado de satisfaccin de las familias, desarrollaron una parrilla de registro de
observacin para determinar las actividades ms adecuadas para los menores y otra de
control para las trabajadoras de la escuela infantil.
Cmo vamos a realizar la evaluacin? Qu tcnicas e instrumentos podemos utilizar
para mejorar nuestra intervencin?

La obtencin de informacin comprende bsicamente cuatro etapas:

1. Eleccin y preparacin de los instrumentos para recopilar la informacin (en


base a una serie de aspectos y condicionantes de los que hablaremos ms
adelante).
2. Recogida de datos, a travs de los instrumentos ya preparados.

3. Tratamiento de los datos obtenidos, mediante una serie de estrategias y


mtodos de anlisis que suelen ir de menor a mayor complejidad a medida que
avanza el proceso. Se pretende convertir los datos primarios (en bruto) en
informacin elaborada. (Anlisis e interpretacin de la informacin/datos).

4. Comunicacin y difusin de los resultados del anlisis a sus destinatarios.

Eleccin de los instrumentos: cuestiones a tener en cuenta.

Para saber los instrumentos ms adecuados para registrar la informacin, qu debemos


preguntarnos?

Qu informacin se necesita? El contenido de los datos determinar la


manera de tener acceso a ellos. Unos se pueden recopilar mediante la
informacin y con la ayuda de medios externos (es el caso de los
comportamientos, hbitos, o conductas). Otros datos (opiniones, conocimientos,
expectativas) requieren de procedimientos reactivos -provocadores de respuesta-
o interactivos -dndose una relacin entre la persona evaluadora y la evaluada
(ejemplo: la entrevista o la observacin participante). Unos y otros son
susceptibles de tratamiento cualitativo o cuantitativo, segn se quiera conocer
cierta informacin en profundidad y de forma individual, o bien con amplitud y
de forma colectiva.

Para qu y para quines se quiere evaluar? La finalidad y las personas


destinatarias tambin condicionan los instrumentos de informacin, ms o
menos adecuados para ciertos objetivos y personas. (Se puede querer evaluar
para rendir cuentas ante instituciones u organizaciones polticas, en este caso con
mtodos ms bien cuantitativos e indicadores de producto. O la evaluacin
puede ir orientada hacia la comprensin del funcionamiento interno de una
asociacin, con mtodos ms cualitativos e indicadores de proceso).

13
De qu medios se dispone? Realizar una encuesta a travs de cuestionarios
rellenados por las propias personas destinatarias o mediante entrevistas
individualizadas, depende, entre otros factores de los recursos humanos y
materiales disponibles. La preparacin que tenga el personal que va a recoger los
datos influye tambin en la eleccin del instrumental y metodologa que se
utilizarn.

Con cunto tiempo se cuenta? Una entrevista individual lleva bastante ms


tiempo que el auto rellenado de un cuestionario o que un debate grupal.
Conviene que haya cierta proporcionalidad.

Cundo ha de llevarse a cabo? En funcin del contenido a evaluar: contexto,


proceso, resultado; habr que situar la recogida de informacin en uno u otro
momento de manera que no lleguen los resultados a destiempo. De igual forma,
la exhaustividad en la recogida de datos depender de si es la primera vez o ya
se han realizado anteriores evaluaciones.

Quines van a recoger la informacin? La formacin, competencia, y


experiencia condiciona la utilizacin de unos y otros instrumentos, as como el
conocimiento que se tenga de lo que van a evaluar. Cuando la evaluacin la
lleven a cabo los tcnicos o tcnicas en educacin infantil, se contar de
antemano con una informacin previa que orientar y fundamentar todo el
proceso anterior; en cambio habr que cuidar mucho la objetividad de los
resultados para no llegar a confundirlos con las propias opiniones.

Desde qu posturas o presupuesto se emprende el anlisis de la realidad?


Dependiendo de si los propsitos son explicativos y analticos -enfoque
cuantitativo- o descriptivo y comprensivo -enfoque cualitativo-.

La observacin y otras tcnicas de evaluacin

Para determinar cmo vamos a realizar la evaluacin recurriremos a las tcnicas que nos
permitan mejor, en cada momento y en funcin de los indicadores y de las personas que
van a evaluar, recoger y analizar la informacin demandada. Las tcnicas son el medio
necesario para conseguir los objetivos, el procedimiento para la recogida de informacin
o para el anlisis de la misma.

Algunas de las tcnicas de evaluacin las viste en la unidad 2 cuando estudiaste el


anlisis de la realidad, ya que en ese caso estabas realizando una evaluacin de las
necesidades de un colectivo o sector de poblacin concreto. Aqu recordaremos estas
tcnicas y aportaremos otras nuevas.

Una de las tcnicas ms utilizadas es la observacin que supone la percepcin de un


fenmeno que se selecciona y se registra sin haberlo manipulado. La observacin
admite diversos grados de sistematizacin; puede ir desde la observacin ocasional y
fortuita, no sistematizada, que no obedece a ningn criterio ni estrategia de trabajo, o
bien una observacin activa, que obedece a unos criterios metodolgicos. En el
documento del punto 3.2 de la unidad didctica 2 puedes recordar las diferentes tcnicas
de observacin y los instrumentos necesarios para llevarla a cabo.

14
Debes conocer

Existen otras tcnicas para la evaluacin que te mostramos en el siguiente enlace:

LAS TCNICAS DE EVALUACIN


Las tcnicas son el medio necesario para poder conseguir los objetivos, el procedimiento para la
recogida de la informacin o el anlisis de la misma. En la unidad 2 cuando vimos el anlisis de
la realidad se trabajo la observacin como tcnica. Aqu presentamos otras tcnicas que nos
pueden ser tambin muy tiles junto con la entrevista y la observacin a la hora de llevar a cabo
la evaluacin de proyectos.
Mostraremos los instrumentos de evaluacin necesarias para cada una de ellas.
DIARIO DE CAMPO:
Objetivo: Analizar lo que est sucediendo en una accin.
Descripcin: En un cuaderno se toman notas de lo que va sucediendo en todo lo referente al
proyecto para su posterior anlisis.
Desarrollo: De forma ordenada se establece un diario donde se recogen todas las incidencias
que puedan seguir para el seguimiento. Se puede operativizar haciendo un guin de lo que
vamos a apuntar, por ejemplo:
La actividad.
El da que se realiza.
El lugar.
La hora y tiempo de realizacin.
El objetivo.
Los indicadores de resultado.
Las personas que han participado.
Los resultados.
Las valoraciones.
Las observaciones.
Observaciones: No se trata slo de escribir objetivamente lo que est sucediendo, si no que
incluye una valoracin inmediata de lo sucedido e incluso sugerencias de mejora.
Es un instrumento muy til, pero exige un esfuerzo regular y peridico (Ver Rueda,
1993 y Rodriguez, 2002).
REGISTRO ANECDTICO
Objetivo: Observar determinados destacados en una situacin para poder analizarlos
posteriormente. Descripcin: Registro de conducta o aspectos de una situacin que se considera
significativos, sin interpretar ni juzgar.
Desarrollo: Se decide qu situacin se va a observar y qu indicadores concretos interesan. Se
prepara una parrilla de registro. No se requiere ningn momento concreto ni lugar especial, debe
hacerse cuando surja algo interesante, pero no despus. Se pueden hacer registros individuales y
grupales.
Observaciones: El registro ha de hacerse en el momento, pero el anlisis puede hacerse despus.
Variantes: Registro Continuo: Una persona observadora procesa o elabora informacin
a partir de la observacin continua a un grupo o sujeto. Supone un lenguaje preciso y elaborado
que describa la situacin sin interpretaciones pero con suficiente detalle para que se refleje la
conducta o situacin.
El INSTRUMENTO para el registro anecdtico sera la PARRILLA:
Nombre:
Registro de ancdota desde: hasta:
Fecha/ Lugar y situacin/ Observador/a Ancdota/ Comentario sobre resumen de ancdotas:

MUESTREO DE TIEMPOS
Objetivo: Analizar la frecuencia con la que aparece una conducta o situacin y su duracin.

15
Descripcin: Recogida de informacin de una muestra representativa de la conducta, antes de
describirla con detalle. Se suele usar para la observacin de un grupo grande, sobre todo si se
pretende generalizar las conclusiones.
Desarrollo: De debe escoger una muestra con estabilidad en el tiempo, ya que no es un registro
anecdtico. El hecho debe ser fcilmente observable y las manifestaciones de este hecho deben
estar definidas operativamente. Los pasos a seguir seran:
1. Expresar claramente el objetivo de la observacin (describir, explicar, modificar). Ello nos
orientar con el tamao de la muestra (n de observaciones, frecuencia de la observacin).
2. Determinar la clase de informacin que necesitamos registrar (presencia/ausencia, n de veces
que sucede)
3. Preparar la hoja de registro de observacin.
Observaciones: Esta tcnica puede ser utilizada para la deteccin de problemas en grupos, y ms
concretamente para valorar la importancia de determinadas conductas de algunas personas del
grupo en el clima general.
MUESTREO DE HECHOS
Objetivo: Explorar las caractersticas de los indicadores seleccionados.
Descripcin: Se observa un hecho sin tener en cuenta, cundo ocurre ni cunto dura.
Desarrollo:
1. Se selecciona un aspecto y sus indicadores a observar.
2. La persona que observa espera que la conducta se manifieste y la registra. Para lo cual deber
de tener un conocimiento exhaustivo de la conducta en general y sobre dnde y cundo
observar.
3. Determinar qu clase de informacin se quiere registrar.
4. Elaborar una hoja de registro, pre-codificando cada informacin que se va a recoger en
abreviatura con nmero y otros smbolos. Se trata de registrar si esa conducta se da o no. Se
puede completar con espacios para notas aclaratorias.
Observaciones: Se puede utilizar para la observacin de una conducta conflictiva en las
reuniones.
El INSTRUMENTO para el muestreo de hechos sera la PARRILLA DE REGISTRO DE
MUESTREO DE HECHO.
Datos de identificacin: 1 2 3 4 5 6 7 8 / Edad:/ Sexo:/ Lugar de observacin:
Localidad:/ Hechos observados: Cdigos de registro:
1
2..
3.
4.
5.
Observaciones
LA DIANA
Objetivo: Conocer el grado de satisfaccin de una actividad.
Descripcin: Por medio de la representacin grfica de la diana, un grupo valora una actividad
indicando si le parece acertada la accin o actuacin que ha dado en el centro, y cuanto menos
de acuerdo o satisfecho est, debe alejar su valoracin del centro.
Desarrollo: Se prepara una diana en papel grande o cartulina y se divide en 5 o ms porciones
(depender del nmero de aspectos a evaluar). A cada porcin se le asigna el aspecto que se
quiere evaluar. Por ejemplo: organizacin, grado de contacto personal, cumplimiento de los
objetivosetc. Luego se le asigna la mxima puntuacin, por ejemplo, 5, al centro, y el resto de
crculos exteriores significar una menor valoracin.
Cada participante recibir una diana en un folio en el que se le indicar lo que debe evaluar.
Luego se pasar a la puesta en comn en la que cada participante se levantar y pondr su
puntuacin en una diana ms grande que habr en la pizarra o en la pared (dibujada en papel).
De esta forma se ver si existe mucha diferencia o no en las valoraciones. Se puede discutir las
medias y la dispersin que se da en cada apartado evaluado.
Observaciones: Es fcil de construir y rpida de realizar.
Variantes: Se puede hacer un paso intermedio, trabajando en pequeos grupos.

16
LO MEJOR Y LO PEOR.
Objetivos:
1. Conocer una impresin general de la actividad.
2. Reflexionar sobre las causas.
Descripcin: Un grupo evala los aspectos positivos o negativos de una actividad.
Desarrollo: Cada participante debe escribir en un papel y de forma individual qu le ha parecido
mejor y peor de la actividad. Sern suficientes 5 o 10 minutos. Posteriormente se va leyendo en
voz alta. Se pueden pedir aclaraciones. Si se tiene tiempo y se quiere profundizar se puede
realizar una reflexin grupal y consensuar en la pizarra los principales aspectos positivos y
negativos de la actividad, as como sus causas, aadiendo soluciones inmediatas a propuesta del
grupo.
Observaciones: Supone poco tiempo de realizacin, pero recoge muchos datos.
LAS ESTATUAS.
Objetivo: Conocer cmo se siente o qu se piensa ante un determinado evento o actividad.
Descripcin: Una parte del grupo se divide en subgrupos de unas seis personas. Cada subgrupo
prepara por separado una situacin que ha transcurrido: cmo la han vivido, el sentimiento que
ha tenido durante las actividades o la impresin final de la misma.
Luego cada grupo presenta su trabajo por medio de un escultor que con el cuerpo de los dems
va moldeando una composicin de estatuas. El resto ha de interpretar qu es lo que han querido
expresar, luego se inicia un dilogo y se concluye.
Observaciones: Esta tcnica suele gustar por ser bastante diferente a las habituales. Hay que
tener en cuenta que no se puede hablar y solo las posturas de los cuerpos o la composicin de
entre varios de ellos indicar lo que se quiere expresar. Posteriormente con la interpretacin se
suelen sacar muchas ideas. Es importante apuntar los resultados y realizar un informe
valorativo.
MURAL
Objetivo: Conocer las impresiones y opiniones de una actividad concreta.
Descripcin: En un papel grande que se pega en la pared, o se pone en el suelo, se invita a los
participantes de una actividad a reflejar su opinin sobre la misma.
Desarrollo: Se pega el papel en un lugar visible o accesible con varios rotuladores a mano, se les
pide a los participantes que expresen libremente sus impresiones, valoraciones, crticas y
sugerencias. Es una actividad de carcter individual.
Posteriormente habr que extraer la informacin, agruparla y sacar conclusiones; si se quiere,
esto se puede hacer con el grupo.
Observaciones: Rpida y fcil de hacer, abierta pero difcil de interpretar y tabular.
TELEGRAMA
Objetivo: Extraer un balance general de la actividad.
Descripcin: En una tarjeta o cuartilla, cada participante expresa con una frase corta, a modo de
telegrama, su valoracin.
Desarrollo: Cada participante debe escribir un telegrama que refleje una impresin general o un
aspecto que quiera destacar de la actividad. Se debe propiciar el sentido del humor y la
creatividad. Cada uno escribe su mensaje y lo echa en una bolsa donde se mezclan,
posteriormente se reparten al azar y se leen en voz alta los mensajes. Se puede completar con
una reflexin grupal de lo que se ha dicho.
Observaciones: Es muy til para medir el grado de satisfaccin y se realiza en relativo poco
tiempo.
ASAMBLEA EVALUATIVA
Objetivo: hacer un anlisis profundo de una actividad o proyecto.
Descripcin: Un grupo numeroso de personas, hasta 25, se renen en circulo para valorar una
actividad, con la ayuda de unas preguntas guas.
Desarrollo: En primer lugar se determina la persona que va a coordinar la asamblea, sta ser la
responsable de que exista un guin de aspectos a analizar mediante la asamblea (este guin
puede realizarse con el grupo). Estas preguntas guas pueden ayudar a conducir la discusin y a
centrar los temas. La coordinacin plantea el tema y comienza lanzando la primera pregunta e
intenta que todo el mundo participe. La disposicin espacial es clave. Los participantes han de

17
distribuirse en crculo y sin mesas delante. Es importante crear un clima relajado, en parte
informal, que permita que salgan a relucir aspectos que por medio de instrumentos cualitativos
son imposibles de recoger. Las personas coordinadoras sern las responsables de hacer un
informe memoria con un anlisis de las conclusiones de la evaluacin.
Observaciones: Esta tcnica necesita bastante tiempo, mnimo una hora y media, pero permite
extraer mucha informacin y hacer reflexionar. Adems, puede completarse pidiendo al grupo
que aporte soluciones a los problemas detectados.
LLUVIA DE TARJETAS
Objetivo: Evaluar de forma profunda una actividad.
Descripcin: Un grupo de hasta 25 personas evala un proyecto, por medio de tarjetas
adhesivas, especficamente determinados aspectos que se quieren valorar.
Desarrollo: Se divide el grupo en subgrupos de 4 o 5 personas y a cada uno se le da una tarjeta
con un aspecto o criterio a evaluar, por ejemplo: Tarjeta 1: Se ha atendido los intereses de los
destinatarios? Se ha conseguido los objetivos previstos?...y as hasta todas las tarjetas creamos
convenientes. Por cada aspecto podr rellenarse a su vez una o dos tarjetas adhesivas por
persona, en cada una de ellas expresarn una sola idea.
Cada grupo ir pegando sus tarjetas en tablones o en un papel colgado en la pared, procurando
ordenarlas por los aspectos evaluados. Las personas responsables de la actividad terminarn de
ordenarlas.
Se puede continuar de dos formas:
1. El grupo se vuelve a reunir y analizan y resumen las ideas.
2. En asamblea y con ayuda de las personas responsables, se van analizando y debatiendo cada
una de las aportaciones.
Observaciones: Recomendable para grupo de colaboradores que pretende evaluar un proyecto,
es larga de realizar pero muy rica.
Extrado de: "El desarrollo de procesos de accin socioeducativa desde las perspectiva de la
animacin sociocultural" Mara del Mar Herrera Mechn.

Autoevaluacin
De las tcnicas de evaluacin que has estudiado podemos decir que el diario de
campo:
Es un cuaderno se toman notas de lo que va sucediendo en todo lo referente al
proyecto para su posterior anlisis.
Es un Registro de conducta o aspectos de una situacin que se considera
significativos, sin interpretar ni juzgar.
Es la recogida de informacin de una muestra representativa de la conducta, antes
de describirla con detalle.
Todas las anteriores son falsas.
Correcta!
No es correcta, ya que esta descripcin hace referencia al "registro anecdtico".
No es correcta, ya que esta descripcin hace referencia al "muestreo de tiempo".
No es correcta, ya que una de las descripciones se corresponde con la del diario de
campo.

La entrevista como tcnica de evaluacin (I)

Otra tcnica muy utilizada en la evaluacin es la entrevista. La entrevista es una


situacin de interaccin verbal entre varias personas, en la que una o varias (que ejercen
el rol de entrevistadoras) se proponen obtener algn tipo de informacin la una de la
otra u otras (que ejercen el rol de entrevistadas).

18
La entrevista como tcnica de evaluacin est muy relacionada con la observacin,
pero, a diferencia de sta, permite describir e interpretar aspectos de la realidad que no
son directamente observables, como sentimientos, impresiones, intenciones o
pensamientos.

Existen diversas maneras de realizar una entrevista aqu las clasificaremos segn el
grado de estructuracin, de directividad y segn el nmero de participantes.

Segn el grado de estructuracin podemos destacar:

Entrevista estructurada cerrada: la encuesta.

Se trata de un protocolo de preguntas y respuestas que se sigue con rigidez, donde el


entrevistador realiza una serie de preguntas preestablecidas, generalmente cerradas, con
una serie limitada de categoras de respuesta. Generalmente se trata de un cuestionario
administrado de forma oral.

Entrevista estructurada abierta:

En ella se formulan las mismas preguntas a cada participante en la evaluacin, en los


mismos trminos y segn la misma secuencia, pero las respuestas son abiertas y las
personas entrevistadas pueden expresarse con su propio lenguaje.

Entrevista no estructurada:

En este tipo, el esquema de preguntas y secuencias no est prefijado. Las preguntas


suelen ser de carcter abierto y el entrevistado tiene que construir las respuestas. Son
entrevistas flexibles, , permiten una mayor adaptacin a las personas evaluadas y
requieren ms preparacin por parte de los/as entrevistadores/as.

Entrevista semiestructurada:

Se sita entre la cerrada y la no estructurada. La persona entrevistadora tiene una serie


de preguntas prefijadas que podr variar en funcin de las respuestas de la persona
entrevistada. Es decir, si consideramos que la respuesta es insuficiente o incompleta
volver a formular la pregunta, de tal manera que la persona entrevistada pueda
explicarse sobre un punto concreto.

La entrevista como tcnica de evaluacin (II)

En este apartado continuamos presentndote otras posibles clasificaciones de las


entrevistas, atendiendo a dos criterios distintos, el grado de directividad, y el nmero de
participantes.

Segn el grado de directividad podemos distinguir entre entrevista dirigida o no


dirigida:

La entrevista dirigida:

19
Se utiliza una serie de cuestiones o aspectos que han de ser explorados a lo largo de la
entrevista, para sistematizar la intervencin y no perder informacin significativa. La
persona entrevistadora puede adaptar la forma y el orden de las preguntas siempre y
cuando se aborden todos los aspectos.

La entrevista no dirigida:

En este tipo de entrevista se intenta crear un clima de confianza para la persona


entrevistada pueda explicar con claridad su opinin. Se propone un tema con un mnimo
de guas o preguntas con lo que la estructuracin se reduce al mnimo.

Segn el nmero de participantes cabe destacar:

Las entrevistas individuales:

Dirigidas a una sola persona.

Las entrevistas grupales.

La entrevista de grupo es una tcnica cualitativa, que se sirve de una persona que hace
de moderadora y dirige la interaccin del grupo a partir de un guin o formato
estructurado, semiestructurado o no estructurado, dependiendo de lo que estemos
evaluando. La entrevista en grupo proporciona informacin difcil de acceder a travs
de la entrevista individual y adems facilita una serie de controles de calidad en la
recogida de informacin, como es la presencia de otras personas, que obliga a una
mayor reflexin, a contrastar lo expresado y a eliminar las posturas falsas o extremas.

Autoevaluacin
Segn el grado de directividad, podemos encontrar los siguientes tipos de
entrevistas:
La entrevista dirigida y la entrevista no dirigida.
La entrevista estructurada y la semiestructurada.
La entrevista cerrada y la entrevista abierta.
Ninguna de las anteriores opciones son correctas.
Correcta!
Incorrecta, ya que estos tipos obedecen a una diferenciacin por el grado de
estructuracin de la entrevista.
Incorrecta, ya que estos tipos obedecen a una diferenciacin por el grado de
estructuracin de la entrevista.
Incorrecta, ya que existe una opcin correcta.

Los instrumentos de evaluacin

Por otro lado, los instrumentos de evaluacin son los recursos concretos para poder
llevar a cabo cada tcnica de evaluacin. Por ejemplo, para la tcnica de observacin
necesitaremos ciertos instrumentos para realizarla, como podra ser una parrilla de
registro. En el caso de la tcnica de encuesta los instrumentos seran los cuestionarios o

20
escalas...presentamos una tabla donde relacionamos cada tcnica con su instrumento de
evaluacin:

TCNICA INSTRUMENTO

Observacin. Parrilla de registro.

Encuesta. Cuestionarios y
escalas.

Entrevista. Preguntas guas.

Mural. Guin de indicadores.

Diario de campo. Cuaderno de notas.

Lluvia de tarjetas. Parmetros de


anlisis.

Asamblea Guin de anlisis.


evaluativo.

Diana. Grfico de diana.

Telegrama. Ninguno.
Es necesario que no confundas el instrumento de evaluacin con los recursos materiales
que necesitas para llevar a cabo la tcnica, como por ejemplo en el caso de la tcnica de
Diana, el instrumento de evaluacin es el grfico y no el papel continuo o la pizarra que
utilices.

Adems de los instrumentos mostrados en el documento del punto anterior, si vas a


utilizar para la evaluacin de tu proyecto cuestionarios o alguna tcnica de observacin,
te puede resultar til registrar datos por medio de las ESCALAS. Las escalas son un
instrumento muy til y puede ser de diferentes tipos. Algunos de ellos son:

1. La escala numrica tipo Likert.

En esta escala se asignan valoraciones numricas a las categoras descriptivas. Ejemplo:

21
1: Muy bajo. 2: Bajo. 3: Regular. 4: Bien. 5: Muy bien

Cmo valores a los/las monitores/as del


1 2 3 4 5
taller de teatro

Laboriosidad

Creatividad

Apertura a sugerencias

Capacidad de improvisacin

2. Escala de diferenciacin semntica.

En stas se valora dos extremos de una opinin gradundolo numricamente, por


ejemplo:

Valora a tu monitor/a

1 2 3 4 5 6 7 8 9 10

Asequible Distante

Activo/a Pasivo/a

Autoevaluacin
Elige la opcin que relaciona correctamente la tcnica de evaluacin con el
instrumento que utiliza:
Tcnica: encuesta. Instrumento: cuestionario y escalas.
Tcnica: diario de campo. Instrumento: Grfico de diana.
Tcnica: observacin. Instrumento. Guin de anlisis.
Todas las anteriores son correctas.
Correcto! A la hora de llevar a cabo una encuesta es fundamental que llevemos las
preguntas recogidas en un cuestionario o escala.

22
No es correcto ya que el diario de campo precisa de un cuaderno de notas.
No es correcto ya que la observacin requiere de una parrilla de observacin.
NO! Slo una de las opciones anteriores representa la relacin correcta.

La evaluacin participativa en proyectos de atencin a la infancia (I)

Caso prctico

Cuando Pedro y ngela disearon la evaluacin de su proyecto, pensaron que sera


muy interesante, adems de medir resultados y controlar el proceso, conocer la opinin
de todos los sectores implicados. Vieron que podra ser interesante conocer el punto de
vista de los nios y nias que participan en los talleres de teatro, puesto que son los
principales protagonistas junto con sus familias, pero tambin de los monitores y
monitoras contratadas y de la comunidad educativa (AMPA, Claustro de profesores,...).
Se planteaban pues, una evaluacin formativa, positiva que intenta comprender la lgica
de las personas usuarias de los proyectos, respetando todas las opiniones. Es una
evaluacin que busca aprender de la experiencia y mejorar el programa y adems que en
el proceso de reflexin, permite el aprendizaje de quienes participan en ella.
Como en el caso prctico, cuando disees la evaluacin de t proyecto, piensa que es
importante contar con las opiniones de todas las personas implicadas. Cuando se plantea
este tipo de evaluacin se est valorando los procesos internos, y no los resultados y est
encaminada a la mejora del proyecto, podra decirse que se trata de una
AUTOEVALUACIN.

Muchos autores y autoras proponen modelos para llevar a cabo este tipo de evaluacin
ya que se ha demostrado cmo en proyectos educativos y sociales, donde se trabaja en
la atencin directa con personas, la opinin de cada participante es fundamental, ya que
entre otras cosas, enfatiza la autonoma para resolver problemas y crea en las personas
participantes un sentimiento de responsabilidad con el proyecto.

Cuando hablamos de evaluacin participativa, nos referimos a la participacin de todas


aquellas personas que de alguna forma estn implicadas en el proceso de evaluacin del
proyecto, para que tengan la oportunidad de aportar su visin sobre el desarrollo del
mismo, as como de recibir informacin y participar en la valoracin que sobre su
implantacin y resultados se est consiguiendo.

A quines nos estamos refiriendo, por tanto, cuando hablamos de evaluacin


participativa?

Las personas que asumen la mxima responsabilidad. (Personas que financian el


proyecto, por ejemplo).
Las personas que lo gestionan.

Las personas que ejecutan las actuaciones (tcnicos y tcnicas)

Las personas usuarias o destinatarias del proyecto o programa.

23
Las personas cercanas a las usuarias (familiares, personas usuarias
potenciales,...).

Con este tipo de evaluacin, damos la oportunidad a las personas implicadas para que
nos orienten sobre los objetivos de la evaluacin y qu tipo de informacin es la que
querran recibir del proyecto. Nos permite disear los momentos en los que cada cual
participara en la evaluacin continuada del programa, aportando sus puntos de vista.
Permite que se cree un sistema de comunicacin e informacin que permitir la
recogida y devolucin de la misma.

La evaluacin participativa en proyectos de atencin a la infancia(II)

Al mismo tiempo, desde la evaluacin se produce el aprendizaje y ayuda a la cohesin


del grupo que est participando en el proyecto. Una de las estrategias o los modos de
realizar una evaluacin participativa es a travs de la negociacin. Sobre esta estrategia
se basan diferentes modelos de evaluacin de varios autores, veamos algunos de ellos.

Evaluacin iluminativa de Parllet y Hamilton. Se caracteriza por entender la


evaluacin de una manera holstica que tenga en cuenta un amplio contexto. Este
tipo de evaluacin se preocupa ms por la descripcin e interpretacin que de la
medida y la prediccin. Est orientada al anlisis de los procesos ms que de los
productos y las tcnicas que utiliza son la observacin y la entrevista. Se le
denomina evaluacin iluminativa porque parte de que las personas que
participan en la evaluacin deben sentir que se han enriquecido, que se ha
aumentado su comprensin sobre el proceso.
Evaluacin respondiente de Stake. Esta evaluacin se caracteriza por la visin
de los participantes de los proyectos y est orientada ms a las actividades del
proyecto que a sus intenciones. El grupo evaluador se hace un plan de
observacin y ms tarde elaborar unas descripciones y retratos de la situacin.
Se toma en consideracin la opinin de todas las personas implicadas y ha de
responder a las necesidades de informacin de las personas interesadas. Enfatiza
en la necesidad de devolver la experiencia vicaria (de observacin) e implicar a
los y las participantes en el anlisis y valoracin. Su propsito es hacer un
retrato completo y holstico del proyecto.

La evaluacin democrtica de Stenhouse, MacDonald y Elliot. parte de los


planteamientos metodolgicos naturalistas. Las fuentes de datos y los
destinatarios de los informes son aquellos que participan en el proyecto. Las
distintas opiniones deben expresarse y contrastarse, para ello se utiliza la
entrevista y los debates. El propsito central de la evaluacin en este modelo es
facilitar y promover el cambio de concepciones, creencias y modos de
interpretar el proyecto. Se considera la evaluacin como una actividad de
anlisis y valoracin pero no de expresin de un juicio.

Hay que tener en cuenta al mximo de agentes posibles implicados en el proceso de


evaluacin.

Autoevaluacin
Segn Stenhouse, la evaluacin democrtica...
Est orientada ms a las actividades del proyecto que a sus intenciones.

24
Se preocupa ms por la descripcin e interpretacin que de la medida y la
prediccin.
Es considerada como una actividad de anlisis y valoracin pero no de expresin de
un juicio.
Est orientada al anlisis de los procesos ms que de los productos.
No es correcta! En este caso estaramos hablando de la "evaluacin respondiente" de
Stake.
No es correcta! Esto correspondera a la "evaluacin iluminativa".
Correcta!
Te has confundido! Repasa las diversas opciones... vers como encuentras la correcta.

Registro y tabulacin de los datos.

Caso prctico

Pedro Esther, ngela y Noelia ya han realizado el diseo de la evaluacin de sus


proyectos y se dan cuenta de que contarn con una gran cantidad de datos, que tendrn
que ordenarlos para poder comprenderlos y que tambin tendrn que utilizarlos en la
devolucin de la informacin y en la memoria de los mismos. Cmo se ordenan los
datos? Cmo se representan?

Qu entiendes por tabulacin de datos?

Una vez realizado el diseo de la evaluacin habr que ir realizndola tal y como se
haba diseado o con los cambios que la propia dinmica del proyecto haya producido.
Eso quiere decir que se habrn recogido una serie de datos que habr que manejar y
traducir para su utilizacin. La ordenacin y sntesis de los datos facilitan la
comprensin de los mismos.

Empezaremos por ver cules seran los rasgos fundamentales que deben reunir los
datos.

Siguiendo a V.Ventosa (1992:71), los datos han de ser:

Fidedignos, no manipulados o falseados.


Representativos, que recojan una informacin global y completa de la realidad
estudiada.

Suficientes, como para ser significativos.

Significativos, que sean relevantes y digan algo sobre lo que queremos saber.

Exactos, sin ambigedades, yendo al grano.

Una vez recopilados los datos de los instrumentos diseados para este fin, es necesario
clasificar, cuantificar, relacionar y problematizar las informaciones recogidas
(Chuquimia. R.)

25
En general, los datos se ordenan estableciendo categoras y su tabulacin ir en funcin
de que sean cualitativos o cuantitativos.

Registro y tabulacin de datos cuantitativos.

Qu debes saber para tabular correctamente los datos cuantitativos?

Los datos cuantitativos se pueden tabular por frecuencias absolutas (fa), frecuentas
relativas (fr) y porcentajes (%). Por ejemplo, la variable sexo se presenta en dos
modalidades: masculina y femenina; la frecuencia absoluta es el nmero de personas
que presenta cada una de las modalidades de una variable. La suma de los distintos
valores de la frecuencia absoluta en las distintas modalidades ser igual al nmero total
de observaciones.

La frecuencia relativa es el cociente entre la frecuencia absoluta y el tamao de la


muestra (nmero total de personas encuestadas, de las que se conoce el dato). La suma
de los diferentes valores de la frecuencia relativa debe ser igual 1. La frecuencia relativa
nos permite comparar cuantitativamente las diferentes modalidades de la variable y as
se determinar cul es la menos frecuente.

El porcentaje es el resultado derivado de la frecuencia relativa multiplicado por cien.


La suma de los porcentajes en las diferentes modalidades debe sumar 100. El porcentaje
nos permite conocer la modalidad que es ms frecuente y la que es menos frecuente. En
el fondo es slo una forma ms "cercana", con un significado ms claro para la mayora,
de representar la frecuencia relativa.

Para la representacin de una variable, como por ejemplo la valoracin sobre los
recursos disponibles por una asociacin para realizar una actividad, puede ser: 0, 1, 2, 3,
4, 5

Frecuencia Frecuencia
Valoracin de
los recursos Porcentaje
absoluta relativa
disponibles

0 25 0.05 5

1 100 0.20 20

2 125 0.25 25

3 100 0.20 20

4 75 0.15 15

5 75 0.15 15

Totales 500 1 100

26
Autoevaluacin
La tabulacin de los datos ir en funcin de que...
Sean cualitativos o cuantitativos.
Sean numricos.
Su representacin grfica.
Expresen cualidades.
Correcta!
No es correcta! Los datos que no son numricos tambin se tabulan.
No es correcta! Si an no se han tabulado no se pueden representar grficamente.
No es correcta! Se tabulan tanto los datos cualitativos como los cuantitativos.

Representacin grfica de datos cuantitativos

Una vez tabulados los datos podrs realizar su representacin grfica por medio de
diagramas o grficos. Hay multitud de ellos: histogramas (para variables numricas
continuas, tales como la edad, la tensin arterial o el ndice de masa corporal),
polgonos de frecuencias, curva de densidad, grficos de caja y diagrama de tallos y
hojas, representacin de reas bajo la curva normal, representacin de los intervalos
centrales en una curva normal, tablas de frecuencias y estadsticos de tendencia central,
dispersin y forma.

Amelia Serrano. CC by. Elaboracin propia.

El ejemplo del apartado anterior podra representarse mediante el grfico de barras que
acompaa a este texto.

Como puedes ver, se representan tantas barras como categoras tiene la variable, de
modo que la altura de cada una de ellas es proporcional a la frecuencia o porcentaje de
casos en cada clase.

27
Y el mismo ejemplo en grfico de sectores, en esta otra imagen:

Como puedes observar, la informacin que se muestra en cada sector hace referencia al
nmero de casos dentro de cada categora y al porcentaje del total que stos representan.

Registro y tabulacin de datos cualitativos

Qu debes saber para tabular correctamente los datos cualitativos?

Para las variables cualitativas los datos se ordenan en tablas que resumen las cualidades
o atributos. La informacin (con el parmetro de la estructura conceptual original) se
registra y clasifica en columnas.

El primer tratamiento de los datos es la clasificacin que agrupa el "caos" registrado,


interrogando a los datos, esto permite elaborar las descripciones analticas, en las cuales
los datos ya no aparecen tal cual se registraron, sino que se articulan tomando un
significado, que es el primer nivel de respuesta a las preguntas iniciales.

Los datos son analizados a partir de sus relaciones internas, de acuerdo con su
significado propio, dentro de su contexto y estructura. Se refiere al trabajo de realizar
una organizacin bsica del material emprico, de dar una primera congruencia a lo que
sucede; y de construir los enlaces clave iniciales. Pero ante todo, se trata de un trabajo
interpretativo al suponer una construccin conceptual, aunque elemental, que rebasa la
pura descripcin del fenmeno.

Se trata en definitiva de localizar lo genrico y el detalle que es lo que permite


identificar la especificidad que estructura a las prcticas y relaciones, as como la
particularidad de las modalidades en que stas pueden expresarse.

Tambin se pueden utilizar para su representacin las mismas tcnicas que para las
variables cuantitativas.

Para saber ms

28
Actualmente existen programas informticos que facilitan la tabulacin de los datos
tanto de carcter cualitativo como cuantitativo, como puede ser el PASW Statistics
(antes SPSS). Es considerado como el paquete estadstico de referencia y est

Autoevaluacin
La tabulacin de los datos se realiza...
Al inicio del proyecto del proyecto de intervencin socioeducativa.
Durante la ejecucin del plan de intervencin.
Una vez realizada su representacin grfica.
Para ordenar, representar y analizar los datos obtenidos en el anlisis de la realidad.
No es correcta, si an no se ha recogido la informacin no podrn tabularse los datos, no
los tenemos.
No es correcta, antes de pasar a la ejecucin del plan se tendrn que ordenar y analizar
los datos para detectar las necesidades y proceder a la fase de planificacin del
proyecto.
Pero, cmo vamos a representar grficamente unos datos que an no se han
cuantificado, ordenado y clasificado? No es correcta.
Correcta!

Interpretacin de los resultados y toma de decisiones

Caso prctico
Una vez que Pedro, ngela, Esther y Noelia han recogido los datos que acordaron en
el diseo de la evaluacin de sus proyectos y los han ordenado y tabulado correctamente
deben tomar decisiones a cerca de esos datos. Han de emitir juicios de valor sobre sus
programas, no para buscar culpables ni responsables, si no para identificar y analizar las
razones que hacen que sus proyectos se desarrollen ms o menos satisfactoriamente.
Para qu crees que sirve el anlisis y la interpretacin de los datos?

Cuando tengas ordenados, tabulados y representados grficamente los resultados de la


evaluacin que has llevado a cabo, es necesario que tomes algunas decisiones. Tienes
que identificar y analizar las razones que hacen que tu proyecto se desarrolle de una
manera satisfactoria o no. Has de incluir las dificultades previstas o imprevistas que han
hecho que no alcances los objetivos que te habas marcado.

Como hemos dicho, la evaluacin permite tomar decisiones acerca de cmo se ha


implementado el proyecto, si puede o no tener continuidad, la extensin o expansin
que ha tenido,... Al mismo tiempo te ayuda a comprender los procesos que explican los
logros y los fracasos del proyecto.

Todo este proceso de evaluacin se convierte en una estrategia de formacin para todas
las personas que participan del proceso evaluador. La reflexin sobre la propia accin es
un proceso continuo que te permite aprender de tus propias experiencias.

Podrs decir que has concluido la evaluacin de tu proyecto cuando adems de describir
o de cuantificar, analizas y valoras los resultados. Esta reflexin sobre los resultados, es

29
lo que se conoce como explicacin y permite realizar valoraciones, relacionar datos,
comparar variables y extraer por fin, las conclusiones de tu proyecto.

Pasos a seguir en la interpretacin de los resultados y toma de


decisiones

Los cuatro pasos que debes seguir cuando tengas los datos son los siguientes:

1. Describir qu ha sucedido, qu ha pasado, quines han participado, cundo ha


sucedido y cmo.
2. Valorar lo que ha salido bien y lo que no ha salido de la manera que esperabas.

3. Sistematizar la informacin, concluir en base a la descripcin y a la valoracin.


Se trata de que expliques por qu el proyecto ha obtenido esos resultados.

4. Emitir conclusiones y sugerencias de mejora.

La meta de la evaluacin en la accin socioeducativa, no es slo describir lo que ha


sucedido o la situacin final, sino que es necesario que se expliquen los procesos, el por
qu de los resultados, su origen y evolucin, analizar las causas, identificar los aspectos
o factores que favorecen o bloquear las acciones.

No se entiende un informe evaluativo que no tenga una dimensin pragmtica. El


anlisis del desarrollo de tu proyecto, de sus resultados o de sus diversos aspectos no se
puede llevar a cabo como un simple ejercicio intelectual, sino con la perspectiva de que
te permita realizar cambios positivos, mejoras en los aspectos que has abordado. De
manera que la evaluacin de tu proyecto te ser de referencia para decidir si ste debe
continuar o no, y en caso de continuar para decidir las modificaciones o cambios que
tienes que llevar a cabo.

La evaluacin debe ser as un continuo feed-back orientado a mejorar permanentemente


la intervencin. Nada mejor que la prctica para aprender, mejorar, innovar, cambiar,
mejorar. A condicin de que reflexiones adecuadamente sobre ella, desde una estrategia
evaluativa conscientemente diseada y rigurosamente llevada a cabo. (Gustavo A.
Garca, Jos Manuel Rmirez "Diseo y evaluacin de proyectos sociales.

Autoevaluacin
Elige la opcin correcta en relacin a los cuatro pasos a seguir cuando hayamos
obtenidos los datos de la evaluacin:
El primer paso es emitir conclusiones y sugerencias de mejora.
El ltimo paso sera valorar lo que ha salido bien y lo que no.
El primer paso es describir lo que ha sucedido o pasado, quines han participado,...
Ninguna opcin es correcta.
No es correcta, ya que las conclusiones y sugerencias se emiten al final.
No es correcta, ya que ste sera un paso intermedio.
Correcta! Y a partir de ste ya se desencadenan los dems pasos.
No! Existe una opcin correcta, intntalo otra vez.

30
Elaboracin de la memoria final de proyecto

Caso prctico
Es importante que los resultados de nuestra evaluacin sean conocidos por todas las
personas implicadas en el proyecto?

Esther, Pedro, ngela y Noelia se plantean ahora cmo hacerlo. Qu aspectos


fundamentales debemos exponer en nuestro informe? Qu formato hemos de darle?
Vamos a ello!

Siempre debe contemplarse que quede constancia por escrito (y que se haga llegar a
quienes estn interesados e interesadas o a quienes pudieran estarlo) de los logros
conseguidos, de las propuestas de mejora,....

El tipo de informe, resumen de conclusiones de la evaluacin o memoria, ser diferente


dependiendo de a quin se dirija. La devolucin de la informacin se debe hacer
primordialmente a quienes nos hicieron el encargo, y a aquellas personas para las que
estemos trabajando: la comunidad de referencia.

Los materiales de devolucin, segn Rueda (1993), deben contener:

Los planteamientos iniciales.


El proceso que se est siguiendo o se ha realizado.

Los xitos conseguidos hasta el momento.

Los fracasos.

Lo que facilit la consecucin del proyecto.

Lo que lo dificult.

Rueda propone tres tipos de soportes materiales:

1. LA MEMORIA: documento administrativo y pedaggico donde deben recogerse


datos suficientes que permitan comprender los planteamientos establecidos, el esfuerzo
realizado, los resultados obtenidos, el uso del presupuesto, etc. La memoria tiene en
cuenta la planificacin y lo realizado, analizando el por qu se ha conseguido o no lo
que estaba previsto.

2. EL INFORME CIENTFICO: documento que permite establecer el valor terico-


abstracto del proyecto y sus resultados. Puede servir para participar en congresos y
jornadas.

3. LOS INFORMES EXPLICATIVOS: documentos previstos para los medios de


comunicacin y que explican los resultados, proceso, etc., al objeto de que la poblacin
se entere de lo que se est realizando.

Ejemplo de memoria final de proyecto.

31
Qu tal te vendra un ejemplo de memoria de evaluacin?

Te presentamos, como ejemplo, el siguiente FORMATO DE MEMORIA


EVALUATIVA (Fdez.-Ballesteros, 1995).

1. PORTADA.

2. RESUMEN.

Objetivos.
Breve descripcin del proyecto.

Hallazgos importantes.

Recomendaciones importantes.

3. OBJETO DE EVALUACIN: EL PROYECTO O PROGRAMA.

4. ESTUDIO VALORATIVO: SNTESIS DE TODO EL PROCESO DE


EVALUACIN.

Objetivo.
Barreras.

Contextos evaluados.

Sujetos/unidades.

Operaciones observadas.

Diseo y justificacin.

Procedimiento.

Anlisis de datos.

5. RESULTADOS.

6. DISCUSIN.

7. CONCLUSIONES Y RECOMENDACIONES.

Autoevaluacin

El tipo de informe, resumen de conclusiones de la evaluacin o memoria...


Debe ser el mismo para todas las personas y entidades a quien se dirija.
Ser diferente dependiendo de a quin se dirija.
No se debe hacer en consonancia a quin va dirigido.

32
Ninguna de las afirmaciones es correcta.
No es correcta, la forma de presentar los resultados de la evaluacin ser diferente
dependiendo de a quien se dirija.
Correcta.
No es correcta, ser diferente dependiendo de a quin se dirija.
Vuelve a repasar las distintas opciones, vers que hay una correcta!

Difusin de la informacin: tcnicas necesarias (I)


Caso prctico
El ltimo paso para Esther, Noelia, ngela y Pedro, al elaborar e implementar su
proyecto, es decidir a quin pueden interesar los resultados de la evaluacin de sus
proyectos. Por ejemplo, Esther y Noelia han pensado que la directora de la escuela
infantil en la que llevan su proyecto de escuela nocturna quiera saber los resultados, de
cara a prorrogar el contrato. El caso de Pedro y ngela, el destinatario principal sera el
director del colegio y la asociacin de padres y madres. Pero pueden plantearse tambin
que todos los agentes relacionados en el diseo y la implementacin del proyecto
quieran conocer los resultados de sus acciones de cara a implicaciones en proyectos
futuros o la continuacin del mismo.
A qu tipo de agentes, personas destinatarias o profesionales podra interesarle la
informacin sobre tu proyecto? De qu formas diversas crees que podras enviarles la
informacin?

Como comentamos en apartados anteriores, cuando vimos la evaluacin participativa,


hay bastantes agentes implicados tanto en el diseo, como en la implementacin y la
evaluacin del proyecto, por esto cuando tengas la interpretacin de los resultados has
de reflexionar sobre la manera de hacrselos llegar.

Los resultados, sera interesante que se los enviases a quienes han participado
directamente en el proyecto en calidad de tcnicos/as, personas colaboradoras, personas
voluntarias, o como personas usuarias o destinatarias del mismo. Tambin sera
interesante que se informase a entidades a las que en un futuro podamos presentar
proyectos, por un motivo principal: darnos a conocer.

La informacin contenida en el documento final de evaluacin de proyecto debe ser


depositada en un lugar accesible, para consulta de cualquier persona relacionada con tu
proyecto. Por ejemplo en el caso de los talleres de teatro, sera interesante dejar una
copia en el colegio donde desarrollemos la actividad.

Difusin de la informacin: tcnicas necesarias (II).

Es importante que los resultados de la evaluacin se difundan de tal manera que sea
atractiva a las personas destinatarias para conseguir los efectos deseados.

Dependiendo de a quin estemos dirigiendo nuestros resultados los presentaremos de


una manera u otra y utilizaremos diferentes estrategias de difusin de los resultados. Si
es a una entidad, administracin, etc. pues lo haremos de una manera formal a travs de
la memoria final de proyecto. Cuando las personas que queramos que les lleguen los
resultados son las personas participantes, familiares y personas relacionadas, la manera
de difundir los resultados ser diferente.

33
En el ltimo de los casos tienes que difundir lo ms ampliamente posible pero con cierta
informalidad y lenguaje accesible, por medio de documentos, folletos y resmenes
orales. Algunas recomendaciones (tomadas de M del Mar Herrera Menchn) para
elaborar los informes son:

Que aparezca algo sorprendente que haga pensar a las personas receptoras.
Que sean correctos y breves.

Cada informe debe centrarse en un punto importante.

Deben contener un resumen breve que comience con los resultados ms


importantes.

Pensar en las personas receptoras previamente a la redaccin.

Utilizar el lenguaje de las personas destinatarias.

Utiliza dibujos y grficos en los apartados para facilitar la comprensin de la


informacin.

Hacer llegar los resultados de forma continua.

El equipo evaluador debe comunicar los resultados en persona, e implicarse


en la difusin de los resultados.

Autoevaluacin
Selecciona la opcin que no sea correcta. Para difundir la informacin de una
manera ms informal debemos...
Utilizar el lenguaje de las personas destinatarias.
Hacer informes bastantes largos.
Hacer llegar los resultados de forma continua.
Usar dibujos y grficos en los apartados para facilitar la comprensin de la
informacin.
sta no es la opcin a elegir, ya que s es una estrategia para difundir los resultados de
una manera informal.
sta es la opcin a elegir, ya que es incorrecta porque los informes deben de ser
correctos y breves.
sta no es la opcin a elegir, ya que es una estrategia para difundir los resultados de una
manera informal.
sta no es la opcin a elegir, ya que es una estrategia para difundir los resultados de una
manera informal.

34