PLAN FIP 2006

FORMADOR OCUPACIONAL.
MODULO VI: SEGUIMIENTO FORMATIVO

Mdulo 6.- Seguimiento Formativo

Toda evaluacin trata de comprobar hasta que punto es eficaz, eficiente, adecuado, suficiente, relevante, etc., un conjunto de actuaciones, dentro del marco especfico de un determinado proyecto, en un contexto sociodemogrfico especfico en el que se acta. Por lo tanto, la evaluacin supone un primer paso de seguimiento, en el que se trata de recoger y sistematizar todos los datos, la informacin, que permita establecer juicios y tomar decisiones, es decir, evaluar. El proceso de valoracin, en la medida en que es riguroso, controlado y sistemtico constituye un modo de seguimiento y evaluacin que se conoce como investigacin evaluativa. 1.- El modelo holstico: Un modelo holstico de evaluacin, que trate de abarcar todos los elementos fundamentales de un proceso de formacin ocupacional, ha de partir de este concepto de investigacin evaluativa, para permitir el diseo de un plan de evaluacin sistemtico, riguroso y coherente que tenga en cuenta las funciones del programa y que aplique las diversas modalidades. Consiste en responder a los cinco interrogantes bsicos que afectan a la evaluacin de forma integrada, como indica la siguiente figura, cruzando las respuestas, y elaborando un engranaje de estrategias evaluativas que cubren a totalidad del proceso de formacin.

MDULO VI: SEGUIMIENTO FORMATIVO

-2-

Los interrogantes son:

QU Elementos Instrumentos

CMO

PARA QUIN

EVALUACIN
Destinatario

Agente

Momento

QUIN

CUNDO

PARA QUIEN EVALUO? Es decir, quien es el destinatario de mis evaluaciones? quien es mi cliente? La respuesta a este interrogante determina la perspectiva y en enfoque del proceso de evaluacin que diseemos. El destinatario puede ser desde la propia empresa hasta el departamento de formacin, pasando por el formador, el participante, etc.

QU EVALUO? O sea, qu elementos y aspectos quiero evaluar? cul es el objeto de mi evaluacin? Aqu identificamos seis niveles bsicos de evaluacin que se pueden desglosar en subniveles hasta llegar a los elementos especficos; son:
MDULO VI: SEGUIMIENTO FORMATIVO -3-

 Nivel 1: Satisfaccin del participante. Nivel 2: Logro de los objetivos formativos. Nivel 3: Coherencia pedaggica del proceso de formacin. Nivel 4: Transferencia de los aprendizajes a la realidad laboral. Nivel 5: Impacto en los objetivos inclusin en el mercado de trabajo. Nivel 6: Rentabilidad de las actuaciones.

QUIEN EVALUA? Es decir, cuales son los agentes de evaluacin? Los agentes que emitan juicios sobre los programas deberan ser todos aquellos afectados por ellos, desde las personas que hayan participado, hasta la organizacin promotora, pasando por los formadores, etc.

CUANDO EVALUO? En que momento es conveniente evaluar? La respuesta a este interrogante son los cuatro momentos bsicos, que se corresponden con las modalidades clsicas de evaluacin: Antes de iniciar las actuaciones: Evaluacin inicial o diagnstica. Durante el proceso: Evaluacin procesual o formativa. Al acabar los programas: Evaluacin final o sumativa. Un tiempo despus de acabar las actuaciones: Evaluacin diferida o de transferencia e impacto.

CMO EVALUO? Es decir, con qu instrumentos puedo evaluar todo lo anterior? La respuesta aqu es amplia y variada ya que la posibilidad de

MDULO VI: SEGUIMIENTO FORMATIVO

-4-

instrumentos es ilimitada. Podemos utilizar cuestionarios, entrevistas individuales y grupales, controles y test finales, actividades y productos de aprendizaje, observaciones sistemticas, demostraciones, informes de evaluacin, indicadores cualitativos y cuantitativos del impacto, etc.

Para disear el plan de evaluacin es necesario, adems de responder con coherencia a los cinco interrogantes anteriores, tener en cuenta unos principios bsicos que deben iluminar todas nuestras decisiones al respecto. Son los siguientes: 1. El principal propsito de la evaluacin debe ser mejorar el programa. Por lo tanto, la finalidad de toda evaluacin ser la optimizacin de las actuaciones en su conjunto, para que respondan con eficacia a las exigencias de la organizacin. 2. La evaluacin debe ser diseada al mismo tiempo que el programa, y ha de constituir una parte integral de este. La evaluacin es un elemento ms del proceso de planificacin, y por lo tanto su diseo debe coincidir temporalmente con su diseo, integrndose en l para formar un todo coherente. 3. La evaluacin se debe basar en una seria identificacin de necesidades de formacin y en un conjunto claro de objetivos de inclusin laboral. La identificacin de necesidades de formacin es el primer paso de la planificacin de la formacin, que da lugar al resto y del cual dependen. As, la evaluacin parte de las necesidades identificadas y de los objetivos fijados y los utiliza como criterios de referencia. 4. El diseo del proceso de evaluacin debe incluir: la valoracin de todos los elementos implicados,

MDULO VI: SEGUIMIENTO FORMATIVO

-5-

 la aplicacin cooperativa, con la participacin de todos los afectados, la consideracin de todas las fases de aplicacin, la seleccin de los instrumentos de evaluacin ms adecuados para los objetivos de evaluacin identificados. 5. La evaluacin diseada se debe mantener tan flexible como sea necesario para posibilitar la respuesta a las circunstancias no previstas. 6. El proceso de evaluacin se debe disear desde una perspectiva prioritaria: la rentabilidad de la evaluacin para el proceso de aprendizaje. Por lo tanto, el coste del plan de evaluacin diseado ha de ser equilibrado en funcin de los resultados de evaluacin a obtener. 7. Los resultados de evaluacin se deben utilizar con honestidad y tica, y siempre con la finalidad de optimizar el aprendizaje. Estos son los principios a considerar cuando se elabora el plan de evaluacin. Cualquier modelo holstico de evaluacin surge del cruzamiento de las respuestas a los cinco interrogantes bsicos y de su integracin en un todo global junto con los principios bsicos permitiendo as el diseo de un plan de evaluacin eficaz. Imaginando un proceso de evaluacin, el modelo holstico podra ser cumplimentado como aparece en la figura siguiente:

MDULO VI: SEGUIMIENTO FORMATIVO

-6-

QUIEN EVALUA QUE PARTICIPANTE FORMADOR EQUIPO PROGRAMA F D RESPONSABLE COMPAEROS ORGANIZ. ENTIDAD PARTICIPANTE PROMOTORA

Satisfaccin del participante

F
Aut o

Logro de objetivos

P F

I P F
Aut o

Adecuacin pedaggica Transferencia del aprendizaje Impacto inclusin laboral

F
Aut o

I P F

Rentabilidad
CUESTIONARIO

D
AUTOEVALUACIN I INICIAL PROCESUAL FINAL DIFERIDA

CUANDO

Auto

CMO

ENTREVISTA INDIVIDUAL VALORACIN COLECTIVA ACTIVIDADES Y PRODUCTOS DE APRENDIZAJE

OBSERVACIN SISTEMTICA INFORMES DE EVALUACIN INDICADORES CUALITATIVOS

P F D

MDULO VI: SEGUIMIENTO FORMATIVO

-7-

As, el modelo holstico que nosotros proponemos permite responder a estos interrogantes de forma integrada, cruzando las respuestas y proponiendo estrategias de evaluacin bajo la ptica de un criterio prioritario: la rentabilidad del proceso de evaluacin a disear, es decir, la eficacia y la eficiencia del diseo de evaluacin. As, el modelo permite analizar todas las variables que afectan a la evaluacin de forma integrada, y disear procesos evaluativos globales, coherentes y adaptados a cada realidad; en definitiva, procesos de evaluacin eficaces y eficientes en funcin de los recursos disponibles.

2.- El modelo CIPP El modelo que presentamos a continuacin, ha sido de gran ayuda para valorar innumerables programas de formacin, tanto ocupacional como continua Tambin parte de la necesidad de desarrollar una labor de Investigacin Evaluativa, (evaluacin de proyectos) con, al menos, las siguientes funciones esenciales: 1.- Analizar el contexto donde se inscriben las acciones, como condicionante de todo el proceso de evaluador y de diseo. 1.- Detectar el "Nivel de entrada antes de poner en marcha las acciones. Es una labor diagnstica que permite despus evaluar todas las acciones emprendidas para conseguir una realizacin ptima. 2.- Realizar el seguimiento de todas las acciones englobadas en orden a conseguir los resultados esperados. 3.- Establecer una sntesis operativa (que pueda servir de base a nuevas iniciativas) sobre la consecucin de los objetivos del programa. Se trata de realizar un estudio de orientacin a la decisin que proporciona a las distintas administraciones y entidades conocimientos y bases
MDULO VI: SEGUIMIENTO FORMATIVO -8-

valorativas para tomar y justificar decisiones futuras sobre el proyecto. Esto supone un proceso completo de Investigacin Evaluativa, entendida sta como el proceso sistemtico de recogida y anlisis de informacin fiable y vlida para tomar decisiones sobre un programa. Los modelos de evaluacin de programas son mltiples, pero, como hemos indicado, se ha elegido por su especial adecuacin al caso, el modelo CIPP de Daniel Stufflebeam. Dicho modelo supone cuatro tipos de evaluacin diferenciados, pero que forman un sistema, tal como sigue: 1.- Evaluacin del Contexto (C): valoracin del marco donde se desarrolla el programa 2.- Evaluacin de Entrada (I): prescripcin del programa mediante el cual se efecten los cambios necesarios. 3.- Evaluacin del Proceso (P): comprobacin continua de la realizacin del plan 4.- Evaluacin del Producto (P): valoracin, interpretacin y juicio de los logros del programa En el caso que nos ocupa, el modelo CIPP supone:

MDULO VI: SEGUIMIENTO FORMATIVO

-9-

Evaluacin del contexto

Evaluacin de entrada

Evaluacin del proceso

Evaluacin del producto

Objetivo

Definir el contexto institucional donde se realiza el proyecto, identificar la poblacin objeto del estudio y valorar sus necesidades, identificar las oportunidades de satisfacer las necesidades, diagnosticar los problemas que subyacen.

Identificar y valorar la potencialidad del sistema de evaluacin, las estrategias de programa, alternativas y la planificacin de procedimientos para llevar a cabo las estrategias.

Identificar o pronosticar, durante el proceso, los puntos mejorables de la planificacin del procedimiento o de su realizacin, proporcionar informacin para las decisiones preprogramadas y describir y juzgar las actividades y aspectos del procedimiento en orden a conseguir un adecuado desarrollo del proyecto.

Recopilar descripciones y juicios acerca de los resultados y relacionarlos con los objetivos y la informacin proporcionada por el contexto, por la entrada de datos y por el proceso, e interpretar su valor para seguir generando una espiral de evaluacin y diseo.

Utilizacin de mtodos como el anlisis de sistemas, las reuniones, grupos de trabajo, fichas de observacin.

Mtodo

Inventariar y analizar los recursos humanos y materiales disponibles, las estrategias de solucin y las estrategias de procedimiento referentes a su aplicabilidad y viabilidad.

Controlar las limitaciones potenciales del procedimiento y permanecer alerta ante las que no se esperaban, mediante la obtencin de informacin especfica de las decisiones programadas, la descripcin del proceso real y la continua interaccin las personas participantes en el proceso. Llevar a cabo y perfeccionar la planificacin y los procedimientos del programa, esto es, efectuar un control del proceso. Proporcionar un esbozo del proceso real para utilizarlo ms tarde en la interpretacin de los resultados.

Definir operacionalmente y valorar los criterios de los resultados, mediante la recopilacin de los juicios de los participantes y la realizacin de anlisis cualitativos y cuantitativos de los procesos iniciados.

MDULO VI: SEGUIMIENTO FORMATIVO

Relacin con la toma de decisiones en el proceso de cambio

Decidir el marco que debe ser abarcado, las metas. Presentar una base para juzgar los resultados obtenidos.

Seleccionar los recursos de apoyo, las estrategias de solucin y las planificaciones de procedimientos, esto es, estructurar las actividades de cambio. Establecer un marco para juzgar la realizacin.

Decidir sobre la solicitud de continuacin con otras acciones futuras, los resultados obtenidos con las acciones.

-10-

De esta forma, podemos evaluar los diferentes elementos del proceso formativo, en diferentes momentos, y desarrollar informacin vlida y fiable para la toma de decisiones, mediante los juicios emitidos.

MDULO VI: SEGUIMIENTO FORMATIVO

-11-