EVALUACIN DE

PROYECTOS SOCIALES
EL PROCESO DE EVALUACIN: ASPECTOS CLAVES
DESDE EL PUNTO DE VISTA METODOLGICO
 EVALUACIN DE SERVICIOS Y PROGRAMAS SOCIALES
AGUILAR / ANDER - EGG
CAPITULO 4: PG: 77 - 117
(1994)

La evaluacin Forma de investigacin SISTEMTICA,

ORGANIZADA, Y CON EL
FIN DE OBTENER UN
RESULTADO

Proceso centrado en el enjuiciamiento de

procesos de lo que se ha hecho, se esta
realizando o se va a realizar, valorndolo y
aprecindolo

1)Tareas preliminares
PROCESO REFLEXIVO Y DIALOGICO
2)El Diseo de la investigacin
3) El trabajo de campo
4) Elaboracin y presentacin de resultados *
 TAREAS
PRELIMINARES
EVALUAR CONLLEVA A LA RESOLUCIN DE DOS CUESTIONES PREVIAS:

1) Negociaciones preliminares entre los que encomiendan la

evaluacin y el equipo que la realiza
2) Respuesta preliminar a cuestiones que condicionaran el
diseo de la investigacin evaluativa
1) Negociaciones preliminares entre los que encomiendan la
evaluacin y el equipo que la realiza

Las evaluaciones son encargadas por alguien para algo

NEGOCIACIN

PROPSITO PRINCIPAL ESPECIFICAR
EL TEMA CONCRETO DE
EVALUACIN
Es normal, que:
- Se intente fijar la atencin en la
superficialidad del programa /
Proyecto para que parezca bueno

- Se intente tapar los erros del

programa

- Se use la investigacin para destruir

el programa / proyecto

-No se haga caso del estudio, se haga

como un rito
Negociacin se debe tratar de conciliar los intereses de todos los actores
sociales con la rigurosidad de la evaluacin:

Dos cuestiones bsicas a dilucidar en esta fase de trabajo:

a) Delimitacin conceptual de los aspectos a estudiar. Se trata de

especificar con la mayor claridad posible qu y cunto hay que
evaluar y la finalidad de la evaluacin conforme a quienes
demandan o contratan el trabajo.

b) Determinacin de los recursos con que se cuenta para realizar la

investigacin
 a) Delimitacin conceptual de los aspectos a estudiar
Establecer un perfil lo ms claro posible del programa o servicio que se va a evaluar:

Generalmente los programas suelen no ser muy acabados en sus planteamientos,

debemos

Necesidad de RECONSTRUIR ;
Qu es lo que se desea obtener con la realizacin del programa (objetivos),
grado o cantidad de la condicin de ser lograda (meta)
Quines constituyen el sector de poblacin beneficiaria (destinatarios o beneficiarios)
dnde que rea geogrfica abarca la realizacin del programa (Cobertura espacial)
cmo se realiza y que procedimientos se realizan (mtodos y actividades a realizar)
cules son los componentes del programa:
cundo se realiza (cronograma de las distintas actividades)

Marco referencial de que es lo que se hace, cuando, cuanto y cuales son los
propsitos del programa o proyecto (Revisamos documentos, entrevistas
reuniones)
 Delimitacin del nivel organizacional en el que se va a hacer la evaluacin:
Servicio, programa, proyecto, etc.

Especificar qu se va a evaluar en cada uno de esos mbitos:

Revisar el progreso o desarrollo de un programa

Valoracin de la efectividad o eficacia del programa
Valoracin de la eficiencia, analizando los resultados obtenidos y los recursos utilizados
Evaluar el impacto o efecto global del programa
Evaluar el funcionamiento de la organizacin
Identificar factores asociados al xito y al fracaso de un programa, servicio o intervencin

Especificacin del para qu y para quin:

quien necesita la informacin

que tipo de informacin necesita
con que finalidad la encarga
 b) Determinacin de los recursos con que se cuenta para realizar la investigacin

Se trata de saber que recursos existen, disponibles o asignados.

Pueden darse dos circunstancias:

- que haya una determinada cantidad de dinero para realizar la evaluacin

que el equipo de evaluacin entrega un valor segn la demanda que se haya formulado

+ / - Dinero

Numero de integrantes y cualificaciones del equipo evaluador, lo que a su vez

condiciona:
tiempo dentro del cual se puede realizar la evaluacin
Procedimientos a utilizar
 2) Respuesta preliminar a cuestiones que condicionarn el diseo de la
investigacin evaluativa

Luego de las negociaciones el equipo debe operacionalizar los acuerdos anteriores para
realizar el diseo de la evaluacin:

Qu informacin se necesita y cuales son las posibilidades de obtenerla?

En que medida puede ser asegurada la calidad y la exactitud de la informacin?

Qu mtodos utilizar en la evaluacin?

Qu grado de colaboracin tendremos de las personas estn involucradas?

En que medida es viable la evaluacin? valoracin de la evaluabilidad

 CASO 1:

Desde una institucin publica se busca evaluar un programa realizado, se busca

evaluar si el programa se vuelve a realizar o no. Los directivos esta a favor de la
evaluacin, mientras que muchos de los profesionales estn en contra ya que dicen
que los directivos lo utilizaran para desvincular a algunos trabajadores. Disponen de
$1.000.000 de pesos para la evaluacin.

Qu haran ?

Enumeren acciones que realizaran

 DISEO DE LA
INVESTIGACIN
Diseo de una investigacin: Es el conjunto de operaciones
que permite llevar adelante el proceso de investigacin. Es
decir, el esbozo, esquema, prototipo que indica el conjunto
de decisiones, pasos, actividades a realizar para dar
direccionalidad al curso o camino que se sigue en la
investigacin.
 El diseo tiene las siguientes tareas fundamentales:

1) Formulacin del marco de referencia, escenario o encuadre,

el para qu de la evaluacin
determinacin e identificacin de los aspectos que sern evaluados (Tipos de
evaluacin)

2) Seleccin de las estrategias metodologicas y de los instrumentos y tcnicas de

evaluacin

3) Seleccin de variables y elaboracin de indicadores

1) Formulacin del marco de referencia, escenario o encuadre

Determinar y delimitar los aspectos que sern evaluados

Cuando se evaluan todos los aspectos es una evaluacin global

Cuando se evaluan algunos aspectos es sectorial
 Evaluacin de diseo o conceptualizacin del programa

Evaluacin del estudio o investigacin

Evaluacin del diagnostico
Evaluacin del diseo del programa

Evaluacin de la instrumentacin y seguimiento del programa:

Evaluacin de la cobertura
Evaluacin de la implementacin
Evaluacin de la estructura y ambiente organizacional
Evaluacin del rendimiento del personal

Evaluacin de la eficacia y eficiencia del programa:

Evaluacin de la eficacia, resultados o impacto

Evaluacin de la eficiencia o rentabilidad econmica
Evaluacin de diseo o conceptualizacin del programa:

Evaluacin del estudio o investigacin:

IDENTIFICAR POSIBLES FRACASOS DE ALGN PROYECTO

DAR VALIDEZ Y PROFUNDIDAD A LA TEORA QUE SUSTENTA AL DIAGNOSTICO

IDENTIFICAR LOS MEJORES ESTUDIOS DENTRO DE UNA VARIEDAD SOBRE UNA MISMA SITUACIN PROBLEMA

Evaluacin del diagnostico:

SE APLICA EN AQUELLOS CASOS DONDE SE SOSPECHA DE UN DIAGNOSTICO DEFICIENTE

SE PUEDE APLICAR CUANDO LUEGO DE REALIZAR UNA EVALUACIN DE IMPACTO NO SE ENCUENTRAN ASPECTOS
DEFICIENTES PERO AUN AS LA SITUACIN PROBLEMA NO SE MODIFIC

Evaluacin del diseo del programa:

LA MS UTILIZADA

ES DESEABLE QUE SIEMPRE SE REALICE YA QUE AUNQUE NO ASEGURARA EL XITO DEL PROYECTO O PROGRAMA
PODR AYUDAR SIGNIFICATIVAMENTE A ESTE
Evaluacin de la instrumentacin y seguimiento del programa

Evaluacin de la cobertura

CUANDO SE DESEA SABER SI EL PROGRAMA LLEGA A POBLACIN DESEADA

AYUDA A DETERMINAR INFRACOBERTURA - SOBRECOBERTURA - SESGO DE COBERTURA

Evaluacin de la implementacin
TAREAS DE PREPARACIN Y MOTIVACIN (INSTITUCIN - RESPONSABLES - BENEFICIARIOS

DISPONIBILIDAD DE RECURSOS

DISPONIBILIDAD DE MEDIOS FSICOS

Evaluacin de la estructura y ambiente organizacional

REVISAR LA ESTRUCTURA FUNCIONAL DE LA ORGANIZACIN QUE EJECUTA

ESTRUCTURAL ( ORGANIGRAMA, PROCEDIMIENTOS )

FUNCIONAL ( FORMAS EN QUE CIRCULA LA INFORMACIN - LA TOMA DE DECISIONES )

 Evaluacin del rendimiento del personal

SE EVALUA LA HABILIDAD QUE TIENE CADA PERSONA PARA EFECTUAR UNA DETERMINA TAREA

CONOCIMIENTOS - ACTITUDES - HABILIDADES

Evaluacin de la eficacia y eficiencia del programa:

Evaluacin de la eficacia, resultados o impacto

EVALUAR LOS CAMBIOS QUE SE PRODUCEN EN LA REALIDAD EN RELACIN A LA SITUACIN
PROBLEMA INICIAL

Evaluacin de la eficiencia o rentabilidad econmica

CONSISTE EN DETERMINAR EL GRADO DE RENTABILIDAD ECONMICA, COMPARANDO

BENEFICIOS Y COSTOS
2) Seleccin de la estrategia metodolgica y de los procedimientos
tcnicos que ser utilizados para la recopilacin de datos

Qu mtodos y que procedimientos tcnicos vamos a utilizar?

Mtodos Cuantitativos vs cualitativos

Encuestas Entrevistas en profundidad

Entrevistas estructuradas Observacin directa / participante
Escalas de medicin de actitudes Anlisis de contenido
Estudio de casos
Grupos de discusin

Grupos Focales
 Estrategias metodolgicas dependen de:

Recursos disponibles
Aspectos a evaluar
Tipos de informacin existente y accesible
Grados de colaboracin
Tiempo disponible
Capacidades del equipo
 3) Seleccin de variables y elaboracin de indicadores
Determinacin de variables e indicadores permitirn efectuar las
mediciones o graduaciones de cumplimiento de un proyecto o
programa

Generalmente lo que se evalua son: Son hechos, procesos, situaciones, que no pueden
medirse directamente.

Indicador (Una forma

Hechos, procesos, situaciones
medible de acercarnos al
conocimiento de un hecho,
proceso o situacin

VA A DEPENDER DE LA
CONCEPTUALIZACIN QUE
HAGAMOS DE UN CONCEPTO Y DE
SU OPERACIONALIZACIN
Por ejemplo Existe un programa que busca aumentar la participacin universitaria de los
estudiantes en clases

Queremos evaluar el impacto, los efectos que tuvo este programa en los estudiantes?

Evaluacin de impacto

Si entendemos la participacin como la asistencia a actividades: Indicador va a ser

cantidad de estudiantes que asiste a las actividades

Si entendemos la participacin como algo ms que la asistencia, vamos a tener

que construir otros indicadores, aumento en sus notas, intervenciones en
clases, etc.
Indicador: Es la medida o graduacin (porcentaje de logro) de los
cambios o resultados de una actividad

Permitir comparaciones
Exista la posibilidad de lograrlos
 Cmo se construye un indicador?
1) Representacin literaria del concepto que se quiere medir; Comprensin
terica del concepto a evaluar La participacin en clases quiere decir asistencia,
escucha activa, propuesta de ideas y comprensin de contenidos

2) Especificacin del concepto; descomponerlo en dimensiones (factores)

Asistencia / Escucha Activa / propuesta de ideas / Comprensin de contenidos

3) Eleccin de indicadores numricos o graduales (porcentajes)

Porcentaje de asistencia a clases / Numero concentracin en clases* / Numero de

opiniones / Porcentaje de contenidos del programa aprendidos
4) Formacin de ndices; Nmeros estadsticos que intentan resumir la informacin
proporcionada por varios indicadores de un concepto

Porcentaje de participacin aprendizaje (% Asistencia a clases + % Contenidos aprendidos)

Numero de participacin activa ( Numero de concentracin + numero de opiniones)
TRABAJO DE
CAMPO
La tarea principal es la recopilacin de
datos y la informacin necesaria para la
evaluacin
 Recopilacin de datos y de informacin

Recogen los datos, se realizan todos las acciones necesarias para concretar las
estrategias metodolgicas anteriormente diseadas.

Resolver aspectos sobre anonimato

Consentimientos informados

Lugares para citar a la gente

Tiempo que va a durar el trabajo de campo

Traslado de los profesionales

Formas de los documentos (impresiones) selladas o no

 Ejercicio de indicadores :

Nuestro proyecto tiene como objetivo aumentar las habilidades de lectura

en nios entre 5- 7 aos

Entendemos como habilidades lectoras la capacidad para comprender

textos, el aumento en el uso de palabras y la capacidad para trasmitir ideas.