SEMANA XX: LA EVALUACIN.

1. OBJETIVOS.

2. DESARROLLO DE LA CLASE:

MARCO LOGICO.

Es una herramienta que resume la informacin esencial de un proyecto. Su estructura muestra los
distintos niveles de objetivos de este, en 4 filas, y la informacin narrativa de estos (enunciado) con
sus correspondientes indicadores, medios de verificacin y supuestos, en 4 columnas.

Las Filas.

A continuacin, veamos el significado de los objetivos que aparecen en las filas de la Matriz del
Marco Lgico (MML).

Existe una lgica vertical en la columna de objetivos que expresa una relacin causa - efecto que
gua el orden establecido. Cuando se realicen las actividades se deber lograr los productos
asociados a los componentes y, a su vez, la consecucin de los productos permitir alcanzar el
propsito del proyecto, siempre y cuando los bienes o los servicios estn efectivamente disponibles
y sean usados. Finalmente, conseguir el propsito har posible contribuir con los objetivos de
desarrollo.

Por ejemplo, si en un PIP de servicios educativos se logra la construccin de las 3 aulas previstas con
el equipamiento correspondiente, se cumplir con los productos, pero el servicio estar disponible
solo si se asigna el personal docente. Igualmente, para que se logre el propsito ser necesario que
los padres de familia matriculen a los nios.
Veamos cmo funciona la relacin de causalidad en un ejemplo de un PIP de instalacin de
servicios de agua para riego (grfico 79).

Como se aprecia, lograr las metas de las acciones implica la realizacin de actividades y tareas
programadas en el cronograma de ejecucin. Una vez construidos los elementos del sistema
(captacin, canales, entre otros) se podr conseguir la meta del componente que es la instalacin
de un sistema de riego con capacidad de XX l/s. El propsito produccin agrcola incrementada se
lograr cuando los agricultores instalen el riego en sus parcelas y usen el agua en sus cultivos.
Finalmente, con la mayor produccin los agricultores podrn disponer de alimentos, contribuyendo
as el proyecto al objetivo nacional seguridad alimentaria mejorada.

Las Columnas

Igualmente, de manera resumida, presentamos el contenido de cada columna

UTILIDAD

En la fase de preinversin, la elaboracin de la MML permite:

Verificar la lgica causal en la definicin del PIP (Mdulo Identificacin), a partir del anlisis
de la correspondencia entre los distintos niveles de objetivos.

Revisar que se hayan definido los indicadores, con sus atributos de cantidad, calidad,
tiempo y costos (mdulos Formulacin y Evaluacin).

En la fase de inversin, la MML es una herramienta que facilita la evaluacin en cualquier momento
durante la ejecucin del proyecto. Examina la evolucin del logro de los objetivos en cuanto a
acciones y componentes, con los indicadores asociados a estos. La evaluacin permite:

Conocer cmo est progresando la intervencin en trminos de plazos, tiempos y metas,

de acuerdo con lo planificado en el estudio de preinversin.

Identificar posibles problemas de ejecucin.

Apoyar la toma de decisiones sobre ajustes en la ejecucin del proyecto.

La MML es tambin una herramienta clave para el seguimiento de los proyectos y la evaluacin
intermedia, con el fin de anticiparse a problemas en la ejecucin y al logro de las metas
establecidas para la fase de inversin y, de ser el caso, plantear las acciones correctivas.

En la fase de postinversin, la MML es una herramienta bsica para la evaluacin ex post; a partir
de esta ser posible evaluar si se han logrado los distintos niveles de objetivos mediante la
aplicacin de cinco criterios:

Pertinencia: para comprobar la validez y la necesidad de un proyecto. Se analiza si el

proyecto ha resuelto el problema (cumplimiento del propsito), si contribuye con los
objetivos de desarrollo (cumplimiento del fin), si es consistente con las polticas y las
normas, y si las estrategias y los enfoques del proyecto son relevantes.

Efectividad: para verificar si el proyecto ha beneficiado a la poblacin objetivo, conforme a

lo planificado originalmente en el estudio de preinversin.
 Eficiencia: para analizar cmo se convierten los recursos/insumos en productos. Se
concentra principalmente en la relacin entre el costo del proyecto y los productos que
este entrega en la fase de inversin.

Impacto: para evaluar los efectos del proyecto en el mediano y el largo plazo, incluyendo
impactos directos o indirectos, positivos o negativos, programados o no.

Sostenibilidad: para verificar si los efectos producidos continan una vez culminada la
ejecucin del proyecto.

El grfico se muestra la relacin entre criterios de evaluacin y niveles de objetivos del Marco
Lgico, segn los criterios ya sealados.

Como se aprecia en este grfico, cada criterio de evaluacin ex post est relacionado con algunos
de los niveles de objetivos especificados en la MML; por tanto, su adecuado planteamiento en la
fase de preinversin facilitar el proceso de evaluacin ex post. El grfico sintetiza la relacin de la
MML con la evaluacin de los proyectos.
ELABORACIN DE LA MML

Los pasos para la elaboracin de la MML se muestran en el grfico.

Paso 1. Elaborar el resumen narrativo de objetivos

El objetivo de este paso es construir la columna que corresponde al resumen narrativo de los
objetivos. La informacin proviene del rbol de objetivos del proyecto y del planteamiento de las
acciones para el logro de los medios fundamentales.

Tarea 1. Redactar la columna de objetivos

En una MML se definen los objetivos teniendo presente la relacin causal existente en cada nivel de
objetivo. Se recomienda lo siguiente:

Redactar los objetivos como una situacin alcanzada y no como una situacin deseada.

Plantear un solo propsito.

Utilizar frases sencillas.

 Revisar y ajustar la estructura analtica del proyecto.

Aplicaremos esta tarea al ejemplo PIP de agua potable y alcantarillado en San Miguel,68
considerando algunos de los objetivos.

Tarea 2. Evaluar la columna de objetivos

Una columna de objetivos bien estructurada es aquella que permite reconocer los vnculos causales
de abajo hacia arriba, es decir, desde las acciones hasta el fin. Cuando se tiene el resumen de los
objetivos en los distintos niveles se debe verificar su consistencia, esta es una de las utilidades de la
MML en la fase de preinversin. Para poder asegurar que el PIP se desarrolla bajo el enfoque lgico
de causalidad, valida esta columna aplicando los criterios que se presentan en el cuadro 109. Si
alguna de las condiciones no se cumpliera, debes revisar nuevamente la relacin de causalidad
entre los niveles jerrquicos de objetivos de la MML y, de ser el caso, revisar el planteamiento del
proyecto.

Paso 2. Definir los indicadores

Un indicador tiene la funcin de definir de manera operacional los niveles de objetivos de la MML.
Expresa las metas de estos, por lo que se convierte en un instrumento que orienta la gestin, el
monitoreo y la evaluacin de un PIP en las fases de inversin y de postinversin, debindose definir
desde la fase de preinversin.

Para la construccin de un buen indicador se deben reunir ciertos atributos que se presentan a
continuacin.

Especfico: la informacin que el indicador ofrezca debe permitir verificar el grado de

cumplimiento o no de los objetivos del PIP.

Realizable: el logro del indicador debe ser posible en todos sus aspectos.

Mensurable o verificable: permite ser medido o verificado de manera objetiva, sea

cuantitativa o cualitativa.

Relevante: los indicadores seleccionados son los ms apropiados y permiten medir un

objetivo.

Enmarcado en el tiempo: expresa plazos, considera un tiempo de inicio y uno de trmino.

Independiente: no debe existir relacin causa-efecto entre el indicador y el objetivo.

Tambin es importante considerar la disponibilidad de informacin tanto para definir la base de

referencia como para la evaluacin de su logro; la recopilacin de los datos debe estar al alcance de
la UE y no debera requerir expertos para el anlisis. La informacin para la definicin de los
indicadores se va construyendo durante el desarrollo del estudio, como se seala en el grfico.

Tarea 1. Elaborar los indicadores

De acuerdo con los objetivos que se considere, se identifican indicadores69 que reflejen los logros
de los objetivos en cada nivel y se establecen las metas en trminos de cantidad, calidad, tiempo y
costos. Esto debe hacerse con una referencia bsica, un estndar bsico o un punto de partida en
relacin con el cual se medir el logro en los cambios esperados con la ejecucin del proyecto.
La informacin base para comparar los indicadores que se definan se recoge cuando se realiza el
diagnstico (encuestas, grupos focales, fuentes de informacin generadas por las entidades
pblicas, entre otros).

Se debe utilizar el menor nmero de indicadores, por lo que se hace necesario priorizar y
seleccionar indicadores, para lo cual es til aplicar los criterios que se presentan con un ejemplo a
continuacin.

Un buen indicador es aquel que permite realizar un seguimiento o una evaluacin de logros de
metas a lo largo de cada fase del Ciclo del Proyecto, por lo que se recomienda establecer metas
parciales. Veamos en el ejemplo anterior las metas parciales para los indicadores definidos.

Tarea 2. Verificar atributos de los indicadores

Es necesario asegurarse de que los indicadores identificados en la tarea 1 renan los atributos
sealados al inicio del paso 2, por lo que se recomienda verificar su cumplimiento respondiendo las
preguntas que se presentan en el cuadro 109. En el cuadro 113 se muestra la verificacin de la
propuesta de indicadores de los objetivos que se plantearon en el cuadro 108.
Como resultado de la verificacin se concluye que ser necesario replantear las metas: 1) del
indicador del fin, debido a que es imposible que se reduzca en un 100 % las EDA y a que estas no
solo dependen del consumo de agua potable; 2) del segundo indicador del propsito, porque
carece del atributo de tiempo; y 3) del componente 1.1, ya que se requiere otro indicador que sea
relevante e independiente para el componente. Los indicadores definitivos se aprecian en el paso 3.

Paso 3. Definir los medios de verificacin

Despus de determinar los indicadores se deben precisar los mtodos y las fuentes de recoleccin
de informacin que permitirn evaluar y hacer seguimiento de estos y de las metas propuestas para
observar el logro de los objetivos.

Los medios de verificacin son internos cuando se trata de los niveles de acciones y de los
componentes (la UE del proyecto y, de ser el caso, el AT) y externos para el propsito y los fines.
Para definirlos se debe precisar:

Fuente de informacin

Mtodo de recoleccin

Frecuencia de recoleccin

Mtodo de anlisis

Es importante que se cuente con precisiones sobre quin genera la informacin (entidad, rea
responsable), con qu frecuencia y cmo se accede a esta.
Sobre la base del ejemplo presentado en el cuadro 113 se plantean los medios de verificacin para
cada uno de los indicadores definidos (cuadro 114).

Paso 4. Definir los supuestos

Cuando se plantea un proyecto se realiza un anlisis prospectivo con cierto grado de incertidumbre
que se refleja en los posibles riesgos que pueden comprometer la viabilidad de este. Como ya se ha
visto en el acpite sostenibilidad, el proyecto puede tener riesgos financieros, institucionales,
sociales, polticos, ambientales y/o de desastres, entre otros; algunos de ellos pueden gestionarse
desde el proyecto, pero otros son factores externos que estarn fuera del control del responsable
de ejecucin u operacin del PIP y tienen mucha influencia en el xito o el fracaso de este.

Los factores externos cuyo cumplimiento permite alcanzar los objetivos de nivel superior son los
que se consignarn en la MML como supuestos; existe un nexo de causalidad entre los supuestos y
el logro de los objetivos (grfico 85).
 Los supuestos deben cumplir con los siguientes atributos:

Ser un factor de riesgo externo. No es controlable por la UE o el operador.

Ser determinante para el xito del PIP. El cumplimiento del supuesto es esencial para el
logro del objetivo del siguiente nivel.

Que tenga una probabilidad media de ocurrencia. Existe la posibilidad de que el supuesto
se cumpla. Si la probabilidad es baja o es improbable que se cumpla debera revisarse si
puede reformularse el proyecto introduciendo cambios para que no dependa del factor, si
no fuese posible deber rechazarse.

El cuadro 115 muestra un ejemplo de la definicin de supuestos.

3. GLOSARIO.

4. REFERENCIAS: