Академический Документы
Профессиональный Документы
Культура Документы
de Proyectos
Jaqueline Berumen Milburn
Monitoreo y Evaluacin
de Proyectos
Jaqueline Berumen Milburn
Pgina 5
La Escuela Latinoamericana
de Cooperacin y Desarrollo
s un proyecto colombo-italiano, fruto del convenio entre la Universidad de San Buenaventura de Cartagena de Indias, Colombia, la
Universidad de Pavia y el Instituto Universitario de Estudios Superiores de la Universidad
de Pavia, Italia. Adems de un consorcio de las
nanciado por el Ministerio de Asuntos Exteriores
de Italia y por la Conferencia Episcopal Italiana.
Pgina 7
Tabla de contenido
Prlogo ...................................................................................................... 11
Presentacin ............................................................................................. 13
Contenido y organizacin del manual ..................................................... 15
Captulo 1
Fundamentos del monitoreo y la evaluacin ........................................... 19
1.1 Importancia y funcin del monitoreo y la evaluacin .............................................21
#$%
&
'
.....................................................22
1.3 Monitoreo y evaluacin en el ciclo del proyecto ....................................................24
1.4 El Monitoreo y la Evaluacin en la etapa de formulacin del proyecto ..............25
1.5 La planeacin a travs del Marco Lgico ..................................................................25
Captulo 2
Monitoreo .........................................................................................................29
2.1 Planeacin del monitoreo ............................................................................................31
2.2 Formatos para el monitoreo .......................................................................................33
2.3 Desarrollo del monitoreo por niveles de la organizacin .....................................35
Captulo 3
Evaluacin ........................................................................................................37
3.1 Criterios bsicos de la evaluacin ..............................................................................39
3.2 Tipos de evaluacin .......................................................................................................41
3.3 Desarrollo de la evaluacin .........................................................................................42
3.4 La evaluacin participativa ...........................................................................................46
Captulo 4
Seleccin de informacin para el sistema de monitoreo y evaluacin ...49
4.1 Preguntas de desempeo .............................................................................................51
*$
+
'
'
......................................................................53
4.3 Lneas base y metas .......................................................................................................59
**/
'
..................................................................................................60
Captulo 5
Recoleccin de informacin para el monitoreo y la evaluacin .............61
5.1 Muestreo .........................................................................................................................63
5.2 Categoras de informacin ...........................................................................................64
5.3 Mtodos de recoleccin de datos ..............................................................................65
5.4 Tcnicas de Valoracin Participativa Rpida (VPR) ..................................................73
5.5 Cmo mejorar la calidad de la informacin .............................................................77
Pgina 8
Captulo 6
Anlisis y empleo de la informacin ..............................................................79
6.1 Sistematizacin y organizacin de datos ...................................................................81
6.2 Anlisis e interpretacin de datos ..............................................................................81
6.3 Empleo de la informacin ............................................................................................84
Captulo 7
Monitoreo y evaluacin en proyectos de incidencia y de emergencia ....87
7.1 Monitoreo y evaluacin en proyectos de incidencia ...............................................89
7.2 Monitoreo y evaluacin en proyectos de emergencia ............................................93
Referencias ................................................................................................ 97
Anexos ..............................................................................................................99
Anexo I. .....................................................................................................................101
Anexo 2. ......................................................................................................................107
Anexo 3. ......................................................................................................................111
Anexo 4. .....................................................................................................................117
Anexo 5. .....................................................................................................................125
Pgina 9
Figura 2.
Figura 3.
Tabla 1.
Tabla 2.
Tabla 3.
Tabla 4.
Tabla 5.
Tabla 6.
Tabla 7.
Tabla 8.
Tabla 9.
Tabla 10.
Tabla 11.
Tabla 12.
Tabla 13.
Tabla 14.
Tabla 15.
Tabla 16.
Tabla 17.
Tabla 18.
Tabla 19.
Tabla 20.
Pgina 11
Prlogo
as actividades de monitoreo se realizan durante el periodo de ejecucin de un proyecto y estn a cargo fundamentalmente del
equipo que lo est ejecutando, sirven sobre todo
para averiguar si se estn logrando los objetivos
y los resultados esperados, y si es necesario mo
;<=
+
Pgina 12
1. Experto, asesor y docente de cooperacin internacional. Profesor de Monitoreo y evaluacin de la Escuela Latinoamericana de
Cooperacin y Desarrollo (ELACID) y de Estrategias para la cooperacin internacional de la Universidad La Sapienza de Roma.
Pgina 13
Presentacin
Pgina 14
2. Evaluadora y docente sobre monitoreo y evaluacin. Profesora del International Master Program in Cooperation and Development, Institute for Advanced Study (IUSS), Pavia, Italia.
Pgina 15
Contenido
y organizacin
del manual
or mucho tiempo prevaleci la ingenua conviccin de que un proyecto de ayuda social, al ser producto de buenas intenciones,
garantizaba buenos resultados. Sin embargo, la
experiencia en el campo de la cooperacin y el
desarrollo ha demostrado que no basta la buena
voluntad: en ocasiones los proyectos no generan
los efectos deseados o incluso pueden llegar a
tener impactos negativos sobre la poblacin y el
medio en el que intervienen. Los procesos sociales son difciles de predecir, por lo que debemos estar preparados para cuando las cosas no
salgan exactamente como lo planeamos. Si bien
esto puede parecer un escenario bastante incierto, es tambin una oportunidad para aprender
de los procesos, adaptarse al cambio, desarrollar
soluciones creativas y propiciar que el mismo
aprendizaje sea un resultado positivo de la intervencin, que sirva a la organizacin, a la teora
y a la experiencia, y de forma ms importante a
@
?
las instituciones y personas involucradas en estas
intervenciones dediquen una atencin especial al
diseo y seguimiento de la intervencin al igual
que a la evaluacin de sus efectos e impactos.
Los procesos de MyE nos permiten medir el impacto real, como un proceso de introspeccin y
autocrtica en el que podamos mejorar nuestra
accin y promover una mayor calidad de los pro-
Pgina 16
Pgina 17
'
`
captulo 5 se profundiza
@
las categoras de informacin y se explica el proceso de muestreo. Posteriormente se presenta
una lista de los distintos mtodos de recoleccin
de datos, y se describe brevemente cada uno, sus
ventajas y sus desventajas. Se presentan asimismo
algunas tcnicas complementarias de valoracin
=
=
'&=
`<
ptulo se dan algunos consejos para mejorar la
calidad de la informacin. En el captulo 6 se
describe el proceso necesario para el anlisis de
la informacin obtenida: sistematizacin, organizacin, interpretacin y recomendaciones. Tambin
se hace una revisin del empleo y la difusin de
la informacin.
Finalmente, en el captulo 7 del manual, se des
=
=
W
/`==
=<
=
en emergencias. Aqu se describen las principales
diferencias y posibles obstculos en el diseo, el
monitoreo y la evaluacin de este tipo de intervenciones. Se incluyen recomendaciones y ejem=
/`
=
W =
tipo de proyectos. Los anexos del manual buscan
profundizar el contenido y proporcionar insumos
adicionales que puedan facilitar el trabajo de MyE.
Se incluyen entonces un glosario, formatos de
MyE, algunas guas de indicadores, ejemplos de un
marco lgico, el plan y el informe de monitoreo
correspondientes.
Captulo 1
Fundamentos
del monitoreo y la evaluacin
Pgina 21
Pgina 22
=;=
dades y amenazas, de manera que se faciliten los
ajustes al proyecto y se direccionen.
El monitoreo nos sirve, entre otras cosas, para
conocer:
- Si los recurs
~
- Si el personal encargado de la ejecucin tiene
=
~
- Si el plan de trabajo ha sido implementado en
los tiempos y en la forma planeada;
- Si las actividades realizadas son coherentes con
los planes de trabajo;
- Si estamos progresando para avanzar hacia los
resultados u objetivos propuestos;
- Si la respuesta de la poblacin involucrada en
las actividades del proyecto es positiva;
- Si hay participacin y aceptacin de las actividades y los procesos, y
- Si existen circunstancias o eventos inesperados.
La evaluacin
=
ms sistemtica y objetiva posible, de un proyecto
^
=
+
cucin o resultados. Su propsito es determinar
la pertinencia y el cumplimiento de los objetivos,
^
=
y la sostenibilidad (Organisation for Economic
Development /Development Assistance Commitee [OECD/DAC], 2002). La evaluacin, adems
de determinar la medida en que se ha logrado el
cumplimiento de los objetivos de un proyecto ya
^=
= X
[
=
~W '
>
=
^
'
to fundamental para la toma de decisiones, pues
=
!
gias del propio trabajo, proporcionando valiosos
insumos para la planeacin futura.
Los criterios bsicos para la evaluacin de un proyecto tienen que ver con la pertinencia (de los
=
@
=
[
ciencia (de los procesos de conversin de insumos
[
X
?"
=yecto puede producir los resultados esperados),
el impacto (cmo contribuye a la introduccin de
cambios a largo plazo) y sostenibilidad (permanencia o durabilidad de los cambios introducidos).
Como se puede ver, el monitoreo y la evaluacin
estn interrelacionados pero son procesos distintos. Mientras que el monitoreo es un proceso
continuo y permanente en la ejecucin del proyecto, la evaluacin se realiza en periodos establecidos, entre lapsos ms largos. El monitoreo
es un proceso continuo de anlisis, observacin
y sugerencias de ajustes para asegurar que el proyecto est encaminado a alcanzar su objetivo. La
evaluacin, por su parte, permite la formulacin
de conclusiones acerca de lo que se observa a
una escala mayor, del diseo del proyecto y sus
impactos (Ortegn, Pacheco y Prieto, 2005).
Los procesos de monitoreo y de evaluacin son
complementarios: la evaluacin depende en gran
medida de la informacin reportada y recolectada de forma peridica a travs de los sistemas
de monitoreo. Sin embargo, cada proceso tiene
@
=
W
!
;
@
fundamentales que se resumen en la Tabla 1.
Pgina 23
Evaluacin
Valoracin ms profunda enfocada en el aprendizaje y la rendicin de cuentas.
Enfoque en los resultados, objetivos e impacto
ms amplio y a largo plazo.
Informacin proviene de la recoleccin de datos
para el monitoreo, para la lnea base, etc.
Funcin
Enfoque
Insumos
Levantamiento de datos/informacin.
Tiempo
Responsable
Presentacin
Difusin
Otros instrumentos
Existen otras actividades de revisin de proyectos
?
@
=
W
@?
particular, y por lo tanto no deben confundirse
con el monitoreo y la evaluacin. Estas son:
- Auditora: valoracin de los procesos y procedimientos administrativos para asegurar el
@
respeto a las polticas, normas y criterios previamente establecidos. El objetivo de la auditora se limita a examinar la conformidad con
las obligaciones contractuales. La pregunta gua
de la auditora es: Estamos siguiendo los procedimientos adecuados?
- Estudio de factibilidad: es una valoracin
crtica de una propuesta de proyecto con el
'
-
Pgina 24
s %VALUACIN Y
EMPLEO DE LOS
RESULTADOS
s -ONITOREO
2ECOLECCIN
!NLISIS Y
3ISTEMATIZACIN
DE $ATOS
s )NCORPORAR
APRENDIZAJES DE
OTROS PROYECTOS
Evaluacin
Ejecucin
y Seguimiento
Identificacin
Diseo o
Formulacin
s $EFINICIONES
DE LA -ETODOLOGIA
DE -Y%
s $ISEO DEL
3ISTEMA DE -Y%
1.4 El Monitoreo y la
Evaluacin en la etapa de
formulacin del proyecto
Los primeros pasos de MyE se toman desde la etapa
de formulacin del proyecto. En esta etapa, las personas que formulan el proyecto tienen la responsabilidad de asegurar que su diseo lo haga evaluable
y que disponga de un buen sistema de MyE. Un
proyecto bien diseado, con una cadena de efectos
clara, ser fcilmente monitoreado y evaluado. Un
proyecto que no cumpla con esta caracterstica
muy probablemente fallar en la consecucin de
sus objetivos (o en la demostracin de los mismos).
Asegurar la evaluabilidad es por lo tanto el primer
control de calidad que se debe realizar sobre los
documentos de formulacin de un nuevo proyecto. Incluye cuatro momentos principales, que se
recomienda asegurar en la etapa de diseo:
- Que la lgica de intervencin sea coherente
y clara, que el diseo de los resultados, los
objetivos, las actividades y las estrategias est
/`
@
;
tivo con relacin a los resultados y objetivos
del proyecto, y que existan los medios para
'
'
Pgina 25
- Que los planes del proyecto prevean actividades de monitoreo y evaluacin adecuadas, y
que exista un plan de monitoreo y evaluacin
con mtodos, procedimientos y personas res=
- Que las lecciones y las buenas prcticas aprendidas de los proyectos anteriores se incluyan
en el proyecto actual.
3. Para un anlisis ms detallado sobre los distintos enfoques de gestin de proyectos de desarrollo, ver el captulo 1 del manual
Formulacin de proyectos: enfoques, procesos y herramientas (Londoo, 2009), en donde se explican los antecedentes histricos, las herramientas y las caractersticas principales de cada uno.
Pgina 26
LOGICA VERTICAL
LOGICA HORIZONTAL
Lgica de Intervencin
Objetivo General
+
'`=
W
Resultados
Actividades
Indicadores
/
Medios
Costes
Supuestos
Condiciones Previas
Las actividades que se llevarn a cabo para producir los resultados; los resultados que se producen
a partir del proyecto permitirn la realizacin del
+
'
=
W '
^
^
=
;
+
'
=
W
=&
+
';
`<
=
>
=
=
?
cunstancias ajenas al proyecto que deben existir
para que puedan implementarse las actividades
y puedan producirse los resultados y objetivos
=
W
+
';
N
se describen de forma breve los componentes de
esta lgica vertical.
Objetivo general: es la descripcin de la contribucin del proyecto a un problema ms amplio
(sectorial, regional o nacional). El objetivo general,
"
=
te el contexto y la problemtica general en la cual
el proyecto se introduce, y describe el impacto
que se espera tener en el largo plazo. Se espera
?
=
;
'
=
=
?
=
W
&
=;X
'
=yectos o medidas, desde distintos actores, pueden
=
[
Ob
responde al problema cen
@
?
?
;
=
4. Para ms informacin ver: CE, 2002; Food and Agriculture Organisation [FAO], 2001; Guijt y Woodhill, 2002, y Ortegon et
al., 2005. Varios ejemplos sobre los ejercicios de rbol de problemas, as como tipos de Marco Lgico se pueden encontrar en
Fundacin CIDEAL, 2001.
`
"
==
`+
'
=
W
est dirigido a reducir las causas que generan el
problema central que el proyecto busca resolver.
Resultados: son los componentes que deber
=
=
'
^
^
de vida. Si se producen los resultados, se podr
^
+
'
=
W
=
`
una formulacin correcta, todos los resultados
=
;
+
'
=
W @
; =
conseguirlo. Si un resultado planteado depende
ms de factores externos que del propio proyecto,
no es un resultado adecuado. Los responsables
del proyecto deben responder por la consecucin
de cada uno de los resultados.
Un objetivo o resultado correctamente planteado,
debe ser:
`=
W X
@=ticular deseada).
- Medible.
- Realista en el contexto y con los recursos disponibles.
- Pertinente (responde a los problemas pre
>
;
'[
K
=
@
>
lmite de cumplimiento.
Actividades: son todas las acciones que se debern llevar a cabo para producir los resultados
=
=
teriales y humanos. Las actividades dependern
de las estrategias seleccionadas en el diseo del
proyecto. Deben ser realistas en tiempo y recursos y considerar el contexto local, as como las
condiciones previas necesarias.
Los trminos empleados por distintos donantes
para cada nivel de la lgica de intervencin pueden
'
`
=
Pgina 27
Pgina 28
Captulo 2
Monitoreo
Monitoreo
Pgina 31
Qu tipo de informacin
ser necesaria? Qu se va
a monitorear?
Es fundamental discutir con los responsables y
=
?"
@
requiere y determinar las preguntas y los indicadores relevantes para obtenerla. Si bien la seleccin de los indicadores es importante desde
la planeacin, no siempre se podrn determinar
todos los indicadores desde el inicio del proyecto,
y ser necesario irlos adaptando conforme ste
se desarrolle. La informacin que se determine
para el monitoreo ser esencial para la evaluacin
=
tres categoras que corresponden a diferentes
- Informacin sobre la ejecucin de las
actividades planeadas y nivel de participacin
= =
gestin cotidiana de los proyectos sobre el
terreno. Estos datos se obtienen con un monitoreo sistemtico sobre la marcha que permite
=
surgen.
- Informacin sobre los resultados obte
=
=
comprobar los avances y revisar los planes de
trabajo. Esta informacin se puede obtener a
Pgina 32
Quines sern
los responsables de levantar
la informacin?
Desde la etapa de diseo, es necesario que las funciones y procedimientos del monitoreo sean conside
;<;
;
^
del proyecto. Dependiendo del tipo de informacin
que se vaya a recolectar, las fuentes y los mtodos,
habr distintas personas responsables de reunirla.
La asignacin de responsabilidades debe estar clara
y ser aceptada por todos los que van a intervenir.
Es necesario determinar si las actividades de monitoreo y evaluacin sern realizadas por personal
en terreno, por personal externo al proyecto (de
la misma organizacin) o por personas externas
;
^
`
=
&
^
administrativa, la credibilidad, la objetividad, el conocimiento del proyecto y el potencial para utilizar los
resultados. No debe olvidarse que un proceso de
monitoreo requiere recursos humanos capacitados,
;
?
==
=
;
recursos para la capacitacin del personal.
Cmo se recolectar
la informacin? Qu mtodos
se emplearn para llevar a cabo
las actividades de monitoreo?
`!
<
=
">
=
la recoleccin de informacin, la seleccin de las
ms adecuadas depender de la naturaleza del
proyecto, as como de la capacidad del personal y
de los involucrados, entre otros factores. Al decidir sobre la tcnica para obtener informacin, es
bueno tener en cuenta que dicha herramienta ser
empleada de forma sistemtica y peridica, dado
que el monitoreo es un proceso continuo. Tener
esto en mente ayudar tambin a considerar la
disponibilidad de recursos humanos y materiales.5
5. Para ms informacin sobre los distintos tipos de mtodos de recoleccin de datos, ver el captulo 5.
Monitoreo
Pgina 33
2.2 Formatos
para el monitoreo
Como ya se mencion, el proceso de monitoreo
involucra a distintos actores; sin embargo, el personal responsable de la ejecucin sobre el terreno
es el que debe llevar el registro de las actividades
y los resultados. Esta labor puede facilitarse si se
tienen herramientas para registrar la informacin,
tales como:
- Formatos del Plan de Monitoreo
Como vemos, existen diversos formatos que pueden ayudar a organizar las actividades del monitoreo, as como los tiempos, recursos y objetivos
de las mismas. Estos formatos pueden ser elaborados con la periodicidad que se estime necesaria
(mensual, semestral, etc.). Es importante desarrollar instrumentos y prcticas de monitoreo
que respondan a las estructuras y estrategias de
- Reportes de visita
- Reportes de las actividades de recoleccin de
datos
- Diarios del equipo, en donde se registra infor
'
=
W
de monitoreo
- Registro del proyecto por medios diversos
como fotografas o notas en medios de comunicacin (prensa, entrevistas, video)
Pgina 34
Indicadores
Responsable
Actividades
Tiempos
Y
"=
<
@
@
?
=
=
;<
;
^
Estado de Avance
Comentarios o Recomendaciones
Monitoreo
@
&
=
da. En cada rea se analiza la informacin recibida
y se incluye un nuevo anlisis.
Pgina 35
Pgina 36
Frecuencia
Contenido
Avances en el desarrollo
Registros y reportes Regulares (mensual Apoyar la gestin cotidel proyecto, participade monitoreo
o trimestral)
diana
Calidad de los resultaApreciar los avances
dos y coherencia con un
Lapsos intermedios
hacia los resultados pla- programa ms amplio
Informes sintticos (de trimestrales a
neados y analizar cambios u otros proyectos de la
semestrales)
en los planes de accin
misma regin. Respuesta
Apreciar la pertinencia
Revisin del proyecto,
del proyecto o de la
coherencia con estrategia
Informes generales Anuales
lgica de intencin y
de la organizacin, impachacer recomendaciones
a futuro
Fuente: Gosparini et al., 2004
Finalidad
Responsables
Directores y administradores del
proyecto y equipo
Coordinador/a a
nivel regional o
nacional
Director/a de la
organizacin
Captulo 3
Evaluacin
Evaluacin
Pgina 39
- Pertinencia: est relacionada con la formulacin del proyecto, esto es, qu tanto el diseo
de la intervencin responde a las necesidades
busca avanzar hacia la solucin de los proble
'
a la consistencia de diseo de acuerdo a la
situacin local y a las prioridades de desarrollo. Algunos factores para tomar en cuenta y
asegurar la pertinencia de la accin son:
cacin y seleccin de grupos meta
=
;=
- Participacin de las partes interesadas locales en la fase de formulacin y en el ciclo
del proyecto en general.
- Calidad del Marco Lgico, incluyendo las
>
=
;
!
=
Pgina 40
- Sostenibilidad:
cual los impactos de la intervencin tienen la
posibilidad de continuar despus del cierre
=
%
'<
;=
?
=
dar continuidad a los objetivos del proyecto
(desarrollando actividades, gestionando apoyos, incidiendo en el gobierno local, etc.) aun
despus de la salida del personal del proyecto.
Este criterio es muy amplio, y la importancia
relativa de los diferentes temas depende de la
naturaleza del proyecto y de su relacin con el
contexto local. Los anlisis de sostenibilidad
pueden centrarse en:
- Sentido de apropiacin de los objetivos por parte de las personas involucradas
(depender en parte de su participacin en
el diseo y la ejecucin del proyecto).
- Sostenibilidad institucional la medida en la
=
=
tersticas de las organizaciones o instituciones
locales y en la capacidad de stas de desempear su papel despus del cierre del proyecto.
si los servicios
pueden seguir funcionando cuando se agoten los fondos externos, y si se genera una
Evaluacin
Pgina 41
- Sostenibilidad sociocultural si el proyecto tiene en cuenta el contexto social y cultural, as como la percepcin local de las necesi
Y
"'
otras partes interesadas han aceptado y adoptado los cambios producidos por el proyecto.
- Evaluacin sobre la marcha: se realiza durante la ejecucin del proyecto para evaluar
las actividades del proceso mientras estas se
=
la introduccin de ajustes.
- Evaluacin al cierre:
^
=
^
;
resultados y efectos tempranos de la intervencin.Tambin puede dar recomendaciones para
intervenciones futuras.
- Evaluacin ex post: se realiza despus (desde meses hasta varios aos despus) de concluido el proyecto, evaluando los resultados con
la intencin de valorar el impacto del proyecto
en el largo plazo y deducir indicaciones para
futuras intervenciones similares.
Por agente
- Autoevaluacin: la realizan personas involucradas directamente en la ejecucin del
proyecto. Las autoevaluaciones se llevan a cabo para fortalecer las capacidades internas y
empoderar el equipo del proyecto y los socios
locales. Existe una modalidad de autoevaluacin asistida, en la que un externo apoya las
acciones de evaluacin, pero sta es realizada
por los actores locales, fomentando su empoderamiento.
- Evaluacin interna: la realizan personas que
forman parte del equipo de la organizacin,
pero que son externas al proyecto.
- Evaluacin externa: La realizan personas
externas al proyecto y a la organizacin (sin
;<
"
[
'
?
@
< =
!ternas, a menudo se consideran ms objetivas
y se llevan a cabo con
=
responsabilidad (ver Tabla 5).
Pgina 42
Evaluacin Externa
Ventajas
- Al no haber intereses personales, es ms objetiva.
;
^
'
- Al ser especialista, el evaluador tiene las capacidades y
los conocimientos tcnicos necesarios.
- Puede dedicarle ms tiempo.
Desventajas
- El evaluador puede estar descontextualizado sobre las
polticas, procedimientos y caractersticas de la organizacin o el entorno.
- No siempre se est en condiciones de dar seguimiento a
la efectiva implementacin de las recomendaciones.
- Por lo general es ms costosa.
- Si bien es ms objetiva, tambin puede haber un sesgo
del evaluador por quedar bien con la organizacin y ser
menos crtico en las conclusiones.
3.3 Desarrollo
de la evaluacin
- Cuando un proyecto est teniendo muchas limitaciones, atrasos o no ha logrado avanzar hacia
la consecucin de los objetivos planteados.
Por lo general, es difcil contar con recursos para evaluar todos los proyectos de un programa
de una organizacin. Por otro lado, puede que
no sea necesario evaluar todos los proyectos y
& ;
'
=
W
slo algunos (United Nation Educational, Scientifc
and Cultural Organization [UNESCO], 2009). Los
siguientes son posibles criterios de seleccin de
los proyectos a evaluar:
- Cuando un proyecto tiene un presupuesto muy
alto.
- Cuando se est proponiendo una segunda fase
o una ampliacin del proyecto.
- Cuando un proyecto es considerado nuevo o
estratgico, y se quiere ampliar el conocimiento
para mejorar otras acciones futuras.
- Cuando un proyecto se lleva a cabo bajo modalidades operativas particulares (por ejemplo,
=
@
[
Al determinar qu proyecto se va a evaluar, es
necesario preguntarse: Qu nos interesa evaluar
en particular? Se quiere evaluar todo un proyecto
o slo un componente? Se quieren evaluar todos
los temas del proyecto o slo una estrategia o
tema transversal del mismo?
Planeacin de la evaluacin
Es fundamental que el mbito de la evaluacin sea
claro desde un inicio, para asegurar resultados y
=
<
bien las evaluaciones pueden enfocarse en distintos aspectos o temas; por lo general, se centran
en un proyecto, un programa, un sector, una estrategia, un tema transversal o en las relaciones
Evaluacin
Trminos de referencia
Los trminos de referencia (TdR) son elaborados
por la organizacin que est solicitando la evaluacin, sea sta interna o externa. Sirven para guiar
toda la evaluacin al determinar su enfoque y propsito, y lo que se espera del evaluador. Los TdR
deben desarrollarse en coordinacin cercana con
=
%
+
tivo (por qu se realiza la evaluacin); el alcance
(qu se debe evaluar), y los parmetros generales
para llevarla a cabo (actividades y metodologa).
Los trminos de referencia de una evaluacin por
lo general incluyen: informacin bsica sobre el
proyecto (datos, antecedentes, alcance, caractersticas, e informacin bsica de la organizacin que
lo implementa); propsito y enfoque de la eva
X+
';
+
'
=
W [~
metodologa (parmetros generales para realizar
la evaluacin: qu metodologas se necesita em-
Pgina 43
plear, si se requiere llevar a cabo actividades particulares, preguntas clave, nivel de participacin de
@
@
'
etc.), y condiciones del contrato de evaluacin
(capacidades requeridas en el evaluador, responsabilidades, tiempos y costos).
Pgina 44
Plan de trabajo
El primer producto elaborado por el evaluador
es el plan de trabajo o plan de la evaluacin, que
representa su propuesta para realizar el trabajo,
teniendo en cuenta los trminos de referencia. Es
importante que dicho plan de trabajo sea compartido con el equipo del proyecto, pues es en este
momento inicial cuando se puede hacer cambios
al plan y asegurar la apropiacin del proceso de
evaluacin. El plan de trabajo es fundamental, ya
que ser un punto de referencia para todo el
desarrollo de la evaluacin. Se recomienda incluir:
- Visin general del proyecto y del contexto: comprensin del evaluador del contexto y los antecedentes, del proyecto y de la
organizacin. Esto se desarrolla a travs de la
revisin de los documentos y de la consulta
con el equipo del proyecto.
- Diseo metodolgico indicativo: el enfoque
de la evaluacin, los objetivos (generales y espe W [
;
zacin contratante y a la propuesta del evaluador,
y las preguntas de evaluacin o hiptesis.
- Matriz de evaluacin: reformulacin de las
=
;
=
W '
de evaluacin, los indicadores, las fuentes de
datos y los mtodos para su recoleccin (ver
Tabla 6).
- Metodologa: es la estrategia para conseguir
los objetivos de la evaluacin, teniendo en
Implementacin de la evaluacin
Una vez que la organizacin gestora de la evaluacin haya aceptado el plan de trabajo y se haya seleccionado y conformado el equipo de evaluacin,
se puede comenzar la evaluacin. Como acciones
previas, se recomienda:
- Reunir y revisar la informacin disponible sobre
el contexto y sobre el proyecto (propuesta ini-
Preguntas de
desempeo
Pertinencia
Impacto
Sostenibilidad
Fuente: Gosparini et al., 2004.
Indicadores
Fuentes de
Mtodos de
recoleccin de datos
Evaluacin
=
@
W
W
'
;
nes y documentos sobre la problemtica o el
contexto, etc.).
- Programar que el evaluador o el equipo realicen
al menos una visita previa al lugar del proyecto
para recolectar informacin que no est disponible, y para asegurar una contextualizacin
adecuada si el evaluador es externo. En esta
visita puede haber una reunin con las personas que estarn involucradas en la evaluacin
(responsables de la ejecucin del proyecto, y
quienes darn la informacin).
- Entregar a los responsables del proyecto el cronograma, los itinerarios y el plan de evaluacin.
- Considerar aspectos logsticos y organizativos
antes de la salida, y planear agendas alternas a
partir de un anlisis de riesgos.
- Seleccionar y revisar las tcnicas para la recoleccin de datos y los distintos mtodos de
evaluacin, de acuerdo a los resultados de las
visitas y reuniones preliminares.
Durante el desarrollo de la evaluacin se recomienda la participacin activa de diversos acto
?
=
proyecto, otras organizaciones, donantes y otras
partes interesadas, sobre todo del nivel local. El
gestor de la evaluacin deber decidir sobre el
'
si es pertinente y existen las condiciones necesarias para realizar una evaluacin participativa.
Para guiar el trabajo de la evaluacin se puede
=
&
X=
= [=
cada uno a los objetivos y estrategias generales
=
W
=
=
que el enfoque de la evaluacin se concentre en
una parte del proyecto, un tema transversal, un
problema o un solo criterio de evaluacin (por
+
=
=
[
Pgina 45
Indicadores de evaluacin
Los indicadores de evaluacin sirven para ayudar a respon
=
;
'
=
W
;dar relacin con la lgica de intervencin o estar enfocados en nuevas necesidades, problemas o desafos que han
+
'
'
pueden ser los propuestos en el sistema de MyE durante el diseo del proyecto o pueden construirse despus,
=
W
=
'
&
all de los indicadores formulados en el sistema de MyE.
La construccin de indicadores nuevos durante la etapa
de evaluacin normalmente se da cuando se busca iden
=
=
W
=
=
;
'
=
versales, los factores de sostenibilidad, los efectos no esperados, la evolucin de las necesidades o la coherencia
del proyecto. Sin embargo, es muy recomendable emplear
los indicadores propuestos en el diseo del proyecto, y
despus, si es necesario, incluir otros indicadores nuevos.
Pgina 46
K'
^
@?
?
tendr la evaluacin, se pueden seleccionar y
desarrollar los instrumentos necesarios para la
recoleccin de datos que permitan reunir la informacin necesaria. Esta etapa del proceso de
evaluacin es la que requiere ms tiempo y trabajo,
por lo que es fundamental planearla y llevarla a
cabo cuidadosamente. Despus de la recoleccin
de datos, es necesario hacer una recopilacin y
anlisis de los datos obtenidos y evaluarlos en
relacin con los criterios y objetivos establecidos
anteriormente, para poder interpretar los resultados, deducir conclusiones y lecciones aprendidas.7
3.4 La evaluacin
participativa
Es una dimensin participativa del desarrollo que abarca muchos conceptos similares,
involucra a las partes interesadas y a los be
=; =
anlisis colectivo y la evaluacin del mismo.
Est centrada en las personas: las partes in
=
actores clave del proceso de evaluacin, y no
solamente un objeto de esto (PNUD, 1997).
7. En el captulo 6 se desarrollan en detalle las diversas tcnicas de recoleccin de datos, y se dan algunas recomendaciones generales tanto para este proceso como para la interpretacin de resultados.
Evaluacin
Pgina 47
Pgina 48
Evaluacin Participativa
=
=
prioridad al aprendizaje y la apropiacin.
Las partes interesadas deciden sobre los planes de traLas partes interesadas tienen un papel pasivo: proveen la inforbajo, realizan investigaciones, analizan datos y elaboran
macin requerida sin participar en el proceso de evaluacin.
recomendaciones.
nfasis en el proceso: el objetivo no es slo el de
cumplir los requisitos formales, sino tambin desarroEl nfasis se concentra en los resultados de la evaluacin.
=
=
'
entorno y actuar con base en esta apreciacin.
"!
=
@
- La poblacin local determina sus propios indicadores
;
=
=
de xito.
%
{
!
;&=
Diseo predeterminado: mtodos convencionales, centrados saberes, valores e intereses locales para guiar la
en lograr el mayor rigor y objetividad posibles.
evaluacin (empleando por ejemplo la autoevaluacin y
mtodos simples adaptados a la cultura local).
Se emplean mtodos convencionales, como entrevistas
Se emplean mtodos ms participativos, como entreestructuradas, mediciones, datos estadsticos, revisin de la vistas abiertas, grupos focales y tcnicas de valoracin
documentacin, observacin directa, etc.
participativa rpida.
Fuente: Elaboracin propia con base en diversos documentos de referencia
=
?
rrn involucrarse en el proceso de MyE. Esta
participacin requiere tiempo y energa que
no todas las personas estarn preparadas o
dispuestas a dar.
- Es necesario adaptarse al contexto y a las necesidades de la poblacin. En este caso, se pueden
obtener muy buenos resultados empleando y
combinando diferentes tcnicas y herramientas participativas de obtencin de datos y de
evaluacin.
- La participacin de la poblacin en la recoleccin de datos puede, por s misma, empoderar
a los involucrados al asignarles una responsabilidad en el proyecto y fortalecer su formacin
en las tcnicas y habilidades necesarias (investigacin, entrevistas, etc.).
- Las evaluaciones participativas pueden contribuir a la construccin social de aprendizaje. El
proceso de anlisis colectivo sobre un tema en
particular puede resultar en una comprensin y
un aprendizaje mucho ms profundos, a travs de
cuestionamientos, dilogos y generacin de ideas.
Captulo 4
Seleccin de informacin
para el sistema de monitoreo
y evaluacin
=
X =
>[
y la seleccin del tipo de informacin que ser
necesaria para el MyE y los medios para obtenerla. Un sistema completo de MyE consta de
6 fases (Guijt y Woodhill, 2002).8 Veamos:
#
=
;
=
{
$
@macin e indicadores
3. Conocer la informacin base que se requiere
4. Seleccionar los mtodos de recoleccin de
datos
==&
=
la recoleccin de datos
6. Organizar el anlisis, la retroalimentacin
y el cambio
=
W
@
=
!
=
;
Pgina 51
Tipo de preguntas
Objetivo general
+
'
=
W
Resultado
Actividad
8. En esta seccin nos enfocaremos en las primeras tres fases, y las subsiguientes se vern en los captulos 6 y 7.
Pgina 52
Pregunta clave
!
Indicador
Objetivos
Resultados
Actividades
4.2 Indicadores
objetivamente
vericables
Los indicadores son las descripciones operativas
(cantidad, calidad, grupo meta, tiempo y ubicacin)
de los objetivos de un proyecto (Comisin Euro=
$$[
=
=
@
?
'
&
;
plimiento de los resultados y objetivos. Estos se
formulan a manera del efecto esperado (o cambio
que se quiere generar) para cada nivel de la lgica
de intervencin. En el caso de las actividades, los
indicadores se formulan como medios (insumos)
y recursos (presupuesto) necesarios.
De manera general, los indicadores sirven para:
;
'
resultados y los objetivos del proyecto.
_
^
@&
=
W
cin del proyecto, al indicar qu se quiere
lograr, con qu caractersticas, en dnde,
en qu tiempo, para qu poblacin, etc.
- Medir el avance y los logros permiten saber si efectivamente se est realizando lo
planeado y conocer el impacto de nuestra
accin.
- Informar la toma de decisiones para hacer
cambios en el curso de la accin.
- Revisar el desempeo del proyecto y del
equipo encargado de su ejecucin, as como
los tiempos y recursos disponibles.
Los indicadores describen el avance del proyecto y
son esenciales para todo su MyE. Una formulacin
correcta de los indicadores es crucial para todo el
sistema de MyE, porque funcionan como mapa
Pgina 53
=;
'
cesidades y el enfoque para la recoleccin de datos.
Formulacin de indicadores
En la formulacin de los indicadores, se debe tomar en cuenta que:
- Se pueden emplear varios indicadores para cada resultado y objetivo, pero es recomendable usar los menos posibles para
=
'
>
/`
complejo, caro y poco gestionable. En cual?
=
<
se reduce a medida que se sube en la lgica
de intervencin, con ms indicadores para
resultados y menos para objetivos espec ;
- Usar diferentes tipos de indicadores (cuantitativos y cualitativos) ayuda a medir de
mejor forma el avance y el impacto. Los
cuantitativos permiten un anlisis ms simple y objetivo, mientras que los cualitativos
&
@W
'
=
mejor el cambio profundo que se est dando (PNUD, 2009).
proceso participativo, para asegurar tanto la
apropiacin del proyecto y de los procesos
de MyE, como la efectividad de los mismos.
Los principales involucrados en el proyecto
tendrn una idea ms clara sobre los cam
?
=
'
y en dnde encontrar la informacin para
medirlos.
@
!
?
permite que los indicadores sean revisados ante cambios en el contexto y a partir
de la experiencia de la implementacin del
proyecto.
- Los indicadores deben poder emplearse en
diferentes momentos del proyecto, no slo
`
=
@
Pgina 54
- La cantidad: cunto?
- La calidad: qu? cmo?
- El periodo: a partir de cundo? por cunto
tiempo?
- El lugar: en dnde?
- El punto de referencia: en comparacin
con qu o cunto?
#
2. Paso
Cantidad
3.er Paso
Calidad
4. Paso
Tiempo
9. /NZY=
;"
=
/
N
Z
'Y
Pgina 55
Categoras de indicadores
Por sus caractersticas
Cuantitativos: son medidas estadsticas que miden
los logros en:
<mero
- Porcentaje
- Frecuencia
- Tasa (por ejemplo, tasa de mortandad infantil, 100 de cada 1.000)
- Proporcin (por ejemplo, proporcin de
mujeres del total de la poblacin)
Cualitativos: Z
+un comportamiento, una situacin o una descripcin de cmo se hacen o
perciben las cosas. Pueden ser opiniones, actitudes, prcticas y comportamientos de la poblacin
hacia una situacin o en relacin con un tema. En
las personas, los indicadores cualitativos pueden
incluir cambios en actitudes, comprensin, conocimiento, sensibilizacin o empoderamiento. Miden
los avances en trminos de:
- Cumplimiento con.
- Calidad de.
- Las caractersticas
- Grado en el que
- Nivel de.
- Percepcin acerca de.
Indicadores sustitutos o Proxy: para aquellos casos
en los que no hay datos disponibles para los indicadores ideales, o que es muy difcil o costoso
obtener estos datos, se pueden emplear indicadores sustitutos o proxy para medir el objetivo.
No es una medida directa de la situacin sino una
forma paralela de obtener la informacin con base
en una relacin conocida entre ambas variables.
Por ejemplo, ante la falta de datos sobre la corrupcin en algunos pases, muchas agencias de
Pgina 56
Por lo general, a medida que se pasa de las actividades al objetivo general o meta en la jerarqua
de intervencin, la informacin del MyE tiende a
perder concrecin. En el nivel de las actividades
y los resultados es mucho ms fcil de medir y
mostrar avances en los indicadores al ser informacin sobre procesos y productos. Sin embargo, el
impacto del conjunto de productos o resultados
es por lo general ms difcil de determinar y ms
complicado de medir (Guijt y Woodhill, 2002).
Indicadores de Proceso
Son indicadores sobre la realizacin de las actividades, enfocados en medir eventos importantes
?
=
+
+
de varias actividades. Si bien estos indicadores
describen acciones, etapas y procesos que conducen a los resultados, por s mismos no aseguran
que se logren los resultados. Sin embargo, son
importantes, debido a que son insumos bsicos
del proceso de MyE. Las fallas o el mal desempeo
de resultados u objetivos muchas veces dependen
de fallas en la implementacin de las actividades, y
=
Los indicadores de proceso permiten adems
precisar la estrategia que se sigue al monitorear
la calidad de los procesos en curso con la participacin de la poblacin involucrada. El nivel de
cumplimiento con los tiempos y el presupuesto
programado se puede medir como un indicador
paralelo de proceso.
La matriz de marco lgico no prev la inclusin
de indicadores de proceso (en la seccin de actividades se incluye, en lugar de indicadores, un
resumen de los recursos y costos del proyecto),
aunque pueden ser incluidos para facilitar el monitoreo de los avances.
Ejemplos de indicadores de proceso:
<
=
=
<
=
=
<
;
ayuda alimentaria
Indicadores de Efecto
Son indicadores para medir el progreso y los
cambios generados a nivel de resultados y obje
'
=
W
los resultados, los indicadores de efecto emplean
=
=
W X
tiempo) de los productos generados.
Es importante que los indicadores de efecto no
sean un resumen de los productos generados, sino
el efecto de tener dichos productos: deben medir
cambios en las condiciones o capacidades y no la
entrega de productos o servicios. Para que estos
+
@
?
produce, se recomienda considerar:
- Descripcin de la calidad: no basta con que
;
=^
?
`
necesario que este cambio o logro tenga las cualidades que consideramos adecuadas. As, los indicadores cuantitativos deben ir acompaados
=
'?
=
- Sostenibilidad: un indicador esencial para
medir la calidad es su capacidad de producir
efectos aun despus del cierre del proyecto.
Algunos factores relacionados con la sostenibilidad son: aceptacin cultural, social e
institucional de las soluciones y los cambios
propuestos e introducidos; continuidad econ
~ =
adquiridos; variables organizativas, y participacin de la poblacin involucrada en el diseo
y la ejecucin del proyecto.
- Fortalecimiento de capacidades: aunque
no todos los proyectos tienen como componente central el fortalecimiento de capacidades
=
+
en la medicin, pues est directamente vinculado con el empoderamiento de la poblacin
local y la sostenibilidad de los resultados.
- Participacin: en la medida en que los grupos
=
=
=
Pgina 57
Pgina 58
Objetivo general
Tipo
de Indicador
Indicador de
impacto
Indicador de
+
'
=
W efecto o de
impacto
Resultados
Indicador de
efecto
Actividades
Indicador de
proceso
Caracterstica
Qu miden?
IMPACTOS:
Ha alcanzado los cambios sostenibles, de largo plazo? En qu medida
es responsable el proyecto de estos
cambios? Qu otras consecuencias
positivas o negativas tuvo el proyecto?
Descripcin de los cambios genera- CAMBIOS:
dos que permiten conseguir el ob- Qu cambios se han registrado como
+
'
+
@
consecuencia de los resultados o proque se produce y la diferencia con la ductos y en qu medida contribuyen al
situacin inicial.
propsito del proyecto?
RESULTADOS:
%
=
=
W X
Qu productos o servicios tangibles y
dad, calidad y tiempo) del uso de los
directos ha prestado el proyecto como
productos que se generan.
resultado de las actividades?
Describen acciones, etapas y proce- ESFUERZOS
sos que indican la implementacin Se han completado a tiempo las actide lo planeado y que conducen a los vidades planeadas? Se ha respetado el
resultados.
presupuesto?
Descripcin del cambio logrado en el
;=^
=
&&
^cin, a nivel local, regional o nacional.
Pgina 59
Para evitar estos problemas, se recomienda realizar la lnea base una vez que se haya elaborado
y revisado la matriz de marco lgico del proyecto,
=
;?
@
?
<
acorde con los resultados, objetivos e indicadores.
Se recomienda asimismo tener en cuenta lo siguiente (Guijt y Woodhill, 2002):
1. Recoja solamente la informacin que va
a utilizar. Como regla general, se debe recopilar informacin de lnea base que est
relacionada directamente con las preguntas
?
>
2. Planee la obtencin de informacin de lnea
base al igual que en los dems procesos de
recoleccin y anlisis de datos.
3. Asegure que sea un proceso viable y realista.
Tenga en cuenta que una lnea base siempre ser una aproximacin y nunca podr ser exacta.
4. Adopte mtodos creativos de recoleccin
de la informacin.
5. Incluya informacin relativa al gnero.
Metas
Una vez que tengamos la lnea base, existen ele
=
=
=
+=
el trmino del proyecto o para avances cada ao,
Pgina 60
semestre o trimestre. La meta depender del periodo de intervencin del proyecto, del programa
en el que se inserta y de las actividades. Tambin
depender del tipo de intervencin que sea, pues
ciertos cambios toman ms tiempo que otros (por
ejemplo: cambios en prcticas agrcolas sustentables sern de ms largo plazo, mientras que la
atencin inmediata en situaciones de emergencia
ser una meta de corto plazo). Es importante tener en cuenta que aunque el desarrollo social sea
un proceso de largo plazo, la inclusin de metas
=
W
=
=
'
{
cambio o de un impacto ms amplio.
Lnea Base
Meta al segundo ao
del proyecto
Captulo 5
Recoleccin de informacin
para el monitoreo
y la evaluacin
Pgina 63
5.1 Muestreo
En muchas ocasiones no es posible obtener la informacin deseada a travs de un censo general de
la totalidad de la poblacin objetivo. Puede ser que
el grupo poblacional sea demasiado amplio o que
los recursos disponibles (humanos, econmicos
[
=
'
cabo. En estos casos, es viable tomar una muestra
representativa de la poblacin total, que permita
generalizar sobre datos o conclusiones obtenidas
del segmento de poblacin seleccionada. La se
=
=
;
'
/``
?
muestra se seleccione de forma imparcial y sea lo
ms representativa y amplia posible, la informacin
=
&&
Por lo tanto, para asegurar un buen muestreo, se
debe (Guijt y Woodhill, 2002):
- Precisar el marco de muestreo: descripcin de la unidad que se estudiar (por ejemplo:
individual, familiar, comunitaria u organizacional).
- Determinar el tamao adecuado de la
muestra: el tamao de una muestra determinar en gran medida la validez de los resultados
de la recopilacin de la informacin. El tamao
de la muestra se debe determinar con base
en el presupuesto y los recursos disponibles,
el tiempo con el que se cuenta y el necesario
para reunir la informacin; el tamao del grupo
Pgina 64
"
=
&
<
;=
el margen de error aceptable para la muestra.
- Seleccionar el mtodo de muestreo: una
vez determinado el tamao de la muestra, se
debe optar por un mtodo de muestreo: aleatorio o delimitado. El muestreo aleatorio consiste
en seleccionar a la poblacin sin conocimiento
previo o delimitacin de las caractersticas representativas de la seleccin. Este tipo de muestreo
=
<
=
leccin de datos ms amplios y no se recomienda
cuando el tamao de la muestra es reducido, pues
=
&
representativo. El muestreo delimitado o intencional (no aleatorio) consiste en seleccionar a la
poblacin con base en criterios determinados.
El muestreo delimitado se emplea ms en ejercicios de recoleccin de datos pequeos. Tiene
la desventaja de no ofrecer la informacin ms
representativa, diversa u objetiva al estar basada
5.2 Categoras
de informacin
Categoras de informacin por tipo
@
?
=
en cualitativa y cuantitativa. La seleccin del tipo de
datos depender de la variable que queremos medir
y el tipo de anlisis que queremos hacer. La informacin cuantitativa es por lo general ms simple y
consiste en datos numricos (como edad o ingreso),
'?
=
(categoras a las que se les puede asignar un valor,
como sexo). La informacin cualitativa es ms compleja y difcilmente se puede reducir en categoras
=
=
respuestas a preguntas abiertas, opiniones a partir de encuestas o entrevistas, etc. (ver Tabla 14).
Anlisis
Cualitativa
Qu? Quin? Cmo? Por qu?
Abiertas
Observacin o dilogo
Pequeo muestreo representativo seleccio
=
W
=
=
necesidades.
Interpretacin
Mtodos
Preguntas
Tipo de preguntas
Interaccin
A quin?
Cuantitativa
Cunto? Cuntos?
Cerradas
Pregunta-Respuesta
Muestreo amplio, seleccionado normalmente
al azar.
Anlisis estadstico
Informacin secundaria, encuestas, observacin, etc.
Informacin secundaria: las fuentes secundarias son la primera fuente de datos que se debe
considerar. Es informacin primaria que fue obtenida, recopilada y publicada por otras personas.
Por lo general, son fuentes documentales, como
;&
;
les, reportes nacionales o internacionales, indicadores sociales y econmicos a partir de encuestas
'
+
'
=
W ;
nerales. Es asimismo una fuente de informacin de
bajo costo, en comparacin con la obtencin de
datos primarios. Sin embargo, en muchas ocasiones las fuentes secundarias no proveen los datos
=
W
?
=
=
X=
general, son datos ms macro y sobre indicadores
ms amplios), y la informacin disponible difcilmente estar actualizada. Por estas debilidades,
y por la necesidad de obtener informacin estrechamente vinculada con el proyecto, las fuentes
secundarias siempre deben ser complementarias
a la informacin primaria.
Informacin primaria: es informacin que se
observa o se obtiene directamente de las personas involucradas o vinculadas a la intervencin,
acerca de su situacin o experiencia directa con el
=
=;
@
sobre circunstancias, opiniones, valores, actitudes,
comportamientos, motivaciones, prcticas, conocimiento y experiencia. Es informacin crucial que
por lo general no est disponible en las fuentes de
informacin existentes y que se debe construir
como una tarea del mismo proceso de MyE. Por
lo general, es informacin de un nivel ms local,
cercano al proyecto.
Pgina 65
Mtodos bsicos
A. Recopilacin de mediciones
Es la medicin fsica de cambios en el tiempo
con relacin a un indicador, mediante el empleo
de una unidad de medida y un procedimiento e
10. La mayor parte del contenido de esta seccin fue tomado del Anexo D de Guijt y Woodhill, 2002. Es un material muy completo
y extenso que detalla ms de 30 mtodos de recoleccin de datos. Se recomienda consultarlo si se quiere obtener ejemplos y
ms informacin sobre tcnicas adicionales.
Pgina 66
@W
=
W =;
dores de proyectos sociales. Otra desventaja es
que puede ser muy costoso y requerir en algunos
casos una alta especializacin tcnica.
B. Observacin directa
Implica la observacin de eventos, sucesos, procesos, relaciones y comportamientos. Antes de la
observacin se debe realizar un anlisis sobre la
informacin que se quiere obtener. Se recomien>
'
=
?
considere los objetivos del ejercicio y los puntos o
=
=
;<
@
la programacin del proyecto. Estos instrumentos
base se pueden retomar en ejercicios de observacin posteriores, para comparar los resultados
en el tiempo. Al tomar como base estas lneas
gua, el observador se ubica en el lugar de inters
y hace anotaciones sobre actividades, procesos,
discusiones, comportamientos, interacciones, productos materiales y cualquier otra observacin
pertinente. Es importante que las valoraciones
hechas sean precisas, enfocadas y lo ms objetivas
posible.Tambin se recomienda que el observador
comparta y analice sus anotaciones y conclusiones
de la observacin con otras personas involucradas, ya sea miembros del equipo de trabajo o los
=
Este mtodo es fundamental para el MyE, porque
@
'
=
"`"
<
pues permite revisar la operacin de un proyecto
mientras est en prctica.Tambin tiene la ventaja
!
=
=
@&
circunstancias cambiantes. Es adems un mtodo
relativamente sencillo, que se emplea fcilmente
sin necesidad de una especializacin tcnica.
Su desventaja es que existe el riesgo de que sea
muy subjetivo o parcial, dependiendo mucho del
lugar, el momento o la poblacin que se decida observar. Igualmente puede ser muy difcil interpretar comportamientos observados o una situacin
ajena al observador. De ah que la observacin
Algunas recomendaciones
para el observador (Bailey, 1995)
- Recuerde que observar va ms all de la vista: es necesario emplear todos los sentidos.
- Hay que observar todo, el contexto fsico, los comportamientos y prcticas: quin viene, quin hace qu, con
quin, cundo, cmo, por qu, patrones, costumbres,
sucesos inesperados, etc.
- Poner atencin al lenguaje no verbal puede ser una
>
<
= =
+
tudes y opiniones de las personas.
- Al anotar sus observaciones, tome en cuenta que el
+
'<
=
mejor forma de lograr esto es a travs de una inmersin profunda en el medio.
C. Cuestionarios y encuestas
Consiste en la obtencin de datos mediante preguntas en cuestionarios entregados a la poblacin.
Las preguntas pueden ser de respuesta cerrada (s
no), o abiertas.Tambin pueden formularse pre;
=
+?
informacin para ser analizada estadsticamente.
Algunos puntos para tener en mente:
- La lista de preguntas en un cuestionario
nunca ser exhaustiva y debe estar abierta
a recuperar informacin adicional, no necesariamente incluida desde un principio.
- Es fundamental que la lista sea empleada
y comparada en momentos distintos del
proyecto para medir el avance.
- Las preguntas son elaboradas de acuerdo a
las necesidades de cada proyecto u objeti'
=
W `
=
?
?
elabore tenga un conocimiento profundo
sobre el tema y est contextualizado con
los procesos del proyecto.
Los cuestionarios y las encuestas se emplean
normalmente para un amplio grupo de personas.
N"<
=
formacin personal que difcilmente se comparte
en una entrevista o un dilogo abierto. La mayor
ventaja de las encuestas y los cuestionarios es
que se puede obtener informacin variada, sobre
temas distintos y de muestras de poblacin ms
grandes. Es tambin informacin fcil de analizar a
costos relativamente bajos, aunque poco profunda o analtica en trminos cualitativos. Por estas
razones es un mtodo fundamental para muchas
estrategias de MyE de proyectos.
Pgina 67
Sin embargo, se recomienda poco su uso en contextos en donde puede haber altas tasas de analfabetismo. Por lo general los cuestionarios emplean
preguntas cerradas, que ofrecen poca informacin
cualitativa y con datos casi siempre descontextualizados. En resumen, se puede obtener una fotografa general de la situacin, pero quiz no se logre
obtener informacin de anlisis ms profundo.
D. Entrevistas
La entrevista es un dilogo con las personas a par
=
;@X
^
previamente, y adaptadas a las circunstancias o al
curso de las circunstancias) para obtener informacin sobre su experiencia o su opinin acerca de
una situacin, problemtica o proyecto. Dependiendo de la informacin que se quiere obtener, las
entrevistas pueden ser individuales o colectivas (en
grupos pequeos o grandes). Si se necesita informacin personal, conviene hacer entrevistas individuales. Cuando son temas que requieren un anlisis ms profundo o incluso conocer percepciones
y actitudes colectivas, las entrevistas grupales son
ms adecuadas. Las entrevistas se pueden hacer a
informantes clave (personas muy involucradas, que
pueden tener una percepcin y una experiencia
'
[
ganizaciones, equipo encargado del proyecto, etc.
`>
<
=
@
reducir las posibilidades de una interpretacin
subjetiva (aunque siempre existe el riesgo de un
sesgo por parte del entrevistador). Asimismo,
=
@
=
W ?
siempre se puede obtener por otros medios, adems de que la informacin de las entrevistas suele
ser de mayor profundidad al ser un proceso que
@
&;=
^
Las desventajas de las entrevistas es que requieren
mucho tiempo y pueden ser bastante costosas
"
>
Finalmente, por lo general la informacin obtenida
es muy valiosa pero difcil de analizar.
Pgina 68
Tipos de entrevistas
- Estructuradas: entrevista tradicional basada
en una lista de preguntas preestablecidas para
ser respondidas por los entrevistados. Tiene la
'
+
?
@
lizacin oportuna de la entrevista sin desviarse
+
'
;
=
!
al no permitir al entrevistador explorar otras
respuestas alternativas o conocer perspectivas
diferentes sobre una misma problemtica. Puede
tambin dar la impresin al entrevistado de estar
sometido a una evaluacin muy mecnica, lo
?
;
^?
puede desalentar la participacin.
- Semiestructuradas: son menos formales
que las entrevistas estructuradas, se caracte
^==
&
!
del ejercicio y presentar preguntas abiertas,
?
;
&;
& ^
apertura y facilita aportes alternativos. La preparacin de este tipo de entrevistas requiere
=
;;
les, para posteriormente ir desarrollando las
=
;
=
W
'
recomienda que las preguntas sean sencillas, se
inicia con las ms fciles y se termina con las
ms complicadas o sensibles. Con este tipo de
entrevistas se obtiene informacin focalizada
sobre un tema, sin ser excluyente de visiones
o perspectivas alternativas. Es posible asimismo
obtener informacin variada en poco tiempo.
- Entrevistas temticas: antes de la entre'
@<
;W
=
W ?
?
preguntas se van formulando conforme se desarrolla la entrevista, en funcin de la respuesta
de la persona o grupo. Su desventaja es que
es ms difcil obtener datos que sirvan para
un anlisis estadstico sobre el conjunto de la
poblacin, pues cada entrevista se adapta a las
circunstancias y no se tiene una informacin
=
W
=
E. Grupos focales
` " ?
<
;=
de personas (entre 6 y 12) para entrevistarlas
@
&;
de la tcnica de entrevistas como una entrevista
grupal. El facilitador del grupo focal debe tener
preparado previamente una gua de preguntas o
de temas (dependiendo si se seguir un formato
de entrevista estructurado o semiestructurado).
Las preguntas se hacen con la intencin de fo
=
W
=
;
&
<
?
entrevistador, en vez de tomar notas, grabe el
ejercicio y despus lo transcriba.
La seleccin del grupo de personas depender
de las necesidades o intereses del recolector de
informacin, pero por lo general tendrn cier
W
<='
&
!;
;&
;=@
@<
de saber la opinin y percepcin de una muestra
amplia de gente (representada por el grupo seleccionado). Asimismo, el hecho de poder separar a las personas involucradas en el proyecto en
grupos diferentes puede generar respuestas que
normalmente no habramos obtenido.
"
?
@W
;
un muestreo aleatorio, por lo que los resultados
son difcilmente generalizables. Otro problema
tiene que ver con la parcialidad de los resultados,
=
<?
;=
;=@
=
para decir o callar algo.
Pgina 69
Pgina 70
Mtodos complementarios
F. Anlisis de acontecimientos crticos
Es un mtodo que implica hacer entrevistas a individuos o grupos sobre eventos o incidentes espec
@
;
=
W `
;
exhaustiva que implica cruzar y comparar varios
resultados de entrevistas a partir de un mismo
acontecimiento. Este mtodo sirve fundamentalmente para lograr dos objetivos: por un lado,
&
;
'
en un periodo determinado y con relacin al proyecto implementado; por otro lado, nos permite
conocer en profundidad un caso seleccionado, lo
cual ayuda a encontrar la relacin causaefecto
que existe entre los acontecimientos estudiados y
la intervencin de nuestro proyecto. Es por tanto
>
<
=
a nivel de impacto.
Las desventajas de este mtodo es que requiere
mucho tiempo y recursos, y adems la informacin
puede ser muy difcil de analizar. Tiene el riesgo
de que el equipo encargado del anlisis del caso
se sature de informacin detallada y contradictoria de distintas perspectivas. Asimismo, es difcil
mantener la objetividad y no tomar una posicin
respecto al acontecimiento estudiado.
H. Diarios
El objetivo de un diario es obtener datos, eventos,
reacciones y opiniones en el tiempo a partir de
los registros de personas o grupos involucrados
en el proyecto. Desde el MyE es una herramienta de mucha utilidad, porque permite obtener
informacin detallada para entender el contexto
y las razones detrs de los procesos de cambio.
El diario se comienza a desarrollar desde el inicio
del proyecto. Como paso preliminar se debe planear su forma y su enfoque, as como la persona
o personas responsables de llevarlo. Un diario
puede ser estructurado (enfocarse en un indi
=
W [&=
X
generales). Las entradas del diario pueden incluir
descripciones escritas, fotografas, video, diagramas, etc. Los diarios se pueden escribir tambin
a partir de una reunin o discusin grupal. El
anlisis de los cambios o efectos en el tiempo se
hace al revisar las entradas pasadas y comparar
con las ms recientes.
`
"<
libertad de elegir cundo y cmo se registra la
informacin. Es un buen mecanismo para la autoevaluacin; sin embargo, llevar un diario requiere mucha disciplina (para cumplir con el registro
de entradas con una periodicidad determinada),
as como una buena capacidad de redaccin. El
anlisis de los diarios requiere adems una lectura
enfocada y muy analtica de los registros, lo cual
puede demandar mucho tiempo. Por esto se re
=
=
el tipo de informacin que se incluir y sistematizarla en el diario de forma ordenada (Guijt y
Woodhill, 2002).
Pgina 71
Pgina 72
Caracterstica principal
Ventaja
Desventaja
- Permite al observador
acercarse a conocer la - Es difcil combinar los
El observador se involucra en las
vida cotidiana o la expe- procesos de observaactividades y en el contexto en
riencia de un grupo en cin y de participacin.
vez de mantener su distancia.
relacin con el proyec- - Es un proceso que toma
to, desde el interior del tiempo.
mismo grupo.
C. Lista de control de
preguntas/ Cuestionarios
- Se puede obtener infor- - Los cuestionarios emmacin variada, sobre plean preguntas cerraSerie de preguntas que pueden
temas distintos y de das, pueden obtener
ser empleadas como gua para
muestras de poblacin poca informacin cualientrevistas, conversaciones informs grandes.
tativa y poco contextuamales o cuestionarios.
- Informacin fcil de ana- lizada.
lizar a costos relativa- - No se obtiene informamente bajos.
cin muy profunda.
H. Diarios
I. Monitoreo
!"
o de video
J. Reportes del
proyecto
- Es un mtodo econmico.
- Puede emplearse para
Consiste en realizar una excurobtener tanto informasin planeada en una determinacin cualitativa como
^;
;& =
' cuantitativa.
ciertos indicadores.
- Se puede obtener informacin difcilmente accesible por otros mtodos.
- Permite obtener
informacin al detalle
?
=
<
=
Registro de datos, eventos,
entender el contexto
reacciones y opiniones en el
y las razones detrs de
tiempo a partir de las entradas
los procesos de cambio.
redactadas por personas o gru `"<
pos involucrados en el proyecto.
accesible.
- Es un buen mecanismo
para la autoevaluacin.
- Se puede combinar
fcilmente con otros
mtodos.
Permite revisar los cambios a
<
=partir de una serie de fotografas
trar la situacin antes y
o videos tomados en diferentes
despus del proyecto.
momentos.
- Sirve tambin como
'
o para la rendicin de
cuentas con el donante.
Reportes basados en un formato - Es muy accesible, al
=
W
=
ser una extensin del
guntas, todas dirigidas a evaluar
trabajo cotidiano.
los indicadores correspondientes - Por lo general, es muy
a los resultados y objetivos de un
econmico y no requieproyecto.
re demasiado tiempo.
Pgina 73
- Depende mucho de
que los encargados del
proyecto en campo
sean muy disciplinados y
recojan los datos sistemticamente, de forma
analtica y objetiva.
incentivar el dilogo o lograr un anlisis ms profundo sobre una problemtica o proyecto en diversos momentos: en la etapa de diseo del proyecto,
en el monitoreo, en la evaluacin o en el anlisis
de la informacin. Algunas de las tcnicas de VPR
se mencionan brevemente a continuacin11.
Tcnicas de anlisis
- Anlisis FODA: se discuten en grupo las for
^
X
[ W
oportunidades y amenazas (externas) en relacin
11. Para informacin ms detallada y ejemplos concretos de estas tcnicas, ver Guijt y Woodhill, 2002 o Department for International
Development [DFID], 2002.
Pgina 74
Oportunidades
'
Amenazas
Alta Importancia/
Bajo Poder
Alta Importancia/
Alto Poder
* ACTOR A
* ACTOR B
Baja Importancia/
Bajo Poder
Baja Importancia/
Alto Poder
Diagramas
- Diagrama de Venn: Es una herramienta empleada para ilustrar las relaciones entre diversos
actores, organizaciones, proyectos, servicios o
instituciones vinculadas con la intervencin:
Pgina 75
@
?
<
W
portancia o poder relativo de cada uno (ver
_
;[`"
=
<
=
comprobar cambios en las relaciones de poder
=
=
?
?
&
atencin. Para realizarlo, en primer lugar se
dibuja un crculo con el tema/proyecto central.
Se pide al grupo de participantes que hagan
una lista de los grupos, personas, organizaciones o instituciones relacionadas con el crculo
central. Para cada uno, se dibuja un crculo: el
tamao deber ser acordado por los participantes de acuerdo al poder o importancia que
tengan los actores, y la proximidad entre los
crculos determinar el nivel de interaccin.
Los crculos que se superponen representan
funciones compartidas y los crculos dentro
de otros representan unidades en grupos u
organizaciones ms grandes.
Lider de
la comunidad
Escuelas
primarias
Gobierno
Estatal
Iglesia
Junta de
Padres
Educacin
Tradicional
Alumnos
Pgina 76
Tcnicas de jerarquizacin
- Matriz de puntuacin: permite hacer una
comparacin entre distintas opciones o soluciones a un problema y hacer un anlisis sobre la
^=
=
=
la otra. Se hace una matriz y se insertan en
=
prioridad. Se discute con el grupo las venta+
'
+
=
de determinar los criterios que servirn para
comparar las diversas posibilidades. Cada criterio se ubicar en las columnas de la matriz y
se establece una puntuacin mxima para cada
=
;
&
+
capacidad de la solucin para cumplir con el
`
+
'>
partir de la comparacin de cada alternativa y
se anota en la tabla la puntuacin para cada una.
- Escalas de valoracin o de preferencias: se
establece un parmetro en el cual las personas
deben ubicar sus opiniones, percepciones o
sentimientos sobre un tema. Por ejemplo, se
=
;
?
&
de acuerdo, de acuerdo, no saben, en desacuerdo
cin. Tambin se puede enumerar una serie de
elementos (por ejemplo: causas de un problema o soluciones del mismo) y pedir que cada
persona los enliste por orden de importancia.
Para llegar a una conclusin grupal, se pueden
resumir los elementos a los que en promedio
se les dio mayor o menor importancia. Esto
permite incentivar el dilogo y conocer en ms
profundidad las razones detrs de la valoracin.
Mapas
- Bosquejo de mapas comunitarios: es una
"
<
=
'
=
@W
;
;&
;=
de acuerdo a la percepcin de las personas
involucradas. Consiste en pedir a las personas
que hagan un dibujo de una determinada ubi
;
;&
Otras tcnicas
- Lluvia de ideas: es una tcnica que consiste en pedir a las personas de un grupo que
piensen tantas ideas como sea posible acerca
=
W `
'
en un lugar visible. Posteriormente, las ideas,
temas o preguntas pueden agruparse o priorizarse, para analizarlas de forma general. Es
importante aclarar desde el inicio del ejercicio
que no se trata de un anlisis profundo, para
evitar juicios de valor sobre cada idea que surja.
Por lo general, esta tcnica se emplea al inicio
de otras actividades para generar discusin y
&;=
'
`
"
<
=
obtener una gran cantidad de informacin de
un grupo sin enredarse en una discusin muy
detallada. Adems, incentiva la creatividad de
los participantes.
- Juego de roles: dinmica en la que un grupo de
=
=
'
cotidiana respecto a problemticas, percepciones o temas relacionados con la intervencin
del proyecto para luego discutirlas con el mismo grupo. La dramatizacin debe ser construi
==
facilitador debe registrar el ejercicio de forma
Pgina 77
focales o juegos de roles) o adaptar los mtodos
(por ejemplo, usando smbolos o imgenes en lugar
de palabras escritas). Adems del contexto, es muy
formacin que se quiere obtener, para seleccionar
el mtodo adecuado y para considerar el nivel de
sensibilidad sobre ciertos temas.
Recomendacin
Se recomienda hacer un profundo anlisis previo a la
seleccin de la tcnica de recoleccin de datos, considerando las posibilidades, las necesidades de informacin y el contexto.
Se puede reducir este riesgo, asegurando que el entrevistador y los involucrados conozcan los objetivos
Sesgos del entrevistador: el entrevistador puede fcilmente indel proceso y valoren su importancia para el proyecto.
=
;
'
Asimismo, previo a la recoleccin de datos, se pueden
X
=
=
'
practicar las tcnicas de entrevista y de facilitacin paa travs de su lenguaje verbal o no verbal) o de forma deliberada
ra estar mejor preparados. Otra estrategia es enlistar
(cuando el entrevistador es tambin responsable del desempeo
con anterioridad todos los posibles problemas que se
del proyecto y tiene un inters en los resultados del MyE).
podran presentar y proponer formas de evitarlos o
solucionarlos.
Sesgo de los Entrevistados:
- Se recomienda plantear preguntas abiertas y mez- El sesgo de la empata: al estar en un contexto muy posiclar preguntas positivas y negativas para evitar el
tivo, en una situacin muy amable, puede ser que la poblacin
sesgo de la empata.
evite decir cosas crticas.
- Garantizar el anonimato y la promesa, con lo cual
- Autocensura: no explicarse libremente por temor a que se
se evita la autocensura del entrevistado.
perciba como un riesgo.
Se recomienda procesar la informacin reunida y
Errores en el procesamiento de la informacin: muchos
vaciarla inmediatamente despus del ejercicio de
de los problemas en la calidad de la informacin se deben a un
recopilacin de datos. Adems, es muy recomenda
;
'
&
ble tener formatos estandarizados para la docucuidados de los resultados o a fallas en las herramientas empleamentacin, probarlos y adaptarlos previamente si
das para vaciar la informacin.
es necesario.
Fuente: Elaboracin propia con informacin de Guijt y Woodhill, 2002.
Pgina 78
car los datos obtenidos peridicamente. Puede ser til
de recoleccin de datos, por ejemplo, cuando:
- No se perciben problemas (en la mayor parte de los
casos, los problemas sern inevitables y el no reportarse puede ser seal de alguna inconsistencia).
- Los datos son demasiado precisos.
- Se presentan grandes cambios de forma repentina.
- Hay vacos de informacin.
?
=
=
con una metodologa rigurosa y pertinente de
acuerdo a las necesidades de informacin. Los
=
leccin de una muestra representativa y de la
unidad de anlisis adecuada.
- Validacin de la informacin: los datos
obtenidos con un mtodo de seguimiento, se
'
@
mtodo.
- Triangulacin de las fuentes: para asegurar
la calidad de la informacin, es muy importante
contar con diferentes fuentes, con distintos
tipos de mtodos e informantes diversos, para
obtener una visin completa de la situacin.
- Combinar datos cuantitativos con informacin cualitativa: esto facilita el anlisis,
pues permite explicar, a travs de la informacin cualitativa, algunos de los resultados que
se obtienen con los datos cuantitativos.
esto es fundamental para asegurar la pertinencia de los
mtodos y de la informacin obtenida.
- Capacitacin y preparacin de quienes
participan en la recoleccin: los encuestadores y entrevistadores deben estar capacitados para hacer bien su trabajo. Previo al
ejercicio de recoleccin de informacin, se
recomienda tener preparados los apoyos materiales (formatos y bases de datos para guardar
la informacin) y de capacitacin, asegurando
que todos tengan las herramientas necesarias
- Flexibilidad en la revisin de indicadores:
conforme se desarrolle el proyecto, ser necesario revisar las necesidades de informacin y los
indicadores formulados en un inicio. Es nece
!
'
o eliminar aquellas que ya no sean relevantes.
Captulo 6
Anlisis y empleo
de la informacin
6.1 Sistematizacin
y organizacin de datos
Los datos pueden ser sistematizados de diversas
maneras, dependiendo de la tcnica de recoleccin
que se haya empleado (por ejemplo, algunas quiz
requieran llenar formatos, otras podrn requerir
grabaciones o notas detalladas). Es importante
determinar desde un inicio cmo se registrarn
los diversos datos, de forma que puedan compararse y analizarse fcilmente. Adems de saber
cmo recopilar datos, el personal debe saber cmo registrar la informacin obtenida. Para esto
se recomienda llevar a cabo una capacitacin que
prepare al personal para vaciar los datos y manejar
>
=
en dnde se almacenar la informacin de tal forma que se guarde en un lugar seguro y accesible.
Una vez que los datos hayan sido reunidos, se
;
^
@
=
W
datos electrnicas. Esta organizacin de la infor
<
==
=
@macin distinta: cuando se quiere pasar de una
unidad de anlisis mayor a una ms pequea o
para homogeneizar informacin proveniente de
distintas fuentes y recopilada a travs de distintos
mtodos. En los formatos se vaca la informacin
por unidades de anlisis, que pueden ser valores de
medicin o valores asignados a los distintos datos
cualitativos. Una vez organizada bajo categoras o
unidades, la informacin puede resumirse en tablas
Pgina 81
12. Esta seccin est en su mayor parte basada en los captulos 7 y 8 de Bakewell et al., 2003, Sharpening the Development Process: a
Practical Guide to Monitoring and Evaluation. Oxford, UK: International NGO Training and Research Centre (INTRAC).
Pgina 82
pretada en hojas de clculo con el apoyo de programas como Microsoft Excel, EPI-INFO o SPSS.
Consideraciones importantes
para el anlisis de datos
- El anlisis de la informacin debe hacerse en todos
los niveles, desde el lugar de implementacin del pro
>
;
^
- Asegurar, en la medida de lo posible, que las personas
involucradas en la recoleccin de informacin estn
involucradas tambin en el anlisis (si las personas
?
<
@
=
&
;<
"
;?
; [
- El anlisis debe ser participativo e involucrar tanto al
equipo responsable de la ejecucin del proyecto co
`&
=
?
>
!=
!
=
'
- El anlisis debe hacerse de forma regular, de preferencia despus de la recoleccin de datos, para permitir una mayor compresin sobre el desarrollo del
proyecto.
- La informacin no debe manipularse para producir
resultados correctos.
` &
+
=
=
'
!
=
W
X=
+
=
?
;
xito o un fracaso pueden variar sustancialmente
desde distintos enfoques).
Categoras de anlisis
Existen dos tipos distintos de anlisis de la informacin, el cuantitativo y el cualitativo.
Anlisis cuantitativo: consiste en la interpreta
u otros valores numricos, que son analizados
a partir de operaciones sencillas como sumas,
porcentajes y promedios o por medio de mto
W
&
{=
comprobar la relacin entre distintas variables. Se
recomienda mantener el anlisis cuantitativo lo
ms sencillo posible para asegurar la exactitud y
` ?
la informacin cuantitativa puede ser fcilmente
organizada en distintas categoras, cruzada e inter-
Entre la gran cantidad de datos, es posible encontrar mucha informacin interesante. Para no
perderse entre tanta informacin, es importante
@
?
=
W mente con los objetivos del MyE. Esto se logra
revisando la evidencia de cambio para cada uno
de los indicadores.
Adems de revisar los datos sistematizados y organizados, se recomienda regresar a las fuentes de
'
X
;;
fotografas, etc.), que pueden dar ms informacin sobre puntos que no quedan claros con la
informacin disponible.
Existe tambin la posibilidad de traducir la informacin cualitativa en datos cuantitativos. Esto se
hace asignando un valor numrico a las respuestas
=
;
?
;
^
a partir de un anlisis cualitativo previo.
Ejemplo de asignacin de valores cuantitativos
datos cualitativos:
Pregunta: En dnde ha percibido un mayor impacto a partir
del apoyo crediticio?
En el ingreso
En la educacin
En la salud
No ha habido impacto
Valor asignado
+1
+1
+1
- 1
Pgina 83
=
=bles de los cambios.
Adems de las recomendaciones para el proyecto,
las conclusiones del anlisis pueden arrojar tambin recomendaciones ms generales y buenas
=&
<
=
=
metodologas o contextos similares.
Pgina 84
Rendicin de cuentas
La rendicin de cuentas hacia arriba (a los directores de la organizacin o a los donantes) es por
;
+
'& <
/`=
muchas veces es requisito para dar continuidad
al proyecto. Sin embargo, es importante que la
rendicin de cuentas sea tambin hacia los involu
=
`
forma natural en los procesos de MyE participati'
@
?
hagan su propio anlisis, den recomendaciones al
proyecto, e implementen los cambios sugeridos
en la evaluacin.
Mejorar el desempeo
Unos de los objetivos principales de las evaluaciones es el de capacitar a las organizaciones y a las
personas para que aprendan de la propia experiencia con miras a mejorar el rendimiento en el
futuro. Para esto, las recomendaciones de cambio
surgidas deben analizarse, difundirse y ponerse en
prctica. La implementacin de los cambios puede
ser un proceso difcil, pues requiere un alto nivel
de introspeccin y autocrtica por parte de los
responsables del proyecto.
Algunas preguntas gua para facilitar este proceso
son:
- Quin es responsable de implementar los
cambios? Quin debe aprobar estos cambios
dentro de la organizacin? Se requiere aprobacin del donante?
- Cmo se dar seguimiento a los cambios?
Pgina 85
Esto permitir que la organizacin pueda continuamente mejorar su capacidad de alcanzar objetivos y metas y logre satisfacer las necesidades
!=
'
dems involucrados. Si esto no ocurre, se corre el
riesgo de malgastar los recursos, repetir los mismos errores y no aprender de la experiencia para
mejorar el desempeo y fortalecer la organizacin.
Actualmente hay diferentes factores que afectan
los procesos de aprendizaje de las actividades de
MyE al interior de las organizaciones. Veamos:
%
=
+
@
cuando puede poner en riesgo la continuidad
de los proyectos o las probabilidades de apro
'
- Limitada cultura de evaluacin, al no reconocer
las ventajas del MyE para el proyecto o para la
organizacin.
- Debilidades organizativas, como la falta de estandarizacin de los procesos de MyE, la alta rotacin de personal o priorizacin de las
acciones cotidianas, y poca inversin de tiempo
o recursos para la planeacin del MyE.
Aprendizaje
Responsabilidad
(dirigentes, coordinadores,
directores de proyecto)
Fecha lmite
(3 a 6 meses, 1 ao)
Pgina 86
;X@W
[
- Aplicar el aprendizaje: solo cuando las
lecciones son realmente tomadas en cuenta e
implementadas, se puede alcanzar un proceso
de aprendizaje continuo.
- Aprendizaje compartido: las lecciones que
pueden funcionar para la propia organizacin
muy probablemente podrn ser de utilidad para
otras organizaciones, y viceversa.
Comunicacin y difusin
Los resultados (positivos o negativos) de todo el
proceso de MyE deben ser difundidos entre diversos actores directa o indirectamente involucrados
en el proyecto, para asegurar la implementacin
y continua retroalimentacin de aprendizajes. La
adecuada difusin de los resultados es fundamental
para optimizar el valor agregado del MyE. No existe solo una forma para desarrollar una estrategia
^
X'
Y#[=
puede guiarse por algunas preguntas bsicas:
-
"
=<
/`
&
@
&=
<
para compartir?
- Cul es la m
+
=
;=<
Las estrategias y mensajes de comunicacin, que
van desde boletines informativos, reuniones de
dilogo y talleres hasta la difusin en materiales
impresos, dependern del tipo de audiencia:
-
Sede
Coordinadores y
principal equipo del proyecto
X
X
X
x
X
X
X
x
Otras
ONG
Donantes
Involucrados/
;
X
X
Captulo 7
Monitoreo y evaluacin
en proyectos de incidencia
y de emergencia
En esta seccin revisaremos algunas consideraciones importantes del MyE para proyectos de
campaas e incidencia y proyectos de atencin
a la poblacin en situacin de emergencia. El
anlisis de estas intervenciones es relevante, pues
representa dos extremos de la cooperacin internacional, uno de ayuda inmediata y otro de
atencin de las causas estructurales de problemticas sociales. Adems, por su propia naturaleza,
son intervenciones generalmente ms difciles de
monitorear y evaluar e involucran procesos de
MyE distintos a las intervenciones tradicionales.
Sin embargo, dada su relevancia y generalizacin,
es fundamental medir los avances y el impacto de
este tipo de iniciativas.13
Pgina 89
13. Esta seccin se basa en su mayor parte en dos publicaciones de INTRAC: Captulos 9 y 11 de Bakewell Adams y Pratt, 2003, y
el documento de OFlynn 2009, as como de A Guide to Measuring Advocacy and Policy de Reisman, Gienapp y Stachowiak,
2007. Aqu se desarrolla tan solo de manera breve el tema de MyE en proyectos de incidencia y de emergencia, por lo que se
recomienda consultar estas fuentes para ms informacin, as como los recursos adicionales electrnicos adjuntos a este manual.
Pgina 90
Diferencias en el diseo
de la inter vencin
La labor de monitorear y evaluar el trabajo de
incidencia es compleja, sobre todo al disear un sis
/`
<
'
^
- El diseo de objetivos claros puede resultar
ms complicado que para otro tipo de proyectos. Esto es especialmente cierto en el caso
del diseo de objetivos intermedios o de corto
plazo, pues por lo general aparecen como logros de proceso y no de impacto.
- Las estrategias de incidencia no se adaptan fcilmente a la matriz de marc lgico, ya que la relacin entre actividades, resultados y objetivos
no es tan directa al depender de otros (aliados,
grupos objetivo de la incidencia, sociedad civil,
medios, etc.).
- Si bien puede emplearse tambin la metodologa de marco lgico, la lgica de intervencin
> &
!
objetivos de incidencia de una campaa son
revisados y adaptados de forma ms frecuente
que en otro tipo de intervenciones.
- A diferencia de proyectos de desarrollo, que
son generalmente apoyados por la mayor parte
de los involucrados, los proyectos de incidencia,
por su propia naturaleza, parten del supuesto
de que habr oposicin abierta a sus objetivos.
=
?
;
^
+
'
^
determinado momento, puede ser completamente irrealizable poco tiempo despus.
- Los impactos en muchas ocasiones son ms
difciles de medir, pues los cambios deseados
suelen ser en un nivel mucho ms amplio (mayor poblacin, varios territorios, etc.), y por lo
tanto ms costosos de monitorear y evaluar
en trminos de recursos y tiempo.
- Por lo general, es difcil contar con informacin de lnea base (por ejemplo, para un tema
polticamente sensible es ms difcil tener informacin sobre las posiciones u opiniones de
=
?
ir.
- Mientras que los objetivos de proyectos tradicionales son formulados como un logro de
progreso, los objetivos de incidencia pueden,
en ocasiones, formularse en trminos de defensivos (por ejemplo, evitar que pase una ley
que atenta contra la seguridad alimentaria de
la poblacin).
<
+
'
intangibles y por lo tanto ms difciles de me-
Pgina 91
Pgina 92
/
=<
=- Porcentaje de personas que conocen la problemtica,
&
=W
=<
porcentaje de personas que conocen las propuestas de
relacionadas.
la campaa.
- Cambio en la percepcin sobre el proble2. Sensibilizacin y - Cantidad registrada de acciones colectivas.
ma (se considera positivo o negativo, se
participacin de - Cantidad registrada de acciones individuales.
conocen riesgos, se le da mayor importanla ciudadana
<
W
=
?
cia, etc.).
favor de las demandas de la campaa.
- Mayor conocimiento de las propuestas y
<
=
= ={
objetivos de la campaa.
<
;
^
'
=
^
- Mayor disposicin de la ciudadana a actuar
de la campaa.
para incidir en las polticas gubernamentales.
<
=<
ante instancias gubernamentales.
- Nivel de comunicacin y colaboracin con funcionarios
=<
=
&;~ =
=
=
={=
enviar el mensaje correspondiente a las autoridades.
- Desarrollo de polticas o leyes
<
;
?
==- - Adopcin o cambios en polticas o leyes
2. Incidencia en
puesta
- Implementacin de polticas o leyes
gobierno
- Cambio en percepciones y opinin, en porcentaje, de
- Observancia de polticas o leyes
=
@'
+
'
- - Incremento o redistribucin de presupuesdencia
tos
- Investigaciones, diagnsticos e informes entregados, propuestas presentadas a instancias de gobierno.
W
?
=W
nuestras demandas
- Nivel de colaboracin y coordinacin con
aliados (reuniones, estructura, rol de la di <
=
=
reccin, rol de la propia organizacin en
- Fortalecimiento de las capacidades de cada organizala alianza, participacin activa de todos los
3. Generacin o
cin y de la alianza en su conjunto
miembros, etc.).
fortalecimiento
- Logros conjuntos en acciones de concientizacin so- Capacidad para alinear esfuerzos (coinde alianzas
=
=<
cidencia de prioridades y objetivos; re
=W
=<
particin de actividades; acuerdo sobre el
trabajo que corresponde a cada quien; negociaciones, cabildeo y actividades de incidencia realizadas en conjunto).
- Nivel de colaboracin y coordinacin con aliados (reuniones, estructura, rol de la direccin, rol de la propia <
=
=
organizacin en la alianza, participacin activa de todos tema
3. Generacin o
los miembros, etc.).
- Fortalecimiento de las capacidades de cada
fortalecimiento
- Capacidad para alinear esfuerzos (coincidencia de
organizacin y de la alianza en su conjunto
de alianzas
prioridades y objetivos; reparticin de actividades;
- Logros conjuntos en acciones de concienacuerdo sobre el trabajo que corresponde a cada
tizacin sobre un tema, cambios en la opiquien; negociaciones, cabildeo y actividades de inciden
=<
=W
=<
cia realizadas en conjunto).
Fuente: Elaboracin propia con informacin de Reisman et. al, 2007.
Establecer unidades
o niveles de evaluacin
La incidencia involucra e impacta a diversos ti=
X?
&
=
W
;
=-
Pgina 93
Pgina 94
;
=
polticos por parte de actores locales (lo que
=
[
15. Muchos proyectos de emergencia, incluyen tambin componentes de prevencin o gestin de desastres y reconstruccin de
medios de vida. Estas intervenciones pueden considerase ms similares a proyectos de desarrollo tradicionales, por lo que las
W
/`
;
=
`
=W
'
=
W
tres, y no a proyectos de prevencin o gestin de riesgos o de restitucin de medios de vida.
Pgina 95
>
cin de raciones alimentarias
(secas o hidratadas) sobre las
estrategias de supervivencia y
de adaptacin de la poblacin
meta?
Monitoreo de proyectos
de emergencia
La primera etapa del monitoreo consiste en reportes situacionales, en donde se describen cambios en
la situacin general, las actividades del proyecto y
Pgina 96
<
=
N
'
<
porte.
- Cambios en el plan del proyecto y razones de
estos cambios.
Es muy probable que estos reportes sean ela
=
=
embargo, la participacin debe ser considerada
;<
=yecto, por ejemplo levantando encuestas entre
la poblacin sobre la calidad y los efectos de la
intervencin. Otro aspecto que debe cuidarse con
especial atencin en proyectos de emergencia es
` >
ocasiones, ante la situacin de urgencia y la relativa disponibilidad de recursos, los controles
!
^
< ?
existan vacos de informacin sobre cmo se ha
gastado el recurso.
Evaluacin de proyectos de
emergencia
En este tipo de proyectos de corto plazo es mucho
ms difcil hacer una distincin entre los procesos
de monitoreo y los de evaluacin. Por lo general,
'
>&>
vencin. Los objetivos de la evaluacin son los mismos que en otro tipo de proyectos, con grandes
posibilidades de aprovechar el aprendizaje para
futuras situaciones de emergencia. En este caso,
'
X
= =
[
reformulados para adaptarlos a las necesidades
de evaluacin en circunstancias de crisis.Veamos:
Pgina 97
Referencias
Pgina 98
and How to Monitor and Evaluate Advocacy Projects and Programmes. Oxford UK: INTRAC.
Ortegn, E., Pacheco, J.F y Prieto, A. (2005). Meto;W
;
= =
el seguimiento y la evaluacin de proyectos y
programas. rea de proyectos y programacin
de inversiones, CEPAL. Santiago de Chile: ILPES,
Instituto Latinoamericano y del Caribe de Plani
`
OXFAM (1995).A Basic Guide to Evaluation for Development Workers. UK.
PNUD, Programa de Naciones Unidas para el Desarrollo (1997). Who are the Question-makers?
A Participatory Evaluation Handbook. [En lnea].
Disponible en: http://www.undp.org/evaluation/
documents/who.htm [Consultado: 12 de agosto
de 2010].
PNUD (2009). Handbook on Planning. Monitoring
and Evaluating for Development Results. Nueva
York
Reisman J., Gienapp, y Stachowiak, S. (2007). A Guide to Measuring Advocacy and Policy. Maryland:
EEUU: Annie E. Casey Foundation
Robson C. (1993). Real World Research: A resource
for social Scientists and Practitioner Researchers.
Oxford UK: Blackwell.
Shapiro, J. (2003). Monitoring and Evaluation. CIVICUS.
United Nation Educational, Scientifc and Cultural
Organization [UNESCO], 2009).A guide for monitoring and evaluating comunity-based projects.
Paris: Autor.
Tassara C. (2010). Formulazione e gestione dei progetti nella cooperazione internazionale. Roma:
Associazione delle ONG Italiane.
UNICEF (1990). Monitoring and Evaluation Guide.
USAID, United States Agency for International Development, Centre for Development Information
and Evaluation (1996). Performance Monitoring
and Evaluation: TIPS.
Anexos
Pgina 101
Anexo I.
Glosario
16
Actividad: accin realizada, utilizando varios medios (fondos, materiales, recursos humanos, etc.),
para generar determinados productos. El conjunto
de las actividades sintetiza lo que se quiere realizar
durante el proyecto.
<"
comparacin entre
los costos de la inversin y operacin y los be
=
inversin en una determinada intervencin.
Anlisis de estrategias: apreciacin crtica de
las diferentes posibilidades para conseguir los
objetivos, y seleccin de una o ms de ellas para
incluirlas en el proyecto.
Anlisis de gnero: anlisis de las posibles diferencias en el impacto de un proyecto sobre mujeres y hombres. Se focaliza en los papeles diferentes
(produccin, reproduccin, decisin) de la mujer y
del hombre; en el acceso diferencial a los recursos
~
=
W
intereses y problemas; en los obstculos para la
plena y equitativa participacin de las mujeres y
los hombres en la realizacin de actividades y en
Anlisis de objetivos:
'
=
'?
rios y las partes interesadas consideran prioritarias y que deberan lograrse con la realizacin del
proyecto. El producto de un anlisis de objetivos
es el rbol [jerarqua] de objetivos.
Anlisis de las partes interesadas: implica la
;=
=
de ser afectados (de manera positiva o negativa)
==
~
&
sus intereses, problemas potenciales, y otros. Sus
Aprendizaje:
!
!=
=ra ver el modo de mejorar una situacin o las
acciones futuras y utilizar este conocimiento para
introducir mejoras efectivas. Puede basarse en un
ejercicio individual o de grupo.
Auditora: actividad de control independiente
y objetiva que averigua si, y en qu medida, los
procesos, directivas y prcticas organizativas estn
conforme a las normas y criterios previamente
establecidos. Ayuda a una organizacin (o a un
proyecto) a lograr sus objetivos aportando un
enfoque sistemtico para evaluar y mejorar la
;
;
procesos y procedimientos internos.
;
quienes (individuos, grupos u
;
^
[
tamente, de la realizacin de un proyecto, hayan
sido o no sus destinatarios explcitos.
Ciclo de proyecto: secuencia de las seis fases de
un proyecto desde la idea inicial hasta su cumpli
=;
+
'
_
dinmica orientada a la consulta de las partes in
'
las necesidades informativas y las responsabilidades. Se apoya en la evaluacin para aprovechar las
lecciones aprendidas y utilizarlas en el diseo de
los nuevos proyectos.
Coherencia: conformidad con las polticas, lneas
;W =
=
una institucin.
16. Tomado de Gosparini et al., 2004, OECD/DAC 2002, y Anexo A de Guijt y Woodhill, 2002.
Pgina 102
Anexos
Pgina 103
Pgina 104
Anexos
Pgina 105
Anexos
Pgina 107
Anexo 2.
Formatos de monitoreo y evaluacin
Matriz de Sistema de MyE
Pregunta de
desempeo
Necesidades de
Mtodo de
Formularios, capaciIndicadoPeriodici- Responinformacin de recoleccin de
tacin, conocimienres
dad
sable
lnea base
datos
tos tcnicos, etc.
Objetivo General:
+
'`=
W
Resultado 1:
Adaptado de Guijt I. y Woodhill, J. (2002). Gua para el Seguimiento y Evaluacin de Proyectos. Gestin orientada al
impacto en el desarrollo rural. Roma: IFAD.
Muestra
A quin se va a
interrogar?
Tomado de: Smith, J. (2009). On Target: A Guide for Monitoring and Evaluating Community-Based Projects. Paris:
K`K
`
;
^
Pgina 108
I. Resumen ejecutivo
Nmero de pginas: 5-6
`
+
'
=
@
>
?
&@&
de consultar que las otras partes. Se debe enfocar en los propsitos y temas principales de la evaluacin,
enfatizar los puntos de mayor inters sobre el rendimiento, e indicar de manera clara las conclusiones, las
=
=
W
@
'
>
=&;
<
=&@
=
!=
=
El resumen ejecutivo debe contener la siguiente informacin sobre la evaluacin: (a) Propsito(s); (b) Contexto; (c) Metodologa; (d) Anlisis de los resultados; (e) Conclusiones y recomendaciones.
II. Introduccin
Nmero de pginas: 1-2
Describe brevemente el propsito del informe, el alcance y el contexto del proyecto evaluado. Puede incluir
reconocimientos a quienes contribuyeron en la realizacin de la evaluacin.
III. Conclusiones
Nmero de pginas: 30. Esta es la seccin ms larga del informe.
@
;
`
=
@
;
'
>
>
=
^
;<=
;
clave relativas a cada criterio.
@
=
;
'W
;
=
=
+
=
=
=
`
=W
;
@
~
>W
diferentes y ms apropiadas para conseguir los mismos resultados.
`
'
;
;
+
'
=
W
=
'=
'
~
;
>
'
'+
'
=
W
del proyecto.
iv. Impacto: detectar si existen las condiciones para introducir cambios a largo plazo en el entorno. Se re
&;
=
grupo ms amplio de personas o toda una sociedad; el xito y el fracaso en la consecucin de los objetivos
generales, y sus razones principales.
'
+
=
'=
=
;
puede continuar o no despus del cierre del proyecto, y por qu.
Anexos
Pgina 109
IV. Metodologa
Nmero de pginas: 3
Indica cmo se elaboraron las preguntas relativas a la evaluacin y cules limitaciones se encontraron al
=
%
"
^=
W @
@
"
^=
&
@
%
=
tambin el nivel de participacin y la contribucin de las partes interesadas a la evaluacin.
V. Conclusiones y recomendaciones
Nmero de pginas: 3-6
;
=
!=
'
=
@
=
?
'
las evidencias registradas y determinan quin debera hacer qu cosa en el futuro, y brindan sugerencias
=
+
=
?
?
=
;
posterior. Si es posible, para cada conclusin debera haber una recomendacin correspondiente.
`'
'
=
daciones deben ser lo ms realistas, pragmticas y operativas posible; o sea, deben tener cuidadosamente
en cuenta las circunstancias que prevalecen en el contexto del proyecto en el momento de la evaluacin, y
los recursos disponibles para implementarlas.
;
=<
tintos niveles, especialmente al interior de la estructura operativa de las ONG (coordinadores nacionales o
regionales, responsables del proyecto, dirigentes y responsables de rea en la sede principal, administracin
en la sede principal, responsable de la evaluacin).
Anexos
El informe debe generalmente incluir los siguientes anexos:
1. Trminos de referencia de la evaluacin.
2. Composicin del equipo de evaluacin (las hojas de vida deben estar incluidas, mejor si estn formuladas
en una versin sinttica).
3. Matriz de marco lgico (la versin original y, si es posible, las versiones posteriores con las mejoras o
actualizaciones eventualmente introducidas).
4. Anexos tcnicos (por ej.: anlisis estadstico).
5. Mapa del rea del proyecto, si es relevante.
6. Listado de las personas u organizaciones encontradas o consultadas.
7. Literatura y documentos consultados.
Anexos
Pgina 111
Anexo 3.
Guas de indicadores
Gua de Indicadores por categora
Fortalecimiento
Fortalecimiento
Seguridad Alimentaria
Pobreza
de organizaciones locales
de capacidades de Gnero
;
reales de las familias
=
=
=
W @
alimentos
grupos en la adopcin de decila enseanza primaria
ingresos no agrcolas
^
siones a nivel local/ de proyecto
<
;=
vadas
mujeres constituidos en la zona del
@
;capitales
proyecto
pos autnomos en la zona del
de los cultivos alimentarios
<
="
mano de obra
proyecto
bsicos
aprobados/ desembolsados para los
=
=
grupos de mujeres
blacin de practicar el autoseservicios de riego
los alimentos bsicos
guimiento y la evaluacin de los
<
+
=
=
progresos
que son miembros de asociaciones
lidad de servicios para
alimentos bsicos
locales de produccin/servicios
atender necesidades b-
=
mercializar los propios produc-
=
=
sicas
cados
de decisiones de las mujeres a nivel
tos
=
de la familia
"
agua potable
almacenamiento de alimen
diciones de los dispositivos de
=
=
tos
mujeres en la adopcin de decisiocomercializacin
educacin bsica
nes a nivel local/del proyecto
crnica de nios
servicios sanitarios bsicos
Tomado de Guijt I. y Woodhill, J. (2002). Gua para el Seguimiento y Evaluacin de Proyectos. Gestin orientada al
impacto en el desarrollo rural. Roma: IFAD.
Indicadores de los Objetivos de Desarrollo del Milenio (PNUD)
Objetivo 1:
Erradicar la pobreza extrema y el hambre
Meta 1A: Reducir a la mitad entre 1990 y 2015 el porcentaje de personas con ingresos inferiores a un dlar
##
+
=
;
@
#=W
#$
>
=
^#=W
#=
;
?
=
?
=
&=
=
Meta 1B: Alcanzar el empleo pleno y productivo y el trabajo decente para todos, incluidas las mujeres y los
jvenes
#*Y
]==
=
#Z
=
=
#
+
=
=
;
@
#=WX'
N[
#
+
+
@
=
==
=
=
Meta 1C: Reducir a la mitad, entre 1990 y 2015, el porcentaje de personas que padezcan hambre
#
'
{
{
=
@
#
+
=
=
+
'
W
;W
X
[
Pgina 112
Objetivo 2:
Lograr la enseanza primaria universal
Meta 2A:Velar por que, para el ao 2015, los nios y nias de todo el mundo puedan terminar un ciclo completo de enseanza primaria
$#Y
W
=
$$
+
?
^
=
;
;<
;
=
$Y
@
^
+
>
=
#$*{
Meta 2A:Velar por que, para el ao 2015, los nios y nias de todo el mundo puedan terminar un ciclo completo de enseanza primaria
$#Y
W
=
$$
+
?
^
=
;
;<
;
=
$Y
@
^
+
>
=
#$*{
Objetivo 3:
Promover la igualdad de gnero y la autonoma de la mujer
Meta 3A: Eliminar las desigualdades entre los gneros en la enseanza primaria y secundaria, preferiblemente
=
{$
'
{^
{$#
#Z
{
{
=
=
$=
+
=
;W
=
=
==+
=
Objetivo 4:
Reducir la mortalidad infantil
Meta 4A: Reducir en dos terceras partes, entre 1990 y 2015, la mortalidad de los nios menores de 5 aos
*#Y
{
{
*$Y
@
*
+
{
#{'
=
Objetivo 5:
Mejorar la salud materna
Meta 5A: Reducir, entre 1990 y 2015, la mortalidad materna en tres cuartas partes
4. 5.1 Tasa de mortalidad materna
5. 5.2 Porcentaje de partos con asistencia de personal sanitario especializado
Meta 5B: Lograr, para 2015, el acceso universal a la salud reproductiva
Y
=
'
*Y
=
X
'
'
[
@
>
=
@
Objetivo 6:
Combatir el VIH/SIDA, el paludismo y otras enfermedades
Meta 6A: Haber detenido y comenzado a reducir, para el ao 2015, la propagacin del VIH/sida
#
'
=
#$*{
$K
=
'
'
=&
!
;
+
=
#$*{
;
*Z
W
{>"@W
{>"@
##*{
Meta 6B: Lograr, para 2010, el acceso universal al tratamiento de la infeccin por VIH a quienes lo necesiten
+
=
@
'^=
'
Meta 6C: Haber comenzado a reducir, para el ao 2015, la incidencia del paludismo y otras enfermedades
graves
Y
=
+
{
{?
+?
+
{
{
?
=<
Y
=
'
#=
'
+
'
Anexos
Pgina 113
Objetivo 7:
Garantizar la sostenibilidad del medio ambiente
Meta 7A: Incorporar los principios del desarrollo sostenible en las polticas y los programas nacionales e invertir la prdida de recursos del medio ambiente
#=
=
=?
$`
!
=
&=
=#]XN[
?
; =
^
*=
=
=
W
;
;
$=;
> !!
@KWK !
de prdida
=
>W
=
&
=
;
=
=
^
!
Meta 7C: Reducir a la mitad, para el ao 2015, el porcentaje de personas que carezcan de acceso sostenible a
agua potable
=
=
?
^@
;=
+
=
=
?
^
'
+
Meta 7D: Haber mejorado considerablemente, para el ao 2020, la vida de por lo menos 100 millones de habitantes de tugurios
#=
=
?
'
'
;
==
=
?
'
'
de tugurios se mide mediante una variable sustitutiva representada por la poblacin urbana que vive en hogares con al
menos una de las cuatro caractersticas siguientes: a) falta de acceso a un mejor abastecimiento de agua; b) falta de acceso
a un mejor saneamiento; c) hacinamiento (3 o ms personas por habitacin); y d) viviendas construidas con material de
corta duracin.]
Objetivo 8:
Fomentar una asociacin mundial para el desarrollo
$X<' Y" +
+ criminatorio.
=
;
;
=<
=
^
en cada pas y en el plano internacional.
Meta 8B: Atender las necesidades especiales de los pases menos adelantados. Se incluye el acceso libre de aranceles y cupos de las exportaciones de los pases menos adelantados; el programa mejorado de alivio de la deuda de los pases
=
=
&
generosa a los pases que hayan expresado su determinacin de reducir la pobreza.
Meta 8C: Atender las necesidades especiales de los pases sin litoral y de los pequeos Estados insulares en
desarrollo (mediante el Programa de Accin para el desarrollo sostenible de los pequeos Estados insulares en desarrollo y
los resultados del vigsimo segundo periodo de sesiones de la Asamblea General).
Meta 8D: Encarar de manera general los problemas de la deuda de los pases en desarrollo con medidas nacio
Z !
%[
#N%
=
+
=
X][
=W
"
N
para el Desarrollo (CAD) de la OCDE
$=
N%
'
&
X
&
=
cin, abastecimiento de agua potable y servicios de saneamiento)
=
N%?
&
*N%
=W
==
=
N%
=
?
{`
==
=
Acceso a los mercados
=
!=
X='
[
> =
N
=
=
= ;W
!
'
!=
=
= ;W
=W
;
^
=
Desarrollo Econmicos (OCDE)
=
N%@
=
=
Pgina 114
Sostenibilidad de la deuda
#<
=W
?
^=
'=
de los pases muy endeudados
##N
'
+
'=
=W
=
'
para el Alivio de la Deuda Multilateral
#$
'
=
+
!=
'
Meta 8E: En cooperacin con las empresas farmacuticas, proporcionar acceso a los medicamentos esenciales
en los pases en desarrollo
#=
=
=
^
$X
\
Z
vas tecnologas, en particular de las tecnologas de la informacin y de las comunicaciones.
#*W
"@= #>
#N
"@
= #>
#K
= #>
Anexos
Pgina 115
Pgina 116
Una manera de combinar las dos dimensiones de la participacin es la de utilizar conjuntamente los indicadores de
participacin (medidas cuantitativas) y de madurez socio-institucional (medidas cualitativas). Por ejemplo, en un
proyecto de desarrollo comunitario, el siguiente listado puede representar los aspectos clave (cuantitativos y cualitativos) que deben ser tomados en consideracin:
<
;=@
_
=
=
<
;=?
'W
;=
=
;=
=
=
^;
Y+
'
;=
&
^;
=X
[
`
=
=
=
+
Z
=
=
+;
=
W
N=
@
'
=
?
=
;=X
nes, equipos, instalaciones para el agua, etc.).
=
;=
'
!
=
`+
=
;
'
N
!
=
==
;=
Anexos
Pgina 117
Anexo 4.
Ejemplos de marco lgico, plan de monitoreo
y formato de monitoreo
Los materiales presentados en este anexo hacen parte del curso de Monitoreo y Evaluacin: enfoques,
mtodos e instrumentos que el Profesor Carlo Tassara dicta en la Especializacin en Cooperacin
internacional para el desarrollo de la ELACID desde el 2004. En el ao 2010, los materiales fueron
publicados en italiano en el libro Formulazione e gestione dei progetti nella cooperazione internazionale, del mismo autor.
Marco lgico del proyecto Rehabilitacin de las comunidades rurales del Distrito de Kedaf
involucrado por la guerra civil en el Kualand meridional
El proyecto tiene una duracin prevista de 18 meses y se realiza en un rea rural que incluye 8 pueblos
@
&
@
@
=
?W;=>
suspendido las hostilidades desde hace unos meses. La zona est bajo el control de una fuerza multinacional de peace-enforcing que colabora con el gobierno local, recin creado. Acaba de concluirse un
proyecto de ayuda humanitaria.
Lgica de intervencin
Objetivo
general
Objetivo
Condiciones
externas
- El porcentaje de familias
- Ausencia de
que dependen de la ayuda
otras sequas.
alimentaria disminuye del
- Se mantiene la
50% al 25%.
- Archivos de las agencias
paz en el rea
- La disponibilidad de
de emergencia.
de operaciones
alimentos esenciales en
- Encuestas muestrales
del proyecto.
los mercados locales
realizadas por el pro- El gobierno
aumenta del 20% al 50%
yecto.
local asegura
de la demanda.
N >
'
las condicio- Los precios de los princiDistrital de Agricultura.
nes logsticas
pales productos agrcolas
necesarias para
en los mercados locales
operar.
disminuyen el 20%.
Pgina 118
Resultados
esperados
- El porcentaje de nios
menores de 5 aos que
presenta sntomas de
malnutricin disminuye
del 60% al 25%.
2. Asegurada la produccin
agrcola tambin fuera de la
temporada de lluvias.
3. Rehabilitada la produccin
agrcola.
Recursos
- Recursos humanos.
- Vehculos y otros equipos.
- Ayuda alimentaria.
- Semillas.
- Herramientas agrcolas.
- Capital de trabajo para
microcrdito.
- Actividades formativas.
- Gastos de operaciones.
- Imprevistos.
- Archivos de monitoreo
del proyecto.
- Disponibilidad
en los mercados locales de
alimentos no
producidos en el
rea.
- Ausencia de
sabotajes de los
canales de riego
por parte de los
actores armados.
- Los campesinos
aceptan el mtodo alimentos
por trabajo.
- Oportuna
Costos () [ver Presudisponibilidad de
puesto]
los recursos de
100.000,00
contrapartida a
75.000,00
cargo del gobier450.000,00
no local.
85.000,00
- Ausencia de
120.000,00
180.000,00
nitarios sobre
85.000,00
los derechos de
75.000,00
uso del agua.
45.000,00
- Pleno apoyo de
- Presupuesto del proyeclas organizacioto.
nes de base en la
- Informes del proyecto.
implementacin
- Reuniones con las comude las actividanidades.
des previstas.
Condiciones
previas
- Las autoridades
internacionales
con jurisdiccin
sobre el rea
(fuerza multinacional) otorgan
los permisos.
Anexos
Pgina 119
Lgica de intervencin
Indicadores objetivamente
#
- a. Elaborar cada mes una hoja elec- El porcentaje de familias
trnica con los datos de las famique dependen de la ayuda
X
=
alimentaria disminuye del
Consejo de Distrito local) y de las
- Responsable
50% al 25%.
ayudas distribuidas. b. Transmitir
distribucin de las
Reducir la inseguridad
- La disponibilidad de alimencada tres meses los datos respectiayudas.
alimentaria a corto plazo y tos esenciales en los mercavos al Director del proyecto.
- Responsable
mejorar los estndares de
dos locales aumenta del 20%
- a. Visitar cada mes los mercados
administrativo.
vida de la poblacin.
al 50% de la demanda.
locales, medir la dinmica de los
- Responsable
- Los precios de los principroductos (vendido, no vendido,
administrativo.
pales productos agrcolas
demanda insatisfecha) y los precios
en los mercados locales
respectivos. b. Elaborar y transmitir
disminuyen del 20%.
cada tres meses los datos respectivos al Director del proyecto.
Resultados esperados
- a. Visitar cada mes los puestos de
salud y levantar los datos sobre
el estado nutricional de los nios
atendidos. b. Elaborar y transmitir
cada tres meses los datos respectivos al Director del proyecto.
- El porcentaje de nios me %
?
=
1. Resueltos los problemas
- Responsable
nores de 5 aos que presento, un muestreo de nios de las
de inseguridad alimentadistribucin de las
ta sntomas de malnutricin
@
ria a corto plazo.
ayudas.
disminuye del 60% al 25%.
alimentaria. b. Levantar, al momento de la distribucin de alimentos,
los datos nutricionales relativos a
los nios del muestreo. c. Elaborar
y transmitir cada tres meses los
datos respectivos al Director del
proyecto.
2. Asegurada la produccin - El rea regada durante la
agrcola tambin fuera de estacin seca aumenta de 25 - ()
- ()
la temporada de lluvias.
a 750 hectreas.
Pgina 120
- ()
- ()
Actividades
1.1 Distribucin de 250
- Responsable
ton. de ayuda alimenta- - Toneladas de ayuda alimentadistribucin
ria a los grupos vulne- ria distribuida.
de las ayudas.
rables.
1.2 Activacin de 75.000
das de trabajo comunitario con el mtodo - Das de trabajo activados.
alimentos por trabajo (food for work).
2.1 Rehabilitacin de 6 km.
de canales de riego - Km de canales de riego rehacon mtodos de alta bilitados.
intensidad de trabajo.
2.2 Realizacin de 20 cur <
^
sos (15 participantes
<
=
=
c/u) en manejo del agua.
Responsable de
la componente
agrcola.
- a. Al momento de la distribucin,
levantar los datos sobre cantidades de alimentos y familias bene
`
cada tres meses los datos respectivos al Director del proyecto.
- ()
Responsable de la
componente agr- ()
cola.
()
- ()
Lgica de
intervencin
Recursos
Indicadores objetivamente
Ayuda alimentaria.
(...)
- 450.000,00 previstos.
Actividades formati- - 85.000,00 previstos.
vas.
Responsabilidad
Actividades y Cronograma
Anexos
Lgica de
intervencin
Actividades
Indicadores objetivamente
horizontales
Responsabilidad
Actividades y Cronograma
Responsabilidad
-
- Elaboracin de los
informes de monitoreo.
- Elaboracin de los
informes del proyecto.
- Realizacin de una
misin de monitoreo de la sede principal de la entidad
ejecutora.
- Realizacin de una
misin de eva
proyecto establecida por el donante y
realizada por expertos externos.
Pgina 121
Actividades y Cronograma
Analizar los datos recibidos y redactar un informe sinttico de monitoreo (cada tres meses) y un informe
consolidado de monitoreo (cada
seis meses).
En el informe consolidado, formalizar los ajustes operativos necesarios
de las actividades que hayan presentado problemas o atrasos relevantes.
Utilizar el anlisis de los datos de
monitoreo para decidir si presentar
al donante solicitudes de variacin
X=
=
del presupuesto, etc.).
Incluir en cada informe de proyecto
la situacin relativa al logro del Ob+
'
=
W
Z
esperados y a la realizacin de las
Actividades previstas.
Anexar a cada informe de proyecto
los informes consolidados (semestrales) de monitoreo.
La misin de monitoreo est prevista
para el 9 mes. Antes de su inicio:
a. Preparar el listado de informes y
otros documentos producidos por el
proyecto. b. Leer los TdR de la misin
#
'
;
+
'
=
W
y Resultados; b2. Realizar reuniones
informativas y preparatorias con el
?
=
=
rios.
La misin de evaluacin est prevista por el 18 mes. Antes de su inicio:
a. Preparar el listado de informes
y otros documentos producidos
por el proyecto. b. Leer los TdR de
#
de avance en el logro de Objetivo
=
W Z
~$Z
^
reuniones informativas y preparatorias con el equipo del proyecto y los
Pgina 122
18 meses
12 meses
El proyecto tiene una duracin prevista de 18 meses y se realiza en un rea rural que incluye 8 pueblos
@
&
@
@
=
?W;=>
suspendido las hostilidades desde hace unos meses. La zona est bajo el control de una fuerza multinacional de peace-enforcing que colabora con el gobierno local, recin creado. Acaba de concluirse un
proyecto de ayuda humanitaria.
Lgica de
intervencin
+
'
=
W
Reducir la inseguridad
alimentaria a corto
plazo y mejorar los
estndares de vida de
la poblacin.
Indicadores objetivamente
Estado de avance
Resultados esperados
1. Resueltos los proble- mas de inseguridad
alimentaria a corto
plazo.
Explicaciones/Comentarios/
Recomendaciones
- Considerando el tiempo que
fue necesario para la activacin
inicial del proyecto, el indicador
parece alcanzable.
- El aumento de la disponibilidad
+=mente el aumento de la produccin agrcola local.
- Los precios no disminuyeron
debido a la distorsin generada
por la presencia del proyecto
(efecto no previsto durante la
[`=licitar al donante una variacin
del Marco lgico.
Anexos
Actividades
1.1 Distribucin
de
250 ton. de ayuda
alimentaria a los
grupos
vulnerables.
1.2 Activacin
de
75.000 das de
trabajo comunitario con el mtodo alimentos por
trabajo (food for
work).
2.1 Rehabilitacin de 6
km. de canales de
riego con mtodos
de alta intensidad
de trabajo.
2.2 Realizacin de 20
cursos (15 participantes c/u) en manejo del agua.
Recursos
Ayuda alimentaria.
- 450.000,00 previstos.
(...)
(...)
Actividades formativas. - 85.000,00 previstos.
- 150.000,00 gastados.
(...)s- 80.000,00 gastados.
Pgina 123
Anexos
Pgina 125
Anexo 5.
Recursos adicionales
Recursos del Manual de MyE
Documentos, guas y manuales
BID (INDES): EL M y E: herramientas indispensables de la gerencia social, Mokate
CE: Gestin del Ciclo de Proyecto
CE: Manual Corto Gestin del Ciclo de Proyecto 2001
CE: Gua para la integracin de la igualdad de gnero en la CI
CE: Project Cycle Management Guidelines
CEPAL: Formulacin, Evaluacin y Monitoreo de Proyectos Sociales, Cohen y Martnez
CIVICUS: Monitoring and Evaluation Toolkit, Janet Shapiro
DFID: Tools for Development: A handbook for those engaged in development activity
EML: 10 Casos Prcticos
FAO: Gua Sectorial GCP
FAO: Manual para el Nivel del Campo. Programa de Anlisis Socioeconmico y de Gnero. Wilde,V.
Forum Solint: Manual de monitoreo y evaluacin de las ONGs. Gosparini, P., Russo, L.
GTZ: Monitoreo y valoracin del impacto Instrumentos a usar en proyectos de desarrollo rural con un enfoque en el
manejo sostenible de la tierra
JICA: Lineamientos de la JICA para la Evaluacin de Proyectos
`/
;W
;
==
;
'
=
=;
INTRAC Newsletter: Rethinking Monitoring and Evaluation
YZN/
;`'
;=
]
;
>
@
INTRAC: The Monitoring and Evaluation Toolkit
INTRAC: The Challenges of Monitoring and Evaluating Programmes
Monitoring Comunications
PNUD: Gender and Pro Poor Indicators
PNUD: Handbook on Planning, Monitoring and Evaluating for Development Results
UNFPA: Program Managers Planning and M and E Toolkit
UNESCO: On Target, A Guide for Monitoring and Evaluating Community-Based Projects
WB: 10 Steps to a Results-Based Monitoring and Evaluation System, A Handbook for Development Practitioners,
Kusek and Rist
Pgina 126
Declaracin Estocolmo.pdf
Handbook Proyecto Esfera
Proyectos de Incidencia
Anexos
Pgina 127
http://www.planning.continuousprogress.org/benchmarks
www.alnap.org
http://www.bond.org.uk/
http://fp.continuousprogress.org/node/83
http://www.sphereproject.org/
www.ids.ac.uk/eldis/eldis.html
http://ec.europa.eu/europeaid/evaluation/methodology/foreword_
en.htm
http://www.idrc.ca/index_en.html
www.ids.ac.uk
http://www.innonet.org/
http://www.ideas-int.org/home/index.cfm?navID=1&itemID=1&CFI
D=855207&CFTOKEN=62085509
http://mande.co.uk/
www.odihpn.org
Pgina 128
http://www.undp.org/evaluation/index.html