Interior n 29

26/9/05 18:25

Pgina 1

Nmero 29

LA EVALUACIN EX-POST O DE IMPACTO

Un reto para la gestin de proyectos de
cooperacin internacional al desarrollo
Lara Gonzlez

Lara GONZLEZ es Licenciada en Ciencias Polticas y Sociologa de la Universidad de Deusto y

candidata a Doctorado en Sociologa en la misma universidad. Fue becaria del programa Mutis de la
AECI en 1999-2001 en Medelln y es Master en Ciencias Sociales, con Enfasis en Gerencia del
Desarrollo Social de la Universidad de Antioquia-Colombia. En la actualidad, realiza su tesis doctoral
sobre La evaluacin en los proyectos de desarrollo en Antioquia-Colombia. En dicho pas es docente
e investigadora en la Universidad de Antioquia dictando cursos en la ctedra de Investigacin social
y evaluativa en la Facultad de Ciencias Sociales y Humanas, y en Gestin-Evaluacin de proyectos
de la Cooperacin Internacional en otras universidades del pas. Es coordinadora acadmica del
primer Diploma en Gestin de Proyectos de la Cooperacin Internacional al Desarrollo de la
Universidad de Antioquia y trabaja en la Oficina de Proyectos del Comitato Internazionale per lo
Sviluppo dei Popoli-CISP en Colombia. Participa en la Red de Cooperacin Internacional de
Antioquia y ha trabajado como consultora en gestin y evaluacin de proyectos de ayuda
humanitaria a la poblacin desplazada por la violencia en Antioquia financiados por organizaciones
internacionales (ECHO-UE, GTZ, ACNUR etc.). Es colaboradora de HEGOA.

Interior n 29

26/9/05 18:26

Pgina 2

Facultad de Ciencias Econmicas

Avenida Lehendakari Aguirre, 83
48015 BILBAO
Tfno.: 94 601 70 91
Fax: 94 601 70 40
E-mail: hegoa@bs.ehu.es
http://www.ehu.es/hegoa
Manuel Iradier, 6 bajo
Tfno. y fax.: 945 13 15 87
E-mail: hegoavitoria@sarenet.es
01005 VITORIA-GASTEIZ
LA EVALUACIN EX-POST O DE IMPACTO
Un reto para la gestin de proyectos
de la Cooperacin Internacional al Desarrollo

Lara Gonzlez
Cuadernos de Trabajo de Hegoa
Nmero 29
Septiembre 2000
D.L.: Bi-1473-91
ISSN: 1130-9962
Impresin: LANKOPI, S.A.

CUADERNOS DE TRABAJO DE HEGOA es una publicacin destinada a difundir los trabajos realizados por sus colaboradores/as, as como aquellos textos que por su inters
ayuden a la comprensin de los problemas del desarrollo y las relaciones internacionales.

Interior n 29

26/9/05 18:26

Pgina 3

NDICE

Introduccin

La evaluacin en el ciclo de vida de los proyectos de desarrollo

1.1. El proyecto como herramienta bsica

de la cooperacin al desarrollo

1.2. La accin evaluadora es una constante

en el ciclo de vida de un proyecto

1.3. Las funciones de la evaluacin ex-post frente al seguimiento

La evaluacin ex-post: hacia una propuesta integradora de agentes

modelos y herramientas

16

19

2.1. Quin realiza las evaluaciones?

19

2.2. La evaluacin ex-post en los principales

modelos de gestin de la cooperacin internacional

22

2.3. La apuesta por un modelo integrador de agentes,

modelos y herramientas

31

La valoracin del impacto: un reto para la evaluacin ex-post

37

3.1.El impacto es un componente clave en la evaluacin ex-post

37

3.2. Algunas dificultades a superar en la evaluacin ex-post

y en la valoracin del impacto

39

3.3. El nuevo desafo: propuestas para la valoracin del impacto

43

Bibliografa

47

Interior n 29

26/9/05 18:26

Pgina 4

Interior n 29

26/9/05 18:26

Pgina 5

INTRODUCCIN

tras potencialidades?, o, es ms bien que no estn

interiorizados o claros conceptos como evaluacin,
seguimiento, evaluacin ex-post o el impacto? o
resulta que ninguno de los modelos propuestos
nos parece vlido ni prctico?

Parece que en los ltimos tiempos hablar de evaluacin est de moda. Y lo cierto es que son grandes los esfuerzos que las agencias internacionales,
las ONG y otras entidades estn realizando por
mejorar la gestin y, sobre todo, el impacto que
generan los proyectos de desarrollo en las poblaciones, las comunidades y los pueblos beneficiarios. En ese sentido, y en muchas ocasiones motivados por el aprendizaje de los fracasos, los organismos han invertido tiempo, esfuerzo y recursos
en mejorar sus intervenciones y la gestin de las
mismas. Es por ello que, hoy en da, la mayora de
las agencias, ONG, etc., disponen de sistemas propios para la identificacin y la planificacin de las
acciones.

Con este documento, pretendemos principalmente

presentar y clarificar el concepto de evaluacin expost dentro del mbito de la gestin de proyectos
de desarrollo, haciendo hincapi en la necesidad
de su uso normalizado dentro del ciclo de vida de
los proyectos. Se trata de promover su uso al interior de las instituciones, agencias y ONG, como
una tarea necesaria y sencilla que aporta ms ventajas que desventajas para la toma de decisiones y
la gestin en general.

Pero no ocurre lo mismo en cuanto al seguimiento

y a la evaluacin ex-post. Si bien se ha avanzado
en las propuestas para realizar evaluaciones expost o de impacto, todava son pocas las entidades
que lo asumen como una prctica generalizada, y,
mucho menos, las experiencias sistematizadas y
pblicas que puedan servir de aprendizaje al resto.

Es por ello que en primer lugar, presentamos la

evaluacin de una manera sencilla y pedaggica,
como una accin constante en el ciclo de vida de
los proyectos de desarrollo, as como sus funciones
como una etapa propia y distinta del seguimiento.
En la segunda parte, realizamos un repaso rpido a
las diversas propuestas que el medio ofrece en
relacin a los agentes, modelos y herramientas
necesarias para evaluar, y presentamos una pequea propuesta de cmo articularlas de manera integrada y flexible. Por ltimo, me refiero al impacto,
tema que suscita en la actualidad algunos debates
en torno a su valoracin y que supone, desde luego, un nuevo reto conceptual y metodolgico para
evaluadores y gestores.

Son varias las cuestiones que surgen en torno a

este punto: por qu cuesta tanto asumir una cultura evaluativa, de revisin de lo realizado y de
compartir los aprendizajes?, somos las ONG reticentes al cambio, a poner sobre la mesa nuestros
errores del pasado y permitir que otras entidades,
seguramente con proyectos similares a los nuestros,
puedan aprender de los errores y aprovechar nues-

Interior n 29

26/9/05 18:26

Pgina 6

Interior n 29

26/9/05 18:26

Pgina 7

1. LA EVALUACIN EN EL CICLO DE VIDA

DE LOS PROYECTOS DE DESARROLLO

1.1. El proyecto como

herramienta bsica en la
cooperacin al desarrollo

La Overseas Development Administration concibe

el proyecto de desarrollo como un conjunto de
fuentes (financiacin, personal y equipos) diseado para lograr unos objetivos sociales y econmicos, en un perodo especfico de tiempo. A travs de los proyectos, las personas convierten sus
ideas iniciales en actividades que se suponen
lograrn cambios beneficiosos en sus vidas (ODA,
1995).

Existen numerosas formas de entender y definir la

idea de proyecto, pero en el mbito de la cooperacin al desarrollo, hay un consenso bastante
generalizado en interpretarlo como una herramienta de carcter socioeconmico que busca la superacin de determinadas carencias en un colectivo
concreto. El proyecto integra variables de tipo
social, cultural, econmico, poltico, educativo, etc.,
y se apoya en el uso de los recursos disponibles y
en las potencialidades de una poblacin determinada. Adems, el tiempo y el lugar donde se realizan los proyectos son dos elementos relevantes
para completar su caracterizacin.

Otros autores se refieren al mismo como un acto

de creacin: proyectar es crear. Un proyecto es
un verdadero acto de creacin que permite determinar cmo, cundo, en cunto tiempo, para
quin y con qu recursos, potencialidades y
esfuerzos pueden conseguirse determinados objetivos o metas, mediante la combinacin de los
conocimientos e informaciones de una realidad
concreta.

Cuadro 1
El concepto de proyecto
Un proyecto es un conjunto autnomo de inversiones, actividades polticas y medidas institucionales o de otra
ndole, diseado para lograr un objetivo especfico de desarrollo en un perodo determinado, en una regin
geogrfica delimitada y para un grupo predefinido de beneficiarios, que contina produciendo bienes y/o prestando servicios tras la retirada del apoyo externo, y cuyos efectos perduran una vez finaliza su ejecucin.
Fuente: MAE-SECIPI: Metodologa de la evaluacin de la Cooperacin Espaola. OPE-SECIPI. Madrid.1998.

Interior n 29

26/9/05 18:26

Pgina 8

Las ventajas del concepto de proyecto de desarrollo frente a otros (capacidad de generar impacto en
el largo plazo, entrar en relacin directa con el
colectivo beneficiario, etc.) no le exime de ciertos
inconvenientes o desviaciones que pueden producirse en la ejecucin de los mismos.

Otra definicin, algo ms sencilla, es la de la

UNESCO, que define el proyecto como una actividad destinada a conseguir ciertos objetivos especficos con un presupuesto dado y en un perodo de
tiempo determinado.
En resumen, se encuentran en la literatura varias
definiciones del trmino proyecto, aunque siempre
hay algunos elementos que se repiten y que son
los que mejor lo caracterizan. En primer lugar,
entendemos el proyecto como un instrumento, una
herramienta o un medio que permitir alcanzar
unos objetivos propuestos o unas metas orientadas
a cubrir unas necesidades y conseguir ciertos cambios en la realidad de determinadas personas. As,
los grupos beneficiarios son los protagonistas del
proyecto, bien como objetos de la accin de cambio o bien como sujetos del proyecto que participan en el mismo, aprovechando sus potencialidades y recursos para hacer sostenibles las iniciativas
puestas en marcha. A estos elementos hay que
sumar el tiempo y el lugar de realizacin del proyecto.

Por ello, como seala el Instituto Latinoamericano y

del Caribe de Planificacin Econmica y Social-ILPES
(1998), se hace necesario incrementar la racionalidad
de las polticas en general y, por consiguiente, de
los programas (o proyectos)2, que permitan ir disminuyendo las deficiencias que se han encontrado en
numerosas intervenciones de desarrollo.
Aun siendo el objetivo ltimo de un proyecto aprovechar el pasado para actuar mejor en el futuro, es
conveniente que el proyecto sea una intervencin
sobre la realidad debidamente planificada y gestionada que intente eliminar las principales deficiencias inherentes al propio modelo de cooperacin.
As, un sistema de gestin de proyectos de desarrollo es un conjunto de procedimientos explcitos,
cuya finalidad es mejorar la toma de decisiones en
relacin con la asignacin de recursos para el logro
de objetivos a travs de la movilizacin de medios
adecuados para su obtencin.

Los proyectos son, adems, por definicin, unidades operativas estructuradas con base en un conjunto de procesos tcnicos que responden a una
concepcin econmica y tecnolgica. Se trata de
una unidad operativa en relacin con otras categoras mayores en las que se inserta.

La Comisin de las Comunidades Europeas seala

dos elementos claves en la mejora de la gestin de
proyectos de desarrollo:
Generar procesos que incorporen calidad en la
gestin del propio proyecto; mejor y ms realista definicin de objetivos, identificacin realista de los medios y recursos disponibles,
incorporacin de modelos participativos, respeto a los valores socioculturales, incorporacin de la perspectiva de gnero, refuerzo de
la capacidad gestora de los organismos que
ejecutan el proyecto, cuidado de la salud financiera de los proyectos, impactos no previstos,
etc.

Es por ello que es necesario distinguir los proyectos de los programas y de las polticas, puesto que
son de escala menor que stos. Se habla de polticas, cuando se hace referencia a grandes objetivos
de desarrollo insertados en una estrategia; de programas, cuando son intervenciones especficas de
esas polticas, y de proyectos, cuando su actuacin
es referida a un nivel local, y se caracterizan por
interactuar directamente con el colectivo beneficiario. Los proyectos son componentes, partes o elementos de programa. Son centros de asignacin de
recursos para desarrollar un programa dentro de un
plan o poltica. Son unidades operativas que canalizan recursos e intervienen actores que alteran la
situacin inicial.
2

Concebir el proyecto como un todo integrado

que permita establecer cierta disciplina para la
toma de decisiones en los momentos oportunos:
desechar ideas iniciales no vlidas, realizacin de

El ILPES prefiere referirse a programas, dada la mayor amplitud del trmino y su referencia a recursos de operacin, ms que a recursos de inversin, como es el caso
de los proyectos (Ver ILPES: Gua para la identificacin, preparacin y evaluacin de programas sociales. Direccin de proyectos y programacin de inversiones. Santiago de Chile. 1998. Pgs 11-14).

Interior n 29

26/9/05 18:26

Pgina 9

mentos esenciales a lo largo del ciclo, desde la primera idea hasta la ltima evaluacin a posteriori,
efectuada tiempo despus de la realizacin del proyecto. Esto es lo que se ha denominado el Enfoque
Integrado (Comisin de las Comunidades Europeas,
1993).

estudios de factibilidad, financiacin realista,

seguimiento sistematizado de la ejecucin del
proyecto, posibilidades de reorientacin del mismo, evaluacin como acopio de informacin
para la toma de decisiones futuras, etc.
La concrecin de esto se verifica en el denominado ciclo de gestin del proyecto, que supone una
atencin detallada e integral de todos los pasos por
los que un proyecto transita, desde su concepcin
como idea hasta la evaluacin final o posterior,
pasando por todas las etapas correspondientes.
Este instrumento debe inducir a todas las personas
responsables de la concepcin, ejecucin y evaluacin de los proyectos a tener en cuenta los ele-

Por ltimo, es necesario ser conscientes de la concepcin de desarrollo que est detrs de la gestin
de proyectos de desarrollo. En esta lnea, Alan Thomas (Development in Practice; 1999) retoma el
debate en torno a la buena gestin y establece diferencias entre la gestin del desarrollo, la gestin en
el desarrollo y la gestin para el desarrollo como
acciones distintas que pueden ser combinadas.

Cuadro 2
La gestin del desarrollo
El desarrollo como:
Proceso de cambio histrico

Gestin en el desarrollo
(gestin en el marco del desarrollo)

Esfuerzos y acciones para progresar

Gestin del desarrollo

(gestin de acciones de desarrollo)

Orientacin hacia el cambio progresivo

Gestin para el desarrollo

(gestin bajo la orientacin del desarrollo)

Fuente: Thomas, Alan: What makes good development management? Development in Practice. Volumen 9. Numbers 1 and 2. February 1999. Pag. 11.

1.2. La accin evaluadora

es una constante en el ciclo
de vida de un proyecto

Hacer buena gestin, en general, en contextos de

desarrollo, es diferente a gestionar bien las acciones de desarrollo, entendido como un sumatorio de
tareas e intervenciones. Entender la gestin para
el desarrollo implica aplicar a la gestin la orientacin adoptada del desarrollo, para que dicha orientacin gue todas las actividades de desarrollo realizadas por organizaciones. Segn este autor, una
buena gestin del desarrollo deber responder a la
combinacin equilibrada de estas tres perspectivas.

Un proyecto de desarrollo puede entenderse

como un ciclo articulado y progresivo desde que
se concibe como tal, se formula y se interviene,
hasta el momento ltimo en que se valora si el
conjunto de actividades, medios utilizados y
resultados obtenidos han cumplido los objetivos
propuestos. El proyecto de desarrollo constituye
un ciclo, porque las distintas etapas, o momentos
a travs de los que se concreta son interdependientes, conducen unas a otras y retroactan
entre s, de manera que para considerar convenientemente cada fase es necesario conocer el
contenido y desarrollo de las dems. Estas etapas,
ya clsicas, aunque con diferentes nombres y
matices segn los distintos autores y agencias de
desarrollo, se estructuran mediante elementos
conceptuales y tcnicos que incorporan una
metodologa determinada.

La gestin del desarrollo necesita operar bajo los

valores predominantes de la concepcin escogida
de desarrollo (por ejemplo, si el desarrollo se
entiende como empoderador o participativo, tales
conceptos aparecern reflejados en la gestin de
los proyectos y en el seno de la organizacin que
los ejecuta). Adems, deber realizarse una buena
gestin de las acciones. Para ello, es importante
concebir la gestin de los proyectos, y del desarrollo en general, como un todo interconectado. Veamos, entonces, qu es lo que se entiende por gestin integrada.

Interior n 29

26/9/05 18:26

Pgina 10

La Gestin del Ciclo del Proyecto es un mtodo de

trabajo que se aplica a las intervenciones de cooperacin internacional para el desarrollo, extensible
a otras, y cuyo objetivo es definir un lenguaje
comn para los organismos donantes y para los
que ejecutan, en relacin con las fases o etapas de

vida del proyecto. A pesar de la infinidad de aproximaciones, el enfoque integrado y el marco lgico
son los instrumentos ms utilizados por las agencias y organizaciones europeas a la hora de abordar la gestin del ciclo de un proyecto3, sobre todo
en la planificacin y seguimiento del mismo.

Cuadro 3
El ciclo de vida del proyecto (The project cicle)
Preparacin

Fases del ciclo

de un proyecto
Evaluacin

Implementacin

Todas las fases de la gestin de un proyecto pueden observarse desde dos puntos de vista claves:

Al esquematizar el ciclo del proyecto, encontramos

diversos trminos que se refieren a las etapas del mismo, a veces subdividido en seis, siete o incluso ms,
dependiendo de los autores o agencias que lo han
abordado. En este documento, y con la pretensin
principal de simplificar el anlisis y ofrecer claridad
en torno a la vida del proyecto, su gestin y las acciones evaluativas que se realizan en cada una de sus
etapas, optamos por una clasificacin en tres etapas.

Como una herramienta de trabajo que permite

conocer, analizar y actuar.
Como un herramienta de aprendizaje que permite, a travs de la acumulacin de experiencias y conocimientos a lo largo de todo el proceso, mejorar los futuros proyectos.

Etapas
Momentos

Cuadro 4
Ciclo de vida de un proyecto de desarrollo en la cooperacin internacional
Preparacin
Implementacin
Evaluacin ex-post
Identificacin
Formulacin
Ejecucin
Seguimiento
Evaluacin de resultados o
Planificacin
evolucin de impacto

- Formulacin de
objetivos
- Definicin de
resultados
- Programa de
actividades
- Elaboracin del
presupuesto
- Matriz de
Planificacin con
EML
- Establecimiento de
indicadores de
progreso y de
evaluacin
- Evaluacin de
riesgos
- Cronograma de
ejecucin
- Etc.
Documentos Documento de
Formato de
diagnstico o de perfil Formulacin y Plan
del proyecto
Operativo

Acciones

- Anlisis de
participacin
- Anlisis de
vulnerabilidad y
capacidad
- Anlisis institucionalDOFA
- Anlisis de problemas
- Anlisis de gnero
- Estudios de viabilidad
- Anlisis de
alternativas
- Etc.

- Ejecucin de
las actividades
- Ejecucin del
presupuesto
- Planes de
trabajo
- Grupos de
trabajo
- Reajustes en
cronograma

- Control de la
ejecucin de las
actividades
- Control a la
ejecucin del
presupuesto
- Seguimiento al
equipo de trabajo
- Seguimiento de
la poblacin
beneficiaria
- Reajustes y
retroalmientacin

- Evaluacin del alcance de

las actividades y el logro
de los resultados
- Valoracin de la eficacia
- Valoracin de la eficiencia
- Valoracin de la
sostenibilidad
- Valoracin de la
pertinencia
- Evaluacin de la calidad
- Valoracin del impacto en
la poblacin beneficiaria
directa e indirecta
- Valoracin de los cambios
en el largo plazo (gnero,
econmicos, sociales, etc.)
- Valoracin de efectos no
previstos

Plan Operativo
y planes
semanales

Informes de
Seguimiento

Informe de Evaluacin
ex-post

Fuente: Elaboracin propia a partir de bibliografa.

3

Profundizamos dichos enfoques en la segunda parte de este documento.

10

Interior n 29

26/9/05 18:26

Pgina 11

Veamos a continuacin los tres momentos claves

en la gestin de un proyecto de cooperacin internacional y las acciones evaluativas que se desarrollan a lo largo del mismo, incluida la evaluacin expost o de impacto.

la situacin en la que se quiere intervenir, tomar

la foto de la situacin, evaluar antes de (ex-ante
evaluation). Los elementos comprendidos en la
identificacin deben ser suficientes para valorar y
poder tomar una decisin acerca de la conveniencia de pasar al siguiente momento, la formulacin-planificacin.

1.2.1. La preparacin del proyecto

(identificacin y formulacin-planificacin)

A lo largo de esta fase deben explorarse los problemas existentes, las personas afectadas por ellas,
descubrir sus necesidades prioritarias y las potencialidades o capacidades de que disponen para
hacerles frente (CRE, 1997). El estudio del medio
(anlisis sociolgico donde se integran factores
polticos, sociales, culturales, econmicos, etc.)
debe ser un procedimiento para alimentar el proceso y ser til para la estrategia de determinacin
de las acciones prioritarias (Beadoux, 1992).

La preparacin del proyecto es una etapa crucial

destinada a sentar las bases del proyecto, estableciendo la situacin ideal a la que se quiere llegar y
concretando los elementos que configuran la realidad que se quiere superar.
Al hacer referencia a una primera etapa ms amplia
de preparacin4 del proyecto se pone de manifiesto la existencia de un proceso ms global que la
identificacin, el diagnstico o la formulacin en s
mismas. Es decir, la preparacin aglutina estas
fases5, desde la idea inicial que da vida al proyecto hasta la planificacin de todo el proceso, una
vez aprobado el proyecto y establecido los indicadores de medicin del progreso del mismo. Cabe
resaltar la confusin que suele generar la literatura
existente en este aspecto, que suele utilizar indistintamente una terminologa u otra para referirse en
la mayora de las ocasiones a la misma etapa inicial
del proyecto.6

Las herramientas utilizadas para la realizacin de

este diagnstico o evaluacin ex-ante son, entre
otras, las siguientes:
Anlisis de participacin: implicados en el proceso, beneficiarios, donantes, ejecutores, otros.
Anlisis de vulnerabilidad y capacidad: anlisis
sistmico de los riesgos que amenazan a personas y comunidades y que les impiden llevar
vidas plenas.

Desde mi criterio, y segn las experiencias recogidas en el marco de las ONGs de desarrollo, en la
etapa de preparacin podemos considerar dos
fases o momentos: la identificacin y la formulacin-planificacin del proyecto. Existen numerosas
herramientas para la obtencin de informacin en
esta primera etapa, pero en la actualidad la Comunidad Europea y las grandes agencias de cooperacin optan por la aplicacin del ZOPP y el Enfoque del Marco Lgico.

Comprender las causas de dichas amenazas, a

quines afectan en mayor grado y la evaluacin de la capacidad fsico-material, social,
organizativa, actitudinal, etc. que permite establecer prioridades para la intervencin.
Anlisis de problemas (rbol de problemas):
anlisis causa-efecto de problemas y sus consecuencias en la poblacin estudiada.
Anlisis institucional (DOFA): anlisis de debilidades y fortalezas, as como de amenazas y
oportunidades de la institucin

Identificar un proyecto es perfilar una idea de lo

que se quiere hacer a partir del conocimiento de

Asumimos el trmino de preparacin del proyecto como la etapa que recoge toda la articulacin inicial del proyecto, antes de ser ejecutado. Para ello es necesario realizar un diagnstico o identificacin inicial que se presenta en el documento de formulacin (como solicitud de aprobacin ) y se detalla en la planificacin, una vez aprobado. Esta es la terminologa que utiliza el Banco Interamericano de Desarrollo (BID) en Evaluacin: Una herramienta de gestin para mejorar el desempeo de los proyectos. Oficina de Evaluacin-EVO. Marzo 1997. http://www.iadb.org/cont/evo/spbook/evomain.htm (pg. 4)

En este punto nos referimos al trmino etapa como aquellos momentos principales de la vida del proyecto: La preparacin del proyecto, la implementacin y la evaluacin. Nos referiremos a fase como subdivisiones menores dentro de cada etapa.

Para mayor aclaracin sobre la terminologa, vase el Captulo sobre el ciclo de vida del proyecto en Gonzlez Gmez, Lara: La evaluacin en los proyectos de desarrollo.
Servicio de Publicaciones del Gobierno Vasco. Vitoria. 2001 (prximo a publicarse).

11

Interior n 29

26/9/05 18:26

Pgina 12

Anlisis de gnero: prestar atencin especial a

las relaciones y roles de gnero, divisin del trabajo, el acceso a los recursos y el control sobre
los mismos, la posicin de las mujeres, etc.

cual simplifica la actividad, pero explicamos

ambos a continuacin:
El documento de formulacin (proposal en
ingls) es el formato que normalmente los
organismos deben rellenar para presentar su
propuesta de proyecto a una determinada entidad, agencia o gobierno. Son estos ltimos los
que establecen y facilitan el esquema y los
requisitos informativos solicitados a los proponentes, que deben orientar el diseo del proyecto en esta direccin. En ese sentido, la
Unin Europea publica en internet los formatos para cada lnea financiable (por ejemplo,
Derechos Humanos y Democracia, Medio
Ambiente, Ayuda Humanitaria de Emergencia,
etc.) y los organismos demandantes deben atenerse a dichos esquemas para presentar su
propuesta de proyecto.

Es necesario que las personas implicadas (stakeholders) estn identificadas y se haya precisado su
papel futuro en el proyecto. En los perodos de
identificacin suelen converger, al menos, tres instancias bsicas:
Las personas beneficiarias en general y sus
representantes.
Las instituciones y agencias responsables de la
organizacin y ejecucin del proyecto.
Las organizaciones o agencias responsables de
apoyar y financiar la realizacin del proyecto.
Las distintas posiciones de estas instancias, su
estructura organizativa y operacional y sus caractersticas socioculturales contienen ya elementos suficientes como para que sean entendidas sus carencias, las posibles soluciones y las prioridades de
manera diferente.

En estos documentos inicialmente se solicitaba una

informacin general sobre la poblacin objetivo, la
entidad solicitante, el objetivo del proyecto, su justificacin y unas actividades generales propuestas,
seguidas de un presupuesto. En la actualidad, los
formatos han comenzado a integrar, en la mayora
de las agencias internacionales, la Matriz de Planificacin del Marco Lgico, estudios de viabilidad,
indicadores de seguimiento, planes de evaluacin,
etc. que requieren del documento de formulacin
una planeacin operativa en toda regla.

En el marco de la identificacin del proyecto tambin se incluye el estudio de viabilidad. Reflexionar sobre la viabilidad es interrogarse sobre las
posibilidades de realizar la accin sin problemas,
y si se justifican los esfuerzos previstos para el
logro de algn resultado. Dependiendo del tipo
de proyecto, habr que realizar un tipo u otro de
anlisis de viabilidad. En las actividades de tipo
productivo, por ejemplo, hay que hacer un estudio econmico. Y en aquellas que consistan en
infraestructuras sern muy importantes las consideraciones tcnicas, la viabilidad organizativa,
poltica, financiera, etc.

El Plan operativo, plan de operaciones o documento de planeacin, es el documento de planificacin por excelencia. En ste debe integrarse
el detalle de la accin programada, la matriz de
planificacin del proyecto (con objetivos, resultados, actividades, indicadores, fuentes de verificacin y riesgos) desde el enfoque del ZOPP o
del Marco Lgico. Este documento es el que, en
la prctica, gua toda la ejecucin del proyecto,
establece las actividades y las organiza en un
cronograma, detalla responsabilidades, temporalidades en la ejecucin y, sobre todo, el plan de
monitoreo y evaluacin durante la ejecucin.

Una vez que han sido identificados los aspectos de

la situacin de partida que queremos modificar,
esbozado los objetivos que deseamos alcanzar y los
medios necesarios para obtenerlos, as como la viabilidad de todo ello, es el momento para disear el
proyecto y detallar la planificacin.

Un documento de formulacin-planeacin de proyecto debe reunir, al menos, tres caractersticas:

En este segundo momento hay dos posibles

documentos que se manejan al interior de las
entidades. Uno es el documento de formulacin
del proyecto y el otro es el plan operativo (planificacin). En ocasiones se maneja uno solo, lo

Servir de gua para la accin, de tal modo que

contenga las etapas de ejecucin, los recursos
disponibles, las temporalidades, etc.

12

Interior n 29

26/9/05 18:26

Pgina 13

Ser elemento de comunicacin, que exprese el

compromiso entre todos los grupos e instituciones implicados en la puesta en marcha de la
accin.

cin del proyecto que tome las decisiones fundamentales frente a contingencias, reparto de las
tareas y asignacin de recursos en el momento
previsto; la constitucin de comisiones o grupos
de trabajo para atender las tareas del proyecto; el
conocimiento por parte de las personas intervinientes y beneficiarias de las actividades y acciones a realizar y la capacidad tcnica y financiera
de llevar a cabo lo planificado; y una comunicacin fluida, tanto entre las fuentes de financiacin
del proyecto y el organismo que ejecuta el mismo, como entre las diversas comisiones o grupos
de trabajo que se han creado y la poblacin
beneficiaria.

Ser la base para la toma de decisiones, incluyendo la informacin necesaria que permita la
toma de decisiones, tanto con respecto al inicio del proyecto como en las posibles redefiniciones del mismo (MAE-SECIPI-AECI, 1998).
Hay dos ideas claves a tener en cuenta en la etapa
de preparacin (identificacin y formulacin) o de
la evaluacin ex-ante:
La pertinencia: es decir, si el proyecto es til y
responde a las necesidades existentes. La pertinencia es bsicamente una cuestin de utilidad, que sucesivamente conduce a decisiones
de ms alto nivel acerca de si se debe financiar
el proyecto o permitir que ste contine.

La ONU se refiere al proceso de seguimiento como

ver/observar (watch or observe), donde el monitoreo y el control permiten observar el progreso del
proyecto, anticipando posibles desviaciones de lo
planeado y realizar los ajustes necesarios. Se trata
de un proceso continuo y metdico de recogida de
informacin y tratamiento de datos.

La viabilidad: se dice que un proyecto es viable cuando el proyecto es capaz de procurar

beneficios durante un largo perodo de tiempo,
despus de que lo esencial de la ayuda exterior suministrada por los donantes haya llegado a su fin.

La metodologa de evaluacin de la cooperacin

espaola define el seguimiento como aquella fase
del ciclo que se lleva a cabo de manera continuada durante la ejecucin para controlar que la utilizacin de los recursos y la formalizacin de actividades estn de acuerdo con el cronograma previsto (MAE-SECIPI, 1998: 36). Esto requiere que no se
pierda de vista el esquema dibujado en la formulacin, diseo y planificacin del proyecto, que de
manera flexible pueda reorientar aquellos aspectos
que aconseje la interpretacin de la evolucin del
proyecto.

Reflexionar sobre la pertinencia y la viabilidad es

interrogarse sobre las posibilidades de realizar
acciones necesarias que puedan mantenerse
cuando la ayuda y los apoyos exteriores terminen.
1.2.2. La Implementacin del proyecto
(ejecucin y seguimiento)
La implementacin es la etapa de la realizacin del
proyecto. Se refiere al durante del proyecto, y son
dos las acciones que se realizan: ejecucin y seguimiento. Son las dos caras de la misma moneda, no
debiera existir la una sin la otra. Mientras ejecutar
el proyecto responde a la realizacin de las actividades que estaban previstas en la planificacin, el
monitoreo es la realizacin del seguimiento a la
accin que se est desarrollando.

El seguimiento es la etapa del ciclo de gestin que

acompaa a la ejecucin de los proyectos, cuya
finalidad principal es mantener informadas a todas
las personas implicadas sobre el estado en que se
encuentra la ejecucin y verificar en qu grado se
estn realizando las actividades y alcanzado los
resultados y objetivos previstos. Para ello, los procedimientos utilizados en el seguimiento debern
atender a un estudio comparado entre lo que estaba previsto y lo que se est realizando. Se estudiar la realizacin de las actividades segn lo planificado, y los resultados y objetivos en relacin con
los indicadores que se establecieron para posibilitar
dicha medicin.

La ejecucin del proyecto presupone la existencia

de un plan operativo (planificacin) basado en la
propuesta de financiacin, identificacin inicial y
diagnstico. Para la ejecucin del mismo es necesario una serie de requisitos, tales como: la existencia de un organismo responsable de la ejecu-

13

Interior n 29

26/9/05 18:26

Pgina 14

Cuadro 5
El proceso de ejecucin y seguimiento del proyecto
Ejecucin

Seguimiento

Plan operativo de proyecto Plan de proyecto

-

Informes de seguimiento

Plan de trabajo.
Recursos.
Organismo responsable de la ejecucin.
Grupos de trabajo
Actividades

- Seguimiento externo (agencia).

- Seguimiento interno (local).
- Informe / Ficha de Seguimiento:
- Revisin de objetivos
- Revisin de actividades
- Revisin de la planificacin: tiempo, costes, etc.
- Identificacin de cambios
- Establecimiento de previsiones
- Formulacin de recomendaciones

Fuente: Elaboracin propia.

hemos venido sealando, permiten el establecimiento de ciertos cambios en el diseo del proyecto, en la planificacin e, incluso, en los objetivos.

El seguimiento (o monitoreo) es un proceso esencialmente interno a la ejecucin del programa que

permite descubrir las anomalas que surjan durante
la ejecucin y paliarlas. Generalmente, el seguimiento de los proyectos no debe suponer un sistema sofisticado de medicin, pero es bueno que
responda a los indicadores de progreso. Una vez
articulado el sistema que permitir llevar a cabo el
proceso de seguimiento, ste podr centrar su atencin en todos los aspectos de la ejecucin del proyecto que se estimen como relevantes.

Esto es lo que se llama la evaluacin de progreso

(mid-term evaluation) que trata de recoger informacin peridica para comprobar la implementacin
del plan y, a su vez provee datos para la evaluacin
de resultados y ex-post. Es la denominada evaluacin formativa, que tiene como propsito principal
mejorar un determinado programa, poltica, grupo
de personas o producto (Patton, M., 1990).

Una manera de sistematizar la informacin recabada durante el seguimiento es la realizacin de los

Informes de Seguimiento. Estos informes tienen la
funcin de configurar un balance crtico de los
avances del proyecto con respecto a la realizacin
de sus objetivos y las posibilidades de obtener una
eficacia duradera para los grupos destinatarios
(CCE, 1993). As, recogen de manera exhaustiva los
avances logrados en el proyecto en cada perodo,
bien sea parcial (referido a un trimestre, por ejemplo) o final, si recoge todas las actividades realizadas y con resultados del proyecto desde el inicio
hasta el fin. La periodicidad de estos informes estar condicionada a la naturaleza del proyecto, as
como a las exigencias de las agencias donantes y de
las organizaciones que ejecutan el proyecto. Estos
informes, y el seguimiento en general, tal y como

1.2.3. La Evaluacin (ex-post o de impacto)

Genricamente se ha concebido la evaluacin
como el anlisis sobre la cantidad o el valor de
algo. En el mbito de la cooperacin al desarrollo,
una evaluacin puede entenderse como un proceso encaminado a determinar sistemtica y objetivamente la pertinencia, eficacia e impacto de todas
las actividades a la luz de sus objetivos. Se trata de
un proceso organizativo para mejorar las actividades todava en marcha y ayudar a la administracin
en la planificacin y toma de decisiones futuras.
La definicin ms utilizada para la evaluacin, dentro del marco de la cooperacin al desarrollo, es la
establecida por el CAD de la OCDE en su manual
de la ayuda al desarrollo.

Cuadro 6
Concepto de evaluacin
La evaluacin es una funcin que consiste en hacer una apreciacin, tan sistemtica y objetiva como sea posible, sobre un proyecto en curso o acabado, un programa o un conjunto de lneas de accin, su concepcin, su realizacin y sus resultados. Se trata de determinar la pertinencia de los objetivos y su grado de realizacin, la eficiencia en cuanto al desarrollo, la eficacia, el impacto y la viabilidad. Una evaluacin debe proporcionar unas intervenciones crebles y tiles, que permitan integrar las enseanzas
sacadas en los mecanismos de elaboracin de las decisiones, tanto de los pases de acogida como de los donantes.
Fuente: Comit de Ayuda al Desarrollo-OCDE: Manual de la ayuda al desarrollo. Principios del CAD para una ayuda eficaz. Mundi Prensa. Madrid. 1995. Pg 178.

14

Interior n 29

26/9/05 18:26

Pgina 15

zada la intervencin y su nivel de anlisis es ms

profundo, dado que valora con mayor certeza el
alcance de los resultados, si la accin result viable, y analizando sus efectos una vez pasado el
tiempo desde su finalizacin temporal (MAE,
SECIPI, 1998).

Esta conceptualizacin opta por un tipo de evaluacin denominada intermedia o a posteriori, al referirse al proyecto en curso o ya finalizado. Esta
denominacin responde a una de las clasificaciones
posibles, pero es necesario poner de manifiesto la
diversidad de trminos existentes que se utilizan
para distinguir los diferentes tipos de evaluacin.
Una clasificacin interesante es la que ubica la evaluacin como integrante del ciclo de vida del proyecto, desde una perspectiva de las etapas o fases
de intervencin del proyecto.

Seis son los elementos que se pueden tener en

cuenta en el anlisis ex-post. Estos elementos con
frecuencia son confundidos en el lenguaje coloquial, pero en la gestin de proyectos de desarrollo tiene sus diferencias etimolgicas y tcnicas. Se
trata del anlisis de eficacia, efectividad, eficiencia,
pertinencia, viabilidad e impacto8.

La Evaluacin ex-post, que abordamos a continuacin, es la que entraa un anlisis de efectos y

resultados del proyecto despus de haber sido ejecutado y finalizado. Es la llamada evaluacin sumativa, tambin conocida como evaluacin de resultados o de impacto7, desarrollada una vez finalizado
el programa.

En resumen, la evaluacin puede ser entendida

como una etapa propia (la evaluacin ex-post o a
posteriori), pero tambin como una accin que es
transversal a todas las etapas del ciclo del proyecto,
al nutrirse constantemente de anlisis evaluativos,
tanto en la preparacin del proyecto, como en el
seguimiento del mismo. La accin evaluadora es algo
propio de todas las etapas del ciclo, dado que la propia naturaleza dinmica del proyecto y su permanente exigencia de toma de decisiones incorpora la
necesidad de que stas se apoyen en consideraciones bien fundadas. As, es necesario tener en cuenta
la evaluacin dentro del ciclo de intervencin del
proyecto, junto con los distintos momentos en que
pueden recogerse datos evaluativos y juicios valorativos que de ella se derivan (ver cuadro).

Una vez terminada la accin de desarrollo, dos

tipos de evaluacin pueden realizarse: en primer
lugar, una evaluacin que consiste bsicamente
en un anlisis de consecucin de resultados y,
eventualmente, del objetivo especfico de intervencin, acumulando toda la informacin producida por el seguimiento, que se conoce como evaluacin de fin de proyecto o de resultados (en
ingls, terminal o end of project evaluation). En
segundo lugar, y algo ms completa que sta,
podemos encontrar la evaluacin ex-post o posterior, que se realiza tiempo despus de ser finali-

Etapa
Preparacin
(Antes del proyecto)
Implementacin
(Durante el proyecto)
Evaluacin
(Despus del proyecto)

Cuadro 7
Acciones evaluativas en el ciclo de vida del proyecto
Actividades propias
Accin evaluativa
Temporalidad
Identificacin,
Evaluacin de necesidades Evaluacin Ex-ante
Formulacin-Planificacin
y potencialidades
Ejecucin y Seguimiento
Evaluacin de progreso
Evaluacin intermedia
Evaluacin posterior

Evaluacin de resultados
e impacto

Evaluacin ex-post

Fuente: Elaboracin propia.

Francisco Alvira en Metodologa de la evaluacin de programas. Cuadernos Metodolgicos. N 2. CIS. Madrid. 1991. Pag.41 establece diferencias entre ambos tipos de evaluacin, con base en el tipo de poblacin objeto de las mismas. Seala que la evaluacin de resultados busca definir los resultados del programa sobre la poblacin beneficiaria, mientras que la evaluacin de impacto trata de analizar los efectos del programa sobre una poblacin ms amplia: la comunidad o pueblo. Incluso, en la actualidad, se tiende a hablar de evaluacin de impacto como otra accin diferenciada. En este documento no se tendr en cuenta dicha diferenciacin, dado que consideramos que el impacto es una medicin necesaria en la evaluacin de resultados o ex post , y en la prctica sus metodologas son muy similares, lo que hace difcil su distincin. Por ejemplo, en Espaa se utiliza ms evaluacin de resultados frente a Colombia, donde el trmino evaluacin de impacto es ms comn, pero ambas se refieren
a una evaluacin realizada despus de terminado el proyecto.

En la segunda parte de esta exposicin se desarrollan estos elementos.

15

Interior n 29

26/9/05 18:26

Pgina 16

1.3. Las funciones de la

evaluacin ex-post
frente al seguimiento

observar que, a pesar de ser dos acciones complementarias del ciclo de vida del proyecto, poseen funciones diferenciadas. Son mltiples los
organismos y entidades que sealan su necesaria
relacin, hasta el punto de haberse generalizado
el trmino M + E o S + E.

Hasta aqu hemos presentado la evaluacin como

una etapa crucial integrada en la vida del proyecto, pero tambin como una accin constante que
atraviesa la vida del mismo. An as, la pretensin
de este trabajo es resaltar la evaluacin ex-post
como prctica necesaria y til para el desarrollo del
proyecto y para la toma de decisiones futuras, con
funciones diferenciadas al seguimiento y a otras
acciones evaluativas (diagnstico) ms comunes en
la gestin de proyectos.

Pero hay que resaltar la distincin obligatoria que

cabe establecer entre ellos. En ese sentido, la misma GTZ, en un documento propio sobre el Seguimiento en la Cooperacin Tcnica (Klinger, Steigerwarld; 1998), subraya la superacin del binomio
M + E como una sola funcin y su sustitucin por
Seguimiento con el fin de evitar malentendidos.
Mientras el monitoreo o seguimiento es una valoracin continua, tanto del funcionamiento de las
actividades del proyecto en el contexto de los
calendarios de su ejecucin, como de la utilizacin
de los insumos del proyecto por parte de las poblaciones fijadas como objetivo en el contexto del
diseo (Casley, Kumar; 1990), la evaluacin ex-post
es una valoracin a posteriori sobre la pertinencia,
eficacia, eficiencia y efectos del proyecto en el contexto de sus objetivos declarados. Para ello se
requiere informacin procedente de fuera del proyecto, en tiempo, zona y poblacin.

Parece clara la diferencia entre la evaluacin ex-post

y la evaluacin ex-ante (o valoracin previa), realizada al iniciar un proyecto cuando se identifica la
poblacin y su contexto. Pero no es tan fcil separarla de la evaluacin intermedia (o seguimiento), lo
que conlleva en muchas ocasiones a su no realizacin bajo el pretexto razonado: nosotros ya realizamos un seguimiento constante a las actividades.
Si ponemos la atencin en estas dos acciones
evaluativas, seguimiento (S) o monitoreo (M) y la
Evaluacin ex-post o de impacto (E), podemos

Cuadro 8
Principales diferencias entre el Seguimiento y la Evaluacin ex-post
Seguimiento
Recoleccin de informacin para la ejecucin
y toma de decisiones respecto al proyecto

Evaluacin ex-post
Recoleccin de informacin para el aprendizaje de lo
realizado, lo impactado (efectos) y la toma de
decisiones futuras

Periodo de
referencia
Necesidades
de anlisis

Proyecto en ejecucin

Finalizado el proyecto

Cumplimiento de planes y calendarios

Revisin de funciones, actividades y productos
Percepciones de la poblacin beneficiada
sobre la ejecucin
Situacin financiera. Relacin
gastos/ presupuesto

Cumplimiento de objetivos (eficacia)

Revisin de resultados
Percepciones de la poblacin sobre el proyecto
y sus logros (efectos)
Eficiencia (recursos-resultados)
Pertinencia (necesidades)
Sostenibilidad (autonomia de la Poblacin beneficiaria)
Impactos (efectos no esperados)

Usuarios
primarios

Entidad ejecutora
Poblacin beneficiaria

Entidad ejecutora
Entidad financiadora
Otras entidades y agentes
Poblacin beneficiada
Poblacin no beneficiada-entorno

Objetivo

Fuente: Elaboracin propia.

16

Interior n 29

26/9/05 18:26

Pgina 17

Esto no supone que, pese a sus funciones distintas,

no haya caractersticas comunes que realzan la relacin existente entre ellas. Incluso, ocurre con frecuencia que se da el seguimiento sin la evaluacin
final (es decir, la evaluacin de progreso sin la de
resultados), que slo permite juzgar la ejecucin de
la intervencin sin poder concluir nada sobre la
bondad de la misma y su efecto en la poblacin
beneficiaria. Por otro lado, la evaluacin expost
sin el seguimiento resulta casi inviable. La evaluacin posterior requiere de una buena informacin
generada por el monitoreo dado que para poder
juzgar la eficacia y eficiencia de unas determinadas
acciones en el cumplimiento de sus objetivos, va a
ser indispensable conocer los aspectos cuantitativos
y cualitativos de la ejecucin de dichas actividades
(Mokate, K., 1998). As, deber utilizarse la informacin recopilada durante el seguimiento para la
evaluacin, pues una evaluacin carente de informacin proveniente de un seguimiento constante
durante la ejecucin del proyecto tiene una ausencia importante ya no registra los avances del proyecto, los cambios necesarios realizados en la planificacin inicial y las reacciones continuas de la
poblacin frente a la intervencin.

cios valorativos a posteriori sobre el impacto que el

proyecto logr en una poblacin beneficiaria
durante una temporalidad concreta.
La evaluacin ex-post puede tener tres funciones
principales:
- Apoyar los procesos de gestin
La evaluacin posterior recoge como informacin
primaria todos los documentos que se han ido
recopilando en forma de seguimiento a las actividades como apoyo a la gestin del proyecto
que se est ejecutando, dado que han debido
orientar y reorientar las acciones programadas.
Por otro lado, la evaluacin posterior recoge
informacin sobre la ejecucin una vez el proyecto se ha terminado, lo que permite sacar conclusiones -en fro- sobre lo realizado con anterioridad y aportar recomendaciones claves en el
cambio y reorientacin del proyecto en el futuro
(si se ampla) o de otros proyectos.
La evaluacin posterior permite medir la eficiencia en el desarrollo del proyecto, as como mirar
los costes y la eficiencia del uso de los recursos
y descubrir si es necesario mejorar el modo en
que la organizacin realiza las actividades y
tomar correctivos para el futuro.

La necesidad de evaluar despus se pone de manifiesto a la hora de promocionar y disear nuevos

proyectos en la misma lnea de los anteriores, o tratar de realizar otros proyectos similares en el marco de un programa ms amplio. Lo que si parece
claro, tras analizar algunas experiencias de proyectos ejecutados por ONG en Amrica Latina, es que
de toda accin realizada siempre se aprende algo.

- Controlar
La evaluacin tiene una importante funcin de
control financiero y contable, as como de la realizacin de las acciones. Esta funcin normalmente responde a las demandas de las agencias
donantes que necesitan la justificacin de lo
invertido en el proyecto, o a los requerimientos
de los gobiernos. Esta funcin es necesaria, aunque frecuentemente es mal percibida por los
actores del terreno que temen las sanciones que
puede acarrear. A travs de la evaluacin de
eficiencia econmica y financiera se puede conocer el grado de rentabilidad de los capitales, bienes y servicios, una vez se ha terminado el proyecto. Tal y como seala el CAD en sus recomendaciones, esta funcin debe concebirse de
manera distinta a la obligacin de justificar la utilizacin de los fondos pblicos, en un sentido
nicamente contable y jurdico, siendo estas
cuestiones competencia de las auditoras (CAD,
1995).

Algunas de las preguntas que se hacen muchos

operadores de proyectos de organismos de desarrollo son: para qu realizar evaluaciones posteriores y detectar cosas negativas, una vez terminado el
proyecto?, qu sentido tiene encontrar fallas que
daan el ambiente y ya no se pueden remediar?,
no es suficiente entonces el seguimiento continuo
a los proyectos y ahorrar tiempo y dinero en evaluar despus?
La respuesta a estas preguntas viene dada por la
finalidad que se le otorgue a la evaluacin ex-post.
Por ello, veamos cules son las principales funciones a las que a mi parecer debe responder una
evaluacin, entendida sta como la emisin de jui-

17

Interior n 29

26/9/05 18:26

Pgina 18

- Aprender

mediante acciones y juicios evaluativos, incluso

mediante la investigacin evaluativa en general,
que se ha podido llamar la atencin de las personas que toman las decisiones sobre las limitaciones
que tienen en ocasiones los esfuerzos de la ayuda,
debido a imperfecciones, rigidez de las polticas
seguidas por los donantes y por los pases beneficiarios, la insuficiente coordinacin, falta de participacin, etc.

Otra de las finalidades, y a mi parecer la ms interesante, es entender la evaluacin como una herramienta de aprendizaje, que permite mejorar la gestin de proyectos futuros, a travs de la consideracin de las enseanzas sacadas del pasado. De
hecho, la realidad emprica de la gestin de proyectos es la que pone de manifiesto que el haber
realizado evaluaciones en los ltimos tiempos, bien
de proyectos de desarrollo especficos, bien de
polticas de intervencin ms generales, ha contribuido a descubrir cuales fueron los errores cometidos y los caminos equivocados por los que se
orientaba la cooperacin, permitiendo aprender de
los mismos y tomar decisiones que orientasen el
futuro en determinadas direcciones. Por tanto, es

Como seala la Agencia noruega de desarrollo

(NORAD; 1997), la finalidad ms importante de la
evaluacin es proporcionar conocimientos y experiencias que puedan mejorar la calidad de la ayuda
al desarrollo. Es decir, invertir en comunicacin
orientada a la mejora mediante el aprendizaje.

Cuadro 9
Concepto de evaluacin
La evaluacin se refiere tanto al futuro como al pasado: es una va para valorar los resultados de las acciones pasadas, en aras a
incorporar dicho aprendizaje en la planificacin futura. Manteniendo una mirada crtica de lo ocurrido, la evaluacin puede:
- Determinar hasta que punto se han encontrado los objetivos y las metas.
- Valorar la relevancia, la efectividad, la eficiencia, el impacto y la viabilidad de lo que se ha logrado.
- Reconsiderar , a la luz de la experiencia, la validez de los supuestos del plan original.
- Indicar que puntos de vistas internos pueden ser ofrecidos para mejorar una prctica y una poltica de desarrollo ms amplia.
Fuente: Eade, D. And Wiliams, S.: The Oxfam Handbook of Development and Relief. An Oxfam Publication. Volume I. Oxford. 1995. Pg 415.

Es importante resaltar que la evaluacin puede y

debe contribuir a la mejora de las acciones de
desarrollo, como proveedora de informacin para
el control, ayuda a la gestin y sobre todo en la
influencia que ejerza en la toma de decisiones futuras. La evaluacin por ello debe ser debidamente
organizada y expresada en un informe que ojal
sea de dominio pblico.

En conclusin, la evaluacin puede mejorar la gestin

de los programas y proyectos de desarrollo, ayudar a
la gente a aprender de las experiencias pasadas,
incrementar la responsabilidad de los donantes en sus
demandas de que los recursos sean utilizadas con
efectividad, eficiencia y de acuerdo con los objetivos
establecidos y, por ltimo, proveer de informacin
para una buena comunicacin entre organizaciones
locales, beneficiarios y donantes (Rubin,F., 1995).

18

Interior n 29

26/9/05 18:26

Pgina 19

2. LA EVALUACIN EX-POST:
HACIA UNA PROPUESTA INTEGRADORA
DE AGENTES, MODELOS Y HERRAMIENTAS

2.1. Quin realiza

las evaluaciones?

Los agentes externos son regularmente expertos

procedentes de universidades, consultoras, organizaciones de investigacin, etc. La caracterstica que
define la figura del agente externo es que no tiene
una vinculacin directa con el proyecto y no est
subordinado a nadie de la organizacin local (Patton, M., 1997). Con ello se espera aportar una
visin objetiva y crtica del desarrollo del proyecto,
dado que dicha(s) persona(s) no est(n) implicada(s) en el mismo y puede servir tanto a la organizacin que ejecuta el proyecto, como a las autoridades polticas u organismos donantes para fundamentar la toma de decisiones. Esta modalidad de
evaluacin es apropiada cuando se van a observar
cuestiones de responsabilidad, o cuando existe la
necesidad de un experto particular o de cierta
experiencia.

Esta es una pregunta comn al plantearse la posibilidad de realizar una evaluacin ex-post, pues
quines sean las personas responsables, en la prctica, conlleva varias implicaciones. Incluso, en la
literatura existe una tipologa evaluativa segn los
agentes que la realicen. Se puede hablar de cuatro
tipos de evaluacin:
- La evaluacin externa
- La evaluacin interna
- La evaluacin mixta
- La evaluacin participativa
Cada uno de estos tipos se realiza por agentes distintos, normalmente con fines diferentes. La evaluacin puede ser realizada por agentes externos al
proyecto y a la organizacin que lo implementa, la
evaluacin o autoevaluacin que realiza la propia
ONG local, la que tiene en cuenta las intervenciones de ambas y la que, por ltimo, cuenta con las
aportaciones y la participacin de la poblacin
beneficiaria. La literatura reciente sobre evaluacin
recoge estas cuatro modalidades. Vemoslas a continuacin:

- La evaluacin interna, autoevaluacin o realizada

por agentes internos
Se lleva a cabo por personas de la organizacin local
o encargada del proyecto, con la finalidad principal
de conocer los problemas o avances en sus actividades y as introducir los ajustes necesarios. Esta evaluacin es realizada por personas del propio programa que lo conocen bien, saben cules son los objetivos, problemas, fortalezas y debilidades del mismo
porque lo ejecutan directamente (seguramente las
que han realizado el seguimiento del mismo).

- La evaluacin externa o realizada por agentes

externos

Algunos autores (Rubin, F., 1997; Estrella, M. y Gaventa, J., 1998) diferencian entre evaluacin interna y
autoevaluacin. En el primer caso, la evaluacin se
realiza por una persona de la organizacin responsable pero no vinculada directamente con el proyecto;
y en el segundo, la evaluacin se realiza por los responsables de la ejecucin que evalan de manera
regular como parte del seguimiento de actividades.

Se realiza con el concurso de personal tcnico o evaluador experto procedente de otro medio, o que no
est involucrado en la implementacin y ejecucin
del proyecto. Estas personas normalmente son escogidas por el organismo financiador, bien sea una
ONG, una agencia o un gobierno y entregan informes directamente al organismo donante.

19

Interior n 29

26/9/05 18:26

Pgina 20

- La evaluacin mixta o realizada por agentes externos e internos

posibilidad de xito. Si no se tiene en cuenta a

los grupos beneficiarios en el proceso, stos
asumen un rol de meros portadores de informacin. Cuando la poblacin se siente partcipe de lo realizado, las informaciones son de
mayor cantidad y calidad.
- La metodologa utilizada: en la realidad de los
proyectos donde el evaluador es comunmente
externo, hay un predominio de metodologas
extranjeras que dejan un papel meramente provedor a la poblacin beneficiaria. Por el contrario, en la evaluacin participativa cuando la
poblacin beneficiaria es parte integrante del
equipo evaluador, se utilizan herramientas sencillas y grficas para la recoleccin del informacin,
tomando parte activa de los distintos pasos que
el proceso evaluativo requiere. As, todas las personas implicadas pueden tomar parte en decidir
cundo y cmo evaluar, en la seleccin de los
mtodos que se usarn, recogiendo y analizando
los hechos ocurridos y la informacin, preparando informes, decidiendo como usar los resultados
y poniendo las recomendaciones en prctica
(Feuerstein, M.T., 1986).
- Los costes: en el caso de los costes de cada
modalidad, cabe sealar que a medida que se
avanza en la escala de la participacin el coste es
mayor, bien en sentido econmico o temporal.
Cuantas ms personas forman el equipo, el coste
laboral es mayor al tener que contratar a un
mayor nmero de personas. Este coste puede ser
reducido si las personas que representan a la parte local y a los grupos beneficiarios son las mismas que participaron en la identificacin y seguimiento del proyecto. En cuanto al coste temporal,
hay que sealar que a primera vista trabajar en
equipo frente a un nico agente, bien sea externo o interno, requiere de una mayor disponibilidad de tiempo. Ambos costes pueden minimizarse si se realiza el proceso de manera eficiente.
- La veracidad, fiabilidad y validez de lo observado: en el caso de la veracidad, es comnmente
reconocido por las agencias extranjeras que los
agentes evaluadores externos son ms susceptibles de ser engaados que el personal interno,
dado que en muchas ocasiones el agente externo
es extranjero y es visto como una persona experta contratada por la organizacin donante, generando con frecuencia ansiedad y recelos entre la
poblacin beneficiaria.

Es aquella que en su diseo y aplicacin participan

personal responsable del proyecto y agentes externos al mismo. A veces se conforma un equipo mixto que integra agentes externos e internos al proyecto con una diferenciacin de funciones, donde
los internos se encargan de los aspectos locales y
de la organizacin del proyecto y los otros se dedican a los aspectos ms tcnicos, estableciendo
mediciones ms estandarizadas y objetivas, incluso
sirviendo de facilitadores-formadores en la construccin de capacidades internas y viabilidad del
proceso de monitoreo y evaluacin.
Es una modalidad ms integrada y participativa,
donde se forma un equipo evaluador mixto que
aprovecha las ventajas del trabajo conjunto, minimizando las desventajas de ambos tipos de evaluacin.
- La evaluacin participativa o integrada por todos
los agentes implicados
Esta incluye, en el diseo y desarrollo de la evaluacin, a todas las partes implicadas en el proyecto: agencias u organismos donantes, departamentos
gubernamentales y municipales, ONGs externas, la
ONG local u organismo que implementa el proyecto y la poblacin beneficiaria o sus representantes.
Especial atencin se concede a la participacin de
los grupos beneficiarios.
Esta modalidad, que en la actualidad est adquiriendo una gran relevancia, espera lograr mayores aceptaciones de la evaluacin, as como de sus potencialidades en el aprendizaje y la toma de decisiones
futuras. As mismo, trata de elevar la conciencia
social y los compromisos de la poblacin implicada
con relacin a sus necesidades, as como el desarrollo del dilogo y la bsqueda de consenso entre partes con intereses distintos.
Al comparar estas cuatro modalidades observamos
diferencias que giran en torno a cinco puntos:
- Lo objetivo frente a lo subjetivo: se piensa que lo
externo siempre es ms objetivo y lo interno est
cargado de subjetividad. Pero, frente a estos
extremos, la opcin de combinar distintas miradas de la realidad que, a su vez, es compleja suele proporcionar mayores garantas.
- El papel de la poblacin beneficiaria: cuanto
mas participativo es el grupo evaluativo, mayor

20

Interior n 29

26/9/05 18:26

Pgina 21

En el caso de la fiabilidad, es el agente externo el

que conoce mejor los mtodos y tcnicas de obtencin de informacin y por ello maximiza las posibilidades de objetividad y utiliza tecnologa dura en
cuanto a diseo e instrumentos. No por esto debe
olvidarse que la tecnologa es una herramienta
metodolgica muy valiosa, siempre y cuando no se
convierta en un fin en s misma.

la validez es considerada como instrumento de

verificacin de que la informacin recogida es significativa y correcta. Entonces, adems de verificar
si los resultados son vlidos por si mismos, es
necesario revisar si los resultados son vlidos para
lo que se pretenda evaluar y orientar los resultados a los cambios futuros y a la mejora de la situacin, etc. Cuando los objetivos son concertados
entre distintas perspectivas, la validez de lo planeado aumenta.

Importante tambin es tener en cuenta el parmetro de la validez. Entre los investigadores sociales,

Cuadro 10
Ventajas e inconvenientes de las diferentes modalidades de evaluacin segn los agentes que la realizan
Tipos de evaVentajas
Inconvenientes
luacin segn
los agentes
- Es personal ajeno al proyecto que no conoce
- Asegura cierta objetividad.
Evaluacin
su desarrollo y puede no entenderlo, o no conoce
- No existe vinculacin personal con el proyecto.
externa
- Utiliza tecnologa sistematizada y estandarizada.
- Maximiza la credibilidad social de la evaluacin.
- Es personal conocedor de los mtodos de
evaluacin.
- Suele tener experiencia acumulada de otras
evaluaciones (personal experto).

la gente a la que beneficia.

- La poblacin beneficiaria es sujeto pasivo y mero
proveedor de datos.
- Genera desconfianza, reactividad y ansiedad en la
poblacin beneficiaria que desconoce sus propsitos.
- Genera inquietudes en las personas de la ONG local
o del organismo que ejecuta el proyecto.
- Poco tiempo disponible y altos costes.

Evaluacin
interna

- Conoce el proyecto muy bien, tanto su origen,

como su desarrollo e implementacin.
- Es parte de la estructura y organizacin.
- Conoce a la poblacin, est familiarizado con el
programa, la gente y puede interpretar sus
comportamientos y actitudes.
- No genera conflicto a priori entre la poblacin
beneficiaria, ni en la organizacin, con lo que sus
recomendaciones son vividas con menos miedo.
- Costes bajos.

- Mayor dificultad en conseguir objetividad en las

valoraciones.
- Posible desconocimiento de mtodos y tcnicas
de evaluacin y posible falta de experiencia de otras
evaluaciones.
- Riesgo de realizar evaluaciones como justificacin
de lo realizado.

Evaluacin
mixta

- Integra ambas perspectivas, maximizando sus

ventajas y reduciendo inconvenientes de cada una
por separado.
- Genera un equipo (mnimo 2) que debe ponerse
de acuerdo en qu evaluar, como hacerlo, cuando
y con quin. Los criterios de evaluacin no vienen
impuestos.
- Establece vnculos ms estrechos entre la ONG
local y el organismo donante.
- La recoleccin, desarrollo e interpretacin de los
datos se realiza de manera conjunta.
- Mayor participacin de los grupos beneficiarios.
- Creacin de un equipo evaluador que integra,
como mnimo, donante, contraparte y beneficiarios.
- Mayor aceptacin en la poblacin.
- La poblacin es sujeto activo de la evaluacin y de
la toma de decisiones sobre la orientacin y
sustentacin del proyecto en el futuro.
- Dinmica de dilogo, debate, negociacin y
compromiso.
- Se genera conciencia de compromiso, participacin
y potencialidades en la poblacin.
- Genera procesos de autoconciencia en la poblacin
de ser sujetos de su propio proceso de desarrollo.

- Se corre el riesgo de caer en una evaluacin engaosa

donde los objetivos se establecen desde el donante,
estando ya tomadas las decisiones sobre el futuro cercano.
- Requiere mayor coste econmico, material y temporal.
- El dilogo y la bsqueda de consenso es un proceso
lento que no siempre consigue el acuerdo.
- Los grupos locales son sujetos pasivos que son requeridos
para la obtencin de informacin.
- Poca participacin de la poblacin beneficiaria con la
consiguiente falta de implicacin en la evaluacin
y en la toma de decisiones futuras.
- Aumenta el coste temporal de la evaluacin, dado que
debe tenerse en cuenta el ritmo de tres actores distintos.
- Posible del coste de la evaluacin dado que aumenta
el nmero de participantes en el equipo.
- Los procesos de bsqueda de consenso son complejos
y lentos.
- Las contrapartes y la poblacin beneficiaria desconocen
los mtodos y tcnicas de evaluacin. Sern necesario
cursos de formacin.
- Potencial falta de inters y motivacin de la poblacin
beneficiaria en la realizacin de las evaluaciones y posible
cultura del silencio.
- Ser necesario afrontar el potencial conflicto generado
por las distintas motivaciones y los distintos intereses
que mueven a cada parte.

Evaluacin
participativa
o integrada

Fuente: Elaboracin propia.

21

Interior n 29

26/9/05 18:26

Pgina 22

2.2. La evaluacin ex-post

en los principales modelos
de gestin de la cooperacin
internacional

Los modelos de evaluacin de programas datan

de principios de siglo y la evolucin de los mismos avanza hasta nuestros das. As, se ha evolucionado desde modelos ms rigurosos con esquemas cientifistas y objetivistas que pretendan establecer mediciones del logro de los objetivos
(Tyler, Stake, Campbell, etc.), hasta modelos que
entienden la evaluacin como un proceso de
negociacin entre los diversos agentes involucrados, utilizando esquemas ms flexibles y participativos (Guba, Lincon, Patton).

En el caso de la evaluacin de programas, la literatura ha desarrollado a lo largo del siglo toda una
tradicin en modelos evaluativos, sobre todo en el
mbito educativo. En el mbito de la cooperacin
al desarrollo se han venido desarrollando algunos
modelos de gestin de proyectos que se aplican
tanto a la etapa de planificacin como a la de
seguimiento y evaluacin, pero no ha llegado a
desarrollarse un modelo propio. Ms bien, los
modelos de planificacin se han tratado de aplicar
en la evaluacin ex-post.

A lo largo de este siglo se han desarrollado varios

modelos y perspectivas de evaluacin que han ido
completando los modelos iniciales y ms sencillos
por otros cada vez ms participativos que permitan
a las comunidades beneficiarias ser dueas de sus
propios procesos de desarrollo.

Cuadro 11
Cuatro generaciones en evaluacin de proyectos
Guba y Lincon agrupan los modelos de evaluacin en cuatro generaciones:
1. Primera generacin: Nace en 1900 y se denomina evaluacin orientada a la medicin. Relacionada con la tradicin educativa y la gestin cientfica en la industria y los negocios. El rol del evaluador es tcnico para proporcionar instrumentos de
medida.
2. Segunda generacin: Se orienta a la descripcin del programa. Enfatiza el logro de los objetivos y analiza las fortalezas y
debilidades del programa para realizar revisiones. El evaluador es esencial para la descripcin, aunque todava son importantes sus funciones tcnicas.
3. Tercera generacin: El juicio es parte integral de la evaluacin. Este requiere que los objetivos se tomen como objeto de evaluacin, adems de las metas y el propio programa. El evaluador es considerado como juez y ayudante de los que toman
las decisiones y a establecer estndares para el juicio.
4. Cuarta generacin: Enfatiza la evaluacin como un proceso de negociacin que incorpora varios implicados. Reconoce que
las perspectivas de la gente y sus intereses toman mejor forma si se hace desde su sistema de valores. El evaluador tiene un
rol facilitador en el proceso negociador de los implicados, que participan en el diseo, implementacin e interpretacin de
la evaluacin.
Traducido de Guba, Egon y Lincon, Ivonne: "Fourth Generation Evaluation". Sage Publications. London 1989.

La economa ha desarrollado su propia evaluacin social de proyectos, que se ha aplicado a

programas y proyectos sociales. Por otro lado, y
de forma paralela, la cooperacin internacional
ha desarrollado especificamente el Enfoque del
Marco Lgico o ZOPP, modelos evaluativos que,
si bien proceden de modelos de diagnstico y
planificacin, han interiorizado los elementos de
la tradicin evaluativa. Por ltimo, el creciente
desarrollo de los modelos participativos o de
autogestin merece dedicarles un apartado.

Demos un repaso a las tres corrientes: el modelo

de Anlisis Costo Beneficio (ACB) y Coste Efectividad (ACE) proveniente de la economa; el
modelo del Marco Lgico (EML), y los modelos
participativos o de autogestin (DRP-PRA).
2.2.1. Los modelos de la economa
En el marco de la evaluacin cuantitativa, y sobre
todo en el campo de la economa, existen varios

22

Interior n 29

26/9/05 18:26

Pgina 23

modelos en lo que se conoce como evaluacin econmica y social de proyectos (o evaluacin socioeconmica de proyectos), algunos de los cuales se
han tratado de aplicar en la evaluacin de grandes
proyectos de desarrollo social, sobre todo los
implementados por la CEPAL, ILPES y el Banco
Mundial.

mejor alternativa de la intervencin (antes de) o

si la intervencin ha logrado los objetivos y ha
sido eficiente (Ex-post). Adems, si el proyecto
fue socialmente aceptado y aceptable, puede
medirse el rendimiento en trminos de resultados
e impacto en la poblacin beneficiaria.
Algunos de los modelos de evaluacin de la rentabilidad econmica de los programas ha tratado
de aplicarse al mbito de proyectos sociales y de
desarrollo. Es el caso del Anlisis Costo-Beneficio
(ACB) y el Anlisis Costo-Eficacia (ACE).

Tal como entienden los economistas la ciencia

econmica, sta no se limita al anlisis de ganancias financieras, sino que incorpora elementos
para la satisfaccin de necesidades (Castro, R y
Mokate, K., 1998). As, se puede entender la evaluacin econmica y social como el conjunto de
herramientas que tiene el economista para poder
analizar proyectos y polticas, con el propsito de
destinar los recursos de tal manera que sea ms
benfica para la poblacin nacional. El problema
de la utilizacin de los recursos escasos pone en
evidencia la necesidad de enfrentar dos grandes
retos: el primero, lograr asignar dichos recursos
de una manera eficiente (lograr bienestar al
menor costo) y, por otro lado, asignar los recursos de manera equitativa. As, segn sealan estos
autores, la evaluacin econmica pretende medir
en forma exhaustiva el aporte neto de un proyecto al bienestar nacional, teniendo en cuenta
los objetivos de eficiencia y equidad.

Cualquier proyecto a realizar implica unos costos

a la espera de obtener unos beneficios. Si stos
pueden ser traducidos a unidades monetarias, es
posible realizar la tcnica del Anlisis CostoBeneficio. El ACB se basa en el principio de comparacin: beneficios del proyecto con sus costos,
en el caso de que los primeros sean mayores que
los segundos indica que el proyecto es rentable.
Es importante tener en cuenta, que tanto costos
como beneficios se expresan en unidades monetarias.
As, puede entenderse por beneficio los resultados netos, tangibles e intangibles, de un programa o proyecto, y por costo los recursos requeridos para la implementacin de dicho proyecto
(directos e indirectos). Si los costos y los beneficios de un proyecto se produjeran al mismo tiempo no sera necesario tomar en cuenta la dimensin temporal. Pero, seguramente, los costos del
proyecto pueden extenderse durante varios aos
antes de que comiencen a darse beneficios. Esto
plantea la necesidad de traducir los costos de hoy
y los beneficios futuros a la misma unidad de
medida (Cohen, E., Franco, R., 1992). Esta operacin se conoce como actualizacin a una Tasa de
descuento.

En los ltimos aos se ha tomado la conciencia

de la necesidad de aplicar los conceptos tericos
convencionales del anlisis econmico a la poltica social y, dentro de ella, a la prestacin de servicios sociales y a los programas de accin social
en general. Dado que el debate se centra en
cmo asignar recursos escasos de manera que se
pueda lograr una satisfaccin ptima de las necesidades humanas priorizadas, la evaluacin de la
eficiacia de los proyectos sociales tiene un componente econmico claro (Aguilar, Ander-Egg,
1994).

Para comparar los costes y los beneficios de un

proyecto se consideran todos los ingresos y egresos del mismo, el valor relativo del dinero en el
tiempo y la tasa de inters equivalente cuando se
comparan magnitudes monetarias en momentos
distintos. Esto puede calcularse de varias formas,
pero las ms utilizadas son el valor actual neto
(VAN), la tasa interna de retorno (TIR) y la relacin costo-beneficio.

As, se hace necesario medir la rentabilidad econmica y social de realizar inversiones en determinado campo, y sobre todo, se recupera la
importancia de la evaluacin econmica de los
programas sociales, tanto por razones de responsabilidad social de las instituciones y organismos
prestadores de servicios, como por criterios de
rentabilidad que permitan analizar cul es la

23

Interior n 29

26/9/05 18:26

Modalidad
Anlisis
Costo-Beneficio

Anlisis
Costo-Eficacia
(efectividad)

Anlisis
Costo-Utilidad
Anlisis
Costo-Impacto

Pgina 24

Cuadro 12
Modelos de la evaluacin socioeconmica de proyectos
Medida de resultado
Concepto
Medida de costo
o efecto
Estudiar la relacin
Unidad monetaria
Unidad monetaria
entre los beneficios
del proyecto y su
costo
Estudiar a qu costo Unidad monetaria
Unidad de resultados
se logr el objetivo y
si hubiera sido
posible lograrlo a un
coste menor
Estudiar la utilidad del Unidad monetaria
Unidades percibidas
objetivo a un costo
por el individuo de
determinado
forma subjetiva
Estudiar los efectos
Unidad monetaria
Consumo de bienes y
del objetivo en el
servicios
(numerario: canasta
consumo y el
de bienes y servicios
bienestar de la
que se adquieren con
poblacin
una unidad
monetaria)

Indicadores
Valor presente neto

Valor anual
equivalente (VAE)

Ingresos Costos

Costos
VPNE: Valor presente
neto econmico
TIRE: Tasa interna de
retorno econmica
(valoracin con
precios econmicos,
no de mercado)

Fuente: Elaboracin propia a partir de la bibliografa.

Pero cuando los beneficios de los proyectos no

pueden ser expresados en trminos de unidades de
moneda (lo cual ocurre en muchos proyectos de
cooperacin), una tcnica adecuada puede ser el
Anlisis de Costo-Eficacia (Efectividad). Este modelo compara los costos con la potencialidad de
alcanzar ms eficaz y eficientemente los objetivos
propuestos (en la evaluacin ex-ante) y analizar la
eficacia y la eficiencia del proyecto (en la evaluacin ex-post). El anlisis ACE puede proveer informacin sobre los menores costos para alcanzar un
objetivo y los datos sobre costes y precios de lograr
diferentes objetivos. El ACE ex-post tiene una
secuencia lgica (Musto, S., 1975), cuyas etapas
fundamentales son :

La evaluacin econmica (eficiencia), desde el punto de vista terico, incluye todos los efectos, pero
debido a la dificultad en la valoracin (determinar
el precio econmico) se recurre a realizar evaluaciones especficas (por ejemplo, el componente
ambiental) por fuera del modelo general. La evaluacin social (para considerar la equidad) es subjetiva y requiere de un organismo central que defina los parmetros a utilizar, de acuerdo con una
poltica establecida en relacin con los aspectos
distributivos. Adems, este tipo de evaluacin en la
prctica no permite la medicin de efectos sobre
otras variables no econmicas (relaciones sociales,
organizacin, liderazgo, etc.)

1. Identificar con precisin los objetivos del proyecto.

2.2.2. El Enfoque del Marco Lgico (EML)

y el Mtodo de Planificacin Orientada
por Objetivos (ZOPP)

2. Traducir los objetivos en dimensiones operacionales e indicadores.

El Enfoque del Marco Lgico (EML) o Logical Framework Approach (LFA) y el mtodo de Planificacin Orientada por Objetivos o Ziel Orientierte Projekt Planung (ZOPP) son dos mtodos ampliamente utilizados en Europa que tienen sus orgenes, en
las agencias donantes de ayuda al desarrollo, en la
necesidad de establecer pautas para la planificacin
de los proyectos de desarrollo y mejorar su gestin,

3. Especificar las alternativas que sern evaluadas.

4. Medir los recursos afectados en trminos
monetarios.
5. Medir el grado de logro de los objetivos.
6. Comparar la alternativa de menor costo (entre
las que alcanzan el objetivo) y la realizada.

24

Interior n 29

26/9/05 18:26

Pgina 25

y parte integral del ciclo de proyecto. Ms adelante pas a ser el sello de fbrica de la GTZ en los
pases contrapartes donde desarrollaba proyectos.

permitiendo el seguimiento y la evaluacin de los

mismos.
En concreto, fue la Agencia Estadounidense de Cooperacin Internacional al Desarrollo (USAID) la que
a finales de los sesenta (1969) elabor el primer
Marco Lgico, tratando de reducir las deficiencias
de los proyectos de cooperacin, a partir de una
planificacin especfica y clara que pusiera las bases
para la evaluacin durante toda la vida del proyecto. Se trata de una manera de estructurar los principales elementos de un proyecto, subrayando los
lazos lgicos entre los insumos previstos, las actividades planeadas y los resultados esperados. Es una
forma de mejorar la lgica del plan de accin, analizndolo en trminos de medios y fines.

Aunque la mayora de los manuales consideran el

ZOPP como una variante del EML (Toolkits,
1998), en Europa tiende a utilizarse como un marco lgico especfico de los alemanes que le han
hecho aportes al inicial, pero que se trabaja de
manera integrada. Ciertamente son metodologas
que tienden a converger y puede decirse que se
hacen entre s prstamos terminolgicos y de
aplicacin9.
El EML, a nivel general, es una metodologa que
integra instrumentos y mtodos de anlisis que
permiten presentar de forma sistemtica y lgica
los objetivos de un proyecto. Sus relaciones de
causalidad sirven para indicar si se han alcanzado
los objetivos y definir las hiptesis exteriores al
proyecto o programa que pueden influir en su
consecucin, estableciendo los indicadores para
el seguimiento y la evaluacin. Es necesario precisar que ambos modelos fueron concebidos para
la planificacin de proyectos, pero tambin permiten y facilitan el monitoreo y la evaluacin
posterior, al fijar los objetivos del proyecto de
manera especfica, establecer los indicadores que
permitirn la comprobacin del alcance y las
fuentes de verificacin de los mismos. Veamos a
continuacin sus caractersticas principales y la
metodologa propuesta para la evaluacin expost.

Fue entonces cuando comenz a extenderse entre

las agencias de cooperacin internacional de otros
pases. La Agencia de Desarrollo Internacional de
Canad (CIDA), la Administracin para el Desarrollo de Ultramar Inglesa (ODA), la Agencia de Cooperacin Internacional Japonesa (JICA), la Agencia
para el Desarrollo Noruega (NORAD), etc. fueron
incluyendo en sus procesos marcos lgicos adaptados a la manera de gestionar de cada pas. Lo mismo ha ocurrido lentamente en las agencias de las
Naciones Unidas como el PNUD, UNICEF y ms
recientemente el ACNUR. Otros, como el Banco
Interamericano de Desarrollo (BID), han ido integrando tambin en su gestin estas metodologas.
En esta lnea, la Agencia Alemana de Cooperacin
Tcnica (GTZ), tras poner a prueba el EML en los
setenta, desarroll a principios de los ochenta una
ampliacin del mismo y en 1983 introdujo el mtodo de planificacin ZOPP. Este modelo, basado en
el norteamericano, trataba de estructurar la planificacin del proyecto con base en una serie de talleres (Zopp 1, Zopp 2... Zopp 5) a partir del trabajo
en equipos interdisciplinarios e interculturales, donde participaban las organizaciones contrapartes y
los grupos destinatarios (Seufert, C.- GTZ, 1991). Si
bien se introdujo provisionalmente en 1983, para
1987 ya se haba incluido como norma obligatoria

El EML pone el nfasis en la estructuracin lgica de los principales elementos de un proyecto,

organizados en forma de matriz y subrayando los
lazos lgicos entre los insumos previstos, las actividades planeadas y los resultados esperados.
Adems, se indican los factores externos o
supuestos que influyen en la realizacin satisfactoria de la intervencin. El ZOPP, por su lado,
parte de la idea de que la cooperacin entre el
personal del proyecto y las entidades contrapartes
es ms fcil si se ponen previamente de acuerdo

En 1990, la Agencia Noruega de Cooperacin Internacional (NORAD) public El Enfoque del Marco Lgico: Manual para la planificacin de proyectos mediante objetivos,
advirtiendo que trata de integrar la metodologa desarrollada por las Naciones Unidas y la GTZ (IUDC, 1994). La propia Unin Europea lo asume en 1993, cuando la entonces Comisin Europea publica La Gestin del ciclo de un proyecto: Enfoque integrado y el Marco Lgico, obligando a presentar proyectos bajo ese formato y aunando ambas
perspectivas. El Comit de Ayuda al Desarrollo de la OCDE lo promueve entre los pases europeos hasta el punto de estar totalmente ligado al ZOPP de la GTZ. Esta es la
razn principal por la que se expone de manera conjunta su metodologa.

25

Interior n 29

26/9/05 18:26

Pgina 26

en los objetivos. Abarca diferentes pasos de anlisis y de planificacin que sirven para determinar
la situacin inicial, el sistema de objetivos y la
concepcin del proyecto. Tal y como seala una
breve presentacin del mtodo, la propia GTZ
(Seufert, C., 1991), en la medida de lo posible,
dichos trabajos deben realizarse en equipo
mediante tcnicas de moderacin, visualizacin y

documentacin de todas las fases para apoyar la

comunicacin y la toma de decisiones.
El EML-ZOPP se estructura a travs de dos grandes
etapas, subdividas en 5 momentos o pasos. La etapa analtica, que pone las bases para la planificacin, y la etapa de construccin de la matriz de
planificacin de proyecto-MPP, que trata de estructurar el proyecto de manera lgica.

Cuadro 13
Metodologa del EML-ZOPP
Etapas
Etapa analtica

Etapa de construccin de la MMP

Momentos
-

Anlisis de participacin
Anlisis de problemas
Anlisis de objetivos
Anlisis de alternativas-Seleccin de estrategias
Construccin de la Matriz de Planificacin
Lgica vertical: objetivo general, objetivo especfico, resultados y actividades
Lgica horizontal: indicadores, fuentes y factores externos

Fuente: Elaboracin propia.

Dado que ya son conocidos los cinco pasos de esta

metodologa, prestar atencin solamente a aquello
que est referido con la evaluacin ex-post:

La matriz de planificacin del proyecto (MPP) es un

conjunto de conceptos que se describen de modo
operativo en forma de matriz (cuadro de doble
entrada), de tal forma que es posible verificar si la
intervencin ha sido instruida correctamente. Se
presentan de manera sistemtica y lgica los objetivos, resultados y actividades de una intervencin
y sus relaciones causales (lgica vertical), detallando los factores externos que pueden influir en el
desarrollo de esa lgica, los indicadores verificables
y sus fuentes para poder comprobar el cumplimiento de los objetivos y sus resultados.

1. Etapa analtica: se realizan todos los anlisis

referidos a la preparacin del proyecto (anlisis de participacin, problemas, objetivos y
seleccin de estrategias)10.
2. Etapa de construccin de la Matriz de Planificacin (MPP): determina la lgica de intervencin del proyecto, sus supuestos, indicadores,
fuentes de verificacin, insumos y costes.

Lgica de intervencin
Objetivo general
Objetivo
especfico
Resultados
Actividades

Cuadro 14
La matriz de planificacin
Indicadores objetivamente Fuentes de verificacin
verificables

Medios

Hiptesis/Supuestos

Costes

Fuente: Comisin de las Comunidades Europeas: Gestin del ciclo de un proyecto. Enfoque Integrado y Marco Lgico. Unidad de Evaluacin. Serie mtodos e instrumentos par ala gestin del ciclo de un proyecto. N1. Febrero de 1993. Bruselas. Pg 23.

10
Toda la metodologa sobre esta primera parte se encuentra en los manuales sobre marco lgico y ZOPP. Revisar bibliografa y ver Gonzlez, Lara Enfoque del Marco Lgico (EML) y el Mtodo de Planificacin Orientada por Objetivos (ZOPP): Metodologa para la gestin de proyectos desde la Cooperacin Internacional al Desarrollo en Revista
Tecnologa Administrativa. Departamento de Ciencias Administrativas y Centro de Investigaciones y Consultoras Administrativas. Universidad de Antioquia. Vol. XV. N35.
Enero- Marzo 2001. Medelln- Colombia.

26
Fuente: Elaboracin propia a partir de la bibliografa.

Interior n 29

26/9/05 18:26

Pgina 27

Esta matriz concisa, fcilmente aplicable y utilizable

en los informes, disminuye la carga de trabajo de las
partes que intervienen en las diversas fases de un proyecto. (...) Es un instrumento que permite ver claramente cmo va a evolucionar la intervencin, qu
estrategia se va a seguir y qu medios se van a utilizar. Durante el seguimiento y la evaluacin, este mismo marco lgico sirve de punto de referencia para
analizar los resultados y el impacto de la intervencin
(Comisin de las Comunidades Europeas, 1993: 23).

La Agencia Noruega de Cooperacin Internacional

propone un modelo evaluativo basado en el formato del EML. Se trata de realizar un anlisis a
nivel agregado, basados en unos criterios denominados componentes de evaluacin, que son construidos directamente sobre los elementos de la
jerarqua de objetivos. Es un modelo que se organiza en tres dimensiones: la jerarqua de objetivos,
el conjunto de componentes de la evaluacin y los
factores de desarrollo.

Cuadro 15
La evaluacin en el EML

Se propone un modelo tridemensional

Componentes de evaluacin

La sostenibilidad del proyecto en el largo plazo

Viabilidad

Direccin y utilidad del proyecto

Pertinencia

Efectos del proyecto en el largo plazo

Impacto

Efectos del proyecto en el largo plazo

Eficacia

Logro de resultados

Eficiencia

Insumos

Objetivo
especfico

Productos

Objetivo
general
Factores de desarrollo

Jerarqua de objetvos
Fuente: IUDEC-UCM, Cedeal, Norad: Evaluacin de proyectos de ayuda al desarrollo. Manual para evaluadores y gestores. Madrid. 1997. Pg 31.

los indicadores los elementos clave del proceso

de evaluacin ya que estos permiten saber en
qu medida se alcanz cada nivel de intervencin vertical.

- La jerarqua de objetivos
Consiste en la comprobacin de los indicadores de
alcance para cada uno de los niveles de la matriz
en sentido vertical (objetivo general, especfico,
resultados y actividades). En esta parte pone nfasis el sistema de seguimiento del ZOPP. Para cada
uno de los niveles de la intervencin vertical deber existir en la matriz unos indicadores, sus fuentes
y los factores de riesgo en su logro.

b) Las fuentes de verificacin: indican de dnde se

extrae la informacin necesaria para comprobar
el cumplimiento de los indicadores. Las fuentes
deben proporcionar informacin sobre la ejecucin de cada uno de los niveles de la lgica vertical. Las fuentes pueden ser de dos tipos:

a) Indicadores objetivamente verificables (IOV):

para cada nivel de la estructura del proyecto
debe haber alguna variable para medir el cambio. Los indicadores permiten a las personas
gestoras del proyecto y al equipo evaluativo
observar los logros del proyecto. Hay que evaluar el alcance de los objetivos y los resultados
en trminos de calidad y cantidad. Quizs son

- primarias: informacin generada por el mismo

proyecto.
- secundarias: informaciones generadas por otras
instancias, fciles de consultar y que aportan
informacin relevante para la evaluacin del
proyecto.

27

Interior n 29

26/9/05 18:26

Pgina 28

- Los componentes de evaluacin11

cuyo anlisis deber ser incluido en el trabajo de

evaluacin son los siguientes:

Los componentes bsicos de este modelo se articulan tambin a travs de la matriz, estableciendo
anlisis comparados:

- medidas de poltica y prioridades en el pas

receptor;
- organizacin, liderazgo y participacin local;

- Eficiencia: anlisis de resultados segn el

esfuerzo realizado (la inversin en insumosactividades).
- Eficacia: pone en relacin el alcance del objetivo especifico con los resultados logrados.
- Pertinencia: mide hasta que punto los resultados del proyecto y el logro de los objetivos
estn aportando a las prioridades locales.
- Viabilidad: analiza si los efectos del proyecto, a
partir de los cuatro niveles, podrn mantenerse
en el futuro.
- Impacto: estudia el alcance del objetivo general
sobre la poblacin beneficiaria, a partir de los
efectos del proyecto.

- condiciones financieras y econmicas;

- factores tecnolgicos;
- factores culturales;
- factores medioambientales y ecolgicos.
El propio marco lgico propone la realizacin de
informes de progreso que revisen el proyecto, bajo
un formulario basado en los elementos contenidos
en el EML; de tal forma que en el momento de la
evaluacin no sea necesario realizar investigaciones
histricas detalladas, sino que sea suficiente estimar
el impacto y la pertinencia del proyecto, su relacin con los objetivos, grupos beneficiarios y otras
partes afectadas y, tambin, en relacin con los
insumos (NORAD-IUDC, 1993).

- Los factores de desarrollo

Hay que prestar una especial atencin a la evolucin
de los factores externos del proyecto, pues son las
condiciones que deben existir si se quiere que el
proyecto tenga xito, pero que escapan al control
directo de la intervencin. Son factores ajenos al control del proyecto, que deben cumplirse para que se
verifique la lgica de intervencin. Hay factores que
afectan a las metas, los resultados e, incluso, las actividades. El seguimiento de estos factores permite
garantizar la ejecucin del proyecto. En el caso de la
evaluacin ex-post tienen gran relevancia pues aportan informacin sobre la sostenibilidad del proyecto.

2.2.3. Los modelos de la tradicin participativa

o de autogestin
El concepto de evaluacin participativa no es nuevo, y todava menos el de participacin o gestin
participativa. Una definicin sencilla de la participacin, la considera como un proceso de comunicacin y accin que permite a un grupo de personas interesadas en su desarrollo articular sus necesidades e intereses y tener parte en su realizacin.
Pero el trmino participacin se usa en diversos
sentidos y no significa lo mismo para cualquier persona u organismo. Como seala la GTZ alemana su
significado puede abarcar diferentes grados.

Los aspectos o factores de especial importancia

para la viabilidad de un proyecto (OCDE, 1989) y

Cuadro 16
Participacin: desde la colaboracin hasta la emancipacin
El significado de la participacin en un proyecto puede abarcar:
Desde la colaboracin en la ejecucin del proyecto
Hasta la potencializacin de su capacidad poltica
- Colaborar en un proyecto definido y planificado por otras
personas.
- Intervencin activa en el proyecto para garantizar
la sostenibilidad.
- Consulta para conseguir informacin para el proyecto.

- Facilitar la autogestin del proyecto: diagnstico,

planificacin, implementacin y evaluacin propias.
- Participacin como capacitacin poltica y econmica.
- Iniciativa para la creacin de organizacin local,
y fortalecimiento comunitario.

Fuente: Elaboracin propia.

11

En la tercera parte se amplan estos conceptos.

28

Interior n 29

26/9/05 18:26

Pgina 29

La participacin representa una contribucin voluntaria del individuo a un determinado proyecto, bien
en forma de trabajo, dinero, etc., entendido como
deberes de la poblacin beneficiaria. Pero la participacin debe contemplar tambin sus derechos y
participacin en las decisiones que corresponde
tomar en todas las fases del proyecto: identificacin
de sus problemas, de sus potencialidades, en la
planificacin, en la ejecucin y seguimiento, la evaluacin y reparticin de beneficios.

a partir de la cooperacin en las actividades, compartiendo informaciones y beneficios del proyecto.

Esto supone usar las capacidades de la gente para
evaluar su propio avance, de modo que puedan
aprender sobre su propio proceso, conocer nuevas
tcnicas de organizacin y gestin y, en definitiva,
aumentar el sentido de responsabilidad sobre su
desarrollo.
La evaluacin participativa se ha utilizado para
diferentes propsitos y en diferentes sectores; pero,
como recogen Gaventa, J. y Estrella, M. (1998) en
su revisin de la literatura existente sobre evaluacin participativa, la mayora de las experiencias
documentadas sobre monitoreo y evaluacin participativa provienen de sectores agrcolas, medioambientales y de desarrollo rural.

En los aos setenta ya se dan experiencias en el

campo del desarrollo, y en los ochenta el concepto de evaluacin participativa haba entrado en
gran cantidad de agencias donantes. La participacin popular estaba siendo gradualmente aceptada como requisito para la planificacin e implementacin exitosa de proyectos de desarrollo, y en
los noventa se convirti en un requisito indispensable (Rudquist, A., 1991).

Son cinco las funciones claves de la gestin participativa:

1. Valoracin del impacto.

Los mtodos y aproximaciones participativas que

se fueron desarrollando en los aos ochenta eran
ms apropiados para los trabajadores del desarrollo
y fciles de comprender a niveles comunitarios
(Feuerstein, M.T., 1986). La evaluacin participativa
significa incluir a la gente en la toma de decisiones
en el proceso sobre lo que debe hacerse y en qu
manera, implicarles en el seguimiento del programa

2. Planificacin y gestin de proyectos.

3. Fortalecimiento organizacional y aprendizaje
institucional.
4. Entendimiento y negociacin de las perspectivas de las partes implicadas.
5. Responsabilidad pblica.

Cuadro 17
Los cuatro principios de la evaluacin participativa
1. El principio de la participacin: enfatiza la participacin de las partes implicadas en los diferentes momentos de
la evaluacin (decisin, ejecucin y uso de resultados).
2. El principio de aprendizaje: es una evaluacin orientada a la prctica y al aprendizaje de la accin. Se trata de
una experiencia educativa donde la gente se hace ms consciente de sus posibilidades, su realidad social, sus
visiones y perspectivas del desarrollo, etc.
3. El principio de negociacin: se trata de un proceso social para la negociacin entre las diferentes necesidades
de la gente, sus expectativas y sus visiones del mundo.
4. El principio de la flexibilidad: los diseos evaluativos gozan de flexibilidad para ser adaptados a cada realidad
cambiante y las condiciones del contexto.
Fuente: Estrella, M., Gaventa, J.: Who Counts Reality? Participatory Monitoring and Evaluation: A Literature Review. Working Paper N 70. Institute of Development Studies.
(IDS). 1998.

Estos enfoques destacan la importancia de incluir a

la poblacin beneficiaria en el proceso de evaluacin, argumentando que con ello se mejoran los
procesos de desarrollo, se consiguen resultados
ms reales, se mejora la sostenibilidad del proyec-

to al identificar las potencialidades y debilidades de

su gestin, se incrementa la capacidad local en evaluacin y permite compartir experiencias a travs
de la documentacin producida a partir de la participacin.

29

Interior n 29

26/9/05 18:26

Pgina 30

Desde los aos setenta hasta hoy, los enfoques participativos han tenido una expansin creciente. Dos
de las razones principales, las recoge Ignacio Gallego (1999): una la inclusin de la participacin en la
evaluacin como prolongacin del modelo de
desarrollo centrado en la gente, por el cual es
necesario adaptar los diseos y la gestin de los
proyectos a la poblacin a la que van dirigidos; y,
la otra, la reaccin de las agencias donantes y otras
instituciones ante la necesidad de garantizar la sostenibilidad de los proyectos, una vez retirado el
apoyo externo.

Se trata de una gran familia de enfoques y metodologas que posibilitan el anlisis del conocimiento de las condiciones de vida de la comunidad, planificarla, ejecutarla, monitorearla y evaluarla.

Los modelos participativos, y sobre todo el DRP,

se construye sobre la base de la confluencia de
muchas fuentes y tradiciones participativas del
siglo XX. Cuatro son sus principales influencias
desarrolladas en su mayora en los setenta y
ochenta, en torno a la investigacin-accin participativa (Participatory action Research-PAR) de
Paolo Freire en 1972 y la Participatory Research
de Fals Borda; los anlisis agroecolgicos (agroecosystems-analysis y field research on farming
systems); la Antropologa aplicada (applied
antrophology) y el Diagnstico Rural Rpido-DRR
(Rapid Rural Apraissal-RRA).

Como recoge Robert Chambers, uno de los padres

del enfoque participativo, se fueron desarrollando
experiencias, enfoques y mtodos, sobre todo en
pases del Sur, aunque de una manera dispersa,
que han confluido en el Participatory Rural Apraissal (PRA) o Diagnstico Rural Participativo (DRP).

Cuadro 18
Principales contribuciones al Diagnstico Rural Participativo
Enfoque
Principales aportes al DRP
Investigacin - accin - participacin
- Se aprende haciendo.
- Los agentes externos tienen un papel facilitador y catalizador.
- Las personas pobres deben ser empoderadas.
- Las personas pobres pueden y deben hacer su propia investigacin,
anlisis, planificacin y evaluacin.
Anlisis agroecolgico

Conocimiento, profesionalismo y racionalidad de los pequeos granjeros.

Tcnicas de visualizacin y representacin.
Transectos (paseos sistemticos y observacin).
Mapeo.
Diagramas de estaciones, de flujo, causales, de barras, de Venn.
Valoracin innovadora (puntuaciones y rankings).

Antropologa y Etnologa Social

-Idea de que el aprendizaje debe ser flexible.

Valor de las observaciones y apreciaciones de la poblacin.
Importancia de las actitudes y comportamientos.
Diferenciacin entre lo emico y lo etico.
Riqueza y validez del conocimiento tcnico indgena.

Diagnstico Rural Rpido

- Conexin con la poblacin.

- Metodologa flexible y rpida.

Fuente: Basado en Chambers, Robert: Whose reality counts? Putting the first last. Intermediate Technology Publications. London. 1997. Pgs: 104- 112.

En la mitad de los ochenta el trmino participacin

entra en el vocabulario del RRA. La publicacin de
Michael Cernea (Putting the last first, 1985) pone
de manifiesto su experiencia de aos anteriores, y
comienza a conectar participacin y metodologa
del RRA. A su vez, se realizaron avances en Kenya
y la India en ONG y en organizaciones gubernamentales a finales de los ochenta, que desemboca-

ron finalmente en el PRA o Diagnstico Participativo Rpido. Su desarrollo ha alcanzado altos niveles
durante los aos noventa, tanto en su aplicacin en
el Sur como su asuncin por gran parte de agencias financiadoras.
La clave principal, en el caso de la evaluacin
bajo DRP, es considerar a la informacin, el an-

30

Interior n 29

26/9/05 18:26

Pgina 31

cin de los mismos. El DRP pretende animar y permitir que ellos y ellas se renan, determinen su
agenda de trabajo, recojan la informacin, la expresen, compartan y analicen, para despus tomar
decisiones.

lisis y las conclusiones de la misma como propiedad de los miembros de la comunidad. Esto permite que ellos analicen su propia situacin,
tomen decisiones por ellos mismos y, en definitiva, el proceso aporte mayor poder a la comunidad (empoderamiento).

As, esta metodologa aplicada a la evaluacin del

proyecto pretende poner el acento en:

Tres son las principales caractersticas del modelo

DRP:

- La capacidad de la poblacin para evaluar su

proyecto.

1. La triangulacin: la informacin recogida se

hace por diferentes medios para asegurar su
objetividad y mediante un grupo multidisciplinario.

- El valor de la compenetracin y el comportamiento facilitador de los agentes externos.

- Compartir la informacin mediante diagramas
y tcnicas visuales.

2. Informalidad y flexibilidad: los mtodos de

investigacin son semiestructrados y permiten ser readaptados a cada realidad.

- Expresar y analizar la complejidad por ellos

mismos.

3. Con la comunidad: la mayora de las actividades evaluativas se realizan conjuntamente

con los miembros de la comunidad.

Para todo esto, se realizan talleres, seguidos de trabajos de campo para conseguir y analizar la informacin. Las principales herramientas son: el anlisis de fuentes secundarias, la observacin directa y
las entrevistas semiestructuradas.

Una de las principales diferencias que sealbamos

entre el DRP y el DRR era el nfasis en la participacin y en el compartir datos, frente a la obten-

Cuadro 19
Tcnicas utilizadas por el PRA-DRP
Anlisis visual
-

Mapas
Anlisis fotogrfico de reas
Paseos grupales
Calendarios de estaciones
Perfiles de actividades
Perfiles histricos y anlisis de tendencias
Cronologas y lneas temporales
Matriz de puntuaciones y ranking de
preferencias
- Diagrama de Venn y trabajo en red

Mtodos de entrevista y muestreo

-

Entrevista semi-estructurada
Observacin Directa
Grupos focalizados
Informantes clave
Historias de vida
Mapas sociales

Dinmicas de grupo
-

Grupos contractuales
Sesiones de revisin
Guas de entrevista
Redaccin de informes rpidos
Trabajo compartido
Presentaciones compartidas
Diarios y notas

Fuente: Traducido de Cornwall, A., Guijt, I., and Welbourn, A.: "Aknowledging Process. Challenges for Agricultural Research and Extension Methodology". IDS Discussion
Paper n 333. Institute of development Studies. Brighton, 1993. Pg. 22.

2.3. La apuesta por un modelo

integrador de agentes,
modelos y herramientas

rrollada a lo largo de la vida del proyecto, tanto en

la planificacin como en el seguimiento, sern factores que determinen, el modelo a elegir.

La gran variedad de modelos existentes en la literatura obliga a las personas responsables de la evaluacin a elegir el ptimo, con base en el tipo de
proyecto implementado y en sus propios objetivos.
Por esto es importante sealar que no existe el
modelo generalizable para todos los proyectos, si
no que la disponibilidad de recursos humanos, tcnicos y econmicos, as como la metodologa desa-

Tras estudiar algunas experiencias realizadas en

cada uno de los modelos desarrollados anteriormente, y analizadas algunas de las ventajas e
inconvenientes de su aplicacin por separado, presento una propuesta (flexible en todo caso), cuya
caracterstica es la combinacin e integracin de
agentes, modelos y herramientas.

31

Interior n 29

26/9/05 18:26

Pgina 32

2.3.1.Algunas dificultades de la aplicacin por separado de los modelos presentados

lita los procesos de sistematizacin de la informacin, dada la dificultad de codificacin de los mismos y su anlisis requiere finalmente una estructuracin con base en categoras que pueden estar
establecidas desde fuera. As, lo que puede parecer
un proceso participativo, se convierte en recogida
de informacin que no deriva en un empoderamiento real de la comunidad.

Comparando con los modelos de la economa, en los

que a nivel conceptual parece claro y sencillo, no lo
es tanto a la hora de su aplicacin en proyectos
sociales o de desarrollo social. Porque lo que es una
buena tcnica de anlisis para proyectos puramente
econmicos, no lo es tanto en el caso de que los
beneficios no pueden ser valorados en moneda, lo
cual en el mbito social es frecuente.

En relacin con la aplicacin del marco lgico, hay

que sealar que lo que son algunas virtudes del
modelo a nivel terico, en ocasiones se han ido
desvirtuando en la prctica de gestin y evaluacin
de los proyectos de desarrollo. As, tras haber
observado directamente algunas experiencias de
campo en Colombia y estudiado la sistematizacin
de experiencias de otros pases, me permito sealar algunas de las debilidades de la aplicacin unilateral de esta metodologa en la evaluacin de
proyectos de desarrollo.

Para su aplicacin se requiere que alguien tenga

experiencia en este tipo de anlisis, lo cual no siempre es fcil de encontrar en el mbito de las ONG.
Adems, el ACB no siempre es relevante para proyectos de desarrollo social donde el logro de determinados objetivos es deseable y necesario, independientemente del costo, ya que existen razones polticas, sociales o culturales por las que se considera
que la realizacin del proyecto contribuye al logro de
unos objetivos generales en la sociedad. La rentabilidad no se puede circunscribir slo a criterios econmicos, si no que debe considerar tambin los sociales o polticos. (Aguilar, Ander-Egg., 1994).

Si bien el marco permite realizar variantes y acomodaciones segn el contexto en el que se aplique, en
la realidad, esta metodologa puede generar rigideces
cuando se toma de manera inflexible o se absolutizan los objetivos. Y esto es lo que ocurre en innumerables ocasiones. Como seala la GTZ, el modelo
se ha vuelto a veces un fin en s mismo, donde el
objetivo es rellenar la matriz como sea y cumplir
rigurosamente los pasos del marco, sin tener en
cuenta las verdaderas necesidades de la poblacin y
sus ritmos de trabajo (Seufert, C.-GTZ, 1991).

Los modelos participativos o de autogestin no

estn exentos de algunos peligros en su aplicacin.
En ocasiones se da demasiada importancia a los
mtodos y se olvida la relevancia del comportamiento, tratando de dominar y meter prisa, olvidando que el rol de los facilitadores es orientar y
acompaar. Adems, en muchos casos se contrata
a expertos del Norte para ese anlisis, cuando las
personas mejor capacitadas estn, en ocasiones, en
los pases llamados en desarrollo.

Por otro lado, y tras la proliferacin de agencias

que asumen el marco lgico como metodologa
nica de anlisis, su utilizacin se ha convertido
ms en una obligacin que en una propuesta
abierta y flexible. As, toda aquella organizacin
que pretende acceder a recursos de la cooperacin internacional debe seguir los pasos de esta
metodologa, aunque no la conozca en profundidad. Es por ello que en la mayora de oficinas de
proyectos de ONG u otras entidades de pases en
vas de desarrollo, o pases europeos que pretenden presentar proyectos a instancias internacionales, asumen la utilizacin del marco casi por obligacin, disendose unilateralmente desde una
oficina, poniendo poco nfasis en la participacin
de la poblacin beneficiaria y realizando la matriz
de planificacin directamente desde el escritorio
de los ejecutores o donantes. Por otro lado, el

Los mayores detractores de este modelo sealan

que no es vlido para la cooperacin internacional,
dado que no permite generalizaciones, pues se
centra en las especificidades de la comunidad del
proyecto analizado, y no responde a los estndares
de la cooperacin internacional. Adems, la subjetividad de las personas puede cruzar los resultados
y dar una visin falsa de la realidad , sin que haya
posibilidad de comprobar la fiabilidad y validez de
los datos al no ser estandarizados.
En otras ocasiones, la realizacin de estos modelos
de preponderancia cualitativa, con nfasis en la
visin subjetiva y construida de la realidad, no faci-

32

Interior n 29

26/9/05 18:26

Pgina 33

diseo de los indicadores de seguimiento y evaluacin, en la mayora de las ocasiones, es bastante dbil.

puestas en marcha en cada organizacin que sean

capaces de incorporar los avances de unos y otros.
Bien haciendo posible integrar unas corrientes con
otras, bien combinando metodologas cuantitativas
y cualitativas, as como haciendo que dialoguen los
diversos agentes del desarrollo. Todo ello en el
contexto del pas donde se desarrolle, su cultura de
la gestin y la evaluacin, as como el tipo de proyecto de que se trate.

A nivel operativo, la utilizacin del marco lgico

requiere de una previa capacitacin y entrenamiento en el manejo, pues la definicin de resultados y
de indicadores para su medicin no es tarea sencilla en la prctica.
El uso del marco, sin complementarlo o combinarlo con otras tcnicas ms sencillas resulta complejo para organizaciones comunitarias o grupos de
bajo perfil acadmico. Adems, se trata de una lgica occidentalista donde la relacin causa-efecto
puede resultar rgida en ciertas culturas. La realidad
social es ms bien sistmica que de relaciones verticales, donde los problemas se hallan interrelacionados entre s de manera compleja. Adems, todo
el proceso evaluativo tiende a centrarse en el anlisis del progreso cuantitativo ms que sobre lo
cualitativo (y los efectos sobre los hbitos de la
poblacin beneficiaria), y no se incluye en la matriz
una columna que establezca las personas responsables de la verificacin y la comprobacin de los
indicadores de progreso (lo cual deriva en que
finalmente no se lleve a cabo).

Tres ideas caracterizan este modelo integrador:

- La conformacin de un equipo de evaluacin
- La articulacin de diversas metodologas
- La triangulacin de mtodos
1. La conformacin de un equipo de evaluacin
Siempre que sea posible, el equipo deben conformarlo, al menos, tres personas. Una persona interna
de la organizacin ejecutora que conozca bien el
proyecto, sea responsable del seguimiento y los
indicadores de progreso, posea toda la documentacin del proyecto y tenga contactos con la poblacin
beneficiaria. De otro lado, si se dispone de recursos
puede integrar a un consultor externo (nacional o
internacional) conocedor de herramientas cualificadas y que aporte una visin objetiva y externa al
proceso. Por ltimo, pero no menos importante,
puede participar en el diseo y ejecucin de la
investigacin evaluativa algn representante de los
beneficiarios, bien de la comunidad o de organizaciones comunitarias ligadas a las mismas.

En relacin con proyectos de corta duracin o de

ayuda humanitaria (conflictos armados, terremotos,
desastres, etc.) la matriz de planificacin resulta
compleja y poco prctica si se establece con rigidez, dada la flexibilidad requerida por la emergencia y la importancia que cobran los supuestos
externos que necesariamente obligan a realizar
ajustes permanentes sobre lo planificado en cuanto
a resultados y sus indicadores.

2.3.2. Una propuesta flexible

Las cualificaciones que tengan los miembros del

equipo evaluador, en trminos profesionales,
humanos y de experiencia, es importante para el
xito del estudio evaluativo. La calidad humanopersonal es una caracterstica que no siempre se
considera y en ocasiones es la ms importante.
Cualidades como la capacidad de trabajar en
equipo, comunicacin, dilogo, entendimiento,
compresin y empata con los otros miembros
son vitales si se ha decidido trabajar en conjunto
y construir una evaluacin que pretenda ser holstica e integral.

En la propuesta de una nueva perspectiva integrada que busca responder al conocimiento del
impacto real de los proyectos en la poblacin
beneficiaria, es necesario fortalecer metodologas

No es necesario que todas las personas implicadas

(stakeholders) renan las mismas caractersticas,
sino que deben ser producto de las sinergias producidas por los conocimientos y experiencias de

Por ltimo, la valoracin de los cinco criterios

esenciales (eficacia, eficiencia, pertinencia, viabilidad e impacto) ha tenido escasa difusin pblica y
pocos son los organismos que priorizan los anlisis
a posteriori, frente a la medicin de la realizacin
de actividades.

33

Interior n 29

26/9/05 18:26

Pgina 34

Cuadro 20
Equipo de evaluacin
El trabajo de evaluacin requiere que el equipo rena gran parte de las caractersticas que a continuacin se detallan:
- Conocimientos globales sobre desarrollo y, en concreto, desarrollo social y humano.
- Conocimientos bsicos de formulacin, gestin y seguimiento de proyectos de desarrollo.
- Conocimientos sobre mtodos y tcnicas bsicas de investigacin y evaluacin.
- Conocimientos sobre el rea profesional en la que se circunscribe el proyecto.
- Conocimiento del medio fsico, social y humano donde se contextualiza el proyecto.
- Carcter multidisciplinar entre las personas que conforman el equipo, as como equilibrio de gnero.
- Personal con capacidades de comunicacin, dilogo, negociacin y trabajo en equipo.
- Contacto cercano con el medio social y humano donde se desarrolla el proyecto.
- Experiencia acumulada de otros seguimientos y evaluaciones.
- ...
Fuente: Basado en NORAD: "Evaluacin de proyectos de ayuda al desarrollo. Manual para evaluadores y gestores". Instituto de desarrollo y cooperacin IUDC. Universidad
Complutense de Madrid. CEDEAL . Madrid.1997.

ver la competencia y el conflicto de las percepciones de los implicados, especialmente cuando grupos particulares de implicados son impotentes frente a otros (Estrella, M. y Gaventa, J., 1998). Es
necesario, entonces, reconocer que lograr un buen
trabajo de equipo es difcil de conseguir. El conflicto de intereses y las desiguales relaciones de
poder de los grupos implicados puede hacer difcil
el dilogo y el acuerdo. Pero tambin es importante tener en cuenta que la participacin de todas las
partes, si se afrontan las dificultades y superan los
conflictos, garantiza una evaluacin productiva y
orientada a la toma de decisiones futuras.

cada miembro. As, el agente externo tal vez

conozca mejor las tcnicas evaluativas del marco
lgico y tenga mayor experiencia en la realizacin
de evaluaciones; las personas encargadas de la ejecucin del proyecto lo conocen bien y se encuentran cercanas a su medio (mismo idioma, regin,
etc.) y las representantes de los grupos beneficiarios son las mejores conocedoras de la problemtica especfica de la comunidad, as como de sus
propias potencialidades.
Las diferentes personas implicadas inicialmente no
presentan los mismos intereses ni las mismas
expectativas sobre el proceso de evaluacin. Es
ms, las demandas de los grupos beneficiarios
pueden entrar en conflicto con las de los donantes.
Todo ello expresa la complejidad del tejido formado por el entramado de intereses que interactan
en toda intervencin social y que debern ser contemplados por el equipo evaluador desde los inicios. As, ser necesario identificar las partes implicadas en el proceso, sus motivaciones, necesidades
e intereses y las relaciones existentes entre ellas. Si
esto no se realiza, puede generar posteriores conflictos, inseguridades y ruptura de la comunicacin.
Se trata de todo un proceso de negociacin y concertacin interinstitucional.

2. La articulacin de diversas metodologas para la

evaluacin
La propuesta global que se propone es que se realicen las evaluaciones ex-post segn la metodologa
predominante a lo largo del proyecto, desde su
planificacin, y utilizando herramientas propias de
la institucin, si las tiene. En todo caso, si el proyecto fue formulado con el marco lgico (como es
la tnica actual), la propuesta se orienta a la combinacin de la propuesta evaluativa del marco
(indicadores, factores de desarrollo y componentes)
con las herramientas de la propuesta econmica y
la participativa.

Rajakutty (1991) elabor el concepto de evaluacin basada en las personas implicadas, que describe como un continuo dilogo y negociacin
entre las persona afectadas por el proyecto. Sin
embargo, tambin seala las dificultades de resol-

Esto, que a primera vista, puede parecer una combinacin impracticable, ya ha tenido algunas experiencias en Colombia y con seguridad en otros pases. En la prctica, la CEPAL ha desarrollado evaluaciones de corte econmico combinado con mar-

34

Interior n 29

26/9/05 18:26

Pgina 35

co lgico, y la GTZ, a travs de un programa de

concertacin interinstitucional llamado Paisa Joven
en Medelln, ha desarrollado la combinacin del
ZOPP con el DRP.

En ese sentido, tambin es interesante incorporar

los modelos participativos en la evaluacin para
incluir a la gente en la toma de decisiones sobre lo
que debe hacerse y de qu manera, implicarles en
el seguimiento del programa a partir de la cooperacin en las actividades, compartiendo informaciones y beneficios del proyecto.

Lo que se pretende es aprovechar las potencialidades de cada perspectiva, las cuales articuladas de
forma flexible, permitan minimizar las debilidades
propias de la aplicacin de cada modelo por separado.

La realizacin de evaluaciones participativas posibilita tener una mejor comprensin de la comunidad,

sus capacidades y debilidades. Adems, al tomarse
en cuenta sus opiniones, percepciones y sentimientos, la comunidad entiende el proyecto desde
sus inicios y puede influenciar en l. En la evaluacin no se requiere de altos conocimientos sobre
investigacin, dado que los procedimientos son
sencillos y flexibles y es ms barato que modelos
estandarizados.

Cabe sealar que la utilizacin del marco lgico

asegura que se plantean las preguntas fundamentales para la evaluacin, y brinda gran cantidad de
informacin para la toma de decisiones en torno a
la planificacin y la implementacin de proyectos
futuros. En ese sentido, el trabajo de evaluacin
desde talleres participativos, donde las entidades
interesadas forman parte de la discusin y el debate, permite intercambiar informacin e ideas que
conllevan a tomar decisiones ms consensuadas.

La combinacin de estas metodologas con el marco lgico permite gestionar con una visin ms
amplia y compleja de la realidad, que requiere
tener en cuenta desde las subjetividades propias de
la poblacin hasta el anlisis de eficiencia de las
inversiones realizadas en el proyecto.

El marco lgico, y sobre todo el ZOPP, pretende

ser un instrumento participativo y orientado a la
implicacin de los grupos beneficiarios, y pone el
nfasis en buscar acuerdos y consenso para la toma
de decisiones y alcance de los logros. Si los talleres se llevan a cabo en la evaluacin, se facilita el
entendimiento y la comunicacin entre las partes
implicadas (ejecutores, beneficiarios y donantes),
favoreciendo la concertacin entre pases.

En este sentido, he aqu algunas propuestas:

1. No considerar el enfoque del marco lgico
como un fin en s mismo y como algo impuesto desde el exterior, sino ms bien como una
propuesta que puede ayudar a estructurar la
propuesta evaluativa.

A nivel operativo, el marco lgico sirve de gua

bsica para el seguimiento y la evaluacin posterior. Se parte del anlisis del avance de los indicadores para cada nivel para ver el cambio y la evolucin que van tomando las actividades, resultados
y objetivos a lo largo del proyecto hasta alcanzar su
logro. Las fuentes dejan establecida la metodologa
y el origen de la informacin que se utilizar para
la emisin de juicios sobre el proyecto.

2. Poner nfasis en lo participativo, favoreciendo

el encuentro y el dilogo con todas las partes
implicadas de manera participativa.
3. Capacitar al equipo evaluador sobre la metodologa a utilizar para que se maneje con soltura y flexibilidad.
4. Incluir en la matriz de planificacin indicadores cualitativos y de impacto que permitan
observar los efectos reales en los hbitos y
condiciones de vida de las personas beneficiadas por el proyecto.

Este anlisis, a nivel de actividades, requiere evaluar

la ejecucin econmica y su eficiencia. Para ello es
importante incorporar anlisis econmicos que permiten examinar la rentabilidad de la inversin realizada, traduciendo el programa a unidades monetarias con el fin de juzgar su rentabilidad socio-econmica. Es especialmente recomendable para proyectos de tipo econmico (micro-empresas, cooperativas o empresas familiares, por ejemplo).

5. Conceder importancia al anlisis de los

supuestos o factores externos que permitan
estar alerta y poner medidas para la reformulacin, teniendo as mayores garantas en el
xito del proyecto.

35

Interior n 29

26/9/05 18:26

Pgina 36

Bonilla (1997), donde en la prctica investigativa

pueden combinarse efectivamente tcnicas de corte cuantitativo y cualitativo. Es lo que se viene
conociendo como la triangulacin metodolgica
(Cea Dancona, M.A., 1999).

6. Incluir metodologas de la economa para la

medicin de la eficiencia y evaluacin financiera del proyecto.
7. Combinar herramientas participativas en la evaluacin que permitan verificar el alcance de los
indicadores cualitativos y medir componentes
como la eficacia, la sostenibilidad y el impacto,
con carcter eminentemente cualitativo.

Este debate, que ha llegado hasta la investigacin

evaluativa, orienta claramente el uso de unas herramientas u otras, dependiendo de la orientacin
epistemolgica que los evaluadores tengan de la
realidad social. Desde mi punto de vista, y con
base en alguna experiencias investigativas en esa
lnea, pienso que la oportunidad de combinar
herramientas bajo perspectivas distintas, lo menos
que ofrece es una mirada ms global a una realidad que siempre es compleja y que requiere de
una mirada ms amplia y una pluralidad metodolgica y disciplinar.

3) La triangulacin de mtodos mediante combinacin de tcnicas cuantitativas y cualitativas de

obtencin de informacin
Todo el proceso evaluativo guarda grandes similitudes con el de la investigacin social, an siendo
diferentes. En cualquier caso, la utilizacin de
herramientas e instrumentos de recogida y anlisis
de la informacin provenientes de la investigacin
social es clara.

Por ello es factible utilizar en una misma evaluacin una pequea encuesta cerrada a toda la
poblacin beneficiaria (para recoger ciertas informaciones bsicas en torno al proyecto) y tambin
realizar una entrevista en profundidad a informantes claves (como son las mujeres del proyecto, lderes comunales, etc.) para obtener informacin en
profundidad sobre determinados grupos sociales.

La propuesta, en este sentido, es dejar a un lado

los debates epistemolgicos sobre la imposibilidad
de encuentro entre el paradigma positivista o el
hermeneutico sobre la observacin de la realidad,
que son los que dan vida a la utilizacin de la
metodologa cuantitativa y cualitativa; y recurrir,
ms bien, a la lgica en uso que propone Elsy

Cuadro 21
Tcnicas primarias cuantitativas y cualitativas utilizadas en evaluacin de proyectos
Tcnicas cuantitativas
Tcnicas cualitativas
Medicin cuantificable (indicadores, estadsticas, escalas)
Entrevista estructurada (encuesta)
Cuestionarios (autorrellenado)

Entrevista abierta a informantes claves o Historias de vida

Grupos de discusin
Observacin participante

36

Interior n 29

26/9/05 18:26

Pgina 37

3. LA VALORACIN DEL IMPACTO:

UN RETO PARA LA EVALUACIN EX-POST

en el grado de cumplimiento de ambos. En este

nivel de anlisis, se trata de conocer en qu medida los resultados logrados por el proyecto han contribuido al logro del objetivo especfico planteado
para una poblacin beneficiaria, en un tiempo y
contexto determinados.

3.1. El impacto es un componente

clave de la evaluacin
ex-post
Son cinco los criterios claves o componentes en los
que centra la propuesta evaluativa desde el marco
lgico de la NORAD: la eficacia, la eficiencia, la
pertinencia, el impacto y la sostenibilidad. A su
vez, stos son los cinco criterios que establece la
definicin del Comit de Ayuda al Desarrollo y que
utilizan numerosos organismos oficiales en la
mayora de las evaluaciones que ponen en marcha.
El CAD seala que la evaluacin tendr que determinar la pertinencia de los objetivos y su grado de
realizacin, la eficiencia en cuanto al desarrollo, la
eficacia, el impacto y la viabilidad (OCDE-CAD,
1995).

Para determinar la eficacia de un proyecto es necesario una buena definicin de lo que se considera
el objetivo ltimo, as como de los resultados que
se espera conseguir y la poblacin beneficiaria a la
que afecta. Si el equipo evaluador se encuentra con
un objetivo ambiguo o formulado de forma muy
genrica, seguramente encontrar problemas para
determinar si dicho objetivo se alcanz. Por otro
lado, la eficacia es un elemento que puede haber
sido ya analizado en el seguimiento del proyecto,
por lo que a lo largo de su gestin podra haberse
detectado, si han habido problemas, y reformulado.
Si ste no es el caso, el equipo evaluativo deber
poner de manifiesto las debilidades existentes y
hacer operativos los objetivos sobre la base de la
documentacin existente del proyecto.

A pesar de formar parte del lenguaje comn entre

gestores y evaluadores de programas o proyectos
de otros mbitos, se utilizan muchas veces de forma indiscriminada, lo que hace que se den diversas interpretaciones sobre su contenido. La falta de
una definicin clara de cada criterio puede contribuir a confusiones y malos entendidos. Veamos
entonces algunas notas sobre cada uno de ellos,
para centrarnos despus en el impacto.

La eficiencia
La eficiencia es una medida de la productividad del
proceso de ejecucin. Pretende establecer hasta
qu punto los resultados cualitativos y cuantitativos
que ha alcanzado el proyecto provienen de una
buena utilizacin de los recursos (o insumos), ya
sean materiales, naturales, tcnicos, econmicos o

La eficacia
La eficacia es una medida que relaciona el objetivo
especfico con los resultados centrando la atencin

37

Interior n 29

26/9/05 18:26

Pgina 38

humanos. Se trata de examinar si los resultados

podran haberse logrado haciendo una utilizacin
mejor de los insumos que se han puesto en juego
o usando otros menos costosos y que hubiesen
permitido alcanzar los mismos resultados.

razn de ser una vez finalizado, en la evaluacin

ex-post, donde se disponen de mayores informaciones.

Una valoracin de los medios utilizados requiere

entenderlos en sentido amplio. Debern considerarse todo tipo de medios y su intervencin en el
proyecto; si se dio un buen uso a los bienes materiales disponibles para la realizacin del proyecto;
si se tuvieron en cuenta los recursos humanos locales y en qu medida contribuyeron a la obtencin
de los resultados; y por ltimo, cules son los costos econmicos, tcnicos y naturales que se realizaron y si pudieron haber sido menores.

Si los otros elementos se preocupan del proyecto y

su desarrollo, el anlisis de viabilidad tiene una
perspectiva del proceso de desarrollo orientado en
el largo plazo. Cabe preguntarse, qu validez ha
tenido un proyecto si una vez terminada la ayuda
exterior no es capaz de mantenerse de manera
autnoma?. As, la viabilidad depender en gran
medida de si el impacto positivo justifica que se
hayan realizado numerosas inversiones y si la
poblacin beneficiaria valora el proyecto de manera positiva como para desear dedicar sus escasos
recursos a continuarlo.

La pertinencia

El impacto

La pertinencia es de vital importancia desde las primeras fases de la identificacin y la planificacin,

para saber si el proyecto es til y responde a las
necesidades que existan con anterioridad a su
puesta en marcha. La pertinencia se preocupa de
conocer si la razn de ser de un proyecto est de
acuerdo con las prioridades de la comunidad local
y si se han respondido a sus necesidades (las percibidas por la comunidad).

Realizar un anlisis de impacto, en ocasiones tambin llamado de efectividad, implica un estudio de

los efectos conseguidos ms all de los objetivos
propuestos. Cuando dichos efectos son positivos es
cuando un proyecto es efectivo y, adems, es eficaz en caso de coincidir con el objetivo que nos
proponamos al planificar el proyecto.

La sostenibilidad

La principal diferencia entre ambos conceptos es

que el anlisis de impacto es ms amplio, dado que
incluye todos los efectos posibles, tanto positivos
como negativos, previstos o no previstos, locales,
regionales o nacionales. El impacto es el criterio
ms amplio y difcil de medir dada su amplitud.
Supone recoger todos los efectos que la accin ha
tenido sobre el medio: econmicos, tcnicos, sociales, culturales, polticos, ecolgicos, de gnero, de
salud, etc.

La sostenibilidad, llamada tambin viabilidad, durabilidad o sustentabilidad12, consiste en interrogarse

sobre las posibilidades de mantener ciertas acciones una vez eliminados los apoyos exteriores. As,
desde el principio del proyecto puede estimarse la
capacidad de continuacin de las acciones de
manera autnoma. Incluso puede revisarse a lo largo de la vida del proyecto, pero tiene su principal

Es un criterio fundamental y clave en la evaluacin

ex-post, que no se limita simplemente a la revisin
de los objetivos previstos o de los efectos deseados
o esperados. Siendo esencial su anlisis, es, sin
duda, la parte ms difcil y absorbente del trabajo
de evaluacin ex-post. Es tal su importancia que se
habla, sobre todo en Amrica Latina, de evaluacin
de impacto, en vez de evaluacin ex-post.13

Bsicamente, en la evaluacin ex-post la pertinencia es una cuestin de utilidad que debe conducir
a la pregunta de si el proyecto debe continuar,
ampliarse o realizarse en otro lugar o contexto. En
caso de continuar deber analizarse si existen otras
intervenciones en el mismo sector, rea o comunidad que puedan afectar al proyecto.

12

En ingls, normalmente el trmino utilizado es sustainability, pero tambin puede encontrarse como viability.

13

Desde mi perspectiva es ms correcto hablar de la medicin del impacto en la evaluacin ex-post como un criterio a valorar, ms que como una nueva modalidad de evaluacin. El impacto es un componente de la evaluacin ex-post que complementa la valoracin global del proyecto a partir de otros, como es la eficiacia, eficiencia, viabilidad, pertinencia, efectividad, calidad etc. Tal vez es el ms importante ya que permite valorar si los cambios en las condiciones de vida de la poblacin y sus comportamientos han sido sustanciosos y sostenibles en el tiempo.

38

Interior n 29

26/9/05 18:26

Pgina 39

3.2. Algunas dificultades a

superar en la evaluacin
ex-post y en la valoracin
del impacto

El impacto se refiere a los cambios profundos y de

largo plazo introducidos por la intervencin en la
vida de la poblacin beneficiaria. El impacto puede ser negativo o positivo, as que hay que tener
en cuenta ambos. Se trata de un concepto amplio
dado que:

La realizacin de evaluaciones no es siempre una

tarea sencilla. Ocurre en numerosas ocasiones que
la percepcin de las dificultades que entraa su
puesta en prctica y la acumulacin, en ciertos
casos, de experiencias pasadas en la que los informes de evaluacin destacaban los aspectos menos
positivos de la cooperacin, la ha enmascarado
como la cara negativa de la misma, relegndola a
una situacin marginal dentro de los procesos de
intervencin en el desarrollo. Si bien es cierto que
comienza a reconocerse su importancia y a ser
tema obligado en la gestin de proyectos, todava
no podemos afirmar que sea una prctica comn y
normalizada en los proyectos de cooperacin.

- no se limita a revisar el alcance de los efectos

previstos (los objetivos),
- no se circunscribe al anlisis de los efectos
deseados,
- no se reduce al estudio de dichos efectos sobre
la poblacin identificada como beneficiaria.
La evaluacin del impacto se refiere a los cambios
relevantes en las condiciones de vida y en los comportamientos de la poblacin beneficiaria, y los
efectos diferenciados de esos cambios entre hombres y mujeres, as como las influencias de las
intervenciones en la situacin socio- econmica y
poltica de dicha sociedad. As mismo, la evaluacin de los impactos pasa por la identificacin de
las modificaciones y alteraciones que se producen
entre ciertos elementos y la valoracin positiva o
negativa de estas modificaciones para la regin y
sus habitantes (Correa, 1999).

El propsito de abordar, a continuacin, algunas

dificultades con las que las evaluaciones se encuentran tiene por objetivo ponerlas en conocimiento
de aquellas personas que toman parte en las evaluaciones, para que sean conscientes de las mismas
y capaces de establecer los mecanismos necesarios
para superarlas.

La Agencia Noruega de Cooperacin (NORAD)

recomienda tomar como punto de partida el objetivo especfico del proyecto en la forma que se
defini y en el grado de eficacia alcanzado, para
posteriormente preguntarse qu otros efectos, bien
positivos o negativos, esperados o imprevistos, han
tenido lugar como resultado del proceso de intervencin. Adems, recomienda el uso de tcnicas
que permitan recoger informacin durante el desarrollo del proyecto, dado que los impactos pueden
aparecer en distintos momentos de la implementacin del mismo.

Dificultades econmicas
Gran parte de las agencias, e incluso las propias
ONG, encuentran siempre mayores dificultades
para conseguir financiacin para esa parte del proyecto que para la ejecucin. Frecuentemente, los
diseos de evaluaciones se conciben de manera
separada del resto del proyecto, y a veces, son de
tal complejidad y coste que se opta por no realizarla. Todava no est integrada la idea de que la
evaluacin es una parte tan necesaria como las
otras del proyecto, tal como lo hemos presentado
en el ciclo de su vida y debe planificarse como una
accin necesaria desde los inicios del proyecto.

En la evaluacin ex-post, la valoracin del impacto

se convierte en la accin evaluativa ms importante. Es la ltima fase del proceso y requiere integrar
todas las acciones evaluativas anteriores (ex-ante,
seguimiento, final) as como el anlisis de los otros
componentes de la evaluacin ex-post (eficacia,
eficiencia, pertinencia y sostenibilidad del programa, proyecto o intervencin realizada).

En segundo lugar, muchas veces las evaluaciones

son entendidas en su funcin de control estrictamente financiero y contable. Esto lleva a confundir
las evaluaciones con las auditoras que controlan el
uso de los recursos, sobre todo econmicos, en
relacin con las actividades que se planearon. En
este sentido, debe entenderse la evaluacin en sentido global, integrando una revisin ms profunda

39

Interior n 29

26/9/05 18:26

Pgina 40

con anlisis ms amplios que la eficacia y la

eficiencia, como es la utilidad del proyecto para la
poblacin objetivo (pertinencia). Tambin, si es
posible continuar los cambios positivos sin ayuda
externa (viabilidad), as como el impacto generado
en otros mbitos, tales como las pautas culturales,
relaciones sociales, relaciones de gnero, comunitarias, etc. Estos anlisis ayudan a comprender la
evaluacin como una herramienta que proporciona
informacin sobre lo realizado, posibilita el aprendizaje sobre las experiencias vividas y ayuda a la
toma de decisiones sobre las acciones futuras.

motivaciones, relaciones sociales, relaciones de

gnero, etc. Por ello, las personas que realicen las
evaluaciones debern tener especial cuidado en
concentrar esfuerzos para tenerlos en cuenta, dado
que los factores ms cualitativos son extremadamente importantes para determinar si el proyecto
ha tenido xito o no. En ese sentido, la metodologa a utilizar deber combinar (siempre en relacin
con el objetivo ltimo de la evaluacin), la utilizacin de indicadores cuantitativos y cualitativos, as
como tcnicas de recopilacin de informacin formales e informales.14

Dificultades metodolgicas

Dificultades segn los agentes evaluadores

Aunque es cierto que la evaluacin ofrece una

oportunidad de aprendizaje de las experiencias
pasadas de una manera sistematizada, sin embargo,
la calidad de la informacin y su credibilidad
depender de los mtodos que se hayan utilizado.
As, los mtodos para la recogida de informacin
debern ser adecuados con el tipo de preguntas
que van a realizarse y con el objetivo ltimo de
dicha evaluacin. Un informe de evaluacin ser
poco creble si utiliza una metodologa que no
haya sido previamente planificada y aceptada, dado
que los resultados podran ser meras percepciones
subjetivas del equipo evaluador. El CAD (1995)
tambin seala en sus recomendaciones la importancia de definir una metodologa previa a la ejecucin del proyecto, desde la planificacin, as
como los objetivos que se le encomiendan.

Como sealamos anteriormente al referirnos a los

agentes evaluadores, en la planificacin y diseo
de la evaluacin ha tenido que especificarse quin
o quines la llevarn a cabo. Analicemos entonces
algunas dificultades que se derivan del tipo de
agente que realice la evaluacin.
En el caso de que sea una persona externa al proyecto y al medio en el que se desarrolla, como
ocurre con los expertos extranjeros, la que realiza
la evaluacin, sta puede encontrar ciertas dificultades. Por un lado, las derivadas de las diferencias
culturales entre la persona evaluadora y los grupos
locales, que entraa en ocasiones percibir a la persona que evala como alguien extrao, frente al
que no se sabe muy bien como actuar. Adems, en
ocasiones, la informacin no se comparte con la
ONG local, la cual no se atreve a ofrecer sus propias conclusiones porque teme que puedan ofender a la agencia donante o comprometer la financiacin futura.

Por otra parte, la evaluacin implica medicin. Pero

no todo lo que es evaluable es medible cuantitativamente. As, saber en detalle cules han sido los
gastos en relacin con las actividades y las cantidades de recursos utilizados (salarios, materiales,
etc.) es necesario comprobar indicadores de carcter cuantitativo. La evaluacin de las actividades, la
participacin de la gente en las mismas o los productos o servicios generados, son realidades convertibles a datos cuantificables: grado de implicacin, nmero de asistentes a tal reunin, nmero
de acres cultivados, nios y nias escolarizados en
un determinado perodo, etc.

Cuando se realizan evaluaciones internas suele ser

ms difcil cuestionar ciertas acciones y actividades
internas y, en consecuencia, ser imparcial. Es posible que se encuentre difcil la adecuacin cultural
e intelectual del mtodo de control donante.
Las evaluaciones mixtas, que incluyen un representante de la agencia donante y del organismo que
ha identificado e implementado el proyecto,
requieren un acuerdo previo sobre los trminos de
referencia que guiarn la evaluacin, el objetivo, el
mtodo, etc. y esto no es siempre sencillo.

Pero no todos los resultados o cambios son medibles de este modo: actitudes, comportamientos,
14

Sobre este punto vase mi propuesta metodolgica anteriormente.

40

Interior n 29

26/9/05 18:26

Pgina 41

Las evaluaciones participativas incluyen a los hombres y las mujeres que han desarrollado el proyecto, as como a las personas beneficiarias. Una verdadera evaluacin participativa, tiene en cuenta a
todas las personas integrantes del proyecto en la
toma de decisiones y en el control del mismo.
Algunos riesgos pueden venir de lo que supone

xito o fracaso para cada una de las partes, o llegar a acuerdos sobre la modalidad de evaluacin
que se va a realizar, o las tcnicas a utilizar, etc. La
bsqueda del consenso requiere en la mayora de
los casos una gran disponibilidad al dilogo por
todas las partes, as como de tiempo. Adems, no
debe confundirse participacin con consulta.

Cuadro 22
Algunos problemas a enfrentar
Una clasificacin de los posibles problemas considera cuatro categoras:
1. Problemas institucionales: son problemas que se originan en los organismos ejecutores del proyecto. Existe en ocasiones
una gran resistencia al cambio, lo que genera en ocasiones que se desactiven los procesos evaluativos no introduciendo las
medidas correctoras para cambiar ciertas circunstancias.
2. Problemas de relaciones personales: tales como las diferencias de personalidad, o de desempeo de papeles que generan
conflictos de intereses y pueden alterar el curso del proyecto y de las evaluaciones.
3. Problemas tcnicos: para poder evaluar es preciso que se hayan establecido el marco de referencia para poder establecer
comparaciones. La debilidad tcnica con que se ejecute el proceso de diagnstico para la definicin de un proyecto, tiene
una decisiva incidencia en la calidad del proyecto. Si el diagnstico no es adecuado la evaluacin partir de premisas errneas, ya que se medir una situacin real con un marco de referencia equivocado. Otros problemas tcnicos que habr que
hacer frente sern posibles desajustes entre las necesidades de la evaluacin y el modelo que se emplee, o la insuficiencia
del equipo evaluador, etc.
4. Problemas operativos: En esta categora se sitan los problemas que aparecen durante la fase de ejecucin de la evaluacin
y, ms concretamente, en la recoleccin de informacin y su difusin. Por ejemplo, un mal uso de los datos y filtraciones
que provocan rumores en la comunidad y en ocasiones generan inestabilidad y perturbacin, o inoportunidad en las rendiciones de informes donde en ocasiones las evaluaciones son entregadas una vez se han tomado las decisiones a las que
afecta.
Fuente: Espinoza, Mario: Evaluacin de proyectos sociales. Editorial Humanitas. Buenos Aries. 1983. Pg. 173- 190.

Si bien las dificultades operativas o metodolgicas

a las que se enfrenta la evaluacin son relativamente fciles de superar, en el caso de problemas
conceptuales o de falta de entendimiento requiere de un fortalecimiento del conocimiento de la
gestin de proyectos de desarrollo y del papel
necesario que la evaluacin expost juega en los
mismos. As mismo, tal y como seala el profesor
Antonio Puerta (1997), la evaluacin de un proyecto subsume el concepto mismo de desarrollo
que lo soporta, al tiempo que se convierte en
aporte fundamental al mismo. Por ello es preciso
entender la evaluacin expost como un proceso
integral del ciclo de vida de los proyectos de
desarrollo, erradicar la imagen de monstruo que
ha imposibilitado visualizar la evaluacin como
un verdadero aliado de la gestin que permite
aprender de las experiencias pasadas, positivas y
negativas, integrndolas en el futuro y, sobre
todo, integrarla en el proceso de construccin
desde y para el desarrollo.

Dificultades propias a la valoracin del impacto

El estudio del impacto debe tener en cuenta, no
slo los resultados del proyecto y los efectos a corto plazo, sino que debe poner el nfasis en los
efectos sobre la poblacin (positivos y negativos,
esperados y no esperados) que se han dado en el
medio-largo plazo.
La evidencia sugiere que las agencias de desarrollo
y las ONG se han vuelto, en general, ms fuertes
en la evaluacin de actividades, resultados fsicomateriales y esfuerzos, pero menos fuertes cuando
se trata de determinar los cambios resultantes en
la poblacin. As, no es lo mismo hablar de resultados que de efectos o de impacto. Mientras los primeros tienen que ver con la realizacin de las actividades (y tal vez con el logro del objetivo), los
efectos tienen que ver con la influencia inmediata
de los resultados en el corto plazo de la realizacin
de dichas actividades y el impacto se refiere al anlisis de todos los efectos (positivos y negativos,

41

Interior n 29

26/9/05 18:26

Pgina 42

- No existe un claro y generalizado concepto de

lo que implica la valoracin del impacto.

esperados y no previstos) en el corto y, sobre todo,

en el medio y largo plazo. Es decir, los cambios
reales en la poblacin, sus condiciones de vida y
sus comportamientos.

- Derivado de lo anterior, es difcil trabajar con

indicadores de impacto, si no se define ste
correctamente.

Parece que la evaluacin de impacto comienza a

ser considerada como necesaria entre los agentes
del desarrollo. Agencias de desarrollo ms experimentadas en la medicin del seguimiento y el
alcance de los resultados han comenzado a descubrir la necesidad de conocer y evaluar el impacto
que sus intervenciones tienen en la poblacin y en
sus modos de vida. Adems, otros condicionantes y
experiencias pasadas sealan la importancia de:

- Es ms difcil recoger informacin sobre el

impacto que sobre la realizacin de actividades o de resultados.
- No hay cultura de la revisin de los procesos y
sus efectos reales en la poblacin beneficiaria.
- Todava est en proceso una cultura de la evaluacin arraigada, y casi en mantillas el descubrir, por parte de los agentes del desarrollo,
la importancia de la revisin de experiencias,
sistematizacin, aprendizaje y toma de decisiones necesarias a partir del impacto en la
poblacin. As, dado que el efecto de un proyecto se puede valorar slo cuando se halla
en pleno desarrollo, es decir, algunos aos
despus de haberse terminado, y que el director tiene que llevar a cabo tareas claramente
especificadas dentro del presupuesto limitado
y del marco cronolgico, a ste y a su personal, en ocasiones les interesa ms la eficiencia
del suministro de insumos que los beneficios
y los efectos que han de obtenerse en el futuro (Casley and Kumar, 1990: 15).

- conocer el impacto general de las acciones de

desarrollo por parte de los donantes que, en
un contexto de cada de la financiacin, necesitan comprobar cambios tangibles;
- el aprendizaje institucional, dado que a partir
de las experiencias y evaluaciones es posible
saber qu funciona y qu no;
- la necesaria inclusin del concepto de la sostenibilidad en los proyectos slo puede ser
realizada si se tiene en cuenta el impacto de
la intervencin, dado que la sostenibilidad
implica una estrategia de retirada por parte de
la agencia donante que no podr ser llevada a
cabo si no hay un entendimiento de los efectos del programa y su durabilidad;

- Por ltimo, las metodologas desarrolladas en

al mbito de la cooperacin internacional
estn todava en proceso de responder con
precisin a los requerimientos de la evaluacin de impacto. En primer lugar, porque las
tres grandes corrientes se desarrollaron con el
objeto de mejorar los procesos de identificacin, diagnstico y planificacin, ms que
para la evaluacin posterior. Bien es cierto,
que todas ellas ponen las bases para una futura evaluacin, pero en la mayora de los casos
est centrada en la definicin de indicadores
de realizacin de actividades y logro de resultados, ms que de medicin del impacto generado por dichas actividades en la vida y el
comportamiento de la poblacin15.

- el creciente reconocimiento por parte de las

ONG de ser responsables del programa y de
la poblacin beneficiaria y de que la informacin sobre el impacto en ella puede tener
efectos positivos en su motivacin y su autoestima.
Claro que entonces cabe preguntarse: si existe un
real acuerdo en la necesidad de medir el impacto
de las intervenciones de desarrollo por parte de
agencias donantes, ONG del Norte, ONG locales y
de la propia poblacin beneficiaria, por qu no se
realizan? Veamos algunas dificultades especficas en
la valoracin del impacto.
15

En el caso de la corriente econmica de ACB y ACE, con la pretensin de medir el impacto de una intervencin desde una perspectiva monetaria, se pone de relieve la
falta de participacin y percepcin de la poblacin beneficiaria sobre lo que conciben como cambios sustanciales en su vida. En el caso del Marco Lgico y el ZOPP se
han desarrollado buenos sistemas de evaluacin ex post que permiten analizar, mediante indicadores para cada fase de la Matriz de Planificacin (MP) y a partir de consultas a la poblacin (Fuentes de Verificacin) y otros anlisis, el cumplimiento de ciertas actividades y el logro de resultados previstos en la planificacin, pero que no
ponen nfasis en el impacto generado en la poblacin y los cambios que ha sufrido, y subestima la consecucin de objetivos de alto nivel por caminos no planificados y
los efectos no previstos tanto buenos como malos ( Des Gasper, en IUDC, 1999: 58).

42

Interior n 29

26/9/05 18:26

Pgina 43

tantes sobre los efectos generados a lo largo

del proyecto, y de las que conformarn el
equipo evaluativo ex-post.

Parecen ser las corrientes ms participativas

(Feuerstein, 1986; Chambers, 1991) y de empoderamiento (Fetterman, 1996) las que han avanzado en
tratar de evaluar los cambios cualitativos de las
intervenciones, as como la revisin de las experiencias vividas por la poblacin beneficiaria. Basadas en la metodologa de la investigacin- accin y
en los modelos de RRA y PRA, todava sus metodologas para la evaluacin son criticadas por las
agencias donantes como poco rigurosas, al no responder a las lgicas planificadoras, y no ser generalizables a todos los contextos.

5. Establecer los canales de informacin necesarios para la retroalimentacin y toma de decisiones a lo largo del proyecto al interior de la
organizacin ejecutora, la organizacin ejecutora y la poblacin beneficiaria; y la organizacin ejecutora y las otras entidades implicadas (donantes, colaboradoras, etc.).
6. Sistematizar los informes de seguimiento e
informe final y socializarlos para la toma de
decisiones.

3.3. El nuevo desafo:

propuestas para la
valoracin del impacto

7. Fijar fechas pertinentes para la realizacin de

la evaluacin ex-post y la configuracin del
equipo evaluativo (ojal con fuerte participacin de la poblacin beneficiaria y representantes de la organizacin ejecutora y
donante como meros facilitadores).

As, como se seala en la propuesta de una nueva

perspectiva integrada, es importante responder al
conocimiento del impacto real de los proyectos en
la poblacin beneficiaria, y para ello ser necesario
fortalecer las metodologas puestas en marcha en
cada organizacin, que sean capaces de incorporar
los avances de unos y otros. Para la realizacin de
evaluaciones ex-post y la valoracin del impacto se
recomiendan los siguientes pasos:

8. Analizar la eficacia, pertinencia, eficiencia y

sostenibilidad, con el fin de evaluar los resultados esperados del proyecto y su funcionamiento en s, en aras a incorporar lo aprendido en la toma de decisiones futuras.
9. Analizar el impacto del proyecto en la vida
de la poblacin beneficiaria y en su comportamiento, as como los principales cambios
observados en el entorno, mediante indicadores cualitativos y herramientas semiestructuradas.

1. Establecer el seguimiento y la evaluacin expost desde la identificacin-diagnstico y la

planificacin, la metodologa a adoptar, tanto
para esa primera fase del proyecto como para
la ejecucin.
2. Realizar un anlisis en profundidad de los
agentes intervinientes en el proyecto (instancias internacionales, nacionales, locales y
representantes de la poblacin beneficiaria):
la disponibilidad para su participacin y los
roles y funciones de cada uno durante la preparacin, la implementacin y la evaluacin
del proyecto.

10. Sistematizar e incorporar dichos anlisis en la

evaluacin ex-post y emisin de un informe
evaluativo.
En este sentido, hay algunas agencias de desarrollo
que han comenzado a incorporar la nocin de Estudio de Impacto (wider impact study) con nfasis en
algunas reas de anlisis: econmica, socio- cultural, capacidad y poder, medioambiente y tecnologa
(Wardle, 1996)16. Ya en 1990, Casley y Kumar, en
torno a la evaluacin de proyectos de agricultura
ejecutados por el Banco Mundial y la Agencia Estadounidense de cooperacin internacional (USAID),
sealaban algunas reas a tener en cuenta para la
evaluacin de efectos:

3. Capacitar a los agentes intervenientes sobre

la metodologa escogida para la gestin del
proyecto y para la evaluacin, con especial
atencin en el impacto y en los cambios posibles generados.
4. Definir las personas encargadas de realizar el
seguimiento a la ejecucin, con miras cons16

Traducido de de Oakley, Pratt y Clayton Outcomes and Impact: evaluating change in social development. INTRAC. Oxford. 1998. Pg 59.

43

Interior n 29

26/9/05 18:26

Pgina 44

- Cambios observados en los ingresos y en los

niveles de vida como repercusin directa del
proyecto, (consumos, nutricin, vivienda, educacin, salud, servicios comunitarios, etc.).

se estudi una muestra de municipios y se articularon tcnicas de obtencin de datos cualitativas

y cuantitativas. Se realizaron talleres de planeacin participativa de la evaluacin, donde se definieron el qu, el cmo y el para qu de la evaluacin , entrevistas abiertas, talleres de discusin
y revisin de indicadores cuantitativos. He aqu
su testimonio:

- Cambios en la participacin y empoderamiento del grupo objetivo (aportes, apoyos y toma

de decisiones en los distintos momentos de la
planificacin, ejecucin y evaluacin del proyecto; organizaciones comunitarias antes y
despus, estructura interna, capacidad de liderazgo, de interlocucin, independencia de la
ayuda y sostenibilidad, etc.).

el hecho de derivar la evaluacin del efecto que

las acciones del programa tuvieran en la comunidad, y su cruce con la percepcin por parte del
programa y con los datos y registros de tipo estadstico, conferan validez al proceso investigativo.
Parte de los resultados saldran del anlisis de la
convergencia o divergencia entre las tres fuentes de
informacin: a una mayor convergencia correspondera una mayor grado de apropiacin y conocimiento de las acciones del programa por parte de
la comunidad o viceversa. Otros de los resultados
afloraran del anlisis de los resultados de cada una
de las fuentes por separado o de su interrelacin
independientemente de su convergencia o divergencia (UEC- CICI, 1998).

- Cambios respecto a la situacin y funciones

de las mujeres (repercusiones en la equidad
de gnero, participacin, empoderamiento,
roles, acceso al proyecto y a la toma de decisiones, etc.).
- Cambios en torno al medio ambiente (impactos en el ecosistema, productividad de la tierra, acceso a recursos naturales, proteccin a
minoras tnicas, enfermedades relacionadas
con el hbitat, etc.).
- ...

Esta es una experiencia de realizacin de la evaluacin de impacto que permite ir incorporando

elementos al aprendizaje de la evaluacin como
proceso integrador y facilitador para la mejora de la
calidad de las intervenciones futuras. Son ya varios
los intentos, experiencias y avances que a nivel
terico y prctico se estn desarrollando en Amrica Latina, Europa y Estados Unidos. Todas ellas tratan de agilizar un debate abierto sobre la evaluacin y, en concreto, sobre la evaluacin de impacto. Todava queda mucho por aprender.

Estas son algunas de las reas donde debe ponerse especial atencin a la hora de observar cambios
susceptibles del proyecto, tanto negativos como
positivos. Pero es necesario recordar que, dependiendo del rea en que se haya ejecutado el proyecto (productivo, educativo, juvenil, etc.) deber
ponerse especial cuidado en desarrollar indicadores
y alertas especficas para ese campo.
En el caso de la experiencia de evaluacin de
impacto del Programa Agua Potable y Saneamiento de la Costa Pacfica-Convenio ALA 92/39, el
anlisis prest especial atencin al impacto del
proyecto en la creacin, administracin y manejo
de empresas de servicios pblicos del agua y la
promocin de la participacin de la comunidad
respecto a la conciencia del recurso del agua, su
conservacin y racionalizacin del consumo
(UEC-CICCI, 1998). Para ello, la evaluacin se
centr en el impacto de las estrategias diseadas
y de la percepcin de la comunidad sobre la
intervencin, su papel en la gestin y su garanta
de sostenibilidad basada en la cogestin y autogestin. Para el estudio del impacto se puso en
marcha toda una investigacin evaluativa, donde

44

Interior n 29

26/9/05 18:26

Pgina 45

Categoras de anlisis
Percepcin del recurso
del agua

Cuadro 23
Ejemplo de Matriz de Evaluacin de impacto
Categoras descriptivas
Indicadores
- identificacin del recurso
- conciencia del recurso

Percepcin de la realizacin - informacin sobre la

de la obra fsica
ejecucin

Interpretacin de datos
(entrevistas individuales
y grupales)

- identifica disponibilidad de fuentes de agua en el territorio

- conoce fuente abastecedora del
acueducto
- conoce diferencia de uso entre
agua cruda y potable
- est en disposicin de racionalizar el consumo
- conoce que tipo de obra se
realiz
- percibe como se realiz la obra
fsica

Participacin comunitaria
en relacin al proyecto de
acueducto

- conocimiento de los
aspectos legales y
normativos
- funcionamiento de los
mecanismos de control
social

- conoce los criterios de

determinacin de la tarifa
- sabe que el pago del servicio
est en funcin del consumo
- conoce los mecanismos de
control social
- identifica quien es el vocal de
control

Organizacin social para la

gestin del servicio

- funcionamiento de la
organizacin
- funcionamiento operativo
de la ESP

- conoce la tipologa de la ESP

- valora estar asociado a la
organizacin
- est disponible al pago del
servicio
- sabe que personal trabaja en la
ESP

Fuente: Universidad Externado De Colombia (UEC)- CICCI: "Evaluacin de impacto en el rea social. Programa de Agua Potable y Saneamiento Costa Pacfica". Convenio ALA
93/39. Colombia. Santiago de Cali. 1998. Pg. 29.

45

Interior n 29

26/9/05 18:26

Pgina 46

Interior n 29

26/9/05 18:26

Pgina 47

BIBLIOGRAFA

BONILLA-CASTRO, E. y P. RODRIGUEZ SEHK

(1995): La investigacin en Ciencias Sociales. Ms
all del Dilema de los Mtodos. Santa Fe de Bogot: CEDE. Facultad de Economa - Universidad de
los Andes.

AGENCIA NORUEGA DE DESARROLLO (NORAD)

(1994): EML: El Enfoque del Marco Lgico.
Manual para la planificacin de proyectos orientada mediante objetivos. Madrid: Instituto de desarrollo y cooperacin IUDC. Universidad Complutense de Madrid. CEDEAL .

COMIT DE AYUDA AL DESARROLLO (CAD)

(1995): Manual de la ayuda al desarrollo. Principios del CAD para una ayuda eficaz. Madrid:
Mundi Prensa - OCDE.

AGENCIA NORUEGA DE DESARROLLO (NORAD)

(1997): Evaluacin de proyectos de ayuda al desarrollo. Manual para evaluadores y gestores. Madrid:
Instituto de desarrollo y cooperacin IUDC. Universidad Complutense de Madrid. CEDEAL .

CASTRO, R. y K.MOKATE (1998): Evaluacin econmica y Social de Proyectos de Inversin. Santa

Fe de Bogot: CEDE BID. Facultad de Economa
- Universidad de los Andes.

ALVIRA MARTIN, F. (1997): Metodologa de la Evaluacin de Programas: Un Enfoque Prctico. Buenos Aires: Lumen/ Humanitas. Coleccin Poltica,
Servicios y Trabajo Social.

CEA DANCONA, M. A. (1999): Metodologa cuantitativa. Estrategias y tcnicas de investigacin

social. Madrid: Sntesis.

ANDER-EGG, E.(1994): Evaluacin de servicios y

programas sociales. Buenos Aires: Lumen.

CASLEY, D. J. y K. KUMAR (1990): Seguimiento y

Evaluacin de proyectos en Agricultura. Madrid:
Mundi Prensa y Banco Mundial.

BANCO INTERAMERICANO DE DESARROLLO

(BID) (1997): Evaluacin: Una herramienta de
gestin para mejorar el desempeo de los proyectos. Disponible:

CEPAL (1996): Documentacin del curso sobre

Formulacin y evaluacin de proyectos sociales. Programa Conjunto sobre Polticas Sociales
para Amrica Latina (PROPOSAL). CEPAL, OEA,
NNUU.

http://www.iadb.org/cont/evo/spbok/evomain.html.
BEAUDOUX, E. y otros (1992): Gua Metodolgica
de Apoyo a proyectos y Acciones para el Desarrollo. De la identificacin a la Evaluacin.
Madrid:IEPALA.

CHAMBERS, R. (1997): Whose reality counts? Putting the first last. London: Intermediate Technology Publications.

BERLAGE, L. and O. STOKKE (1992): Evaluating

Develpment Assistance: Aproaches and Methods.
London: EADI. Book Series 14. Frack cass.

COHEN, E. y R. FRANCO (1992): Evaluacin de

proyectos sociales. Madrid: Siglo Veintiuno.

47

Interior n 29

26/9/05 18:26

Pgina 48

COMISIN DE LAS COMUNIDADES EUROPEAS

(CCE) (1993): Gestin del Ciclo de un Proyecto.
Enfoque Integrado y Marco Lgico. Bruselas: Serie
mtodos e instrumentos para la gestin del ciclo
de un proyecto, n 1.

Literature Review. En IDS Working Paper, n 70.

FETTERMAN, D. M., KAFTARIAN, S. J. y A. WANDERSMAN(editors) (1996): Empowerment Evaluation. Knowledge and Tools for Self- Assessment
and Accountability. California: Sage Publications.

COOK, T.D. y CH.S. REICHARDT (1986): Mtodos

cualitativos y cuantitativos en investigacin evaluativa .Ediciones Morata.

FEUERSTEIN, M. T. (1986): Partners in Evaluation.

Evaluating Development and Community Programmes with Participants. Hong Kong: Mac
Millan.

CORREA, E. (1999): Impactos Socio- econmicos de

grandes proyectos. Evaluacin y manejo. Santa Fe
de Bogot: Fondo FEN Colombia, Editora Guadalupe.

GOMEZ GALN, M. (1995)Elementos Bsicos de los

Proyectos en la Cooperacin para el Desarrollo.
Madrid: Cideal.

CORNWALL, A., GUIJT, I., and A. WELBOURN

(1993): Aknowledging Process. Challenges for
Agricultural Research and Extension Methodology. En IDS Discussion Paper, n 333, Brighton::
Institute of development Studies.

GONZLEZ, L. (2001): El Enfoque del Marco Lgico (EML) y el Mtodo de Planificacin Orientada
por Objetivos (ZOPP): Metodologa para la gestin de proyectos desde la Cooperacin Internacional al Desarrollo. En Tecnologa Administrativa, vol. XV, n 35, Universidad de Antioquia,
Medelln.

CRUZ ROJA ESPAOLA (CRE) (1997): Cooperacin

Internacional. Delegados/as de proyectos de cooperacin Internacional. Manual del Alumno/a.
Madrid: CRE.

GONZLEZ, L. (2001): La evaluacin en los proyectos de desarrollo. Vitoria: Gobierno Vasco (en
prensa).

DEUTSCHE GESESLLSCHAFT FR TECHNISCHE

ZUSAMMENARBEIT (GTZ) (1987): ZOOP Una
Introduccin al Mtodo. Frankfurt: GTZ (versin
en castellano).

GOSLING, L. y M. EDWARDS (1998): Toolkits. A

practical guide to assesment, monitoring, review
and evaluation. En Development Manual , n 5,
London: Save the Children.

DEUTSCHE GESELLSCHAFT FR TECHNISCHE

ZUSAMMENARBEIT (GTZ) (1992): Cuando la
participacin falta.... Conceptos bsicos, estrategias, estudios de caso, lo que debe hacerse y lo que
debe evitarse en el desarrollo rural. Asia. Escborn:
GTZ.

GUBA , E.G. y I.S.LINCON (1989): Fourth Generation Evaluation. London: Sage Publications.
HAUSE, E.R. (1993): Professional Evaluation. Social
Impact and Political Consequences. California:
Sage Publications.

DEUTSCHE GESELLSCHAFT FR TECHNISCHE

ZUSAMMENARBEIT (GTZ) (1996): Gestin del Ciclo
del Proyecto PMC y Planificacin de proyectos
orientada a Objetivos (ZOPP).Eschborn: GTZ.

INSTITUTO UNIVERSITARIO DE DESARROLLO Y

COOPERACIN (IUDC) (1999): La evaluacin
de la ayuda al desarrollo. En Desarrollo y Cooperacin, n extraordinario, n 4, Madrid: IUDC.

HELVINE, S. y M. GOBEL (1998): Planificacin de

proyectos orientada a objetivos (ZOPP). Orientaciones para la planificacin de proyectos y programas nuevos y en curso. Eschborn: GTZ.

INSTITUTO LATINOAMERICANO Y DEL CARIBE

DE PLANIFICACIN ECONMICA Y SOCIAL
(ILPES) (1998): Gua para la Identificacin, Preparacin y Evaluacin de Programas Sociales.
Santiago de Chile: ILPES.

EADE, D. and S. WILIAMS (1995): The Oxfam

Handbook of Development and Relief. Oxford:
Oxfam Publication, Volume I.

KLINGER, E. y V. STEIGERWARLD (1998): El seguimiento en los proyectos de cooperacin tcnica.

Eschborn: GTZ.

ESPINOZA VERGARA, M. (1983): Evaluacin de

proyectos sociales. Buenos Aires: Humanitas.

LEVEVRE, P. And GARCIA, C. (1997): Experiences,

Perceptions and Expectations of Local Project
Actors on Monitoring and Evaluation: A case

ESTRELLA, M. y J. GAVENTA (1998): Who Counts

Reality? Participatory Monitoring and Evaluation: A

48

Interior n 29

26/9/05 18:26

Pgina 49

Study in the Philippines. En Journal of International development, volumen 9, n 1.

PATTON, M.Q. (1997): Utilization-focused Evaluation. The New Century Text. USA: Sage Publications.

MADAUS, G. F. y SCRIVEN, M. y D.L. STUFFLEBEAM ((1991): Evaluation Models. Viewpoints on

Educational and Human Services Evaluation. USA

PICHARDO, A. (1997): Evaluacin del impacto

social. El valor de lo humano ante la crisis y el
ajuste. Buenos Aires: Lumen- Humanitas.

MARSDEN, D. y P. OAKLEY (editors) (1990): Evaluating Social Development Projects. En Development guidelines, n 5, Oxford: Oxfam.

PUERTA; A.(1996): Evaluacin y sistematizacin de

Proyectos Sociales. Una metodologa de investigacin. Medelln: Universidad de Antioquia. Facultad
de Ciencias Sociales y Humanas.

MINISTERIO DE ASUNTOS EXTERIORES (MAE)

(1998): Metodologa de la Gestin de Proyectos de
la Cooperacin Espaola. Madrid: AECI.

RUBIN, F. (1995): A Basic Guide to Evaluation for

Development Workers. Oxford: Oxfam.

MINISTERIO DE ASUNTOS EXTERIORES (MAE)

(1998): Metodologa de evaluacin de la Cooperacin Espaola. Madrid: Cyan, Proyectos y Producciones Editoriales.

RUDQVIST, A.(1991): Pautas para consultas y Participacin Popular en Procesos y Proyectos de

Desarrollo. Estocolomo: Universidad de Estocolmo. Departamento de Antropologa Social.

MINISTERIO DE ASUNTOS EXTERIORES (MAE)

(1998): Informes de Evaluacin 3: Las Escuelas
Taller en Iberoamrica. Madrid: Cyan.

RUIZ OLABUENAGA, J. I. (1999) : Metodologa de

la Investigacin Cualitativa. Bilbao: Universidad
de Deusto.

MOHR, L. B.(1995): Impact Analysis for Program

Evaluation. California: Sage Publications.

SCHONHUTH, M. y U. KIEVELITZ (1994): Diagnstico Rural Rpido, Diagnstico Rural Participativo. Mtodos participativos de diagnstico y
planificacin en la cooperacin al desarrollo. Una
introduccin comentada. Eschborn: GTZ.

MOKATE, K. M. (1998): Documentacin del curso

para formadores en Gerencia Social: Convirtiendo el monstruo en aliado: la evaluacin como
herramienta de la gerencia social. Washington:
Banco Interamericano de Desarrollo (BID) e Instituto Interamericano para el Desarrollo Social
(INDES).

SEGONE, M.(1998): Democratic evaluation. A proposal for Strengthing the evaluation function in
International Develpment organizations. En Working Paper, n 3, Bogot: UNICEF.

MUSTO, S.A. (1975): Anlisis de eficiencia. Metodologa de la evaluacin de proyectos sociales de

desarrollo. Madrid: Tecnos.

SIERRA, M. E. (1999): Lo estamos haciendo bien?

El seguimiento y la evaluacin en los proyectos
sociales. En Juntos es Mejor, mdulo 4. Mdulos
de metodologas participativas para la gestin en
organizaciones sociales. Medelln: GTZ, Paisa
Joven, Fundacin Corona, Secretaria de Bienestar
de la Alcalda de Medelln.

OAKLEY, P., PRATT, B. y A. CLAYTON (1998):

Outcomes and Impact: Evaluating Change in
Social Development. En INTRAC NGO Management and Policy, series n 6. Oxford: INTRAC.
ONU (1993): Manging the Development Project. A
Training Curriculum. New York: ONU.

THOMAS, A. (1999): What makes good development management?. En Development in Practice,

volumen 9, numbers 1 and 2.

OVERSEAS DEVELOPMENT ADMINISTRATION

(ODA) (1995): A Guide to Social Analysis for
Proyects in Developing Countries. London: HMSO.

UNIVERSIDAD EXTERNADO DE COLOMBIA (UEC)

(1998): Evaluacin de impacto en el rea social.
Programa de Agua Potable y Saneamiento Costa
Pacfica. Santiago de Cali: UEC.

QUINTERO URIBE, V. M. (1995): Evaluacin de

Proyectos Sociales. Construccin de Indicadores.
Colombia: Fundacin para la Educacin Superior
(FES).

WEISS, C.H.(1990): Investigacin Evaluativa. Mtodos para determinar la eficiencia de los Programas
de Accin. Mxico: Trillas.

PATTON, M.Q. (1992): Practical Evaluation. USA:

Sage Publications.

49

Interior n 29

26/9/05 18:26

Pgina 50

cuadernos
de trabajo
lan
koadernoak

0. Otra configuracin de las relaciones Oeste-Este-Sur.

SAMIR AMIN. Junio 1989. (AGOTADO)

1. Movimiento de Mujeres.
Nuevo sujeto social emergente en Amrica Latina y El Caribe.
CLARA MURGUIALDAY. Octubre 1989. (AGOTADO)

2. El patrimonio internacional y los retos del Sandinismo 1979-89.

XABIER GOROSTIAGA. Diciembre 1989.

3. Desarrollo, Subdesarrollo y Medio Ambiente.

BOB. SUTCLIFFE. Enero 1990. (AGOTADO)

4. La Deuda Externa y los trabajadores.

CENTRAL NICA DE TRABAJADORES DE BRASIL. Mayo 1990.

5. La estructura familiar afrocolombiana. BERTA INS PEREA. Junio 1990.

6. Amrica Latina y la CEE: De la separacin al divorcio?
JOAQUN ARRIOLA y KOLDO UNCETA. Septiembre 1990. (AGOTADO)

7. Los nuevos internacionalismos. PETER WATERMAN. Mayo 1991.

8. Las transformaciones del sistema transnacional en el periodo de crisis.
XOAQUIN FERNNDEZ. Septiembre 1991.

9. La carga de la Deuda Externa. BOB SUTCLIFFE. Mayo 1992.

10. Los EE.UU. en Centroamrica, 1980-1990
Ayuda econmica o seguridad nacional?
JOS ANTONIO SANAHUJA. Diciembre 1992.

11. Desarrollo Humano: una valoracin crtica del concepto y del ndice.
BOB.SUTCLIFFE. Junio 1993. (AGOTADO)

12. El imposible pasado y posible futuro del internacionalismo.

PETER WATERMAN. Noviembre 1993.

13. 50 aos de Bretton Woods: problemas e interrogantes de la economa mundial.

KOLDO UNCETA y FRANCISCO ZABALO. Septiembre 1994. (AGOTADO)

14. El empleo femenino en las manufacturas para exportacin de los pases

de reciente industrializacin. IDOYE ZABALA. Noviembre 1995.

15. Guerra y hambruna en frica. Consideraciones sobre la Ayuda Humanitaria.

KARLOS PEREZ DE ARMIO. Abril 1996.

16. Cultura, Comunicacin y Desarrollo. Algunos elementos para su anlisis.

JUAN CARLOS MIGUEL DE BUSTOS. Mayo 1996.

17. Igualdad, Desarrollo y Paz. Luces y sombras de la accin internacional

por los derechos de las mujeres.
ITZIAR HERNNDEZ, ARANTXA RODRGUEZ. Julio 1996. (AGOTADO)

18. Crisis econmica y droga en la regin andina

LUIS GURIDI. Abril 1997.

19. Educacin para el Desarrollo. El Espacio olvidado de la Cooperacin

MIGUEL ARGIBAY, GEMA CELORIO, JUANJO CELORIO. Agosto 1997.

20. Un anlisis de la desigualdad entre los hombres y las mujeres en Salud,

Educacin, Renta y Desarrollo
MARIA CASILDA LASO DE LA VEGA, ANA MARTA URRUTIA. Octubre 1997.

Interior n 29

26/9/05 18:26

Pgina 51

21. Liberalizacin, Globalizacin y Sostenibilidad

ROBERTO BERMEJO GMEZ DE SEGURA.
Bibliografa Especializada en Medio Ambiente y Desarrollo
CENTRO DE DOCUMENTACIN HEGOA. Abril 1998.

22. El futuro del hambre.

Poblacin, alimentacin y pobreza en las primeras dcadas del siglo
KARLOS PREZ DE ARMIO. Agosto 1998.

XXI

23. Integracin econmica regional en frica Subsahariana.

EDUARDO BIDAURRAZAGA AURRE. Octubre 1998.

24. Vulnerabilidad y Desastres. Causas estructurales y procesos

de la crisis de frica
KARLOS PREZ DE ARMIO. Julio 1999.

25. Polticas sociales aplicadas en Amrica Latina

Anlisis de la evolucin de los paradigmas en las polticas sociales
de Amrica Latina en la dcada de los 90
IAKI VALENCIA. Octubre 1999.

26. Equidad, bienestar y participacin: bases para construir un desarrollo alternativo.

El debate sobre la cooperacin al desarrollo del futuro.
ALFONSO DUBOIS. Diciembre 1999.

27. Justicia y reconciliacin. El papel de la verdad y la justicia en la reconstruccin

de sociedades fracturadas por la violencia
CARLOS MARTN BERISTAIN. Febrero 2000. (AGOTADO)

28. La Organizacin Mundial de Comercio,

paradigma de la globalizacin neoliberal
PATXI ZABALO. Junio 2000.