Академический Документы
Профессиональный Документы
Культура Документы
FUNDAMENTOS DE UNA
GESTIN POR RESULTADOS
EDITORES:
Emma Rotondo Dall'Orso
Jorge Rodrguez Sosa
AUTORES:
Jorge Rodrguez Sosa
Emma Rotondo Dall'Orso
Gloria Vela Mantilla
AGRADECIMIENTOS POR LOS COMENTARIOS
Augusto Cavassa, Eduardo Centeno, Patrick Dumazert, Brbara Massler, Daniel Jess, Daniel
Laguna, Antonio Pozo, Carmela Alicia Valle
Impreso en el Per
CONTENIDO
SIGLAS Y ACRONIMOS ...................................................................................................
07
PRESENTACION ..............................................................................................................
09
INTRODUCCION .............................................................................................................
11
12
15
Deniciones...............................................................................................................
Qu son los Estudios de Base? ................................................................................
Qu no son los Estudios de Base?............................................................................
Los EB en el Sistema de Seguimiento y Evaluacin .....................................................
15
15
17
19
Requisitos..................................................................................................................
Cundo llevarlos a cabo?.........................................................................................
Qu hacer cuando no se ha realizado un EB? ...........................................................
Participantes y Roles ................................................................................................
21
21
22
23
25
25
25
25
26
28
30
31
32
32
35
38
42
43
43
44
47
48
48
49
49
49
50
51
52
54
54
54
55
55
56
57
58
60
61
61
BIBLIOGRAFA ..............................................................................................................
63
SIGLAS Y
ACRONIMOS
Barlovento
CARD
CORREDOR
Desco
DOM HELDER CAMARA
EB
FAT
FIDA
NGABE Y BUGLE
ODM
ONG
PADEMER
POA
PREVAL
PRISE
PRODAP
PRODARIEN
PRODECOP
PRODERCO
PRODERNEA
PRODESEC
PROPESUR
PROMARENA
PROSALAFA
RIMS
RUTA
PSES
UGP
UNEPCA
URUGUAY RURAL
USE
PRESENTACIN
El Fondo Internacional de Desarrollo Agrcola (FIDA) propicia la adopcin de una gestin orientada al
impacto y al aprendizaje, a n de lograr un conjunto de cambios sostenibles en los medios y calidad de
vida de la poblacin rural pobre, lo que signica bsicamente mejorar sus ingresos y activos, su seguridad
alimentaria y nivel nutricional, as como fortalecer su acceso a conocimientos e informacin, sus capacidades tcnicas y contribuir a la equidad de gnero, al desarrollo social y a la sostenibilidad ambiental.
La comprobacin de tales resultados depender en gran parte de la adecuada elaboracin de los Estudios
de Base (EB), que son el fundamento del manejo de la informacin en una gestin orientada al impacto
y al aprendizaje, porque son sus primeros referentes, resultando indispensables para comparar y mostrar
las evidencias del cambio, o sea la situacin del grupo objetivo durante y al trmino de la intervencin,
en contraste con su situacin inicial.
Mediante una investigacin realizada por Patrick Dumazert durante la segunda fase del PREVAL, sobre
una muestra de 17 Proyectos de Desarrollo Rural apoyados por el FIDA en Amrica Latina y el Caribe,
se evidenciaron confusin y deciencias en la manera de realizar los Estudios de Base, tanto en la metodologa como en la conceptualizacin.
La poca utilidad de dichos estudios como referentes de comparacin para evaluaciones de impacto, llev
a que PREVAL organice un documento sobre "Lineamientos Conceptuales y Metodolgicos para llevar a
cabo Estudios de Base", cuya primera versin recibi aportes de Jorge Rodrguez Sosa y de Gloria Vela
Mantilla, habiendo culminado la edicin Ada Ocampo, Coordinadora del PREVAL II al cierre de la segunda
etapa, en junio del 2004.
En ese mismo ao, la Junta Ejecutiva del FIDA aprob una disposicin para que todos los proyectos que
conancia incorporen indicadores comunes en sus marcos lgicos, para determinar el impacto en tres
momentos del ciclo del proyecto: al inicio (Estudios de Base), a mitad de periodo y al nal, teniendo
como eje los lineamientos del Sistema de Gestin de los Resultados e Impacto (RIMS) e incluyendo en los
Estudios de Base una encuesta estandarizada para medir el impacto registrado en los ingresos y activos,
desnutricin crnica y seguridad alimentaria, en lnea con los Objetivos de Desarrollo del Milenio.
Recientemente, en noviembre de 2006 se emiti el documento de Poltica del FIDA titulado: "Focalizacin. Los pobres de las Zonas Rurales", que fortalece los procesos del RIMS y proporciona pautas para
el diseo y ejecucin de una estrategia de focalizacin, de manera que sta se evidencie en todos los
ejercicios de evaluacin (incluyendo los Estudios de Base), as como en las actividades de supervisin y
de aplicacin del RIMS.
Con tales aportes se ha actualizado y ajustado el presente documento, que incluye nuevos textos, ejemplos, enlaces y bibliografa, teniendo como marco conceptual la gestin orientada a resultados.
Este nuevo documento recoge contribuciones de Gloria Vela Mantilla, Jorge Rodrguez Sosa y Emma
Rotondo DallOrso, as como las precisiones realizadas al texto por Antonio Pozo Sols y Daniel Jess
Ccori. Asimismo, recibi la lectura crtica de un grupo de consultores y responsables de Unidades de
Seguimiento y Evaluacin, entre ellos Eduardo Centeno (Nicaragua), Augusto Cavassa (Per), Brbara
Massler (FIDA/Roma), Daniel Laguna (Bolivia) y Carmela Alicia Valle (El Salvador), cuyas indicaciones y
sugerencias han enriquecido el contenido nal.
"Los Estudios de Base: Fundamentos de una Gestin por Resultados" orienta respecto a qu son y cmo
se llevan a cabo los EB en proyectos con gestiones dirigidas al logro de resultados, enfatizando el carcter participativo de sus procesos. Asimismo, aclara de qu modo el manejo de informacin sobre el
impacto comienza con estos estudios, y por qu es importante que los equipos tcnicos sean capaces
de intervenir en ellos, conjuntamente con los dems actores.
Esperamos que este esfuerzo se reeje en mejoras visibles en la concepcin y ejecucin de tales estudios,
tan tiles al desarrollo de una cultura de evaluacin y de gestin dirigida a resultados, ambos necesarios
para aumentar la ecacia de la lucha contra la pobreza rural en Amrica Latina y el Caribe.
Paolo Silveri
Gerente de Operaciones
Divisin para Amrica Latina y el Caribe
Fondo Internacional de Desarrollo Agrcola (FIDA)
INTRODUCCIN
Este documento, que tiene como antecedente una investigacin realizada en torno a la elaboracin de
Estudios de Base en la regin1, incorpora los nuevos lineamientos de seguimiento y evaluacin del FIDA
y plantea una oportuna hoja de ruta (ms como propuesta que como itinerario obligado) para guiar
a profesionales, tcnicos e interesados en el desarrollo de estos estudios.
As, "Estudios de Base: Fundamentos de una Gestin por Resultados" busca cubrir parte del vaco bibliogrco existente en el tema, ofreciendo deniciones y herramientas que orientan sobre la realizacin de
estudios pertinentes para la evaluacin de impacto, a n de mejorar las capacidades de consultores/as,
directores/as de proyectos, responsables de Unidades de Seguimiento y Evaluacin, miembros de los
equipos tcnicos y personal de gobierno encargados de la lucha contra la pobreza rural.
Reforzado con enlaces electrnicos que amplan y aclaran lo reseado en el texto, est organizado en dos
captulos, el primero de los cuales aborda Lineamientos Conceptuales acerca de lo que son y no son los
EB, incluyendo los requisitos para llevarlos a cabo, recomendndose que el equipo tcnico del proyecto
participe en todo o en buena parte del proceso de investigacin.
El segundo captulo trata sobre los Lineamientos Metodolgicos, que incluyen tres fases: Diseo y Organizacin; Recoleccin y Anlisis; y Comunicacin y Uso de Resultados.
La primera fase comienza con la revisin de los resultados esperados que se hallan en la Matriz del Marco
Lgico2, con el propsito de ajustar los indicadores de efecto e impacto; contina con la determinacin
de los objetivos, contenidos, temas y marco metodolgico (incluyendo como tcnica principal la encuesta de impacto del RIMS); y culmina con pautas sobre cmo elaborar el Plan de Trabajo respectivo. La
segunda fase, Recoleccin y Anlisis de los Datos, implica la aplicacin de los instrumentos y la obtencin de resultados, vericando la calidad del dato. La tercera fase, Uso y Comunicacin de Resultados,
explica cmo redactar el informe maestro y cmo identicar las audiencias de los EB para aprovechar
los hallazgos con miras al aprendizaje de los/las usuarias interesados.
El estudio realiz un anlisis detallado de la experiencia de estudios de base en 17 proyectos co nanciados por el FIDA:
PRODAP I y II, PROCHALATE, PRODERNOR en El Salvador; PROSOC, PRODERCO y PRONADEL, en Honduras; TROPISEC,
PROSESUR y FAT en Nicaragua; Ngbe-Bugl en Panam; PRODECOP y PROSALAFA en Venezuela; UNEPCA y PROSAT en
Bolivia y Corredor Puno Cusco y MARENASS en Per.
I. LINEAMIENTOS
CONCEPTUALES
DEFINICIONES
QU SON LOS ESTUDIOS
DE BASE?
Los Estudios de Base (EB)3
ofrecen un conjunto de
evidencias y apreciaciones
sobre la situacin inicial
de la poblacin objetivo de
un proyecto, as como de la
dinmica del contexto en que
interviene, para que esa informacin pueda compararse con
mediciones posteriores de los
cambios logrados. Por tanto, son
un tipo de investigacin aplicada
dirigida a obtener los referentes bsicos de la evaluabilidad
del proyecto y contribuir as a
una mejor toma de decisiones.
En sntesis, representan una primera evaluacin, cuya metodologa
ha de replicarse al menos a la mitad y al
nal del ciclo del proyecto, por lo que han de
ser muy precisos para facilitar la medicin exacta
de los cambios.
Su objeto especco es determinar la situacin de
inicio de los indicadores de efecto e impacto del proyecto, levantando su primer valor mediante tcnicas
como la encuesta de impacto del RIMS4, cuestiona-
rios y otras formas de medicin de carcter cuantitativo. Los EB deben mostrar adems evidencias
cualitativas de la situacin de la poblacin objetivo
al inicio de la intervencin, recogidas a travs de
entrevistas, talleres, grupos focales y reuniones
de la comunidad, quedando registradas mediante
textos, grabaciones, vdeos y fotografas.
Se los nombra en plural pues son varios estudios integrados y complementarios que se enfocan en los indicadores del ML del
proyecto.
Para informarse sobre el RIMS (Results Impact Management System: Sistema de Gestin de los Resultados e Impacto) y sobre
la encuesta de impacto estandarizada del FIDA puede consultarse en el Enlace N 1 Bibliografa sobre el RIMS, donde gura
el documento "Lineamientos prcticos para la ejecucin del sistema de gestin por resultados".
15
El FIDA valora la situacin inicial de la poblacin objetivo6 para medir el nivel y tipo de
16
Tmese nota que el grupo objetivo del FIDA, tal como se dene en su mandato, es la poblacin rural de los pases en desarrollo
que vive en condiciones de pobreza y de inseguridad alimentaria. Vese en el Enlace N 2 el texto completo del documento
"Focalizacin. Los pobres de las zonas rurales" (FIDA, noviembre 2006).
La poblacin objetivo del proyecto es determinada en el documento Ex Ante. No obstante, en el ejercicio de los EB ha de
aclararse si esa poblacin est bien focalizada en los mas pobres.
c.
Se entiende que el valor es el dato del indicador y la valoracin es el anlisis de ese valor, en relacin a la situacin de la
poblacin objetivo, la dinmica del entorno y los supuestos.
En los Informes de Evaluacin ex ante se encuentran diversas expresiones para referirse a los Estudios de Base, tipicndolos
como Encuesta de Base (o encuesta socioeconmica y productiva), Diagnstico de Base, y Lnea de Base, por lo cual se
requiere aclarar qu no es un Estudio de Base. Ver "Notas sobre Estudios de Base en proyectos nanciados por el FIDA en la
Subregin de Centroamrica, Panam y Belice", trabajo presentado por Jorge Len en el Mdulo II del Programa Intensivo en
Seguimiento y Evaluacin (PRISE), Guatemala, julio 2002. Revisar al respecto la pgina web de PREVAL www.preval.org
17
RECUADRO N 1
DIFERENCIAS ENTRE ESTUDIOS DE BASE Y DIAGNSTICOS INICIALES
Estudios de Base
Diagnsticos Iniciales
18
As como no son un diagnstico inicial, los estudios de base tampoco se reducen a una lnea de
base, que es un listado con el primer valor de los
indicadores de efectos e impactos, contemplados
en el marco lgico del proyecto. Dicho listado cuantica indicadores, resumiendo situaciones, pero no
las explica ni permite ver su conexin con otros
fenmenos. Por ello, una parte importante de los
Estudios de Base est representada por la lnea de
base, mas sta no los reemplaza.
Asimismo, en algunos proyectos los EB son tratados
como Evaluaciones Ex Ante, que son anlisis costo-benecio y de costo-efectividad elaborados para
evaluar la viabilidad, pertinencia y ecacia de un
proyecto, a n de decidir si se lleva a cabo o no. Por
ello, la Evaluacin ex ante presenta una descripcin
breve del contexto y de las caractersticas generales
de la poblacin, como sustento previo a los impactos
del proyecto, mientras que los EB se desarrollan
despus de formulado el proyecto y contienen informacin a partir de sus resultados esperados, no
para determinar su conveniencia, sino para permitir
su evaluabilidad. Por consiguiente, la Evaluacin ex
ante diere sustantivamente de los Estudios de Base,
tanto en objetivos como en contenido.
Respecto a las encuestas de base cabe decir
que constituyen una importante tcnica aplicada
por los EB, pero tampoco son la nica, puesto
que igualmente se pueden realizar grupos focales,
talleres y entrevistas, como ya se ha indicado anteriormente.
19
Etapa de Planeamiento
E
V
A
L
E
X
Etapa de Ejecucin
Seguimiento
ESTUDIO
DE
BASE
EVALUACIN CONTINUA O
DE PROCESO
EVAL.
FINAL
E
V
A
L
E
X
EVALUACIN INTERMEDIA
A
N
T
E
P
O
S
T
Planicacin
Sistematizacin
Evaluacin
20
El subsistema de planicacin levanta las hiptesis de cambio del proyecto, establece metas,
indicadores y resultados; qu debe hacerse y
por quin, incluyendo la asignacin de recursos.
Bsicamente, este subsistema utiliza tres herramientas: el planeamiento estratgico, la matriz
del Marco Lgico y el Plan Operativo Anual o
POA. Como se ha dicho, los EB proporcionan el
valor inicial de los indicadores de efecto e impacto, datos que acompaan a la planicacin
de manera permanente.
REQUISITOS
Estar en el primer ao
de ejecucin y disponer
de personal tcnico en
nmero suficiente y con
capacidades para llevar a
cabo los estudios.
12 Para mayor informacin acerca del RIMS del FIDA ver el Enlace N 1.
13 En el punto "Establecer el contenido de los EB" se desarrolla en profundidad la caracterizacin de la poblacin objetivo.
21
Justamente, es necesario contar con tales condiciones para que se retomen y actualicen las
estrategias de intervencin y los objetivos
del proyecto, en caso hayan cambiado algunos
factores externos (favorables o desfavorables).
Ello es posible en el marco del dilogo inicial
necesario entre los miembros de los equipos tcnicos y la poblacin objetivo, sentando las bases
de una estrecha comunicacin que fortalezca la
participacin.
RECUADRO N 2
EL MOMENTO ADECUADO PARA REALIZAR LOS ESTUDIOS DE BASE
Es comn encontrar proyectos con Estudios de Base prematuros y poco pertinentes para las evaluaciones posteriores. Causa de ello suele ser la falta de involucramiento del equipo del proyecto (en
muchos casos porque todava no se ha conformado ste y en otros, por una inestabilidad del personal
inicial). Tambin ello se debe a los cambios de rumbo que se toman sobre la marcha, que desenfocan
la evaluacin y obligan a volver a pensar cmo evaluar. Estos casos fueron: PROCHALATE, PRODERCO,
UNEPCA y PROSALAFA.
Paradjicamente, cuando se ha logrado mayor capacidad y motivacin por la evaluacin de efectos e
impactos por parte del equipo del proyecto, result ser demasiado tarde para reconstruir la situacin
de partida hacindose, entonces, necesario apoyarse en otras fuentes de informacin a menudo generadas por el subsistema de seguimiento, por cierto sin la calidad y precisin de un Estudio de Base.
Este es el caso de PRODERCO y UNEPCA.
Luego hay dos proyectos que hicieron su Estudio de Base temprano y bien enfocado, aunque ciertamente requieren complemento posterior en algunos aspectos de la intervencin; es el caso de PROSOC
y PRODECOP. Mientras que PRODESEC (Nicaragua) realiz dos encuestas y desarrolla estudios de caso
para seguimiento a los impactos. La primera encuesta fue la del RIMS, dirigida a una muestra de la
poblacin, la segunda encuesta, aplicada en usuarios del proyecto segn ingresan al mismo (familias
y organizaciones).
Fuente: Elaboracin propia e Informe de Consultora. Patrick Dumazert, 2002.
14 Se dice que los EB no son apropiados cuando yerran en la metodologa o en el enfoque, cuando se hicieron a destiempo (la
poblacin objetivo ya tuvo contacto con el proyecto y por tanto ya no reejan la situacin inicial) o cuando ya realizados los
EB se hacen cambios sustantivos en los indicadores de efecto e impacto.
22
consultores externos.
PARTICIPANTES Y ROLES
Es deseable que los EB tengan un proceso participativo, esto es que los actores del proyecto se
involucren en sus diversas fases, sobre todo en
el diseo del sistema PSES, especialmente en la
revisin del marco lgico, como luego se ve en
detalle en el punto 3. Elaborar un Mapeo de Actores contribuye a denir mejor la participacin e
intereses de stos, lo cual puede apreciarse en el
Enlace N 3, "Mapeo de Actores Sociales".
La participacin ofrece mltiples ventajas a los
sistemas de PSES, entre ellas el aprendizaje
colectivo, que se traduce en empoderamiento
de los actores y en la mejora de su capacidad
para generar los cambios. Entre estas ventajas,
cabe recordar que el trabajo en grupo promueve
actitudes favorables a la resolucin de conictos
y a la construccin de acuerdos, fortaleciendo la
disposicin de los participantes para comprometerse en las acciones del proyecto. En la prctica,
la accin colaborativa trae benecios que van
ms all de las necesidades de una evaluacin en
particular, insertndose en los procesos locales
de toma de decisiones.
23
RECUADRO N 3
ROL DE LOS ACTORES EN LOS EB
Unidades de SyE USES
Garantizar que el EB sea parte integral del Subsistema de Evaluacin, respondiendo a los indicadores del ML.
Disear el plan de comunicacin y uso de los resultados, en consulta con los actores del proyecto.
Actores locales (coejecutores, organizaciones)
Participar en la recoleccin de datos, ya sea como informantes y/o como operadores de las diversas tcnicas, as como en la fase de anlisis.
Por lo general, los consultores participan en diversos momentos del proceso, para facilitarlo y prestar
asistencia tcnica especializada. Es comn su participacin en los siguientes temas:
24
II. LINEAMIENTOS
METODOLOGICOS
FASE DE DISEO Y
ORGANIZACIN DE LOS EB
Es necesario planicar el desarrollo de los EB a
partir de la revisin de los resultados esperados del
proyecto, efectuando las enmiendas necesarias a la
matriz del marco lgico y ajustando los indicadores
para cimentar la medicin de los resultados. Ello
permite pasar a la determinacin de los objetivos y
contenido de los EB, luego de lo cual puede formularse el Plan de Trabajo, el Marco Metodolgico y la
Matriz de Diseo y Anlisis, entre otros productos
de esta etapa preparatoria.
De cmo realizar lo anterior trata el presente captulo. Se busca lograr que los/las lectores estn en
condiciones de participar en el diseo y organizacin de los EB, quedando en capacidad para elaborar los productos mencionados y as forjar unos
Estudios de Base tiles para evaluar los cambios y
facilitar la gestin de los proyectos.
REVISIN DE LOS
RESULTADOS
QU ES EL MARCO LGICO?
El ML es un instrumento de planicacin que resume y organiza
los cambios requeridos por
una intervencin de desarrollo
(programa o proyecto) para
mejorar los medios y calidad
de vida de la poblacin objetivo. Como herramienta metodolgica sistematiza en una
matriz los resultados esperados
25
15 Algunas matrices del ML incluyen el valor de la lnea de base por indicador, metas y rea geogrca, lo cual es opcional.
16 Sobre los indicadores del RIMS se tratar ms adelante, en este captulo.
17 Para aclarar la diferencia entre dimensin y variable puede consultarse el texto de Ruiz-Bravo Patricia y Barrig, Maruja que se
encuentra en el Enlace N 5 "Lineamientos Metodolgicos para la incorporacin del enfoque de Gnero en el Seguimiento
y Evaluacin de proyectos".
26
ii. Indicadores cualitativos son aquellos que evalan cambios expresados en cualidades y por
tanto manejan informacin cualitativa (grado,
nivel, tipo). Importantes tcnicas para vericar
estos indicadores son las entrevistas grupales e
individuales, las historias de vida y las tcnicas
grupales (talleres, grupos focales, reuniones
con la comunidad).
iii. Indicadores mixtos18 son aquellos que verican
cambios cualitativos y determinan en cuntos
individuos /poblaciones se presentan esos cambios. Un ejemplo de indicador de efecto mixto
sera el siguiente:
Nmero de organizaciones segn grado de desarrollo de su capacidad tecnolgica en trminos de
si aplican:
Respecto a la relacin que existe entre indicadores cualitativos y cuantitativos puede decirse que
constituyen "dos caras de una misma moneda",
expresando dimensiones complementarias (ninguna es mejor que la otra). Por ello es fundamental
que los Estudios de Base comprendan informacin
que combine ambas. Para ver cmo se construyen
los indicadores (incluyendo los mixtos) se sugiere
revisar el Enlace N 5.
Aspecto favorable de los procedimientos de revisin
y denicin es que propician el entendimiento entre
los actores del proyecto, quienes as comparten una
misma visin y se familiarizan en el manejo de un
lenguaje comn, todo ello necesario para que los
EB produzcan los frutos buscados.
Junto a la denicin del indicador19 hay que establecer cmo se calcular el mismo, procedimiento
registrado en la Matriz de Diseo y Anlisis (ver
subttulo respectivo). Algunos pasos para revisar
el ML y cada una de sus columnas se presentan a
continuacin20.
1. Comenzar con describir el concepto y las dimensiones del hecho a medir a travs de una
lluvia de ideas u otra dinmica de construccin
grupal de conocimiento.
2. Ubicar el indicador segn el nivel de resultado
(primer, segundo y tercer nivel), comenzando con
la formulacin del indicador de tercer nivel.
3. Traducir la denicin en dimensiones y variables
vericables.
18 La formulacin de indicadores mixtos es una propuesta metodolgica desarrollada por la Fundacin Synergia, ONG colombiana,
en el Sistema de PSES de proyectos de Cordaid.
19 Como parte del proceso de armonizacin de la cooperacin para el desarrollo, se ha logrado establecer algunas deniciones y
estndares para la medicin de indicadores, especialmente los que forman parte de los ODM y sobre todo para los indicadores
de impacto. Por su parte, el FIDA ha establecido claramente el grupo objetivo y ha dado una denicin conceptual compartida
de la focalizacin sobre la poblacin rural pobre.
20 Adaptado de Rotondo, Emma y Vela, Gloria "Lineamientos para construir Indicadores de Gnero" PREVAL 2003.
27
21 Los indicadores del RIMS reejan las necesidades de informacin de al menos una parte interesada: el FIDA. Informar sobre los
indicadores del RIMS no socava o reemplaza los procesos participativos que apuntan a promover la participacin de las partes
interesadas, ya sea en trminos de la seleccin de los indicadores de resultados o del seguimiento de los mismos. Ms bien,
complementa la participacin de las partes interesadas, al denir de forma explcita las necesidades de informacin del FIDA,
que en muchos casos sern las mismas que las de las contrapartes y otras partes interesadas. Los indicadores identicados
por otras partes interesadas que no guren en el sistema de informes del RIMS deben ser incluidos en el sistema de SyE
del proyecto. (Extracto de "Lineamientos prcticos para la ejecucin del Sistema del FIDA de Gestin de los Resultados y el
Impacto") el documento completo se encuentra en el Enlace N 1.
28
(i) nmero de hogares que acusan mejora del ndice de propiedad de activos familiares22, en base
a los activos adicionales (bienes productivos,
bicicletas, radios, viviendas mejoradas, techos
de hojalata, etc.);
(ii) reduccin porcentual de la prevalencia en desnutricin infantil;
(iii) nmero de hogares que acusan mejora en
seguridad alimentaria;
(iv) nmero de personas que reciben servicios del proyecto (beneciarios directos y beneciarios totales).
Indicadores
Obligatorios
Opcionales
Caresta / hambre
Reduccin de la prevalencia de
desnutricin infantil *
Universalizacin de
la enseanza
Gnero
Morbilidad
Reduccin de incidencia de
enfermedades infecto contagiosas
Medio ambiente
Indicadores "ancla". Indicadores esenciales basados en datos objetivos y comparables- vinculados a las Metas de Desarrollo del Milenio.
22 La metodologa utilizada para este ndice toma en cuenta la experiencia de otras organizaciones internacionales, como UNICEF
(Encuesta por Conglomerados a nivel de Hogares) y el Banco Mundial (Estudios sobre Medicin de Niveles de Vida). Para
mayores informes sobre su denicin y mtodo de clculo dirigirse a la web www.ifad.org
23 En la seccin "Marco Metodolgico" se profundiza sobre las caractersticas de esta encuesta. Al respecto es oportuna la lectura
del documento "Directrices Prcticas" Enlace N 1.
29
30
Diferencias entre mujeres y hombres en el acceso y control sobre los recursos productivos
RECUADRO N 5
EJEMPLO SOBRE GNERO EN EL FONDO DE ASISTENCIA TCNICA FAT
Segn la gerencia del FAT, es posible estimar que alrededor de un 33 por ciento de los clientes
beneciarios van a ser mujeres, tanto por la existencia de una discriminacin positiva a su favor,
como por la presencia de mujeres, su grado de organizacin y por la propensin creciente a la
inclusin de mujeres en las propuestas grupales de los productores (la cual a su vez resulta del
conocimiento que stos tienen del sesgo positivo antes mencionado). Se produce por lo tanto un
mecanismo de tipo 'aprendizaje institucional' que podra establecer la participacin de mujeres
en la poblacin beneciaria en este nivel, el cual sin duda es superior a su representatividad
numrica.
Por tales razones, se considerara necesario establecer una cuota equitativa (50 / 50), para garantizar la misma conabilidad en la estimacin de impactos en ambos gneros.
Fuente: PREVAL II (2004).
ORGANIZACIN Y
CONTENIDO DE LOS EB
Para desarrollar los EB es necesario seguir algunos
procedimientos apropiados y elaborar herramientas que ayuden a organizarlos, como parte
de las acciones previas a la salida al campo. La
propuesta de planicacin presentada en estos
lineamientos comprende cinco pasos articulados
y consecutivos:
31
RECUADRO N 6
EJEMPLO DE OBJETIVOS PARA LOS EB
Establecer las caractersticas principales / situacin de la poblacin objetivo del proyecto, segn
la estrategia y marco lgico.
Establecer la situacin de los supuestos o factores de riesgo del entorno en relacin a los indicadores de efecto e impacto.
Aportar en la revisin y ajuste de los resultados previstos, los indicadores y, en general, de las
estrategias de intervencin del proyecto.
32
Obtener informacin mixta (cualitativa y cuantitativa) conable y suciente sobre los indicadores de efecto e impacto del proyecto, con la
nalidad de establecer el primer referente de
comparacin (primer valor de los indicadores
en el momento inicial de la intervencin).
RECUADRO N 7
DIMENSIONES Y VARIABLES DEL IMPACTO EN PROYECTOS DE DESARROLLO RURAL
DIMENSIONES
ACTIVOS FISICOS
Y FINANCIEROS*
VARIABLES
ACTIVOS HUMANOS*
SEGURIDAD
ALIMENTARIA
Cambios en la produccin
Tecnologa agropecuaria
Ingresos
Duracin de las temporadas de hambre
Estatus nutricional, etc.
CAPITAL SOCIAL Y
EMPODERAMIENTO
* Ntese que el ndice de ingresos activos del RIMS incorpora el tipo de vivienda, nmero de habitaciones, tipo de abastecimiento de agua potable y saneamiento, as como activos del hogar (telfono, medio de transporte, combustible usado,
parcelas, herramientas de labranza, etc.
Adaptado de "Directrices para el examen interno a la terminacin de proyectos". Departamento de Administracin de
Programas. FIDA, Junio 2006.
33
25 Esta es una diferencia muy clara de los EB en relacin a los diagnsticos situacionales, donde la poblacin objetivo es descrita
de manera ms amplia y general (ver distinciones en el Recuadro N 1).
26 Ver Enlace N 2 a (Resumen Operativo).
27 Ver Enlace N 2 a (Resumen Operativo).
34
35
Indicadores
Medios de
vericacin
Se desagrega en:
Supuestos
No se utiliza
Indicadores
Denicin
y Variables
Informantes
Fuentes
Tcnicas y
mtodo de
clculo
Anlisis
ParticiProcedipantes
mientos
Nuevas columnas
A continuacin se describen los procedimientos necesarios para el llenado de las nuevas columnas.
36
se trabaja en evaluacin son de dos tipos: primarios y secundarios. Los primarios son aquellos que
no existen antes de los procesos de observacin,
por lo cual se recogen preguntando a las personas
vinculadas con las experiencias a ser evaluadas
(los informantes).
Los secundarios pre-existen a los procesos de observacin, estando almacenados en fuentes como
bibliotecas especializadas, bancos de datos, data
institucional y pginas web de programas y proyectos. Por tanto, slo deben ser ubicados.
A continuacin, un cuadro comparativo de ambos
tipos de datos:
RECUADRO N 8
DIFERENCIAS ENTRE DATOS PRIMARIOS Y SECUNDARIOS
Criterios de
comparacin
Tipos de datos
Primarios
Secundarios
Dnde se encuentran?
Se aplican instrumentos a
informantes identicados
Los datos ya sean primarios o secundarios- se convierten en informacin cuando son organizados de
alguna manera lgica para los nes de anlisis y valoracin. Desde ese punto de vista, toda informacin
supone un sistema de datos particular y cada evaluador puede desarrollar rutas de anlisis particulares,
incluso frente a una misma "masa" de datos.
Cuestin clave es la elaboracin de un registro de
los datos secundarios existentes entre los que
necesitamos- y las fuentes que los contienen, para
establecer qu necesidades de informacin se pueden cubrir con ellos, al menos parcialmente.
37
38
RECUADRO N 9
EJEMPLO DE PROGRAMA DE ACTIVIDADES DE LOS EB
Fase /
Actividades
Productos
Logstica
Mes 1
Responsables
S1
S2
S3
S4
Fase 1: Preparatoria
Taller de revisin
del ML
Marco Lgico
revisado
4 das en un local,
15 personas
USE + equipo
tcnico,
representantes
actores
Organizacin de
los EB
Objetivos,
contenido, plan de
trabajo, TdR
2 das, 5 personas
USE y jefes de
componente
Marco metodolgico
Estrategia
metodolgica
2 das, 5 personas
USE + consultores
Informe
USE + consultores
Informe
3 medios das
USE + Consultores
Cuestionario de
Base de datos
ingreso de las familias sobre efectos
y organizaciones
directos
USE + consultor
especializado
Ordenamiento y
anlisis de datos
15 das
USE + consultor
especializado
Informe nal EB
Plan de Uso y
Comunicacin,
Mapa de Actores
2 das
USE en consulta
con actores
Denicin de medios
de comunicacin
Plan de Uso y
Comunicacin
2 das
USE +
comunicador/a
Uso de resultados
de los EB
Ubicar eventos o
hitos de difusin
1 da
Director/a + equipo
tcnico, actores
seleccionados
Fuente: Adaptado de pautas del RIMS "Directrices prcticas para la realizacin de encuestas sobre el impacto". FIDA, 2005.
39
Estos equipos no slo deben reunir las capacidades tcnicas necesarias para la evaluacin, sino
que adems deben mostrar una actitud exible,
inclusiva y favorable a reejar distintas miradas,
saberes y experiencias. Especialmente, han de
abrirse espacios para la "escucha activa".
Una vez decidida la conformacin de los equipos, el paso
siguiente es plasmar su actuacin en un organigrama,
DIAGRAMA
EQUIPO DE APLICACIN DE UNA ENCUESTA
Equipo clave:
Coordinador de EB
Esp. Antropometra
Esp. Muestra
Esp. Componente 1
Asistencia Logstica
Zona 1
Supervisor 1
Zona 2
Supervisor 2
Zona 3
Supervisor 3
Zona 4
Supervisor 4
Encuestador
comunidad 1
Encuestador
comunidad 2
Encuestador
comunidad 3
Fuente: "Sistema de Gestin de los Resultados y el Impacto. Directrices prcticas para la realizacin de encuestas sobre
el impacto". FIDA, 2005.
40
RECUADRO N 10
PRESUPUESTO PARA UNA ENCUESTA
Partida
Costo
unitario
Cantidad
Costo
total
1. Personal
a) Consultor
Honorarios
Dietas
Viajes nacionales
b) Encuestadores
Sueldo
Dietas
c) Supervisores, dietas*
d) Choferes
Sueldo**
Dietas
2. Equipo
a) Balanzas: electrnicas o romanas***
b) Tablas de medicin de lactantes/nios***
c) Impresin o duplicacin del cuestionario
d) Tablillas con sujetapapeles
e) Bolgrafos/lpices
3. Transporte local
a) Alquiler de vehculos (si no se utilizan
vehculos del proyecto)
b) Combustible y mantenimiento (todos los
vehculos utilizados)
4. Imprevistos****
Total
Fuente: "Sistema de Gestin de los Resultados y el Impacto. Directrices prcticas para la realizacin de encuestas sobre
el impacto". FIDA, 2005.
*
**
***
****
Los supervisores deben ser parte del proyecto, slo se les da dietas.
Los sueldos slo se otorgarn si los choferes no son parte del personal del proyecto.
Uno por cada equipo de encuestadores.
Se sugiere prever un rubro de imprevistos de aproximadamente 5% del presupuesto.
41
RECUADRO N 11
EJEMPLO DE PLAN DE CONTINGENCIA DEL ESTUDIO DE BASE
(PARA EL TRABAJO DE CAMPO)
Qu hacer cuando:
Respuesta sugerida
Respuesta asumida
1. No es posible acceder a la
comunidad (conglomerado)
seleccionado en la muestra
/factores climticos
2. La comunidad seleccionada
se encuentra de campaa
agrcola o festividad patronal
3. No se ubica a la familia seleccionada en la muestra
4. La familia se niega a responder la encuesta
5. Los equipos antropomtricos no funcionan adecuadamente
Fuente: Elaboracin propia.
42
Antecedentes
Productos esperados
Condiciones de Pago
MARCO METODOLGICO
En un EB la informacin a recoger es selectiva y
priorizada en funcin de sus temas centrales, por lo
que debe planearse cuidadosamente su estrategia
para la seleccin de las tcnicas28. En los proyectos del FIDA la tcnica principal es la encuesta del
RIMS, de modo que son las herramientas complementarias las que deben elegirse de acuerdo a las
necesidades de cada proyecto, procurando siempre
que puedan replicarse para permitir comparaciones
subsiguientes.
28 Para profundizar aspectos relativos al diseo de evaluacin ver el enlace N 14 "Compendio metodolgico".
43
Ahora bien, es seguro que los hechos a evaluar hagan necesario trabajar en simultneo con mtodos
cuantitativos y cualitativos. En los ltimos aos,
se combinan metodologas (mixtas) y se asume
la diversidad metodolgica (enfoques eclctico y
mixto) como parte de su quehacer. Es fundamental,
entonces, conocer los enfoques cuali-cuantitativos
y trabajar con ambos. Ver Enlace N 8.
El uso combinado de mtodos o "triangulacin"
es una estrategia metodolgica que el evaluador
utiliza para contrastar de manera calicada diversas
tcnicas o fuentes de datos, con el n de compensar
el sesgo inherente al uso individual de cada una de
ellas. La estrategia permite igualmente vericar la
justeza y estabilidad de los datos producidos.
Hay cuatro razones fundamentales para recurrir a
estrategias de triangulacin en los procesos evaluativos29:
El uso de tcnicas cualitativas como paso posterior a la aplicacin de una encuesta. El uso de
entrevistas o grupos de discusin con actores
clave sobre los resultados de una encuesta,
permite un anlisis ms detallado y explicativo
de los fenmenos encontrados en los datos
cuantitativos (datos duros).
29 El texto "Evaluacin de los proyectos y triangulacin: acercamiento metodolgico hacia el enfoque centrado en el actor" de
Pablo Rodrguez Bilella (1998) puede ser revisado en el Enlace N 9.
44
Mapas Parlantes.
30 Para un mayor conocimiento sobre las encuestas ver el Enlace N 14 que contiene tres artculos sobre el proceso de diseo
de una encuesta, las muestras estadsticas y el proceso de anlisis cuantitativo.
45
se integra al conjunto de actividades interconectadas que extraen valoraciones sobre los cambios y
resultados o sea al subsistema de Evaluacin. Para
conocer ms sobre Evaluacin por Imgenes revisar
el Enlace N 10.
Herramientas visuales, de carcter comunitario son
los mapas parlantes, considerados instrumentos tcnicos metodolgicos que permiten la organizacin y
comunicacin de las decisiones del medio comunal,
a travs de la diagramacin de escenarios (pasado,
presente y futuro) en mapas territoriales.
En la
prctica, estos mapas se convierten en un Estudio
de Base Comunal que sirve como referente de
comparacin para evaluar resultados en el tiempo
y para elaborar los planes anuales por comunidad.
La comunidad a travs de los Mapas Parlantes
proyecta el ordenamiento del rea comunal enfatizando en el uso y administracin colectiva de los
recursos: agua, tierra, bosques y poblaciones. Esta
herramienta grca, prctica, simple y barata est
basada en el lenguaje de los pueblos andinos, pues
los Mapas Parlantes hablan a travs de smbolos que
nos aproximan a lo que quieren expresar.
Para conocer ms sobre los Mapas Parlantes sugerimos revisar el Enlace N 11.
RECUADRO N 13
CRITERIOS PARA LA CLASIFICACION DE TECNICAS
Criterios de clasicacin
de tcnicas
Asociadas a mtodos cuantitativos
Tcnicas
Encuesta de impacto RIMS para poblacin en general
Prueba (objetiva o con formato libre)
Encuestas estructuradas a grupos objetivo
Entrevista en profundidad
Grupos focales
Talleres multiactorales
Utilizadas en una u otra metodologa Entrevista semi estructurada (con gua pre denida)
Observacin sistemtica (con gua y escala o abierta)
Para datos secundarios
Revisin documental
Visuales
Audiovisuales
Videos, multimedias
46
LA VALIDACIN DE TECNICAS
COMPLEMENTARIAS
RECUADRO N 14
TECNICAS RECOMENDADAS PARA LOS EB Y SU VALIDACION
Tcnicas
Validacin
Entrevistas
Grupos focales
47
LA PARTICIPACIN EN LA APLICACIN
DE TCNICAS
Existe mucha confusin en relacin a la participacin y uso de tcnicas de aplicacin grupal o
individual. Es importante tener presente que una
tcnica no es intrnsecamente participativa o no,
pues el carcter participativo depende de quines
y cmo son involucrados los actores en la eleccin
de los temas y en la recoleccin de los datos, as
como en el anlisis y uso de la informacin.
Situmonos en dos casos tpicos:
Los casos presentados permiten sostener que distintas tcnicas pueden ser operados en contextos
participativos mas ha de considerarse la comprensin plena del instrumento por parte de quien lo
aplique y un conocimiento sobre los objetivos de los
estudios, junto con un ejercicio de aplicacin31.
CAPACITACIN AL PERSONAL
Una vez ajustados tanto los instrumentos y los
instructivos del trabajo de campo, se debe capacitar al personal encargado de la aplicacin de los
instrumentos de investigacin y a los encargados
de la supervisin de dicho proceso. Para ello se
disear un esquema bsico de capacitacin, que
considere dos elementos, el primero relativo al
perl del personal seleccionado para el trabajo de
campo (nivel de educacin, idioma, conocimiento
del tema en estudio, etc.) y el segundo referido al
nivel de complejidad del estudio en s. (Un estudio
antropomtrico requerir una capacitacin de mayor tiempo y profundidad que la aplicacin de una
encuesta socio demogrca, ms aun si el personal
seleccionado carece de experiencia en mediciones
antropomtricas). En base a estos elementos se
dene el tiempo requerido para llevar a cabo la
capacitacin, as como los materiales necesarios
para el mismo.
Sin considerar rasgos ms especcos, se sugiere
que un proceso de capacitacin tenga la siguiente
estructura:
Presentacin y socializacin con los participantes de los antecedentes del proyecto y los alcances del EB. (Primera parte del instructivo)
Ensayo de la aplicacin de los instrumentos
recalcando los conceptos implcitos e explcitos
de cada tem del instrumento, buscndose en
lo posible la estandarizacin o homogenizacin
del proceso de recopilacin de informacin.
Asimismo, se deben escenicar (mostrar) las
posibles contingencias reseadas en el plan o
31 Sobre la participacin de no investigadores en los grupos focales, se arma que las personas voluntarias que conducen estos
pueden hacerlo con mucha efectividad, previo entrenamiento y acompaamiento. Al respecto ver Krueger, Richard y King,
Jean "Involving community members in focus groups" Focus Group Kit 5 "The Focus Group Kit" David L. Morgan and Krueger,
Richard. Sage, 1997.
48
FASE DE RECOLECCIN Y
ANLISIS
El propsito de esta fase es transmitir conceptos
y procedimientos esenciales para dos momentos
claves en el desarrollo de los EB: primero, en la
salida al "campo" para recolectar los datos, incluyendo la vericacin de su calidad; y segundo, en
el anlisis de dichos datos sean cuantitativos y/o
cualitativos.
APLICACIN DE
INSTRUMENTOS
Despus de seleccionar y someter a ensayo preliminar las tcnicas a utilizar, es necesario proceder
a los ltimos preparativos y anar algunos detalles
para estar seguros de que todo se har conforme
a lo programado. La aplicacin de tcnicas "en
campo" es la puesta en marcha de lo planicado;
en ese sentido, es deseable que las actividades
desarrolladas en esta fase cumplan todos los procedimientos previstos.
49
50
Vericar que las respuestas transcritas y anotadas sean legibles, especialmente para las
preguntas abiertas.
RECUADRO N 15
RECOMENDACIONES PARA LA RECOLECCIN DE DATOS*
Para emprender la tarea de recoger datos es necesario tener en cuenta las siguientes indicaciones:
Recoja solamente los datos que va a utilizar, es decir, aquellos asociados con las observacin de
los indicadores, preguntas y temas que se maneja en los EB. "Es mejor tener unos EB pequeos
que se utilicen, que unos grandes que acumulen polvo en las estanteras del proyecto".
Recoja solamente aquellos datos que no estn disponibles. Es importante identicar previamente
qu datos ya existen y se pueden utilizar, as como vericar su calidad y conabilidad.
Seleccione las tcnicas ms adecuadas, teniendo en cuenta las particulares necesidades del
anlisis y el hecho que gran parte de estas tcnicas sern utilizadas de seguro con algunos
cambios de manera longitudinal en las evaluaciones posteriores.
Sea creativo en la seleccin de tcnicas, recordando que hay un abanico amplio que incluye el
uso de mapas, videos, fotografas y otras tcnicas no convencionales.
* Adaptado de la "Gua para el SyE de proyectos" del FIDA. Seccin 5. "Decidir el objeto del SyE". Pginas 5-32 y 5-33.
51
la obtencin de resultados.
Seleccionar el conjunto de temas a ser utilizados en el anlisis. Estos por lo general se desprenden de los temas clave del EB (poblacin
objetivo, indicadores, contexto y supuestos,
entre otros) y de las preguntas explcitas en
los formatos, ms aquellas que adicionalmente
se pudo haber formulado (temas emergentes).
Estos temas representan los elementos ms
concretos, denidos y singulares que vamos a
observar y a su vez van a conformar la red a
utilizarse en el anlisis.
Esta fase comprende dos momentos: 1) la creacin de un cdigo nico o esquema de temas para
todas las respuestas dadas a una misma tcnica y
2) el ingreso de las mismas a un formato general
y sistemtico de registro.
La construccin de cdigos es un proceso vlido
tanto para tcnicas que utilizan alternativas de respuesta denidas de antemano y slo dejan nales
abiertos (formatos estructurados) como para aquellas que dejan las respuestas enteramente abiertas
para recoger la opinin del informante con su propio
lenguaje (formatos no estructurados). Ambos casos
suponen la distribucin de los datos recogidos en
temas generales (asociados a los resultados, por
ejemplo), temas especcos (asociados a los indicadores, por ejemplo) e incluso preguntas concretas
como las que aparecen explcitas en cada formato,
todo ello a n de ordenar y reducir la "masa" de
datos con que se cuenta.
Como es lgico deducir, el proceso es ms simple y
ms rpido cuando se trata de formatos estructurados como los cuestionarios. Estos ya incorporan
gran parte del cdigo y, por esa razn, permiten una
distribucin automtica de los datos y su ingreso
simultneo a la base respectiva. En estos casos, la
tarea consiste en completar el cdigo para aquellas
respuestas abiertas (que si las hay, son la minora)
o de nal abierto.
52
A continuacin presentamos un formato convencional de matriz que puede ser til para la distribucin
de las respuestas de distintos informantes en el
contexto de formatos no estructurados:
RECUADRO N 16
MATRIZ DE CODIFICACIN*
Temas
Informantes
Informante 1
Informante 2
Informante 3
Informante 4
Tema 1
Tema 2
Tema 3
Tema 4
* La matriz es asociada con el procesamiento de datos que resultan de la aplicacin de entrevistas, pero puede ser utilizada
sin problemas para grupos focales e, incluso, como apoyo a la observacin sistemtica.
Una matriz como sta puede ser operada con distintos grados de detalle. En la columna de temas
se puede incluir desde los temas ms generales a
los ms especcos y puntuales. Lo importante es
que la disposicin por celdas nos permite contar
con respuestas al nivel de detalle requerido para
hacer comparaciones, establecer recurrencias e
identicar "casos especiales".
Una vez distribuidos los datos es necesario evaluar
si son sucientes, en cantidad y calidad, para el
anlisis de cada tema. Es casi seguro que algunos
de ellos sobren, ya sea porque su pertinencia es
mnima o porque por efecto de las tendencias en
los datos mismos se llega a niveles de saturacin.
Esto no nos debe preocupar, en todo proceso de
evaluacin se pierden datos e, incluso, se pierde
informacin ms elaborada.
RECUADRO N 17
ANLISIS CUALITATIVO POR EL PROCEDIMIENTO DE "JUECES PRINCIPALES" *
En la evaluacin del programa de capacitacin de dirigentes de la ONG Education for Life Foundation
(ELF) en Filipinas, se utilizaron varios mtodos para reunir los datos, entre ellos el de grupos de
discusin, las narraciones, la observacin directa, las evaluaciones psicolgicas, las encuestas y las
entrevistas semi estructuradas. Como los datos eran, en su mayor parte, cualitativos y abiertos, los
investigadores sobre el terreno aplicaron el mtodo de los "jueces principales" para agrupar los datos
destinados al anlisis. Los investigadores agruparon y etiquetaron los datos segn los temas que
haban seleccionado previamente. Haca falta el visto bueno de por lo menos tres personas antes de
etiquetarlos. El proceso de anlisis permiti a los investigadores intercambiar sus interpretaciones
de las respuestas y triangular, en consecuencia, las conclusiones. Como comprobacin nal, presentaron el borrador de sus conclusiones a las comunidades en que se haban recogido los datos, y les
pidieron retroalimentacin y sugerencias.
* Extrado de la "Gua para el SyE de proyectos" del FIDA. Seccin 6 "Recoger, gestionar y comunicar la informacin".
Pgina 6-20.
53
Caracterizar a la poblacin objetivo del proyecto, a partir de los temas y variables que se haya
elegido para ello.
Analizar el contexto en que el proyecto interviene, esto es, establecer sus caractersticas
iniciales en lo econmico y productivo, social,
cultural e institucional.
Establecer la situacin de los supuestos (condiciones o factores externos) con los que el
proyecto opera, cmo inuyen y en qu medida
lo hacen.
FASE DE COMUNICACIN Y
USO DE RESULTADOS32
Por ms que se hallen bien planeados y ejecutados,
los Estudios de Base dejarn de cumplir sus propsitos (servir como referentes para evaluaciones
posteriores y para la toma de decisiones) si sus
resultados no son comunicados con ecacia a las
audiencias respectivas. El esfuerzo desplegado
32 Para elaborar esta seccin se ha usado el texto de Torres, Preskill y Piontek "Evaluation Strategies for Communicating and
Reporting" 2nd. Edition Sage Publications, 2005.
54
AUDIENCIAS,
CONTENIDOS Y MEDIOS
La comunicacin de los resultados de los EB comprende el manejo de tres temas: las audiencias,
los contenidos y los medios. Del buen uso de ellos
depender que la informacin obtenida genere
conocimiento en los grupos de actores y llegue
puntualmente a quienes toman decisiones, sentando las premisas de un sistema de PSES eciente. A
continuacin se ven tales temas en detalle.
55
56
Una de las principales fortalezas de los medios interpersonales es que permiten una interaccin muy
dinmica. Los participantes pueden preguntar, sugerir, cuestionar y opinar respecto de los resultados
presentados, situacin que constituye un ejercicio
de dilogo que favorece el aprendizaje colectivo.
A continuacin se presenta un cuadro que relaciona
audiencias particulares y formatos para la comunicacin de resultados de los EB.
57
RECUADRO N 18
USO DE FORMATOS DE COMUNICACIN PARA DIVERSAS AUDIENCIAS*
Audiencias
Formatos de comunicacin
Poblacin
Objetivo
Coejecutores
Equipos
tcnicos
Entidades
de Estado
58
RECUADRO N 19
TABLA DE CONTENIDO BASICO DE LOS EB33
MAPAS
SIGLAS Y ACRONIMOS
INTRODUCCION
1.
2.
EL PROYECTO
Estrategias
Organizacin de la implementacin
OBJETIVOS Y CONTENIDO
Objetivos de los EB y temas especcos relativos a los indicadores de efecto e impacto de cada proyecto.
3.
MARCO METODOLOGICO
La encuesta de impacto
Tcnicas complementarias
4.
HALLAZGOS
1.
LA POBLACIN OBJETIVO
2.
Estrategia de focalizacin.
Caracterizacin de la poblacin objetivo incorporando los resultados de la encuesta del RIMS y tcnicas complementarias.
Presencia de programas y servicios del Estado y otras iniciativas sociales o privadas relacionadas con los efectos e
impactos del proyecto.
Responder a la pregunta de cmo el contexto afecta a las dimensiones y variables del desarrollo rural (Recuadro N 7)
Medidas de poltica pblica y legislativa que gravitan sobre las dimensiones del impacto.
3.
4.
5.
CONCLUSIONES GENERALES
En relacin a la caracterizacin de la poblacin objetivo
En relacin al contexto
En relacin a los supuestos
ANEXOS
Mapeo de Actores
33 La Tabla organiza elementos bsicos que todo EB debe contener. Debe considerarse sta como una referencia a ser adaptada
y mejorada, de acuerdo a las necesidades de cada proyecto y a los usos que los actores darn al Informe Maestro.
59
Cul es mi audiencia?
60
Para ampliar conocimientos en torno a la presentacin del Informe Maestro ver el Enlace N 13 sobre
"Cmo Comunicar Resultados de una Evaluacin".
USO DE RESULTADOS
Un principio de la "evaluacin basada en la utilizacin" es que los usuarios previstos de toda
evaluacin sern ms proclives a apropiarse y a
usar sistemticamente sus resultados si entienden
Para determinar el valor inicial de los indicadores con que opera el proyecto.
Para tomar decisiones sobre el diseo metodolgico ms adecuado para las evaluaciones posteriores, sobre todo aquellas que incluyen el uso
de tcnicas complejas: encuestas y muestras.
Todos los lineamientos expuestos se vinculan estrechamente con el rol principal que los EB cumplen en
el subsistema de evaluacin de los proyectos: servir
como referentes iniciales para la comparacin con
los resultados de las evaluaciones posteriores.
EL USO DEL PROCESO PARA EL APRENDIZAJE
Se relaciona con los aprendizajes que necesariamente tienen lugar al involucrar a diferentes
actores en el proceso de evaluacin. Es diferente
al uso de los hallazgos y se maniesta tambin en
mbitos distintos: cambios en capacidades para la
reexin y el anlisis, en actitudes y conductas, en
prcticas y procedimientos y, en general, cambios
que se expresan a nivel de la cultura organizacional
de los proyectos (organizaciones rurales, equipos
tcnicos, etc.)
Algunos de los usos ms signicativos de los procesos
de evaluacin, se dan en los siguientes campos:
61
Mejoras en la calidad del dilogo en los proyectos y posibilidades de extender estos cambios a
escenarios locales y regionales, as como a los
mbitos de deliberacin de polticas pblicas.
62
BIBLIOGRAFA
Bobadilla, P. L. del Aguila, M. Morgan. Diseo y evaluacin de proyectos de desarrollo. Serie: Manuales
de capacitacin N3. PACT / PERU. Lima, 1998.
Bucheli, Brenda. "Mapeo de Actores" (indito), 2007.
Camacho, H. L. Cmara, R. Cascante y H. Sainz. El enfoque del marco lgico: 10 casos prcticos.
Fundacin CIDEAL. Madrid, 2001.
Cohen, E. y R. Franco. Evaluacin de proyectos sociales. ILPES / ONU CIDES / OEA. Buenos Aires, 1988.
Dumazert, Patrick Lineamientos conceptuales y metodolgicos para los estudios de base de los proyectos de desarrollo rural del FIDA PREVAL, 2002.
FOCAMI Fortalecimiento de Capacidades en Monitoreo de Impactos, Honduras 2005 y 2006. PREVAL,
Rio Plus/GTZ y TROCAIRE. Mdulo sobre Uso y Comunicacin de Resultados Santa Rosa de Copn,
septiembre 2006.
Fondo Internacional de Desarrollo Agrcola FIDA. Directrices para el examen interno a la terminacin
de proyecto. Departamento de Administracin de Programa. Junio 2002.
Fondo Internacional de Desarrollo Agrcola - FIDA. Focalizacin. Los pobres de las zonas rurales, documento de poltica. FIDA, noviembre 2006.
Fondo Internacional de Desarrollo Agrcola FIDA. Gua para el SyE de proyectos. Gestin orientada
al impacto en el desarrollo rural. FIDA. Roma, 2002.
Fondo Internacional de Desarrollo Agrcola - FIDA. Lineamientos prcticos para la ejecucin del sistema
FIDA de gestin de los resultados y el impacto. Informacin bsica y herramientas para informar sobre
los resultados de los proyectos. FIDA septiembre 2004.
Fondo Internacional de Desarrollo Agrcola - FIDA. Sistema de gestin de los resultados y el impacto.
Directrices prcticas para la realizacin de encuestas sobre el impacto. FIDA 2005.
Gutirrez Vsquez, Carlos Lineamientos de evaluacin por imgenes (Editado por Emma Rotondo
Coordinadora de la Unidad de Coordinacin del PREVAL), 2005. www.preval.org
Instituto Latinoamericano y del Caribe de Planicacin Econmica y Social - CEPAL Metodologa del
marco lgico, Boletn N 15, 2004.
Krueger, Richard y Jean King Involving community members in focus groups Focus Group Kit 5 The
Focus Group Kit David L. Morgan and Krueger, Richard. Sage, 1997.
Len, Jorge Notas sobre Estudios de Base en proyectos nanciados por el FIDA en la Subregin de
Centroamrica, Panam y Belice trabajo presentado en el Mdulo II del Programa Intensivo en Seguimiento y Evaluacin (PRISE), Guatemala, julio 2002.
Lyons Morris, Lynn, Carol Taylor Fitz-Gibbon y Mary E. Freeman Cmo comunicar resultados de una
evaluacin. Centro para los Estudios de Evaluacin Universidad de California, Los Angeles. (Traducido
por PREVAL octubre del 2002)
63
MARENASS. Proceso metodolgico de construccin del sistema de planicacin, seguimiento y autoevaluacin campesina, a travs de los mapas parlantes: caso MARENASS Per. Tomado de Capacidades y experiencias campesinas, respuestas a las motivaciones Proyecto Manejo de Recursos Naturales
en la Sierra Sur. Apurmac, Ayacucho y Cusco. Informe Final 1997 2005.
Nirenberg, O. J. Brawerman, V. Ruiz. Evaluar para la transformacin. Innovaciones en la evaluacin de
programas y proyectos sociales. Paids. Buenos Aires, 2005.
Patton, M.Q. La evaluacin basada en la utilizacin. Extractos de su exposicin realizada por el autor
en la I Conferencia de la Red de Seguimiento, Evaluacin y Sistematizacin de Amrica Latina y el Caribe
Evaluacin, democracia y gobernabilidad: desafos para Amrica Latina y el Caribe. Lima, octubre 2004.
Patton, M.Q. Utilization-focused evaluation: the new century text (tercera edicin). Thousand Oaks,
CA: Sage. 1997.
Pozo Sols, Antonio Mapeo de actores sociales. PREVAL, Lima, Febrero 2007
PREVAL Lineamientos conceptuales y metodolgicos para los Estudios de Base (Documento de trabajo) PREVAL fase II, mayo 2004.
PREVAL Plan Estratgico de PREVAL III. Lima, 2005.
PRISE, PREVAL II, 2000 - 2004.
PROGENERO. Gnero en los Estudios de Base. PROGENERO. Santiago de Chile, 2004.
Programa de Formacin en Evaluacin. Lineamientos conceptuales y metodolgicos de la evaluacin.
Mdulo 1. desco WKKF. Lima, 2006.
Programa de Formacin en Evaluacin. Planicacin, organizacin y ejecucin de la evaluacin. Mdulo 2. desco WKKF. Lima, 2006.
Programa de Formacin en Evaluacin. Procesamiento y anlisis de la informacin. Mdulo 3. desco
WKKF. Lima, 2006.
PROMER. Informe de evaluacin del Programa de Apoyo a la Micro Empresa Rural en Amrica Latina y
el Caribe PROMER. Santiago de Chile, 2001.
Rodrguez Bilella, Pablo Evaluacin de proyectos y triangulacin: acercamiento metodolgico hacia el enfoque centrado en el actor. Universidad Nacional de San Juan. Rivadavia - Documento presentado en el
segundo taller electrnico sobre evaluacin de proyectos de reduccin de la pobreza rural - PREVAL 1998.
Rotondo, Emma. Gua de evaluacin participativa, elaborado para PREVAL. Lima, 2001 (indito).
Rotondo, Emma y Gloria Vela. Indicadores de gnero. Lineamientos conceptuales y metodolgicos
para su formulacin y utilizacin por los proyectos FIDA en Amrica Latina y el Caribe FIDA / PREVAL
y PROGENERO, 2003.
Ruiz-Bravo L., Patricia y Maruja Barrig. Lineamientos metodolgicos para la incorporacin del enfoque
de gnero en el Seguimiento y Evaluacin de Proyectos FIDA / PREVAL, 2001.
Torres, Rosalie, Hallie Preskill y Mary E Piontek. Evaluation Strategies for Communicating and Reporting 2nd. Edition. Enhancing Learning in Organizations, Sage, 2005.
World Wildlife Foundation Seales de xito: Gua del usuario sobre indicadores (Traducido por Orlando
Garca Valverde, Interidiom S.A., Costa Rica. Revisado y editado por Ada Ocampo, Coordinadora PREVAL
- Convenio IICA/FIDA-TAG 302-IICA).
64
65
66