Diseo y validacin de un instrumento para la evaluacin de la incidencia en las polticas pblicas de los Informes de Desarrollo Humano1 Adrian Cardona

Alzate2

En esta investigacin se disea y valida un instrumento de aplicacin ex post para evaluar la incidencia de los Informes de Desarrollo Humano sobre la agendacin de polticas pblicas y sobre los actores del desarrollo. Para estos efectos, se dise un instrumento que fue validado a travs de un ejercicio piloto, que evala la incidencia del Informe Regional de Desarrollo Humano del Eje Cafetero, publicado en el ao 2004, sobre las decisiones de poltica pblica de los actores del desarrollo del municipio de Pereira (Colombia, Sur Amrica). El modelo se estructura en tres etapas y catorce pasos en los cuales se aplican matrices valorativas de cruce de informacin y encuestas. El instrumento arroja resultados sobre la coherencia de las recomendaciones del informe con once (11) dimensiones del Desarrollo Humano; la correspondencia entre la planificacin de los actores del desarrollo y las recomendaciones del Informe (nivel de agendacin); y finalmente sobre la percepcin de estos actores frente a la calidad del Informe, su grado de agendacin y los efectos que ste logr. Por ltimo, en la tesis se hacen sugerencias para el Segundo Informe de Desarrollo Humano del Eje Cafetero y sobre el instrumento mismo. 1. Descripcin del instrumento de evaluacin El Desarrollo Humano se est convirtiendo en una de las formas ms ampliamente reconocidas para analizar y medir el desarrollo de los pases. En gran medida este protagonismo se ha logrado gracias a que este enfoque de desarrollo es instrumentalizado por el Programa de las Naciones Unidas para el Desarrollo (UNDP, por sus siglas en ingls) a travs de la publicacin anual de los Informes Mundiales de Desarrollo Humano y de mltiples informes a nivel nacional, regional y subnacional, desde 1990. El propsito de los Informes de Desarrollo Humano es bsicamente incidir sobre los actores de un territorio y desencadenar acciones de poltica pblica. Para establecer su efectividad, la Oficina de los Informes de Desarrollo Humano de UNDP recomienda que stos sigan un proceso de seguimiento y que se diseen estrategias apropiadas y herramientas para un eficaz monitoreo de la poltica del informe y de los impactos operacionales, de igual forma que se revise peridicamente el impacto de los informes sobre la poltica dentro del pas (UNDP, 2001, p. 8). En este sentido, el UNDP y algunos de sus equipos nacionales han llevado a cabo diversas evaluaciones para establecer los diferentes efectos de los informes3, no obstante, an quedan dimensiones por explorar y complementar y no se cuenta con un instrumento estandarizado para una evaluacin sistemtica y comparable (UNDP, 2006). En este orden de ideas, este trabajo de grado se plante como objetivo general el disear un instrumento para establecer la incidencia de los Informes de Desarrollo Humano sobre las polticas pblicas de desarrollo. Asimismo, en sus objetivos especficos busc validar el instrumento a travs de un ejercicio piloto de evaluacin de la incidencia del Informe de Desarrollo Humano del Eje Cafetero: Un Pacto por la Regin (2004) sobre la poltica pblica de los actores del desarrollo en el municipio de Pereira y finalmente, generar recomendaciones para el Segundo Informe de Desarrollo Humano del Eje Cafetero. En cumplimiento de lo anterior el instrumento fue creado en tres momentos as:
El presente documento corresponde a un resumen del trabajo de grado (tesis) realizado por el autor, entre julio de 2006 y julio de 2007, para optar a su ttulo de MSc otorgado por el CIDER de la Universidad de los Andes (Bogot, Colombia). 2 Investigador (UNV) Fase Inicial Segundo Informe de Desarrollo Humano del Eje Cafetero (Octubre de 2006 - enero de 2007). MSc en Planificacin y Administracin del Desarrollo Regional Especialista en Gobierno y Polticas pblicas Administrador del Medio Ambiente. adriancardona@utp.edu.co
3 1

Algunas de estas evaluaciones estn publicadas en: Larran, et al. 2006; UNDP, 2005, 2006; Vicente, 2006. www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

Preparacin conceptual En la cual el autor profundiz en el enfoque de Desarrollo Humano, sus bases tericas y principales autores y en la poltica organizacional del UNDP para la elaboracin de los Informes de Desarrollo Humano. Diseo del instrumento El instrumento se construy sobre la base de los referentes de la poltica corporativa del UNDP para los Informes Nacionales de Desarrollo Humano (2001); de las publicaciones: Ideas, innovation and impact. How human development reports influence change (Ideas, innovacin e impacto. Como los Informes de Desarrollo Humano influyen en el cambio) (UNDP, 2005); Evaluation of the National Human Development Report System (Evaluacin del Sistema de los Informes Nacionales de Desarrollo Humano) (UNDP, 2006); HDR Toolkit for National and Regional Human Development Report Teams (Caja de herramientas para los equipos de los Informes Nacionales y Regionales de Desarrollo Humano) (UNDP, 2004); del manual para el anlisis de polticas pblicas de Bardach (1999) y de los pasos que generalmente se siguen en una evaluacin de proyectos y que se utilizan en las agencias de cooperacin internacional4. Para el diseo del instrumento y sus herramientas se utilizaron criterios como: (i) cobertura completa de los aspectos del proceso de un Informe de Desarrollo Humano; (ii) amplia consulta de los actores del desarrollo del territorio; (iii) limitacin de la discrecionalidad por parte del investigador, razn por la cual se establecen instructivos, matrices y encuestas con la mayora de preguntas cerradas; (iv) comparabilidad, a travs de datos numricos y escalas que permiten contrastar los resultados entre actores y ms adelante entre informes evaluados o entre territorios; y (v) replicabilidad, es decir, que el instrumento se pueda aplicar en otro Informe de Desarrollo Humano y por parte de un evaluador o equipo de evaluacin que est familiarizado con el enfoque de Desarrollo Humano, con el territorio analizado y con la dinmica de los informes. En cuanto a las herramientas, bsicamente se utilizan matrices, tablas resumen y encuestas. Las matrices y tablas estn construidas sobre la plataforma del software Ms Excel 2003 y permiten de manera esquemtica la visualizacin de la informacin, su presentacin, valoracin y anlisis, as como la cuantificacin y la realizacin de operaciones matemticas, con frecuencias, sumatorias y promedios. Las relaciones y niveles de correspondencia se evalan con tramas de colores y calificaciones numricas, asignadas por el evaluador, al final los resultados se consolidan en tablas resumen con escalas cromticas de valoracin. Las encuestas fueron elaboradas en su mayora con preguntas cerradas y de seleccin nica, de manera que se facilite su sistematizacin y anlisis, como complemento se disearon las tablas para la entrada y consolidacin de los resultados de los cuestionarios. Con relacin a las muestras, no se proponen modelos estadsticos aleatorios de seleccin, sino que los encuestados deben ser escogidos por el evaluador segn criterios explicados en los instructivos, sin embargo no se descarta su aplicacin. Validacin y ajuste La validacin y ajuste del instrumento fue realizada a travs de un caso piloto de evaluacin de la incidencia del Informe Regional de Desarrollo Humano del Eje Cafetero, 2004, en los actores del desarrollo del municipio de Pereira. Esta validacin permiti probar los instructivos, as como la funcionalidad y efectividad de las herramientas (matrices, tablas y encuestas). El ajuste se hizo de forma paralela a la aplicacin del instrumento y en cada nuevo paso se corrigieron los instructivos, las

Cabe anotar que el autor fue investigador (UNV) de la Fase Inicial del Segundo Informe de Desarrollo Humano del Eje Cafetero, entre octubre de 2006 y enero de 2007 y que se desempe por 7 aos (1999-2006) en el rea de la planificacin y evaluacin de proyectos de la Agencia de Cooperacin Alemana al Desarrollo (GTZ). www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

preguntas de las encuestas, las tablas resumen y las matrices. La validacin tard seis meses (entre octubre de 2006 y marzo de 2007). 1.1. Etapas e instructivos del instrumento El instrumento est diseado para la realizacin de evaluaciones ex post de los Informes de Desarrollo Humano y est construido sobre tres etapas consecutivas5: (i) anlisis de la calidad y coherencia del Informe de Desarrollo Humano; (ii) percepcin de los actores del desarrollo; y (iii) evaluacin de la incidencia del Informe de Desarrollo Humano en la poltica pblica. Las etapas se subdividen en catorce (14) pasos presentados como instructivos, como se esquematiza a continuacin.
Etapa 1. Anlisis de la calidad y coherencia del Informe de Desarrollo Humano Etapa 2. Percepcin de los actores del desarrollo
Pasos/Herramientas

Etapa 3. Evaluacin de la incidencia en la poltica pblica

1. Revisin documental

2. Entrevista coordinacin HDR

3. Encuesta 1 equipo HDR (1-17)

5. Matriz 1 de anlisis de las recomenda/

6. Tabla 4 seleccin de actores

7. Encuesta 2 funcionarios (1-31)

8. Tabla 5 clasificacin planificacin de los actores

11. Matriz 2 correspondencia recomendaciones/ polticas

Encuesta 1 equipo HDR (19-29)

Encuesta 2 funcionarios (33-42)

4. Marco contextual (texto)

9. Nivel de conocimiento del Desarrollo Humano y percepcin sobre los 6 principios HDR (texto)

10. Tabla 2 y 3 resumen de contribucin de las recomendaciones al Desarrollo Humano y ODM

12. Tabla 7 resumen de correspondencia entre recomendaciones y polticas pblicas

13. Percepciones sobre los efectos e incidencia del HDR (texto)

14. Conclusiones y recomendaciones (texto)

Productos

Etapa 1. Anlisis del Informe de Desarrollo Humano Esta primera etapa busca en primer lugar conocer y analizar de manera crtica el Informe de Desarrollo Humano objeto de anlisis, con relacin a los seis (6) principios que segn el UNDP (2001) debe cumplir un informe de calidad. En este sentido, la primera herramienta diseada consiste en una entrevista semiestructurada que cuenta con 40 preguntas segmentadas de acuerdo a los seis principios bsicos de un Informe de Desarrollo Humano: (i) propiedad nacional; (ii) independencia del anlisis; (iii) calidad del anlisis; (iv) preparacin participativa e incluyente; (v) flexibilidad y creatividad en la presentacin; y (vi) seguimiento continuo (UNDP, 2001). Como complemento, la segunda herramienta diseada es una encuesta de 29 preguntas organizadas en ocho bloques (incluyendo los seis bloques anteriores), la cual est dirigida al equipo del Informe de Desarrollo Humano. En segunda instancia, esta etapa tiene por objeto evaluar las recomendaciones o propuestas de poltica pblica del Informe de Desarrollo Humano en cuanto a su coherencia y contribucin a once (11) componentes del enfoque de Desarrollo Humano y los ocho (8) Objetivos de Desarrollo del Milenio (ODM). Esta ltima categora se incluye por el compromiso decidido que todo el sistema de agencias de las Naciones Unidas tiene frente a estas metas globales y cuyas contribuciones se deben ver
5

Estas tres etapas son propuestas originales del autor y responden a las preguntas de investigacin y los campos de evaluacin que fueron propuestos para el instrumento. www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

representadas en todas sus acciones (UNDP, 2001). En cumplimiento de este objetivo se prepar una matriz para la clasificacin de las recomendaciones del Informe de Desarrollo Humano y la posterior evaluacin de su contribucin al Desarrollo Humano y a los ODM. A cada recomendacin de poltica pblica se le establece su nivel de contribucin a los tres componentes del IDH, a los ocho componentes adicionales del Desarrollo Humano6 y a los ocho ODM. Etapa 2. Percepcin de los actores del desarrollo Esta segunda etapa busca bsicamente establecer el nivel de conocimiento de los actores del desarrollo sobre el enfoque de Desarrollo Humano y conocer las percepciones frente al proceso seguido por el Informe de Desarrollo Humano analizado. Como punto de partida el analista debe seleccionar las entidades cuyos documentos de planificacin sern objeto de anlisis documental, as como los funcionarios a encuestar, de acuerdo a criterios definidos. Para los funcionarios se dise una encuesta de 43 preguntas organizadas en nueve bloques (incluyendo los seis bloques de un informe de calidad). Etapa 3. Evaluacin de la incidencia del Informe de Desarrollo Humano en la poltica pblica Esta tercera etapa tiene por objetivo establecer el grado de incidencia del Informe de Desarrollo Humano sobre el debate pblico y la planificacin de polticas pblicas, as como otros efectos percibidos por los actores del desarrollo. En ltimas, se quiere comprobar si las recomendaciones del Informe fueron agendadas y si los entrevistados reconocen efectos derivados del mismo. En este punto, el evaluador tendr tambin que realizar un anlisis de correspondencia actor por actor, cruzando las recomendaciones del Informe de Desarrollo Humano contra los diferentes documentos de planificacin. 2. Conclusiones de la evaluacin del Informe Regional de Desarrollo Humano del Eje Cafetero El Informe Regional de Desarrollo Humano del Eje Cafetero fue realizado entre octubre de 2001 y junio de 2004, por parte de 3 centros regionales de investigacin con el acompaamiento de una oficina regional de UNDP, constituyndose en la primera experiencia de clculo municipal del IDH en Colombia. El informe tiene por objeto de estudio los efectos de la crisis estructural del caf y la incidencia en la regin de los denominadores comunes del conflicto armado colombiano (UNDP, 2004a, p. 15). Entre sus objetivos est contribuir a los anlisis [del desarrollo regional], a definiciones de poltica ms incluyentes y colectivas, as como a proponer soluciones y sugerir acciones que, naturalmente, los habitantes y los dirigentes del Eje Cafetero son los nicos en poder tomar (Ibidem, p. 16). El Eje Cafetero con una extensin de 12.906 km2 se ubica en el centro occidente de Colombia (Sur Amrica). Histricamente se reconoce su conformacin poltico-administrativa por los 53 municipios que hacen parte de los departamentos de Caldas, Quindo y Risaralda, donde el cultivo y la cultura del caf fueron predominantes. Segn el censo del DANE (2005) la poblacin de la regin se estima en 2.291.150 habitantes7 de los cuales el 77% habita en las cabeceras municipales o centros urbanos. Este informe fue seleccionado en primer lugar por su carcter regional, lo cual disminuy la complejidad del ejercicio y facilit su evaluacin a nivel local, en segundo lugar, porque su publicacin fue en el ao 2004, lo cual, a juicio del autor signific un tiempo prudencial para evaluar su incidencia y finalmente, por el grado de conocimiento que el autor tiene de la ciudad de Pereira y del Informe. En total se encuestaron 27 funcionarios de los niveles directivos y de planeacin de las 22 entidades ms relevantes e influyentes de la ciudad, clasificadas en cinco sectores: pblico-poltico, acadmico6

Estos componentes se extraen de la revisin de los trabajos de Haq, 2003; DNP, 2003 y la compilacin de Fukuda-Parr, S. y Shiva, A. (Eds.) (2003). 7 El departamento con mayor poblacin es Caldas con el 40%, seguido de Risaralda con el 38% y finalmente Quindo con el 22%. www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

educativo, social-organizado, privado-gremial y medios de comunicacin. Adicionalmente, fueron consultados tres investigadores del equipo del informe. Por otro lado, para el anlisis documental y de correspondencia se seleccionaron 5 entidades, escogidas porque sus documentos de planificacin fueron promulgados despus del 2004, ao de publicacin del Informe del Eje Cafetero. A continuacin se presentan las conclusiones de la evaluacin del Informe Regional siguiendo la aplicacin de los instructivos diseados para el instrumento. A manera de resumen la evaluacin arroj que el Informe de Desarrollo Humano del Eje Cafetero es una experiencia muy valiosa para los actores de la ciudad de Pereira y se reconoce como uno de los mayores esfuerzos de coordinacin regional que se han realizado, que adems devel e hizo pblica una situacin de retroceso y crisis de una regin en trminos del Desarrollo Humano y que tiene una trascendencia para el pas, por ser la primera experiencia de clculo municipal del IDH. No obstante, el Informe presenta dificultades metodolgicas en el proceso de construccin, en la difusin y en el proceso posterior a su publicacin (persuasin, deliberacin pblica y cabildeo), lo cual limit el nivel de agendamiento de sus recomendaciones y la incidencia en los actores del desarrollo de la ciudad. En la ciudad de Pereira existe un bajo nivel de conocimiento sobre el concepto del Desarrollo Humano y de los componentes del IDH (85% de desconocimiento). En esta misma lnea y aunque los encuestados saben de la existencia del Informe, su lectura no ha sido profunda (slo el 25% lo ha hecho), el 48% no conoce las recomendaciones que hace el estudio, el 85% no sabe cul fue el proceso seguido para construirlo y slo el 19% de los encuestados particip de algunas de las etapas de ste, a pesar de ser directivos de las entidades y personas influyentes en el desarrollo de la ciudad. Asimismo, en el 46% de las entidades no se discutieron los hallazgos y recomendaciones del documento y para el 63% de las personas la divulgacin fue insuficiente. Finalmente, los temas del Desarrollo Humano se consideran como una responsabilidad casi exclusiva de los actores gubernamentales. En cuanto a la evaluacin de los 6 principios de un Informe de Desarrollo Humano de calidad, el Informe del Eje Cafetero se reconoce en primer lugar como un documento pertinente e importante para la regin pero poco aprehendido por los actores del desarrollo, algunos lo identifican como un ejercicio de UNDP y no como una construccin de todos; en segundo lugar, cumple con la independencia en el anlisis que le imprimieron los 3 centros de investigacin, aunque se reconocen un sesgo haca el tema cafetero y los programas de Caldas; en tercer lugar, presenta dificultades en el principio de preparacin participativa e incluyente, ya que sta se percibi como medianamente representativa y en algunos casos baja; en cuarto lugar, la presentacin del documento fue creativa y es clara para el lector; en quinto lugar, la difusin del Informe fue coyuntural, meditica y no lo suficientemente masiva y no cont con un monitoreo continuo de sus efectos; finalmente, la evaluacin de la calidad del anlisis demostr que el Informe presenta fallas en el proceso de construccin y en la contribucin de las recomendaciones a los componentes del Desarrollo Humano y a los ODM, as como en la presentacin de las recomendaciones de poltica pblica. En este ltimo principio y en cuanto a la pertinencia y coherencia de las recomendaciones del informe con las dimensiones del Desarrollo Humano, se encontr que las 162 recomendaciones tienen una contribucin media (54%) al IDH, baja (31%) a los otros ocho componentes del enfoque y muy baja (27%) a los ODM. En trminos generales, el Pacto del Eje Cafetero plantea estrategias que se concentran en el incremento del PIB per cpita, el combate de la pobreza, la integracin regional y la educacin, estos fueron los problemas centrales identificados desde el diagnstico, lo cual lo hace muy coherente con la problemtica. Sin embargo, deja de lado otros componentes claves del Desarrollo Humano como la equidad de gnero, los temas de salud, el respeto de la vida y la propiedad privada, la identidad cultural, la ocupacin del tiempo libre, las eguridad y la sostenibilidad. El 52% de los funcionarios conoce las recomendaciones del Informe y un 41% consider que stas fueron incluidas en su entidad, sin embargo, algunas de las sealadas por los encuestados no fueron
www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

recomendaciones del Informe. Al calificar sobre el conjunto de agendamiento, el 22% de los consultados expres que este era mediano, principalmente en el sector pblico y poco significativo en el privado y las ONG. Desde otro punto de vista, el anlisis de correspondencia entre las 151 lneas de planificacin de las cinco entidades seleccionadas, con las 162 recomendaciones del Informe de Desarrollo Humano arroj que un 61% de las recomendaciones del Informe del Eje Cafetero no fueron incluidas en dichos documentos, que un 27% se recogen de manera parcial y que el 11% fueron formuladas como lo propona el estudio. Las recomendaciones que fueron en su mayora agendadas son las de los ODM, las de crecimiento econmico y las de educacin. Cabe anotar que ninguno de los documentos de planificacin analizado hace referencia al Informe, ni al enfoque de Desarrollo Humano en el sentido estricto de su definicin. Otros efectos identificados del informe fueron la creacin de instancias regionales de trabajo y concertacin como la Mesa Regional de Planificacin del Eje Cafetero (MPREC) y de oferta educativa como un diplomado en participacin poltica. Al examinar la percepcin de los funcionarios y del equipo del Informe sobre la evolucin de los 11 componentes del Desarrollo Humano para el perodo 2004-2007. El 49% en promedio de los encuestados consider que el conjunto de componentes ha mejorado, un 22% que sigue igual y un 18% que ha empeorado. Los componentes que han tenido una mejor evolucin, segn los encuestados, fueron el logro educativo, la participacin ciudadana, la cooperacin interinstitucional y la focalizacin hacia los pobres. De otro lado, los que no evolucionan son la equidad de gnero y las opciones para la ocupacin del tiempo libre. Finalmente, los componentes que han empeorado son la seguridad, el ingreso per cpita, la esperanza de vida y la identidad cultural. En el mismo sentido, para el 27% de los encuestados la evolucin positiva de los componentes del Desarrollo Humano tiene mucha relacin con la aplicacin de las polticas pblicas recomendadas por el Informe, mientras que para el 23% no tiene ninguna relacin. Esta falta de relacin a juicio de los consultados se explica porque las polticas pblicas responden a la dinmica normal de las administraciones subnacionales y han estado presentes en la agenda pblica desde antes del proceso del Informe de Desarrollo Humano del Eje Cafetero. Aunque existe un nivel de correspondencia entre las propuestas del Informe y la planificacin de las entidades y aunque un porcentaje de los encuestados reconoce que algunas recomendaciones fueron agendadas, no es posible establecer hasta que grado fue un efecto directo del Informe, dado que algunas de estas polticas hacen parte de la planificacin y misin normal de las entidades consultadas (por ejemplo las polticas educativas). En este orden de ideas, varios encuestados afirmaron que las propuestas del Informe Regional no son novedosas y que varias de ellas coinciden con las polticas pblicas que tradicionalmente se ejecutan en pro del desarrollo, principalmente por actores pblicos. Finalmente, el nivel de incidencia del Informe se vio afectado bsicamente por fallas en el proceso de construccin y difusin, lo cual limit la agendacin de la poltica pblica. Las principales fallas se encuentran en que las recomendaciones de poltica pblica no son reconocidas como un aporte novedoso para la regin, son densas, poco detalladas y coinciden en alto grado con las polticas pblicas que han sido implementadas tradicionalmente en la regin por una diversidad de actores, especialmente por los pblicos. Tambin se reconocen debilidades en la participacin, que fue en algunos espacios baja y medianamente representativa y en la difusin que estuvo concentrada en los sectores y personas tradicionales y se limit a un corto periodo antes y despus de la publicacin. Adicionalmente, el Informe carece de seguimiento y sus propuestas no fueron operacionalizadas o llevadas a acuerdos formales con las entidades y sus representantes. En este sentido, la publicacin del Informe se hizo despus de elegidos los actuales alcaldes y gobernadores, es decir no se aprovech una ventana de oportunidad para su agendacin, y finalmente, el Informe no cont con el suficiente lobby, ni con la deliberacin
www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

pblica, ni con el cabildeo que permitiera su integracin en la agenda pblica. Todo esto en conjunto limit su incidencia en los actores del desarrollo, en el debate pblico, en la generacin de acuerdos y en la agendacin de sus recomendaciones expresadas en polticas pblicas. Quizs las causas de estas fallas radiquen o sean inherentes a un ejercicio pionero para el nivel regional y municipal en Colombia y especialmente a las limitaciones presupuestales y atrasos que sufri este Informe Regional. De lo anterior, surgen recomendaciones que se pueden aplicar en general para que los Informes de Desarrollo Humano sean ms efectivos en trminos de la agendacin de sus polticas pblicas: Llevar a cabo un proceso de construccin altamente incluyente para la sociedad civil y el sector privado y gremial, para balancear el fuerte peso del sector pblico. Que incluya activamente por ejemplo actores cruciales del sector educativo y ambiental, las Fundaciones de la empresas privadas, las Cajas de Compensacin Familiar, la industria, las organizaciones gremiales y de productores, organizaciones religiosas y de trabajadores y en general todas las de ayuda social, as como los proyectos y agencias de cooperacin internacional que tengan asiento en el territorio. En este aspecto, tambin es clave el posicionamiento en la opinin pblica del informe, a travs por ejemplo de una alianza de medios y de una convocatoria ms amplia. En este sentido y debido a la cultura de baja participacin se deben explorar otros medios de invitacin diferentes a los tradicionales de comunicaciones escritas. Enfatizar la difusin del informe y especialmente de su proceso de construccin, el cubrimiento de medios debe ser durante todo el proceso de elaboracin y posterior a su publicacin, como un proceso contino de seguimiento, dentro de la alianza de medios ya sealada. Simplificar el estilo de presentacin de las recomendaciones del Informe, as como disminuir el nmero de stas, asignando indicadores, lnea base y metas, construidas en conjunto con los actores tendiendo en cuenta sus fortalezas y limitaciones, de manera que se responsabilicen de su gestin. Enfatizar en la formalizacin de un Pacto de los actores del desarrollo que conlleve la agendacin de la poltica pblica, que adems cuente con la asesora y el acompaamiento del UNDP y del equipo del informe, en la etapa de formulacin e implementacin de la poltica. En este punto, en particular es necesario implementar acciones pedaggicas y estrategias diferenciales para los niveles directivos y decisorios de las entidades claves del desarrollo, ya que estas personas no suelen participar del proceso del informe o lo hacen por lapsos cortos. Sera apropiado contar con un observatorio del Desarrollo Humano que sea responsable entre otras cosas del seguimiento a los compromisos del informe, a la evolucin de los 11 componentes del Desarrollo Humano y no slo al IDH y como apoyo en la formulacin y seguimiento de polticas pblicas de Desarrollo Humano. Como se anot en la primera parte de este trabajo, un Informe de Desarrollo Humano es un instrumento para la agendacin de poltica pblica y en este sentido, debe ser planificado y polticamente lanzado. El UNDP y las entidades auspiciantes del informe deben estar atentas al momento en que se abra la ventana de oportunidad de las polticas, as como trazar una estrategia de persuasin y deliberacin pblica que desencadene la accin sobre los problemas del desarrollo humano identificados en el informe. En este orden de ideas, cobra especial importancia, en primer lugar la seleccin del o los problemas objeto del estudio, estos deben ser lo ms ampliamente compartidos y comprendidos, en segundo lugar, el proceso de difusin, tanto del proceso como del producto final, proceso que no slo debe ser meditico sino que debe estar mediado por el cabildeo del informe y por un proceso pedaggico amplio. Finalmente, el informe debe aliarse con los actores iniciadores claves del territorio, as como aprovechar los mecanismos de disparo. Todo lo anterior, en conjunto aumentar la probabilidad de que las recomendaciones del Informe de Desarrollo Humano entren en la agenda de los hacedores de la poltica pblica y por ende redunde en el mejoramiento de las capacidades, oportunidades y libertades de las personas.
www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

En este ltimo punto, UNDP debera complementar el HDR Toolkit con instructivos u orientaciones para la formulacin adecuada y efectiva de las recomendaciones, as como para los procesos de agendamiento y cabildeo de la poltica pblica. 3. Conclusiones y recomendaciones sobre el instrumento de evaluacin La evaluacin de la incidencia, del Informe de Desarrollo Humano del Eje Cafetero: Un Pacto por la Regin, en los actores del desarrollo del municipio de Pereira, demostr que el instrumento cumple de manera gil y sistemtica con los objetivos para los cuales fue creado. Esta experiencia de validacin permiti afinar la propuesta inicial, principalmente a nivel de los instructivos y encuestas, as como ir agregando nuevas matrices, tablas resumen y formas de anlisis y presentacin. El instrumento est planteado para la evaluacin ex post de un Informe de Desarrollo Humano, sin embargo, algunas de sus etapas y herramientas pueden ser adaptadas para aplicarse durante la elaboracin y divulgacin del mismo, o como una lista de verificacin continua. Entre las limitaciones de este anlisis est que el instrumento fue diseado teniendo en cuenta la estructura del Informe Regional de Desarrollo Humano para el Eje Cafetero, en este sentido, se desconoce su viabilidad en informes ms complejos, como los nacionales y los globales. Asimismo, se reconoce que la calidad y validez de la evaluacin depende en gran medida de un profundo conocimiento del evaluador frente a la realidad del territorio, frente a las particularidades de los actores del desarrollo y frente al proceso mismo del Informe de Desarrollo Humano, de manera que la evaluacin pude estar cargada de subjetividad. En el anlisis de los documentos de planificacin de las entidades seleccionadas se presentaron dificultades en el momento de cruzar los diferentes niveles de planificacin con las recomendaciones del Informe. Debido a las metodologas dismiles que utilizan los diferentes documentos, por lo cual es necesario tener a la mano todo el documento y no slo la matriz de clasificacin, aqu se pueden presentar los mayores errores en la valoracin. El volumen de recomendaciones del Informe de Desarrollo Humano y el nmero de lneas de planificacin de las entidades puede complejizar en alto grado el cruce de informacin. El instrumento surgi con el objetivo de establecer la incidencia sobre las polticas pblicas, sin embargo, fue necesario ampliar la evaluacin a otras dimensiones del Informe, como la coherencia de sus recomendaciones y el ajuste a los 6 principios de calidad definidos por UNDP, porque en estos anlisis se pueden encontrar los referentes que permiten justificar o explicar los niveles de agendacin. La evaluacin del Informe del Eje Cafetero despus de dos aos de publicado demostr que este es un tiempo prudencial para la aplicacin del instrumento, ya que es lo suficientemente reciente como para que an lo recuerden los funcionarios y an sea pertinente y vigente, pero tambin lo suficientemente alejado de su publicacin como para que se hayan consolidado sus impactos y haya pasado el boom del lanzamiento. Tambin queda claro que la evaluacin de un Informe de Desarrollo Humano debe ser antes de que se inicie una versin nueva del mismo. No se descarta la utilizacin de modelos estadsticos para la seleccin de las personas a encuestar y de las entidades para anlisis documental, as mismo, la utilizacin de programas de computador para realizar las calificaciones de las matrices valorativas, los cruces de informacin y los anlisis estadsticos, como el software para el Anlisis de Datos Cualitativos ATLAS/ti, MSA y los software estadsticos SPSS, SAS y SSA y de esta manera imprimirle mayor objetividad a los resultados. Se recomienda revisar las escalas valorativas (alto, medio, bajo o nulo) que permiten calificar la incidencia y coherencia de los Informes de Desarrollo Humano. Este ajuste ser posible en la medida

www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

que se evalen otras experiencias y se establezca una escala ms real de acuerdo a la capacidad que un informe pueda tener para influenciar el desarrollo de un territorio. La evaluacin de la coherencia, del informe del Eje Cafetero, frente a las 11 dimensiones del Desarrollo Humano demostr que difcilmente un informe podra contribuir a todas ellas, ms an sin tenemos en cuenta que los informes son temticos y algunas veces muy especializados. Por lo tanto, en primera instancia la evaluacin se debe concentrar en analizar si el informe es coherente en sus contribuciones a las dimensiones del Desarrollo Humano que se relacionen con el tema y problemtica del cual se ocupa. No obstante, el Desarrollo Humano es un enfoque holstico que instrumentalizan los informes y por tanto vale la pena evaluar la contribucin a todos los componentes, as como a los ODM. Asimismo, evaluar los informes frente a la totalidad de dimensiones puede marcar tendencias frente a los temas del Desarrollo Humano y los ODM que han logrado llamar ms o menos la atencin y frente a aquellos que no han sido abordados. Finalmente, este instrumento puede ser complementado con herramientas que permitan el anlisis de otros impactos y efectos de los Informes de Desarrollo Humano, por ejemplo en los discursos polticos y del desarrollo, en la academia, en el cubrimiento en medios de los problemas del Desarrollo Humano, en los cambios de pensamiento y comportamientos en lderes, en las asignaciones presupuestales, en el mejoramiento de la disponibilidad y calidad de la informacin, o en la utilizacin de los Informes como base bibliogrfica y de consulta para la elaboracin de otras investigaciones o de documentos de poltica pblica. Despus de aplicado y validado el instrumento quedan los siguientes cuestionamientos: Cul es el momento adecuado en el cual se debe lanzar un Informe de Desarrollo Humano? Qu estrategia de difusin y cabildeo implementar para lograr un mayor nivel de agendamiento? Cules son los actores claves relacionados con el desarrollo que deben estar comprometidos con el Informe de Desarrollo Humano y que no deben faltar? En qu forma se deben presentar las recomendaciones del Informe, de manera que sean ms comprensibles y agendables? Qu mecanismos se pueden usar para lograr un compromiso real de parte de los actores del desarrollo frente a las recomendaciones de un Informe de Desarrollo Humano? Cules son las limitaciones de un Informe de Desarrollo Humano y de UNDP para lograr transformaciones en las dinmicas tradicionales de desarrollo de los diferentes niveles territoriales? Cmo manejar la participacin de UNDP para que el Informe no se reconozca como un producto de esta agencia, sino como una construccin y un compromiso colectivo?, finalmente Cmo desarrollar un instructivo o unos lineamientos para la formulacin de las recomendaciones de un Informe de Desarrollo Humano y de su proceso de gestin, de manera que desemboque en la agendacin de polticas pblicas?

www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

Bibliografa Aguilar, L. (1993). Problemas pblicos y agenda de gobierno. Mxico: Grupo editorial Miguel ngel Porrua. Arango, O. (Ed). (2004). Ecorregin Eje Cafetero un territorio de oportunidades. Pereira: Convenio Carder-Fonade y Alma Mater-Forec. Bardach, E. (1999). Los ocho pasos para el anlisis de polticas pblicas. Un manual para la prctica. Mxico: CIDE. Centro de Investigaciones para el Desarrollo de la Universidad Nacional (CID). (2003). Bien-estar y Macroeconoma. Informe de Coyuntura. Bogot: Universidad Nacional de Colombia, Contralora General de la Repblica. Cobb, R. y Elder, Ch. (1984). Agenda-building and the politics of agning. En Aguilar, L. (1993). Problemas pblicos y agenda de gobierno. Mxico: Grupo editorial Miguel ngel Porrua. Departamento Nacional de Estadstica (DANE). (2004). Recuento de viviendas, hogares y unidades econmicas. Pereira: DANE. Departamento Nacional de Planeacin (DNP). (2003). Diez aos de Desarrollo Humano en Colombia. Bogot: UNDP-DNP-ACCI-Programa Nacional de Desarrollo Humano. Dubnick (1983). En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Fukuda-Parr, S. y Shiva, A. (Eds.) (2003). Readings in human development: concepts, measures and policies for a development paradigm. New Delhi: Oxford University Press. Garca (1992). La entrevista. En Rojas, A., Fernndez, J. y Prez, C. (1998). Investigar mediante encuestas. Fundamentos tericos y aspectos prcticos. Madrid: Editorial Sntesis. Gobernacin del Risaralda. (2006). Plan de desarrollo 2004-2007. Ajustado. Revolucin pblica con resultados. Pereira: Gobernacin del Risaralda. Haq, M. (2003). The human development paradigm. En Fukuda-Parr, S. y Shiva, A. Readings in Human Development (pp. 17-34). New Delhi: Oxford University Press. Heclo, H. y Wildasky, A. (1974). The private government of public money. Community and policy inside Britsh Politics. En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Kingdon, J. (1984). Agendas, alternatives and public policies. En Aguilar, L. (1993). Problemas pblicos y agenda de gobierno. Mxico: Grupo editorial Miguel ngel Porrua. Kingdon, J. (1995). Agendas, alternatives and public policies. New York: Harper Collins College Publishers. Larran, J., Ramos, C. y Acosta, E. (2006). El impacto de los informes de Desarrollo Humano del UNDP en Chile. Santiago de Chile: Universidad Alberto Hurtado. Lenoir, R. (1986). Golpes de presin et groupes consensuels. Contribution une analyse de la formation du droit. En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Majone, G. (1997). Evidencia, argumentacin y persuasin en la formulacin de polticas. Mxico: Fondo de cultura econmica. Mancero, X. (2001). La medicin del Desarrollo Humano: elementos de un debate. Chile: CEPAL. Meny, I. y Thoening, J. (1986). Les politiques publiques. En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Meny, I. y Thoening, J. (1992). Las polticas pblicas (trad). Barcelona: Ariel Ciencia Poltica. Muller, P. (2000). Las polticas pblicas. Bogot. Universidad Javeriana. Muller, P. y Surel, I. (1998). Lanalyse des politiques publiques. En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Padioleau, J. (1982). LEtat au concret. En Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Perelman, Ch. (1982). The realm of rhetoric. En Majone, G. (1997). Evidencia, argumentacin y persuasin en la formulacin de polticas. Mxico: Fondo de cultura econmica.
www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

10

Raworth, K. y Stewart, D. (2003). Critiques of the human development index: a review. En Fukuda-Parr, S. y Shiva, A. Readings in human development: concepts, measures and policies for a development paradigm (pp. 3-16). New Delhi: Oxford University Press. Rojas, A., Fernndez, J. y Prez, C. (1998). Investigar mediante encuestas. Fundamentos tericos y aspectos prcticos. Madrid: Editorial Sntesis. Roth, A. (2002). Polticas pblicas, formulacin, implementacin y evaluacin. Bogot: Ediciones Aurora. Snchez, O. (2006). Perspectivas del Informe de Desarrollo Humano del Eje Cafetero II. Presentacin realizada en el evento consultivo: Perspectivas para un segundo informe de Desarrollo Humano en el Eje cafetero. Pereira, 13 de diciembre de 2006. Sen, A. (2000). Desarrollo y libertad. Barcelona: Editorial Planeta. Sen, A. (2002). De qu se trata el desarrollo? En Meier, J. y Stiglitz, J. Fronteras de la economa del desarrollo: el futuro en perspectiva (pp. 509-516). Bogot: Alfaomega. Sen, A. (2003). Development as a capability expansion. En Fukuda-Parr, S. y Shiva, A. Readings in human development: concepts, measures and policies for a development paradigm (pp. 3-16). New Delhi: Oxford University Press. Programa de las Naciones Unidas para el Desarrollo (UNDP). (1990). Informe Mundial de Desarrollo Humano 1990. Colombia: Tercer Mundo editores. UNDP. (2001). Poltica corporativa del UNDP para los Informes Nacionales de Desarrollo Humano. New York: Oficina del informe sobre Desarrollo Humano. UNDP. (2003). Informe Nacional de Desarrollo Humano 2003: El callejn con salida. Bogot: UNDP Colombia. UNDP. (2004). Human Development Report toolkit for national and regional Human Development Report teams. Practical guidelines, examples and resources for achieving excellence in HDRs. New York: UNDP. UNDP. (2004a). Informe de Desarrollo Humano del Eje Cafetero. Un pacto por la regin. Manizales: UNDP Colombia. UNDP. (2004b). Informe sobre desarrollo humano 2004. La libertad cultural en el mundo diverso de hoy. Mxico. Mundi Prensa. UNDP. (2005). Ideas, innovation and impact. How human development reports influence change. New York: UNDP. UNDP. (2006). Evaluation of the National Human Development Report System. New York: UNDP. Vicente, A. (2006). Evaluacin del Informe Regional de Desarrollo Humano del Eje Cafetero. Manizales: UNDP Colombia.

www.revistadesarrollohumano.org - Boletn N 37 - Octubre 2007

11