CURSO INTRODUCTORIO DE EVALUACIN PARA AMRICA LATINA Y EL CARIBE
MODULO 3: METODOS Y HERRAMIENTAS UNIDA: FORMULACIN DE INDICADORES
- GUIA DE ESTUDIO 1 -
Victor Manuel Quintero Vice Coordinador de la ReLAC Profesor Maestra en Gestin Pblica Universidad Santiago de Cali Cali, Colombia vmquinterou@gmail.com Abril de 2013
PRESENTACIN
El mdulo de Formulacin de Indicadores se centra en relevar la importancia que en evaluacin de polticas, planes, programas, proyectos y procesos de desarrollo tienen los indicadores, concebidos como patrones cuantitativos y cualitativos de valoracin de resultados (productos, efectos, impactos) y de gestin (actividades, equipos de trabajo, recursos fsicos, presupuestos, tiempos), con el fin de fortalecer estrategias de seguimiento, evaluacin, sistematizacin en forma pertinente.
COMPETENCIAS.
Los participantes cuentan con conceptos, mtodos e instrumentos para formular, utilizar e interpretar los elementos pertinentes a los sistemas de Indicadores.
CAPACIDADES Comprende los indicadores como un elemento fundamental en los procesos de evaluacin Formula en forma tcnica indicadores cuantitativos y cualitativos de resultado y de gestin Desarrolla pensamiento crtico para los procesos de evaluacin desde los sistemas de indicadores
1 Muchas de las ideas aqu incluidas fueron tratadas por el autor en sus publicaciones Impacto Social. Evaluacin de proyectos de desarrollo. (2010), as como en Poltica Pblica e Indicadores Culturales (2013). Para la elaboracin del presente texto se cont con la efectiva revisin de las doctoras Andrea Peroni de la Facultad de Ciencias Sociales de la Universidad de Chile, y Gloria Vela de Consultora Internacional Grimorum, para quienes presento mis mejores sentimientos de respeto y agradecimiento. Obviamente, todas las imprecisiones conceptuales, metodolgicas e instrumentales son slo y nicamente responsabilidad del autor. 2
TEMARIO
El mdulo se desarrolla a travs de los siguientes temas
Pg.
PRESENTACIN
1
1. REFERENTE HISTORICO
3 2. SISTEMA DE EVALUACIN 4 3. TIPOLOGA DE LOS INDICADORES 5 4. BONDADES, LIMITANTES Y CARACTERSTICAS DE LOS INDICADORES 7 5. SISTEMA DE INDICADORES 8 6. FORMULACIN DE INDICADORES 11 6.1 INDICADORES CUANTITATIVOS 12 6.1.1 Indicadores de variables tangibles 12 6.1.2 Indicadores de variables intangibles 15 6.1.3 Ficha Tecnica 18 6.2 INDICADORES CUALITATIVOS 20 6.2.1 Indicadores de calidad 20 6.2.2 Indicadores de escala - cualitativos 21 7. UTILIZACIN DE LOS INDICADORES 23 8. INTERPRETACIN DEL DATO 26 9. INDICES 27 BIBLIOGRAFA 28
3
1. REFERENTE HISTRICO
La recoleccin y registro de informacin puede rastrearse en la historia de la humanidad generada en personas, familias y gobiernos por la necesidad de saber sobre cunto se hace, cunto se tiene, cunto se entrega, cunto se recibe. De hecho los Sumerios iniciaron el registro de dichos datos en las tablillas de arcilla donde comerciantes impriman sus cuentas. De igual forma existen evidencias de ms de cuatro mil aos en China e India sobre registros tanto poblacionales, de produccin como tributarios (Lora, 2008:24). En el sistema contable de los Incas se utilizaban unas cuerdas con nudos de varios colores llamados Quipus o Quipo lo cual permita tener no slo ser un instrumento de nmeros sino un registro de eventos. Paralelamente desde la antigedad la aritmtica y la geometra se desarrollaron a la par de la necesidad de contar. La estadstica nace en la poca medioeval cuyo nombre proviene el latn Statu (estado), su origen se relaciona con el clculo de lo que se debera cobrar de impuesto por extensiones, seoriales y poblacin. Ms tarde Pascal, Galileo y Fermat, de los siglos XVI y XVII aportan las leyes de las probabilidades (Quiroz, 2011). Avances significativos han hecho los economistas desde los fisicratas del siglo XVIII de Inglaterra y Francia quienes sentaron las bases de la contabilidad nacional. Ms tarde economistas neoclsicos y marginalistas adicionaron conceptos, mtodos e instrumentos para la medicin econmica, enriquecida por Pigou y la economa del bienestar precisando la importancia de los indicadores sociales en la valoracin de externalidades. Complementariamente Walras y su teora del equilibrio general as como la tabla insumo-producto desarrollada por Leontief quien recibi el premio Nobel de Economa en 1973, aportan significativamente al desarrollo de la medicin econmica. De igual forma en la historia de la sociologa puede encontrarse tan temprano como en el siglo XVII los aportes a la sociodemografa que permitieron en el siglo XVIII establecer los primeros censos de poblacin generando requerimientos por un mejor conocimiento de los fenmenos sociales y sus metodologas pertinentes de evaluacin, ampliados con los aportes fundamentales de Durkheim y Merton en sus estudios sobre el aspecto de la vida social y los cambios en ella. En la segunda mitad del siglo XX, con la aparicin de la Organizacin de las Naciones Unidas, se avanza significativamente en indicadores y estadsticas socioeconmicas que permiten medir el desarrollo de los pases y la calidad de vida de sus habitantes. Desde all hasta la actualidad han continuado la promocin, coordinacin y difusin de metodologas, anlisis e informes involucrando expertos que provienen fundamentalmente de la Comunidad Europea, el Fondo Monetario Internacional, la Organizacin para la Cooperacin y el Desarrollo Econmico, el Banco Mundial, el Centro de Planeacin para America Latina, el Banco Interamericano de Desarrollo, entre otros. La historia contempornea con la globalizacin y la revolucin informtica trae consigo la sociedad de la informacin, la era del conocimiento, tal como lo expresan los acadmicos Luc Boltanski en su obra La era del acceso, La revolucin de la nueva economa (2000) as como tambin Jeremy Rifkin y ve Chiapello en El nuevo espritu del capitalismo (2002). En la actualidad la economa y la sociedad en general no estn determinadas tanto por la produccin y el consumo de bienes y servicios materiales e intangibles sino que est 4
basada significativamente en la generacin, distribucin y uso de la informacin. En la sociedad postindustrial se establece el conocimiento, la informacin como el motor del cambio, requiriendo entonces la construccin y utilizacin de indicadores pertinentes a esta era que reflejen la informacin como el elemento central del sistema socioeconmico.
2. SISTEMA DE EVALUACIN
En la era de lo sistmico, de lo holstico la evaluacin de polticas, programas y proyectos requiere construir y operacionalizar el concepto de Sistema de Evaluacin, entendido como la herramienta que permite conocer la marcha de los procesos, valorar el nivel de cumplimiento de los objetivos propuestos en tanto cambios generados por la accin institucional, e identificar y seleccionar la informacin que posibilita tomar decisiones, aplicar correctivos, reconocer impactos y sistematizar experiencias. En nuestra realidad turbulenta llena de contingencias e incertidumbres se requiere de un sistema de evaluacin que genere las seales de alertas suficientes, oportunas y confiables para tomar decisiones, procurando con ello la obtencin de los objetivos previstos y haciendo los ajustes correspondientes cuando esto sea necesario.
La caracterstica fundamental del sistema de evaluacin es el de ser un sistema de sistemas, pues est construido por los siguientes sistemas o subsistemas:
Sistema de indicadores Sistema de informacin Sistema de comunicacin Sistema de aprendizaje
En primera instancia, el sistema de indicadores precisa los patrones de valoracin que permiten el acopio de datos y opiniones sobre temas de importancia de lo que se est evaluando. A su turno, el sistema de informacin tiene por objeto organizar, analizar y distribuir la informacin sobre la propuesta que se est adelantando de manera que se pueda facilitar la toma de decisiones. Esta informacin surge a partir de la evaluacin exante la cual tiene como propsito definir las metas y la viabilidad de la propuesta y con ello su aprobacin, as como de la linea de base que se establece una vez aprobado y se inicia la intervencin. Igualmente la informacin proviene del seguimiento a la experiencia (evaluacin en curso) y de los datos finales relativos a los resultados generados, as como de la evaluacin expost aos despus de haber terminado el proyecto, momentos que abarcan todo ciclo de vida de una intervencin.
Complementariamente, el sistema de comunicacin ofrece la posibilidad de retroalimentacin de la informacin entre los grupos de inters. Por ltimo, el sistema de aprendizaje genera espacios de reflexin sobre procesos, resultados y experiencias, as como de la construccin de saberes temticos, organizacionales y comunitarios.
5
3. TIPOLOGA DE LOS INDICADORES
Existen en textos especializados, manuales e informes una gran variedad de indicadores que para fines prcticos de este mdulo podran agruparse de la siguiente forma:
Indicadores de desarrollo. Se refieren a patrones de valoracin utilizados para evaluar los cambios macro, generales o agregados de las diferentes unidades territoriales desde familias, veredas y barrios hasta regiones y pases (Banco Mundial - Indicadores de desarrollo mundial www.worldbank.org). En esta tipologa es de destacar al menos el ndice de desarrollo humano (www.undp.org) y los indicadores de los objetivos del milenio (http://www.undp.org/content/undp/es/home/mdgoverview). Igualmente puede consultarse (http://www.eclac.org/publicaciones/xml/2/29282/LCL2767e.pdf). Complementan el listado anterior indicadores relativos a planteamientos axiolgicos globalizados tales como bienestar, democracia, equidad, inclusin, identidad, sostenibilidad, capital social, civilidad, dignidad humana, respeto, no violencia entre otros.
Indicadores econmicos. Los sistemas de cuentas nacionales utilizan y promueven en especial indicadores de empleo y desempleo, de nivel de vida, desigualdad y pobreza, de precios al consumidor y al por mayor, de producto e ingreso todos ellos elementos fundamentales del concepto de agregacin econmica. (www.eclac.org/.../getprod.asp).
Indicadores sociales. Los fenmenos sociales pueden ser organizados, descritos y valorados con este tipo de indicadores que permiten valorar los aspectos constitutivos de la realidad social y una mejor comprensin de la misma, destacndose al menos los indicadores de poblacin y proyeccin demogrfica as como los relativos a organizacin, participacin, salud, vivienda, educacin, seguridad, recreacin, deportes, comunicaciones y cultura entre los ms relevantes o usados (http://unstats.un.org/unsd/publication/SeriesF/SeriesF_49S.pdf). Es de destacar los aportes en esta materia realizados por las propuestas sobre Indicadores de Gnero (CEPAL Estadsticas de gnero www.cepal.org).
Indicadores ambientales. Igualmente pueden encontrarse en la literatura indicadores propios de sectores o dimensiones sustantivos de la realidad de grupos, organizaciones y territorios. Tal es el caso de los indicadores ambientales recogidos en gran medida por el Informe mundial de biodiversidad, as como tambin por las propuestas de indicadores de presin-estado-respuesta propios de los anlisis ambientalistas relacionados en especial con fauna, flora, suelos, agua, aire, forestales y del bosque, al igual que sobre aspectos agroecolgicos y de tenencia y utilizacin de la tierra. (www.eclac.org/publicaciones/xml/1/37231/LCL3021e.pdf).
Indicadores financieros. Estos patrones de evaluacin estn referidos en especial a los datos requeridos por la gestin contable y financiera que bien ilustran los textos sobre anlisis financiero y sus mltiples razones financieras.
Ahora bien, existen igualmente clasificaciones metodolgicas de los indicadores entre los cuales se pueden destacar al menos las siguientes: 6
Indicadores cuantitativos. Nacen de la necesidad que el mtodo cientfico, o emprico analtico, tiene de medir las realidades. Desde all tambin son denominados indicadores objetivos y son la expresin cuantitativa que permite medir la unidad de anlisis que se est observando.
Indicadores cualitativos. En muchos casos a este tipo de indicadores se les denomina como indicadores subjetivos ya que son la expresin cualitativa que permite apreciar, valorar sentimientos, sentires, concepciones y opiniones de las personas pertinentes a una propuesta, proceso, poltica, programa o proyecto y son especialmente impulsados por las propuestas fenomenolgicas que permiten construir socialmente las realidades.
Indicadores de calidad. Son acuerdos, pactos, estndares preestablecidos que como condiciones mnimas dan cuenta de los requerimientos para que la unidad de anlisis sea considerada de calidad. Este tipo de indicadores son impulsados por la escuela de calidad total y en los procesos de acreditacin y certificacin.
Indicadores de acceso. Son el conjunto de indicadores que valoran la capacidad de los beneficiarios de una propuesta pblica o privada de acceder a los productos y servicios ofrecidos.
Adicionalmente en la literatura sobre evaluacin de polticas pblicas se utilizan las siguientes denominaciones en cuanto a indicadores se refiere: Indicadores de resultado. Estn referidos tanto a los productos (bienes y servicios entregados) como a los efectos (utilizacin de los productos) y de impactos (transformaciones una vez que se utilizan los productos).
Indicadores de gestin. Este tipo de indicadores est constituido por los patrones de valoracin de los procesos (conjunto de actividades o acciones) y de los recursos tanto humanos como fsicos y financieros requeridos para lograr los productos prometidos por polticas, planes, programas y proyectos.
Indicadores simples. Se expresan a partir de datos y estadsticas sencillas y disponibles sobre un fenmeno o poblacin puntual, generalmente referida a una sola variable o caracterstica del fenmeno. Igualmente se encuentra el concepto de los indicadores complejos que es la agregacin de los indicadores simples e igualmente denominados ndices los cuales sintetizan una situacin global o agregada.
FIGURA UNO CLASIFICACIN DE INDICADORES
Segn aspectos de la realidad Desarrollo econmico, social, cultural, ambiental, demogrfico. Segn metodologa Cualitativos, Cuantitativos Segn ciclo de intervencin De resultado y de gestin Segn convenciones internacionales De calidad, de acceso Segn proceso de construccin Simple, complejos - ndices _________ Fuente: Elaboracin propia. 7
Es necesario precisar que la anterior clasificacin presentada en la figura uno no es excluyente. Por ejemplo, se encuentran indicadores de desarrollo cuantitativos y cualitativos los cuales pueden ser tanto de calidad como de acceso.
4. BONDADES, LIMITANTES Y CARACTERISTICAS DE LOS INDICADORES
Los indicadores en los procesos de evaluacin de polticas, planes, programas y proyectos permiten al menos:
Valorar problemas y soluciones, as como el aprovechamiento de oportunidades. Determinar avances, logros y dificultades. Apreciar en qu medida se cumplen objetivos, actividades, cronogramas y presupuesto. Evaluar cambios en personas, grupos y regiones. Describir las caractersticas de la unidad de anlisis estudiada. Comparar fenmenos en lugares y tiempos tanto sincrnicos como diacrnicos. Medir las variables constitutivas de procesos y propuestas. Proyectar y anticipar situaciones futuras de las unidades de estudio. Acopiar la informacin necesaria para la generacin de saberes temticos y organizacionales que constituyen el capital intelectual de la organizacin y de las comunidades que atiende. Los indicadores no deben limitarse a ser herramientas descriptivas sino que deben ser elementos constitutivos que reflejan la teora del desarrollo y las propuestas mismas del desarrollo de pases o zonas analizadas (Quiroz, 2011).
De igual forma si los indicadores tienen sus ventajas por supuesto tienen sus limitaciones entre las que se destacan:
Son ambiguos en la medida en que la interpretacin o significado del mismo puede tener diferente sentido en diferentes personas que lo apliquen. En tal sentido, tal como nos lo recuerdan las propuestas del marco lgico y sus indicadores objetivamente verificables, el indicador siempre debe ser constante y no debe variar ni por las personas que lo apliquen, ni en el espacio que se aplica, ni en el momento que se utiliza. A este punto es necesario volver a lo que el anlisis comparado de polticas pblicas denomina indicadores equivalentes funcionales desde donde se establece que la misma palabra, el mismo trmino, puede ser utilizado por diferentes culturas para referirse a casos diferentes, para lo cual siempre es importante definir con la participacin de los actores relevantes la nocin y al mbito del indicador.
Los indicadores son de difcil utilizacin cuando fuentes y datos estadsticos son escasos, por ende en su formulacin es necesario establecer con precisin el origen y la viabilidad de la obtencin de la informacin, del dato que se quiere construir con el indicador, as como la homogeneidad de las fuentes de informacin.
8
El indicador ser menos preciso en la medida en que su aplicacin genere inconsistencias en los procedimientos, instrumentos y codificacin en la recoleccin de la informacin.
La calidad del indicador puede ser establecida desde los criterios de validez y fiabilidad. La validez Se puede definir como el grado en que la variacin de un indicador refleja nicamente diferencias en el concepto que se intenta medir. (Perea, et.al., 1999:46). Para establecer la validez de un indicador puede consultarse a expertos y a los distintos actores involucrados y entre todos se establece un acuerdo sobre el tema que se est evaluando o repensar entre todos y todas si el indicador refleja el concepto que se tiene de la unidad de anlisis evaluada y si estn ntimamente relacionados. En cuanto a la fiabilidad Si un indicador proporciona distintos resultados al repetir su aplicacin varias veces sobre el mismo caso, se considera poco fiable. Igualmente si los conceptos o criterios sobre los que se bas la concepcin del indicador no son lo suficientemente claros o pueden aplicarse a diferentes casos o categoras. (Perea, et.al., 1999:49).
Por ltimo se dice que un indicador es mejor en la media en que sea ms universal pues ya est validado por otros y los datos que resultan de su aplicacin pueden ser agregados y/o comparados con pares, por ejemplo, el indicador tasa de mortalidad infantil.
5. SISTEMA DE INDICADORES
La teora general de sistemas entiende por sistema una unidad constituida por elementos interrelacionados con un objeto comn. En tal sentido es preciso profundizar sobre la diferencia que se puede tener entre un indicador y un sistema de indicadores. El concepto simple de indicador, tal como lo recogen las bases de datos, los ejercicios propios de la rendicin de cuentas se nutren generalmente por series de indicadores aislados entre s. Son, por importantes que sean, simplemente listados de indicadores. En la contemporaneidad es necesario avanzar de los listados de indicadores a los sistemas de indicadores, pues para evaluar polticas, planes, programas y proyectos no se requiere solamente los indicadores y los datos aislados recogidos con su aplicacin, sino bien comprender la interrelacin que existe entre todos los indicadores. En lo sistmico, en lo holstico, en lo estructural, lo importante es entender que todo est relacionado con todo y que si un elemento del sistema se modifica, modifica todo el sistema en s. Este principio es bien claro cuando entendemos estructuras como el sistema elctrico, el sistema respiratorio, el sistema poltico. Cualquier cambio en un componente de cualquiera de estos sistemas hace que la totalidad, que la unidad cambie. Desde all se plantea entonces que no requerimos tanto indicadores como sistemas de indicadores para poder valorar procesos no desde datos aislados sino entender la relacin entre los mismos. Para construir el sistema de indicadores es necesario primero establecer especficamente qu se va a evaluar. Los indicadores no son neutrales, responden al mtodo, intereses, preguntas e ideologa de los distintos actores involucrados. Dependiendo de la pregunta, inquietud u objeto de estudio que se delimite sern los indicadores que se utilicen. Son muy diferentes los indicadores sobre el Qu (qu se est haciendo), a los del Cmo (cmo se est haciendo), o del Con Qu se est haciendo o del Por Qu se hacen las 9
cosas. Desde estas preguntas evaluadoras se puede empezar a visualizar un sistema de indicadores que contemple las caractersticas individuales de cada elemento pero integradas desde lo sistmico, tal como se ahondar ms adelante y se ilustra en la Figura Dos.
FIGURA DOS
_________ Fuente: Elaboracin propia.
Ya se tiene delimitado participativamente el tema a evaluar por actores relevantes de los grupos de inters y se dieron los primeros pasos en la construccin del sistema de indicadores al precisar inicialmente por el mismo grupo los nfasis de la evaluacin al visualizar las preguntas anteriormente establecidas en la figura dos. El paso siguiente es el de distinguir qu tipo de indicador se utilizar, es decir, qu tipo de informacin se requiere para evaluar. El sistema de indicadores aqu propuesto est construido con base en las preguntas fundamentales para el planteamiento y desarrollo de funciones de planeacin y evaluacin: Qu, Para qu, Cmo y Con qu. Las referidas al para qu y qu establecen la eficacia, el cumplimiento, los resultados; las relativas al cmo y con qu se refieren a la eficiencia desde la gestin de procesos y recursos. En tal sentido, para acompaar polticas, programas y proyectos, desde el concepto de sistema de indicadores, se utilizan dos tipos de indicadores bsicos (ver Figura Tres):
Indicadores de Resultado Indicadores de Gestin
PREGUNTAS CLAVE PARA QU
EFECTOS E IMPACTOS
QU
PRODUCTOS
CMO
PROCESOS
CON QU
RECURSOS
EFICACIAC EFICIENCIA EFECTIVIDADC 10
Los indicadores de resultado permiten recoger datos y opiniones que facilitan la evaluacin de logros, xitos, sueos, objetivos pudindose subdidivr en tres niveles especficos que determinan la eficaciade de la intervencin.
Indicador de Producto: Bienes y servicios - Resultados a corto plazo. Indicador de Efecto: Utilizacin de los productos - Resultados a mediano plazo. Indicador de Impacto: Transformaciones - Resultados a largo plazo.
Un producto es el resultado concreto y tangible, es la meta que se obtiene como resultado de ir realizado las actividades e irse ejecutando el presupuesto. Los productos estn referidos, en la formulacin del objetivo, al qu; es decir, la promesa de valor directa de la realizacin de las actividades segn la propuesta formulada. De igual forma, tanto los efectos como los impactos corresponden al para qu o finalidades del proyecto.
Desde all, los indicadores de efecto, son los resultados que miden las contribuciones del proyecto. En otras palabras es la utilizacin, por parte de los beneficiarios, de los productos o servicios entregados. Podra decirse entonces que un efecto es un resultado o producto de los productos, los cuales pueden ser positivos o negativos. En tal sentido, los efectos son los resultados a mediano plazo,en trminos de la utilizacin de los productos entregados y/o los servicios prestados, convirtindose stas en fuentes fundamentales para la evaluacin encurso y la evaluacin final.
De igual forma, los Indicadores de Impacto son los resultados y contribuciones del proyecto al cumplimiento de la misin, objetivo superior u objetivo de desarrollo. Podra decirse que los Impactos son los efectos de los efectos y que implican transformar estructuras y smbolos en los usuarios, los grupos y la sociedad. Visto as, el impacto es el fin ltimo a cuyo resultado el proyecto contribuye junto con otros, pero que est ms all de su alcance directo.
Ahora bien, los indicadores de gestin permiten dar razn del grado de eficiencia del plan, programa o proyecto que se est evaluando, entendiendo por sto el grado de cumplimiento de las actividades y el grado de utilizacin de los recursos para la consecucin de los objetivos.
Los indicadores de gestin propios del sistema de indicadores recogen informacin en relacin con: Las actividades (cumplimiento, pertinencia y calidad) Los recursos humanos, fsicos y financieros (suficiencia, oportunidad, calidad y pertinencia) Los tiempos (duracin y puntualidad)
Ser eficiente es cumplir las actividades programadas utilizando los mtodos y procedimientos que se establecieron para la consecucin de los objetivos y/o productos. Ser eficiente en trminos de recursos es aprovechar el equipo humano, y los medios fsicos y financieros para la consecucin del objetivo tal como se program en la evaluacin exante o en el momento de la planeacin. 11
RECURSOS INDICADORES DE GESTION FIGURA TRES SISTEMA DE INDICADORES
_________ Fuente: Elaboracin propia.
6. FORMULACIN DE INDICADORES
Una vez se tengan claros diferentes tipos de indicadores que responden a diferentes preguntas evaluadoras o unidades de observacin se puede establecer el modo de formular indicadores, sean stos de resultado (productos, efectos, impactos) o de gestin (procesos y recursos). En muchos manuales de instituciones de cooperacin y desarrollo se establece que formular es escribir. Para el caso de los indicadores, hay diferentes enfoques para formularlos, para definirlos, los cuales responden a diferentes formas de entenderlos segn diferentes escuelas de evaluacin e investigacin. En este sentido es necesario distinguir entre:
FINANCIEROS INDICADORES DE RESULTADO IMPACTOS HUMANOS EFECTOS PRODUCTOS
INDICADORES DE EVALUACION FISICOS CANTIDAD CALIDAD TIEMPO EFICIENCIA EFICACIA EFECTIVIDAD INDICADORES DE GESTIN PROCESOS RECURSOS 12
Tal como se estableci anteriormente, los indicadores cuantitativos son la expresin cuantitativa que permite medir qu se quiere lograr y cmo hacerlo. Adicionalmente, los indicadores cualitativos son la expresin cualitativa que permite apreciar, valorar, entender los procesos y resultados del proyecto segn los sentimientos o apreciaciones de los agentes relevantes y los grupos de inters.
Para realizar la evaluacin de planes, programas y proyectos se sugiere apoyarse en ambos mtodos complementarios. De acuerdo con la informacin que se requiere, el indicador a utilizar debe ser cuanticualitativo. Por ejemplo: el seguimiento a la ejecucin presupuestal tiende a ser muy cuantitativo, mientras que la valoracin de la participacin o aceptacin de los beneficiarios, tiende a ser cualitativa. Pero al final, no hay cantidad sin cualidad ni cualidad que no se refiera a una cantidad. Ya se volver a este tema.
6.1 INDICADORES CUANTITATIVOS
Con rigurosidad se puede decir que los indicadores pertenecieron originalmente a las propuestas del mtodo cientfico cuya finalidad es la medicin. Medir para poder evaluar. Con el mtodo cientfico en el que se han sustentado los empiristas y positivistas, los indicadores cuantitativos se volvieron indicadores objetivos, referentes de mxima neutralidad y legitimidad cientfica y acadmica. A partir de ello surge regla para su construccin: No construya indicadores que ya estn construidos, use indicadores ya probados y validados por otras personas e instituciones
Por ejemplo, no es necesario construir indicadores propios de calidad de agua, pues ya existen propuestas con parmetros internacionales de valoracin para variables como:
Demanda bioqumica de oxigeno- DBO Coliformes Oxigenacin
Pero si en los bancos de indicadores no existen indicadores para los que se requiere evaluar, entonces se hace necesario formularlos, construirlos. Como los indicadores son los patrones de valoracin que permiten evaluar la dinmica de las variables, caractersticas o elementos de la unidad de anlisis a evaluar, se hace indispensable en los procesos de construccin de indicadores distinguir las variables tangibles o de fcil observacin de las variables intangibles o de menor visibilidad. Sean las unas o las otras, ambas requieren de la formulacin de indicadores para su seguimiento y evaluacin.
6.1.1 Indicadores de variables tangibles
Cuando las variables son visibles como por ejemplo cuando se hace referencia a talleres realizados, personas capacitadas o viviendas con servicios pblicos, se entra a formular directamente el indicador desde las propuestas cuantitativas, conjugando los siguientes tres elementos:
13
Dimensin o Nmero de (#) o Porcentaje de (%) Sujeto Atributo
La triloga anterior encuentra un ejemplo simple en nmero de profesores actualizados.
En este mdulo se resalta la complementariedad de los mtodos. Es por ello que la propuesta de construccin de indicadores de variables tangibles desde los aspectos dimensin, sujeto y atributo debe ser complementada con elementos ms cualitativos, orientados concretamente a establecer las especificaciones del sujeto-atributo. La primera tcnica para construir indicadores de variables tangibles, combina lo cuantitativo (nmero de, porcentaje de) con lo cualitativo (caractersticas y especificaciones), surgiendo as la idea de Indicadores cuanticualitativos. De igual forma es necesario diferencia el indicador o patrn de medicin de la meta, en la cual se especifica una cifra (cuanto) y la fecha en la que se lograr dicho sueo o deseo (cuando), tal como se muestra en el siguiente ejemplo:
FIGURA CUATRO INDICADOR - META
TIPO DE DIMENSION SUJETO ESTADO FINAL CUNTO CUANDO
Absoluta Nmero de Relativa Porcentaje, tasa
Personas Espacios Instituciones Procesos
Lo logrado
Cantidad a conseguir
Fecha de terminacin
PORCENTAJE DE
PROFESOR ES
ACTUALIZADOS En nuevas tcnicas de evaluacin En pedagogas ldicas En procesos participativos.
50 %
Diciembre de 2014 _________ Fuente: Elaboracin propia. INDICADOR META 14
En muchos casos es necesario normalizar el indicador con el fin de que pueda ser comparado con otros grupos y regiones, por ejemplo
Tasa de mortalidad materna X 100. 000 habitantes
Ahora bien, desde algunas versiones del Marco lgico (Ver Figura Cinco), por ejemplo la que utiliza GIZ o el BID, el concepto Indicador tiene unas implicaciones un poco diferentes. En el marco lgico el indicador es similar al concepto objeto-meta de la propuesta anterior, y en su formulacin debe establecerse al menos la respuesta para cinco preguntas
Cunto Quines Qu Cundo Caractersticas
FIGURA CINCO
INDICADOR TIPO MARCO LGICO
INDICADOR
CUNTOS
QUINES
QU
CARACTERISTICAS
CUNDO
Nmero o porcentaje
Personas Espacios Instituciones Procesos
Lo logrado
Requerimientos
Fecha de terminacin
50 %
De profesores
Formados En nuevas tcnicas de evaluacin En pedagogas ldicas En procesos participativos.
A diciembre de 2014 _________ Fuente: Elaboracin propia.
15
6.1.2. Indicadores de variables intangibles
Pero no todas las variables son tan visibles y tan tangibles como determinar el nmero de Profesores actualizados. A menudo se necesita evaluar variables menos tangibles como lo es la calidad de vida, para lo cual se cuenta con al menos dos tcnicas, dos propuestas para hacer tangible lo intangible, para hacer visible lo invisible.
Primera tcnica
En un primer momento se sugiere una tcnica proveniente de metodologas de investigacin que desglosan las categoras en variables y stas en indicadores. La segunda tcnica es ms descriptiva (intuitiva?) y permite determinar en primera instancia sntomas o manifestaciones que materializan las variables intangibles. Un elemento central en el tema de sistema de indicadores, desde variables poco tangibles es, al igual que en toda propuesta de investigacin, una vez delimitado el tema o unidad de anlisis, se requiere la definicin de los conceptos bsicos pertinentes al mismo. En muchos casos los conceptos o unidades del pensar (Sartori,1984:65) son abstractos, poco probable de ser valorados empricamente en forma directa y requieren ser desglosados en unidades de anlisis temticas o categoras y estas a su turno en sus variables o caractersticas correspondientes, permitiendo as formular los indicadores individuales e integrarlos a un sistema de indicadores, con los cuales construimos datos-informacin que nos permita observar directamente y comprender los conceptos bsicos, en este caso de las polticas pblicas que se desea evaluar, bien sea desde el exante desde el durante o desde el expost.
Para tal efecto es necesario establecer el objeto a estudiar y generar nociones o definiciones para diferenciarlos de otros objetos de estudio y poder as seleccionar y delimitar la unidad de anlisis a evaluar. Se requiere, en primera instancia, tener muy claro los conceptos claves relevantes y pertinentes del objeto de estudio para lo cual se puede definir los conceptos como se vienen haciendo en los diferentes manuales y diccionarios que constituyen, en palabras de Kuhn en su obra La estructura de las revoluciones cientficas (1962) los paradigmas. De todas formas, con conceptos ya usados por otras personas, o relativamente novedosos siempre es necesario construir participativamente la nocin o significado para nuestro glosario o referente conceptual pues la acepcin es distinta por cultura y/o historia.
Es fundamental aclarar que en cualquier caso existe la necesidad de repensar continuamente algunos conceptos, aun cuando el rea temtica tenga o no un desarrollo histrico de importancia. Una vez delimitado el tema a evaluar y definido el concepto o los conceptos pertinentes se entra a un proceso de operacionalizacin del mismo para poder observar o medir el concepto, entendiendo por medicin el establecimiento de criterios de observacin y clasificacin, no necesariamente cuantificables, de acuerdo con la presencia o ausencia de ciertas caractersticas del concepto que se quiere valorar. (Perea, et.al., 1999:18). Este flujo o proceso es lo que se denomina la Operacionalizacin del concepto, para lo cual es necesario establecer instrucciones y criterios claros para poderlo verificar, para lo cual la Figura Seis permite visualizar dicha operacin.
16
FIGURA SEIS
OPERACIONALIZACIN DEL CONCEPTO
_________ Fuente: Elaboracin propia.
La anterior ruta metodolgica podra visualizarse con el siguiente ejemplo: FIGURA SIETE
_________ Fuente: Elaboracin propia.
rea temtica o Unidad de anlisis Concepto Unidades de observacin o categoras analticas Propiedades, caractersticas o variables Indicadores Metas
OBJETIVO: Mejorar calidad de vida de las familias beneficiarias del proyecto.
CATEGORA: Calidad de vida
VARIABLES: Educacin, Salud.
INDICADORES: o Tasa de escolaridad o Tasa de morbimortalidad 17
Segunda tcnica.
Otra tcnica de construccin de indicadores que facilita la conversin en tangibles y visibles de las variables intangibles e invisibles, propone establecer sntomas o manifestaciones de la variable que permitan, mediante la descripcin, hacerla tangible y construir desde all los indicadores respectivos, tal como se ejemplifica en la Figura Ocho.
FIGURA OCHO
_________ Fuente: Elaboracin propia.
En la siguiente figura (Figura Nueve) se ejemplariza a modo de resumen los indicadores de resultado (impacto, efecto, producto) as como los indicadores de gestin (actividad, talento humano, recurso fsico y presupuesto).
OBJETIVO: Mejorar la credibilidad de la organizacin CATEGORA: Credibilidad DESCRIPTORES, SNTOMAS, MANIFESTACIONES: o Nmero de contratos ao, o Nmero de alianzas configuradas, o Nmero de redes, a que se pertenece, o Nmero de procesos con otras instituciones, o Nmero de grupos interinstitucionales a que se pertenece.
INDICADORES: Nmero de robos da Nmero de atracos semana Nmero de violaciones mes o Nmero de secuestros trimestre Porcentaje de familias con vivienda propia.
18
FIGURA NUEVE EJEMPLO RESUMEN INDICADORES
_________ Fuente: Elaboracin propia.
6.1.3 Ficha tcnica
Una vez se han formulado los indicadores cuantitativos, es necesario abrir un archivo o ficha tcnica que recoja, como en una hoja de vida u hoja de registro, todos los elementos fundamentales e importantes para el indicador y su seguimiento y evaluacin respectivos, tal como se visualiza en la Figura Diez.
La ficha se inicia precisando cada uno de los tems que constituyen la ficha tcnica del indicador. Para ello, se configura el nombre del indicador a partir de la triloga Dimensin- Sujeto-Atributo. Por ejemplo: Porcentaje de profesores rurales actualizados, grado de Coliformes en el agua, nmero de hectreas reforestadas, porcentaje de nias/nios que consultan por EDA (enfermedad diarreica aguda). A su vez, cada indicador est asociado con una tipologa: de resultado (impacto, efecto, producto) o de gestin (actividad, recurso humano, recurso fsico, recurso financiero).
INDICADOR DE IMPACTO: Calidad de vida. Tasa de mortalidad y morbilidad infantil. Tasa de escolaridad promedio Ingresos familiares
INDICADOR DE EFECTO: % de las viviendas de la regin con servicio de agua potable
INDICADOR DE PRODUCTO: La comunidad cuenta con planta de purificacin en 12 meses (Porcentaje de avance de la obra).
ACTIVIDAD: Tanque de almacenamiento construido en el tercer mes.
INDICADOR DE RECURSO HUMANO: Horas/ maestro de obra
INDICADOR DE RECURSO FSICO: Nmero de bultos de cemento utilizados.
INDICADOR DE RECURSO FINANCIERO: Grado de ejecucin presupuestal. 19
FIGURA DIEZ FICHA TCNICA DEL INDICADOR
NOMBRE DEL INDICADOR: Porcentaje de profesores rurales actualizados. CDIGO RPO1 TIPO: Impacto
Efecto
Producto X Actividad
R. Humano R. Fsico R. Financiero DEFINICIN DEL INDICADOR: De los profesores de la regin cuntos quedaron actualizados. OBJETIVO DEL INDICADOR: Para hacerle seguimiento al objetivo relativo a actualizar profesores. CARACTERSTICAS, CUALIDADES O ESPECIFICACCIONES TCNICAS: Profesores actualizados en procesos de evaluacin cognitiva, pedagogas activas y tcnicas de utilizacin de TIC; que participaron en los talleres sobre esos temas y fueron capaces de responder por lo menos el 80% de las preguntas en el examen correctamente UNIDAD DE MEDIDA: Profesores UNIDAD OPERACIONAL: Nmero de profesores actualizados dividido por nmero total de profesores vinculados al proyecto. PERIODICIDAD: Trimestral COBERTURA: Municipio FUENTE DE INFORMACIN: Secretario Acadmico INSTRUMENTO DE RECOLECCIN: Registro de Secretara Acadmica 032 VERIFICADOR: Actas de graduacin RESPONSABLE DEL ACOPIO: Director-a del grupo RESPONSABLE DEL REGISTRO: Secretario-a de oficina RESPONSABLE DEL INDICADOR: Director-a del colegio.
_________ Fuente: Elaboracin propia.
Una vez se nombre y se clasifique el indicador se precisa la definicin del indicador, establecindose aqu la nocin que se tiene sobre el indicador formulado. Ejemplo: Qu se entiende por tasa de mortalidad infantil, tasa de escolaridad o hectreas reforestadas? Complementariamente se debe esclarecer el objetivo del indicador, es decir, su utilidad para el grupo evaluador (ntese que en este contexto no refiere al objetivo de la intervencin, sino del indicador que se est formulando). Ejemplo: Para hacerle seguimiento a los diferentes orgenes epidemiolgicos de la regin.
20
Luego, se deben determinar las cualidades o caractersticas del sujeto y el atributo del que habla el indicador. Por ejemplo se deben identificar cules sern las caractersticas de una hectrea reforestada; cules sern las cualidades de un profesor rural actualizado en cultura ambiental. Adicionalmente, se debe establecer tanto la unidad de medida como la unidad operacional. La primera se refiere a en qu unidad se expresa el indicador: das, adultos, hectreas. La segunda refleja qu operacin aritmtica hay que hacer para construir el dato aplicando el indicador: Porcentaje de hectreas reforestadas = total hectreas reforestadas / total hectreas en la micro cuenca (%).
La periodicidad y la cobertura son otros dos componentes de la ficha tcnica del indicador, donde se establece cada cunto ste se aplica y en qu mbito o espacio debe aplicarse. Igualmente, la ficha tcnica recoge tres componentes esenciales: la fuente u origen de la informacin cuando ste es secundario, y el instrumento de recoleccin cuando es informacin primaria. Para ambos casos se formula un verificador que de fe de la informacin recopilada. Por ltimo, se nombra tanto la persona que es responsable de recoger la informacin como de registrarla, as como el nombre, o nombres de las personas que utilizarn el indicador en sus anlisis.
6.2 INDICADORES CUALITATIVOS
Los indicadores cualitativos son expresiones de las caractersticas que permiten apreciar, valorar, evaluar transformaciones mediante la recoleccin de opiniones, valores o apreciaciones sobre lo evaluado.
El monopolio de los indicadores cuantitativos, por parte de las disciplinas cientficas, es cuestionado en la actualidad por tratar de explicar y dinamizar la realidad de pases, pueblos y regiones, bajo estrictas concepciones cuantitativas. Las crisis ambientales, sociales, polticas, econmicas, organizacionales han permitido que cientficos sociales aporten a discusiones y propuestas relativas a la evaluacin desde la formulacin de indicadores cualitativos, lo cual ha ampliado la forma de mirar, estudiar e interpretar diferentes realidades desde distintas perspectivas ampliando la comprensin de estudiosos y analistas.
Para tal efecto se distinguen dos variantes bien definidas:
Indicadores de calidad Escalas de valoracin
6.2.1 Indicadores de calidad
Los indicadores de calidad son acuerdos, pactos, estndares preestablecidos, que como condiciones mnimas dan cuenta de los requerimientos para ser considerado algo de calidad, tal es el caso de las normas ISO, as como los indicadores de acreditacin y certificacin utilizados por las agencias. En el caso de la evaluacin de polticas, programas y proyectos se aconseja en la actualidad utilizar estos indicadores de calidad para precisar las especificaciones tcnicas de resultados, recursos, componentes agentes y agencias relevantes a la propuesta de intervencin. A continuacin se ilustra este tipo de indicadores. 21
FIGURA ONCE INDICADORES CUALITATIVOS
- DE CALIDAD - - ISO 26.000-
- Responsabilidad Social - Ambiental
_________ Fuente: Elaboracin propia.
6.2.2 Indicadores de escala - cualitativos
En este mdulo se entiende por escala la sucesin de elementos diferentes pero del mismo tipo. Desde las ciencias sociales se impulsan las escalas como parmetros vlidos de valoracin de polticas, programas, proyectos y procesos.
Se distinguen dos clases de escalas: de Nivel y de Grado. En una escala de nivel los elementos que constituyen la escala mantienen un orden de menor a mayor; de aceptable a ptimo (ordinal). Complementariamente, una escala de grado no es secuencial, aunque s lleva un orden de valoracin, corresponde al conjunto de requerimientos que deben cumplirse a cabalidad pero no necesariamente en un orden secuencial, pues estar en un escaln no requiere haber pasado previamente por los anteriores. A continuacin se establecen ejemplos especficos:
La organizacin controla la contaminacin causada por equipos, maquinaria y vehculos propios o de terceros y/o sus servicios.
La organizacin realiza acciones que buscan reducir sus impactos ambientales negativos, resultantes de sus actividades o procesos.
La organizacin desarrolla un programa de manejo de residuos slidos, reutilizacin y reciclaje.
La organizacin tiene polticas para el manejo eficiente de recursos no renovables.
La organizacin ha incluido la proteccin del medio ambiente en su sistema de gestin. 22
FIGURA DOCE
ESCALA - NIVEL
_________ Fuente: Elaboracin propia.
FIGURA TRECE ESCALA - GRADO
_________ Fuente: Elaboracin propia.
Indicador: Nivel de confianza Las personas del grupo comparten una visin comn de organizacin y territorio. Las personas plantean sus ideas abiertamente en el grupo. Las personas conversan de sus problemas con algunas personas del grupo. Las personas no comunican sus anhelos y sentimientos en el grupo.
Indicador: Grado de aceptacin El grupo preside o coordina una red o programa interinstitucional. El grupo participa en comits de veedura. El grupo promueve actividades con otras instituciones. El grupo es invitado a reuniones. 23
FIGURA CATORCE ESCALA COMBINADA
_________ Fuente: Elaboracin propia.
7. UTILIZACIN DE LOS INDICADORES
Al establecerse el indicador, del tipo que ste sea, automticamente se permite la comparacin, en un momento dado entre el valor original (status), el valor proyectado (meta) y el valor de la variable al momento del corte o anlisis (resultado). Estas comparaciones son indispensables a la hora de hacer seguimiento o evaluar polticas y programas.
Desde all, un indicador debe utilizarse al menos en tres momentos especficos: Status, estndares o registros Meta Resultado
Indicador: Grado de autonoma financiera Genera ingresos propios (ptimo, aceptable, deficiente).
Diversifica fuentes de financiacin (ptimo, aceptable, deficiente).
Cuenta con un sistema contable (ptimo, aceptable, deficiente)
NOTA: Se requiere concertar previamente entre los participantes qu se entender por ptimo, aceptable y deficiente 24
FIGURA QUINCE
UTILIZACION DL INDICADOR
_________ Fuente: Elaboracin propia.
Status, estndares o registros. Aqu se establece el valor de las variables, aplicando el indicador correspondiente antes de iniciarse la propuesta. Es la situacin sin poltica, programa o proyecto que denominan los planificadores. A este nivel de anlisis el indicador permite establecer los valores de las variables relevantes que dan origen a una radiografa del estado inicial de la regin, del grupo, de la unidad de anlisis; es decir, del problema o situacin que se quiere resolver, surgiendo as la lnea de base.
Meta. Es el valor de la variable proyectado al momento de formularse los objetivos. Es la situacin con que denominan los planificadores. Aqu los indicadores toman valores proyectados, fijando las metas del plan, programa, proyecto que se pretende lograr en un perodo especfico.
Resultado. Es el valor de la variable una vez se terminaron las tareas, las actividades, los cronogramas. Corresponde al concepto de despus de utilizado por los planificadores. Este valor de la variable permite el examen de la ejecucin de una actividad o de la terminacin de un plan, programa o proyecto, analizando que las entregas de los insumos, los INDICADOR
RESULTADO Valor despus de
Situacin Final
META Valor con
Situacin Deseada STATUS ESTANDAR REGISTRO Valor sin
Situacin Inicial
GRADO DE CUMPLIMIENTO (R / M)
25
calendarios de trabajo, los presupuestos, las tareas y los resultados esperados se dan conforme a las metas establecidas en concordancia con un plan de accin trazado.
La comparacin de los valores de las variables ya sea como status, como meta o como resultado, permite adelantar procesos de evaluacin, evidenciando los desempeos, avances, resultados, posibilidades futuras, imperfecciones y en general aspectos relevantes del cumplimiento de los objetivos de desarrollo, de los objetivos generales y especficos as como de las responsabilidades y tareas de cada agente responsable. Al comparar los valores proyectados (metas) con los obtenidos (resultados) permite construir el Grado de Eficacia, es decir, el grado de cumplimiento de de planes, programas y proyectos. Est dada por la relacin porcentual entre las metas propuestas y los resultados obtenidos. Complementario a este concepto es el de Grado de Puntualidad entendido ste como la relacin porcentual que existe entre el tiempo programado y el tiempo real. Tanto los conceptos de Efectividad como de Puntualidad permiten arribar a un concepto ms preciso de Grado de Eficacia. Eficacia es hacer lo que hay que hacer a tiempo, en concordancia con los estndares de calidad preestablecidos. Ahora bien, adems de los Indicadores de Resultado se tienen los Indicadores de Gestin los cuales permiten dar razn del Grado de Eficiencia entendiendo por esto el grado de utilizacin de los recursos para la consecucin de los objetivos. Tal como se expres anteriormente, los Indicadores de Gestin recogen informacin a dos niveles A nivel de procesos A nivel de recursos Ser eficiente a nivel de procesos es cumplir las metas intermedias y finales utilizando los mtodos y procedimientos que se establecieron para el cumplimiento de los objetivos. Cumplir con las actividades pertinentes a tiempo para obtener los resultados, con el grado de calidad tanto de resultados como de recursos, es lo que se debe establecer a nivel de su eficiencia para polticas, programas y proyectos, esto es: Hacer las cosas como hay que hacerlas, en los tiempos, costos y recursos requeridos y programados. A este nivel es importante puntualizar y desmoronar el mito metodolgico de que al momento de formular un indicador es obligatorio establecerlo siempre como una relacin entre dos variables. Este si es el caso cuando se refiere a grado o porcentaje, por ejemplo: Grado de eficacia (Resultado/Meta), o igualmente Porcentaje de participacin femenina en las elecciones (total mujeres que votaron/total de votantes). En el caso, por ejemplo de Votacin Femenina este indicador se construye con la sumatoria del total de mujeres que votaron. En el primer caso es Porcentaje de, en el segundo caso es Nmero de. Los indicadores basales pueden ser de ambos casos, en seguimiento y evaluacin expost siempre sern expresados por una razn matemtica: lo ejecutado o alcanzado sobre lo programado o asignado.
26
8. INTERPRETACIN DEL DATO
En este mdulo se entiende por dato una observacin que viene expresada en una medida de magnitud, con sus atributos y cualidades, obtenida de la aplicacin de un indicador. Hasta ahora la utilizacin de los indicadores ha arrojado unos datos bsicos (grados de eficacia y eficiencia), que dimensionan no solamente los productos entregados a tiempo, sino tambin el cumplimiento de los requerimientos preestablecidos para ellos.
Para poder interpretar bien ese dato es necesario hacer la distincin entre grado y nivel, desde propuestas cuantitativas (no cualitativas, que, tal como se estableci anteriormente tiene otra connotacin) El dato que arroja la utilizacin de un indicador de producto es el grado de eficacia, es decir, qu porcentaje de lo deseado se cumpli. A ese grado de cumplimiento es necesario darle una primera interpretacin mediante la aplicacin de escalas o niveles que permitan ponderar el dato.
Los planes, programas y proyectos son ms o menos eficaces y eficientes en concordancia con unos patrones de comparacin previamente establecidos. Se pueden utilizar muchos tipos de escalas de comparacin. A continuacin se sugieren algunas de ellas (Ver Figura diecisis), que reflejan un vaco inmensurable en el texto y un espacio importante para desarrollos conceptuales y metodolgicos apoyados en herramientas cualitativas.
FIGURA DIECISEIS INTERPRETACIN DEL DATO
NIVEL GRADO Resultado % Meta
ROSTRO
COLOR
CALIFICACIN
MUY EFICAZ
MUY EFICIENTE
1
VERDE
PTIMO
EFICAZ
EFICIENTE
> . 7 y >.9
AMARILLO
ACEPTABLE
INEFICAZ
DEFICIENTE
>. 2 y >.7
ROJO
DEFICIENTE
ESTANCADO
< . 2
CAFE
CRTICO
_________ Fuente: Elaboracin propia.
27
9. NDICES
Hasta ahora se ha trabajado bsicamente con indicadores simples, en una direccin unidimensional y en una relacin nica entre variable e indicador. Cuando se quiere agrupar a varios indicadores o dimensiones en un solo valor se est hablando entonces de indicadores complejos o ndices los cuales contienen diferentes indicadores simples pertinentes a un concepto macro o de mayor grado de agregacin. Tal es el caso por ejemplo del ndice de inflacin, del ndice de calidad de vida, del ndice de desarrollo humano. En todos estos casos el ndice es un indicador de indicadores y en un mismo valor se aglutinan dos o ms valores en una medida nica, permitiendo sintetizar diferentes variables en un solo dato. Lo anterior facilita una mayor comprensin de procesos econmicos, sociales, ambientales, polticos, culturales, organizacionales que son complejos por naturaleza, es decir, estn constituidos por diferentes dimensiones, aristas y posibilidades.
A travs de la aplicacin de indicadores simples se obtiene un conjunto de valoraciones parciales lo cual es til y pertinente, pero igualmente puede interesar el congregar dichas mediciones parciales en una sola, sobre todo cuando se tiene un concepto nico y genrico como es el caso del desarrollo, el bienestar, la sostenibilidad, la dignidad humana. En estos casos los ndices generan la medicin de un slo concepto, de una categora nica que sintetiza diferentes variables en un solo resultado. Desde all se puede precisar que los indicadores simples se relacionan con caractersticas o elementos de un concepto o categora individual o desagregada, mientras que los ndices permiten evaluar directamente el concepto aglutinante en una representacin cuantitativa nica, quedando as claro que conceptualmente indicadores e ndices no representan lo mismo y reflejan anlisis macro o generales (ndices) o micros y desagregados (indicadores).
Lo anterior puede ejemplarizarse desde la medicin del concepto de desarrollo en un grupo o comunidad utilizando el ndice de desarrollo humano, el cual est constituido por al menos tres indicadores simples:
Tasa de morbilidad infantil Tasa de escolaridad Porcentaje de familias con salario mnimo/mes
Los ndices, como el ndice desarrollo humano, pueden ser sujetos de ponderacin o no. De hecho, para valorar el desarrollo humano de un grupo o comunidad se puede hacer, en primera instancia, estudiando la dinmica de indicador por indicador y centrando la mirada en los valores que cada uno de los indicadores simples van tomando a travs del proceso, o compararlos con datos arrojados por la lnea de base para cada caso. De igual forma pueden agruparse en un ndice complejo ponderado donde se agregan los indicadores teniendo en cuenta la importancia o el peso especfico de cada indicador en el ndice o concepto final o agregado. (Quiroz, 2011).
El procedimiento de otorgar pesos especficos diferentes o grados de importancia a cada uno de los indicadores simples que componen el ndice puede hacerse en forma dialgica, 28
concertada y participativa llegando a acuerdos sobre el grado de importancia de cada indicador en el ndice construido. Matemticamente tambin puede llegarse a los procesos de ponderacin mediante el anlisis de regresin mltiple y utilizar los coeficientes obtenidos.
BIBLIOGRAFA BSICA
Quintero, Victor Manuel (2013) Gua de estudio del mdulo Construccin De Indicadores. ReLAC
Departamento Nacional De Planeacin (2009). Gua metodolgica para la construccin de indicadores. Bogot, Colombia www.dnp.gov.co
BIBLIOGRAFIA COMPLEMENTARIA
Cohen, Ernesto y Franco, Rolando (1992). Evaluacin de proyectos sociales. Siglo XXI. Santaf de Bogot.
Kliksberg, Bernardo (2011). Escndalos ticos. Buenos Aires
Ministrio do Planejamento, Oramento e Gesto. Secretaria de Planejamento e Investimentos Estratgicos (Maro de 2010). Indicadores de Programas. Guia Metodolgico. Braslia/DF. Brasil
Max-Neef, Manfred (1986). Desarrollo a escala humana: una opcin para el futuro. CEPAUR - Fundacin Dag Hammarskjold. Planeta. Bogot.
Mendoza, Benjamn (2004). Formulacin de Indicadores y Modelo de Seguimiento. Direccin General de Evaluacin. Madrid, Espaa
Pattanaik, Prasanta (1999). Indicadores culturales del bienestar: algunas cuestiones conceptuales. En: Informe mundial sobre la cultura. Unesco.
Quintero, Vctor Manuel (2013). Poltica Pblica e Indicadores Culturales. Feriva, Cali,
________ (2010). Impacto Social. Evaluacion de Proyectos de Desarrollo. Feriva: Cali. _______ (2008). Evaluacin y aprendizaje organizacional. Texto para el Curso Aprendizaje y Cambio Organizacional del Instituto Latinoamericano para el Desarrollo Social-INDES,
29
_______ (2002). Evaluacin de proyectos sociales. Construccin de Indicadores. 4 ed. Fundacin Fes. Cali.
Quiroz, Soledad (2009). Construccin de Indicadores. Ayuda Audiovisual. Diplomado de Evaluacin de Programas y Proyectos. Convenio ReLAC - FLACSO Chile
RedEAmerica (2006). Sistema de evaluacin del desarrollo de base. Bogot.
Riquelme, Luis (2006). Indicadores de Calidad y Eficiencia del Estado. Universidad de Chile. Santiago - Chile
Sartori, Giovanni. Morlino, Leonardo (1994). La comparacin en las ciencias sociales. Madrid: Alianza Editorial.
Sen, Amartya. (2010). La idea de la justicia. Editorial Penagos. Mxico.
_______ (2006). Desarrollo y libertad. 8 ed. Planeta: Bogot.
Vos, Rob (1995). Hacia el mejoramiento del sistema de indicadores sociales para Amrica Latina. Institute of Social Studies y Banco Interamericano de Desarrollo BID, Washington,