Академический Документы
Профессиональный Документы
Культура Документы
Importancia de la Evaluacin
La evaluacin es una disciplina que, mediante el anlisis crtico, sistemtico y la consulta a las partes interesadas, contribuye a mejorar las acciones de un programa o proyecto social.
La informacin es un elemento fundamental para la toma acertada de decisiones, por tanto, es imprescindible contar con informacin de calidad que permita valorar y medir resultados.
Por lo tanto, el proceso de construccin de indicadores se debe entender dentro de un proceso estratgico, que implica un desarrollo dinmico, manteniendo un balance adecuado entre los diferentes tipos de indicadores, con el objeto de establecer la relacin entre los medios y los fines.
Datos
Informacin
Los datos se convierten en informacin cuando aportan significado, relevancia y entendimiento, en un tiempo y lugar especfico.
FUENTE: Gua para Diseo, Construccin e Interpretacin de Indicadores .El Departamento Administrativo N acional de Estadstica (DANE) http://www.dane.gov.co
Tendencia generalizada a medirlo todo implica entender la medicin como un simple proceso de recoleccin de datos. Una adecuada medicin deber contar con las siguientes caractersticas: Ser pertinente Ser precisa Ser oportuna Ser econmica
Determinar el estado del arte de una intervencin de acuerdo con: su cronograma o temporalidad, sus metas o resultados el uso de recursos, tanto monetarios como de otro tipo.
Para dar cuenta de la evolucin de la ejecucin de un programa
Definicin de Indicador
(1) Babbie E. The practice of social research. Wadsworth Publishing Co. Belmont. 1986 (2) Quintero Uribe Vctor Ml. Evaluacin de Proyectos Sociales. Construccin de indicadores. Fundacin FES. Colombia. 1996.
Otras Definiciones
Medidas objetivamente verificables de hechos y acontecimientos econmicos y sociales. Constituye la medicin del resultado generado en la intervencin atribuible al programa o proyecto. (3)
Es la evidencia que facilita la medicin de los resultados, o de lo que se espera alcanzar, en un programa o proyecto . Estos resultados estn referidos a los "cambios logrados" por la intervencin y pueden considerarse los "productos" generados por el programa o proyecto. El indicador es un criterio que permite evaluar ese cambio.
(3) Picado G., Xinia; HACIA LA ELABORACIN DE INDICADORES DE EVALUACIN Universidad de Costa Rica; www.tsu.ucr.ac.cr , 1997
Un indicador es una expresin cualitativa o cuantitativa observable, que permite describir caractersticas, comportamientos o fenmenos de la realidad a travs de la evolucin de una variable o el establecimiento de una relacin entre variables, la que comparada con perodos anteriores, productos similares o una meta o compromiso, permite evaluar el desempeo y su evolucin en el tiempo. (4)
(4) Gua para Diseo, Construccin e Interpretacin de Indicadores .El Departamento Administrativo Nacional de Estadstica (DANE) http://www.dane.gov.co
Efectuar seguimiento a los planes, programas y proyectos que permita tomar los correctivos oportunos y mejorar la eficiencia y eficacia del proceso en general
Caractersticas de un Indicador
Funcionalidad
Disponibilidad
La informacin disponible?
Confiablidad
Utilidad
est Verificar que existe la informacin o se puede obtener por medio de un nuevo procedimiento De dnde provienen los Analizar si las fuentes cumplen datos? con estndares de calidad y disponen de la informacin requerida El indicador es relevante Valorar que los resultados para lo que quiero medir? permitan tomar decisiones
Segn Medicin
Segn Jerarqua
Segn Calidad
De impacto
De resultado De producto
Jerarqua de Objetivos
Tipologa de indicadores
Demanda de graduaciones.
Nmero de estudiantes Encuesta que no pueden ingresar Plan Anual a la carrera deseada. Presupuestario. Nmero de cursos Control de Cupos en subutilizados. registro Nmero de carreras con pocos estudiantes. Promedio de Boletas de graduacin. graduacin de las Encuesta. carreras para cada grado. Nmero de graduados ubicados en el mercado por ttulo universitario.
Capacidad Intelectual
Indicadores de eficiencia
Mide el grado de cumplimiento de un objetivo, sin considerar los recursos asignados Ejemplos:
Porcentaje de becas entregadas en relacin a las programadas Reduccin de la tasa de reprobacin de clculo 1
Indicadores de calidad
Mide atributos, capacidades o caractersticas del bien o servicio que se provee Ejemplo:
Grado de satisfaccin Tiempo de respuesta a las demandas de los usuarios
Indicadores de eficacia
Mide la relacin entre los productos y servicios generados con los recursos utilizados Ejemplo:
Costo promedio por alumno atendido Solicitudes tramitadas por funcionario
Indicadores de sostenibilidad
Mide la capacidad del programa de generar o movilizar recursos Ejemplo:
Ingresos adicionales al presupuesto asignado generado Contribucin del trabajo voluntario en el presupuesto global
Construccin de Indicadores
Nivel Bsico
Aclarando conceptos
Indicador ndice Sistema de Indicadores Sistema de seguimiento (Interrogantes a travs del tiempo) Sistema de evaluacin (Interrogantes en un momento estratgico)
Ejemplos
Indicador Indice Sistema de indicadores
Educacin
(INDICADORES)
PIB pr cpita
ndice de alfab.
ndice de la TBM
ndice de educacin
Sistema de indicadores
http://www.mideplan.go.cr/sides/social/index .htm
Condiciones Institucionales
Polticas Estratgicas Procesos Mecanismos Herramientas
Aplicacin Prctica
Criterios de xito
Ejercicio 1
Ejercicio 2
Defina el objetivo estratgico. Construya la lnea de intencin para este objetivo estratgico. Seleccione el nivel de valoracin Construya las interrogantes de valoracin Defina las categoras de valoracin
Ejercicio 2
Objetivo estratgico Nivel de valoracin Interrogante
Categoras
Proceso de operacionalizacin
Indicador variable Indicador
Categoria
Indice
Anlisis conceptual
Anlisis operativo
Indicadores de eficacia
Mide el grado de cumplimiento de un objetivo, sin considerar los recursos asignados Ejemplos:
Porcentaje de becas entregadas en relacin a las programadas Reduccin de la tasa de reprobacin de clculo 1
Indicadores de calidad
Mide atributos, capacidades o caractersticas del bien o servicio que se provee Ejemplos:
Grado de satisfaccin Tiempo de respuesta a las demandas de los usuarios
Indicadores de eficiencia
Mide la relacin entre los productos y servicios generados con los recursos utilizados Ejemplo:
Costo promedio por alumno atendido Solicitudes tramitadas por funcionario
Indicadores de sostenibilidad
Mide la capacidad del programa de generar o movilizar recursos Ejemplo:
Ingresos adicionales al presupuesto asignado generado Contribucin del trabajo voluntario en el presupuesto global
Otros ejemplos
Segn marco lgico Indicadores de fin Indicadores de propsito Indicadores de componentes Indicadores de actividades
Indicadores predefinidos
Indicadores ms frecuentes
Indicador ms usados
Porcentajes
Cobertura: Porcentaje de cursos impartidos por profesores interinos Focalizacin: Porcentaje de cursos impartidos por profesores interinos que tiene un nivel de aprobacin superior a 80% Calidad: Porcentaje de estudiantes satisfechos con el proceso de registro en lnea
Tasa de variacin
Comparacin histrica: Tasa de variacin en la inversin en equipo tecnolgico en los ltimos cinco aos
Indicadores frecuentes
Razn o promedio
Tiempo promedio de graduacin de un estudiante de medicina Promedio de estudiantes asignados a un profesor de estudios generales
Indices
Indice
Mezcla ponderada de indicadores
Liderago
Comunicacin Orientacin (O) Consenso (Co) Liderazgo: C*0,50 + O*0,3+Co*0,2
Construccin de indicadores
Nombre del Indicador: Indicador Componentes Frmula Unidad de Criterio de medida valoracin Disponibilidad del medio de verificacin
Existe la informacin? Es posible producirla? La relacin costo beneficio es positiva?? Se puede sustituir por otro componente en caso de que sea muy caro o imposible producirlo?
Construccin de indicadores
Nombre del Indicador: Comp onent es Fuente Frecuen cia Respons Procesam Usuario able iento Frecuenci a de reporte A quien se reporta
Funcionalidad
Disponibilidad
Confiablidad
Utilidad
Funcionalidad
Disponibilidad
Confiabilidad
Utilidad
Ejercicio 4
Realice con sus pares una valoracin de uno de los indicadores construidos.
Red de Observatorios de Buenas Prcticas de Direccin Estratgica Universitaria en Amrica Latina y Europa
Actividad Conferencias programadas. Almuerzo Presentacin del Proyecto TelescopiCosta Rica a cargo de la Magister Maritza Monge, Directora de la Oficina de Planificacin de la Universidad de Costa Rica. Presentacin de la agenda de trabajo Presentacin de participantes. Actividad Colectiva: Intercambio de experiencias sobre sistemas de indicadores y buenas prcticas en las Universidades costarricenses. Experiencia de UCIMED, Universidad Libre de Derecho y Universidad para La Paz Refrigerio Continuacin de la Actividad Colectiva. Intercambio de experiencias sobre sistemas de indicadores y buenas prcticas en las Universidades costarricenses. Experiencia de la Universidad de Costa Rica y EARTH Retos, factores de xito y buenas prcticas Exposicin plenaria.
2253.1339 2253.1439
1: 30 pm a 2:40 pm
2: 40 pm a 3: 00 pm 3:00 pm a 4: 00
4: 00 pm a 4: 40 pm 4:40 pm a 5:00 pm
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Tiempo Actividad 8:00 am a 8:30: 00 Introduccin a los indicadores am conceptos bsicos 8:30 am a 10:00 am 10:00 am a 10:20 pm 10:20 am a 11:30 am 11:30 am 12:00 12: 00 md a 1: 00 pm 1: 00 pm a 3: 00 pm 3: 00 pm a 3: 20 pm 3: 20 pm a 4: 30 pm 4:30 pm a 5:00 pm Construccin de Indicadores presentacin y ejercicios colectivos Refrigerio Construccin de Indicadores presentacin y ejercicios colectivos Museo de ejercicios colectivos. Almuerzo Ejercicio: Construccin de indicadores universitarios Refrigerio Ejercicio: Sistema de indicadores universitarios Exposicin plenaria
Cmo est funcionando actualmente? Cules son los factores de xito que pueden identificar en el desarrollo del Sistema? Cules son los retos que deben de afrontar?
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Primer da Ejercicio: Intercambio de experiencias sobre sistemas de indicadores y buenas prcticas en las universidades costarricenses.
Elementos tiles
Principales retos
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Qu son productos, efectos e impactos? Productos Los ms evidentes y fciles de ubicar que son los resultados, son los que se obtienen como consecuencia inmediata de la accin que se ejecuta. Se refiere a los bienes y servicios entregados por las organizaciones. Efectos Los efectos son los que se obtienen a consecuencia del uso del bien o servicio sobre la poblacin beneficiada, se encuentran en segundo nivel despus de los resultados, por lo que son ms difciles de identificar y modifican el entorno en el que se desenvuelve el grupo. Impactos Los impactos representan una modificacin en la forma de vida del grupo y son permanentes y duraderos a travs del tiempo. Tambin son difciles de identificar y se pueden valorar hasta que la accin ha pasado por algn tiempo. Los impactos estn relacionados con los cambios en la tendencia histrica debido a la ejecucin de la accin, plan, programa o proyecto y son de mayor alcance que los efectos.
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Ejercicio 1: Caminos vecinales, creando una lnea de intencin. A continuacin identifique segn el caso que se desarrolla, si la oracin describe un producto, un efecto o un impacto. CASO: En un proyecto de caminos vecinales ubique los siguientes resultados en productos, efectos e impactos de la construccin de un camino vecinal. 10 kilmetros de camino de lastre construido Hay un incremento del nmero de estudiantes que viajan al colegio Hay un incremento del nivel educativo en la comunidad Los servicios de salud se hacen ms accesibles para la comunidad Los habitantes de las comunidades por donde pasa el camino vecinal visitan otras comunidades Sistema de irrigacin desarrollado Un tercio de las familias han aumentado su nivel de ingresos Se han mejorado los niveles de salud de la comunidad 3 puentes artesanales funcionando Se han generado nuevos negocios en la comunidad como ventas de comida, pequeas tiendas, etc 5 kilmetros de cao en buen estado El transporte pblico ingresa dos veces por da a la comunidad Hay una mayor interaccin cultural entre comunidades vecinas El personal de salud ingresa con regularidad a la comunidad Las personas de la comunidad tienen mayores fuentes de ingreso
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Ejercicio 1.
Ubique en la lnea de intencin l Resultados Efectos Impactos
Ejercicio 2.
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com 2253.1339 2253.1439
Nivel
Interrogante
Categora
Variables
SubVariables
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Ejercicio 3
Defina los indicadores para el punto de valoracin indicado en el ejercicio 2 Nivel Interrogante Categora Variables Indicadores Comparativo
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Ejercicio 4.
Realice con sus pares el anlisis de uno de sus indicadores.
Indicador
Decisin
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Ejercicio 5
Defina las condiciones de operacionalizacin de alguno de los indicadores. Nombre del Indicador:
Componentes Fuente
Frecuencia
Responsable
Procesamiento
Usuario
Frecuencia de reporte
A quien se reporta
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Bibliografa consultada
Camacho, Kemly. (2007) Tesis por optar por el grado de Maestra en Evaluacin de Programas y Proyectos de Desarrollo. Diseo para la evaluacin de la poltica de admisin de la Universidad Nacional. Sistemas de estudios de posgrado. Universidad de Costa Rica, San Jos. Costa Rica. Departamento Administrativo Nacional de Estadstica (DANE). s.a. Herramientas estadsticas para una gestin territorial ms efectiva. Libro nmero dos de la Gua para Diseo, Construccin e Interpretacin de Indicadores. Bogot, Colombia. Consultado en: http://www.dane.gov.co/files/planificacion/fortalecimiento/cuadernillo/Guia_construccion_ interpretacion_indicadores.pdf. Escuela Virtual para Amrica Latina y el Caribe, RBLAC-PNUD. Qu es in indicador y para qu sirve? Diapositivas de apoyo al Curso de desarrollo humano local con activos de ciudadana. Consultado en: http://www.escuelapnud.org/cgibin/files/library_file.pl? tbl=documents;pk=1443;name=q_esun_indicador_paraq_sirve_pps.ppt. Jimnez M., Roberto. s.a. Construccin de indicadores de desempeo y establecimiento de metas. Diapositivas de apoyo al curso Planificacin estratgica y construccin de indicadores de desempeo en organismos pblicos. CEPAL. Consultado en: http://www.cepal.org/ilpes/noticias/paginas/1/33541/ConstrucciondeIndicadoresymetas.ppt Montero, Eiliana. Presentacin en power point. ENFOQUES METODOLGICOS PARA LA EVALUACIN DE IMPACTO. Montero, Eiliana. Presentacin en power point. INDICADORES PARA LA EVALUACIN DE IMPACTO DE PROGRAMAS DE POBLACIN, SALUD Y NUTRICIN. Picado, Xinia. (1997). Hacia la elaboracin de indicadores en evaluacin. Consultado en: http://www.ts.ucr.ac.cr/binarios/docente/pd-000088.pdf Rico, M. y Gmez-Limn, J. A. 2011. Propuesta metodolgica para la construccin de indicadores sintticos de igualdad de gnero. El caso del medio rural de Castilla y Len. Revista Internacional de Sociologa (RIS), vol. 69, n 1, enero-abril. Crdoba, Espaa. Consultado en: http://revintsociologia.revistas.csic.es/index.php/revintsociologia/article/viewArticle/362.
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439
Rodrguez Jaume, M. J. 2000. Construccin de los indicadores e ndices sociales. Captulo 4 de Modelos socio-demogrficos. Atlas social de la ciudad de Alicante, Vol. 1. Universidad de Alicante, Alicante, Espaa. Consultado en: http://rua.ua.es/dspace/bitstream/10045/3925/1/Rodr%C3%ADguez%20Jaume,%20M %C2%AA%20Jos%C3%A9.%20t.1.pdf. Sistema de Indicadores sobre Desarrollo Sostenible del Ministerio de Planificacin Nacional, Costa Rica. Consultado en: http://www.mideplan.go.cr/sides/social/index.htm
Elaborado por la Cooperativa Sul Bats. Telfonos +506 2253.1326 San Jos, Costa Rica info@sulabatsu.com
2253.1339
2253.1439