METODOLOGA PARA GENERAR

UN SISTEMA DE INDICADORES

Autor: Cristiano Buizza

CONSTRUIR INDICADORES
(DE DESEMPEO)

Base seguimiento procesos

Recopilacin sistemtica

Datos en forma de
indicadores (cuali-cuanti)

Fuente: Elaboracin propia

Valor promedio (o mediano)

de la variable para todos los
casos missing.

- Sesga la distribucin final;

- Subestima verdadera varianza

Se pone el valor del

parmetro que deriva de una
regresin

Indicadores
categoriales/dicotmicos
regresin logstica (binomial,
ordinal o multinomial).

Regresin estocstica /
Imputacin mltiple
Mtodos ms sofisticados;
Presencia trmino de error
balancean
tendencia
a
subestimar error estndar;
Simulacin produce varios data
base Parmetro y intervalo
confianza

Fin Primer Da

ESTANDARIZACIN DE LOS
INDICADORES.

Transformar los
indicadores
equivalentes:
Set de indicadores con
unidad de medida
diferente
Transformar
Cada variacin
unitaria variables es
equivalente

Estandarizacin de las
variables:

Promedio = 0
Desviacin Estndar = 1.

Disminuye peso valores extremos

(outliers).
Sigue mayor influencia de las
variables con valores extremos
Solucin con el mtodo MinMax.

Mtodo Min-Max:

Pro:
con
muchos
valores
extremos
range siempre entre 0 y 100.
Contra: Infla el range de las
variables que varan pocos
aumenta peso

Proporcin / Porcentaje
respecto a un valor de
referencia:

Modifica variables originales =

Proporcin o porcentaje respecto
a valor de referencia

- Promedio de todos los casos

- Pas Referencia
- Objetivo planteado

Valor en base a la distancia

respecto referencia
1 (o 100) cuando unidad =
referencia

COMBINAR LAS DIMENSIONES

Y LOS INDICADORES

Desempeo del Sistema de

Compras Pblicas
Dimensiones
Dimensiones Variables
(Indicadores)

Agregar Dimensiones y
Variables en nico Indicador

antes agregacin
A) Establecer naturaleza Datos
B) Error Estndar

Datos Censo VS Datos

Muestra
De Censo = Todos los
contratos
De Muestra = Seleccin
contratos antes anlisis
Mejor o Datos de Censo o
Datos de Muestra

Nmero

Valor
Promedio

Datos de Censo

Valor
Esperado

Distribucin

Error Estndar
e Intervalo
Confianza

Datos de Muestra

Desafos Datos de Muestra

Considerar Intervalo
Confianza
Mezcla Puntuales y con Error
Estndar
Muestreo Aleatorio
Datos Sesgados
Simple o Estratificado
Listado Completo
Probabilidad Asociada

Objetivos: Juicio
Desempeo
desde
caractersticas
contratos

Datos
Objetivos
VS
Percepcin

Percepcin:
Juicio
Desempeo
desde opinin
poblacin

Desafos Datos de Percepcin

Experiencia Personas
Diferente importancia
Dimensiones de las personas
Mtodo de agregacin de las
personas
Cmo agregar percepcin
con contratos?

Importancia Dimensiones y
Indicadores:
Peso Importancia de cada
Variable y Dimensin

Endgena
Exgena

ENDGENA

Peso Variables y
Dimensiones deriva de los
Datos
Pesos definidos con
tcnicas estadsticas (PCA,
FA)

EXGENA

Peso Variables y
Dimensiones deriva de
literatura, opinin
Ms utilizados Tcnicas
ms sencillas

Pesar de manera diferente

Indicadores y Dimensiones

Garantizar recursos y
esfuerzos hacia Indicadores con
mayor peso
Afectan ms resultado final.

Mtodos Endgenos:
Anlisis de Componente
Principales
Modelos con Variable
Latente
Objetivo: Asociacin entre
Variables por la dependencia
comn hacia Factores Latentes
(Dimensiones).

 PCA y MVL agrupan

Indicadores en base correlacin
en factores latentes nuevos

Factores capturan la mayor

cantidad de informacin comn a
los Indicadores.

Modelos con Factor Latente

Opinin de expertos
(Mtodo de Budget
Allocation):
Preguntas dirigidas
mediante encuesta a los
expertos
Objetivo: distribuir budget
de 100 puntos entre
Indicadores y Variables
Pesos calculados como promedio
de las respuestas

Distribucin del "budget" por sub-mbito

Transparenci Competenci

Eficacia Eficiencia
a
a
Total
Experto
1
25
23
31
21
100
Experto
2
17
55
11
17
100
Experto
3
33
42
18
7
100
Promedi
o
25
40
20
15
100
Pesos asociados a cada sub-mbito

Competenci

Eficacia Eficiencia Transparencia

a
Total
Experto
1
0.25
0.23
0.31
0.21
1
Experto
2
0.17
0.55
0.11
0.17
1
Experto
3
0.33
0.42
0.18
0.07
1
Promedi
o
0.25
0.40
0.20
0.15
1

despus Definicin Pesos

Agregar la informacin.

Mtodos de agregacin
principales
Mtodo aditivo:
Mtodo geomtrico:

Ejemplo:
-Modelo con 4 Dimensiones
-Diferentes Indicadores de igual
peso
ICp

FACTORES DE CONTEXTO (O
DE RIESGO) QUE PUEDEN
INFLUIR SOBRE:
- NIVEL DESEMPEO,
- COMPARACIN ENTRE
PASES

Factores de Contexto
PIB
Deuda
Variacin precios insumos
Caractersticas mercado
demanda y oferta
Definir y observar con Sistema
de Indicadores de Desempeo

Antes comparar resultado pases

considerar caractersticas de
contexto:
Sistema infraestructuras
existente ya desarrollado o
con carencias
Sistema empresas con mayor
experiencia o conocimiento
Menor presencia extranjeros
Gestin y control centralizado VS
Descentralizacin

Solucin
Agrupar pases similares
Comparar dentro cada
grupo
Agrupacin en base a
variables significativas
Clster Anlisis o
Distancia de Mahalanobis
tcnicas para definir
distancia entre pases