Академический Документы
Профессиональный Документы
Культура Документы
PBLICAS COMPARADAS
2012-2013
Metodologa II
Primera Parte
Bibliografa 21
1
Descripcin General de la Materia
Objetivo
2
Bibliografa obligatoria
Bibliografa optativa
Geddes, Barbara (2003), Paradigms and sand castles: Theory building and
research design in comparative politics. Ann Arbor: University of Michigan
Press.
3
Parte I. Inferencia Causal
4
1.1. El problema de la inferencia causal
Existen distintas alternativas que se nos podran ocurrir. Una de ellas es definir si
los estudiantes beneficiarios rebasaron un determinado umbral. Otra es comparar
el desempeo de los estudiantes beneficiarios con el de los no beneficiarios. Pero
vale la pena detenerse un momento a reflexionar antes sobre qu implica la
afirmacin La poltica educativa tuvo un impacto positivo sobre el desempeo
escolar.
Bien pensada, esta afirmacin no dice que el desempeo es alto. Nos hace
sentido pensar que la poltica pudo haber tenido un impacto positivo, an si no se
rebasa determinado umbral. De la misma forma, si las condiciones de los no
beneficiarios de la poltica son distintas a las de las condiciones de los
beneficiarios, es posible que existan diferencias entre ambos grupos aunque la
poltica haya sido exitosa. Asimismo, el cambio en el nivel de desempeo
registrado antes y despus de la implementacin de la poltica podra resultar
engaoso si las condiciones de los beneficiarios tambin cambiaron.
1
Se utiliza el ejemplo de la poltica pblica, pero lo que se dice en esta seccin vale para cualquier
estudio en el que se pretenda evaluar el efecto de la variable independiente X sobre la variable
dependiente Y.
5
hiptesis es correcta, entonces el valor de Y en las unidades en las que X est
presente debe ser mayor, en promedio, al valor que tendra Y, en las mismas
unidades, si X hubiese estado ausente.
6
El estudio de caso es una estrategia equivocada porque utiliza una sola
observacin. Supongamos que mi problema de investigacin surge de notar que el
nivel de pobreza en Bangladesh es inferior al que cabe esperar dado su bajo nivel
de desarrollo. Supongamos que decido hacer un estudio del caso que llam mi
atencin y nicamente estudio este pas. En Bangladesh hay una alta densidad de
organismos no gubernamentales trabajando en proyectos comunitarios. Podra
concluir que la profusin de organismos no gubernamentales tiene un impacto
negativo sobre los niveles de pobreza.2 El problema con esta conclusin es que,
en sentido contrafctico, implica que, con una menor cantidad de ONGs en
Bangladesh, habramos observado un mayor nivel de pobreza al que
efectivamente se presenta. Sin embargo, el estudio de caso, por diseo, no
proporciona ninguna informacin sobre la condicin contrafctica. Sin esta
informacin, no podemos descartar la posibilidad de que Bangladesh tendra el
mismo nivel de pobreza si no hubiese ONGs. A esto hay que aadir que el estudio
de caso carece de valor terico. Con una sola observacin, es imposible
determinar qu aspectos del problema son sistemticos (es decir, generales a los
pases con bajos niveles de desarrollo) y qu aspectos son absolutamente
idiosincrticos (es decir, nicamente vlidos para un lugar y momento especficos).
Por lo tanto, el estudio de caso no puede ser til para efectos de la validacin
emprica de una hiptesis.
2
Esta hiptesis, con la misma forma de razonar, es manejada por The Economist, 3 de noviembre
de 2012.
7
Supongamos que se desea determinar el efecto de la inversin pblica en ciencia
y tecnologa sobre la innovacin, medida como patentes registradas. Una forma
tpica de seleccin por la variable dependiente consiste en estudiar casos de
xito. Digamos que se estudian los 10 pases con mayor nmero de patentes y se
observa que tambin tienen niveles muy altos de inversin pblica en ciencia y
tecnologa. Puedo hacer inferencias sobre el efecto causal? Una vez ms, no
sera apropiado. No tenemos informacin sobre el nivel de patentes que tendran
esos pases si la inversin en ciencia y tecnologa hubiese sido inferior.
Finalmente, los pases con inversin pblica en ese rubro son pases con recursos
excedentes importantes, y podra ser que los recursos excedentes generados por
el sector privado sean invertidos en sus departamentos de investigacin y
desarrollo. Cmo sabemos que es una la causa y no la otra? En cualquier caso,
la comparacin en la perspectiva contrafctica debe ser tal que nos informe sobre
cmo seran los casos si la variable independiente hubiese tenido otro valor
distinto al observado. Por lo tanto, necesitamos garantizar que habr suficiente
variacin en la variable independiente (sin atender al valor de la variable
dependiente).
8
asocian con menores niveles de desempeo. Entonces, si el grupo de
beneficiarios es al mismo tiempo marginal, los no beneficiarios no proporcionan
informacin sobre la condicin contrafctica. Como los no beneficiarios tambin
son ms aventajados desde el punto de vista socioeconmico, no nos sirven para
hacernos una idea de cul sera el desempeo de los beneficiarios si no hubiese
existido el programa.
3
Seguramente habrs escuchado la expresin correlacin no es causalidad. Lo que sigue explica
de dnde sale esta expresin.
9
correlacin entre X y Y es espuria. El diagrama 1 expresa la forma en que se dan
las correlaciones espurias. Las flechas indican la existencia de una relacin
causal. Ntese que las flechas van de Z a X y de Z a Y. Aunque no existe una
relacin causal entre X y Y, la mutua asociacin con Z hace que se muestren
como correlacionadas y que parezca que tienen una asociacin directa. Por eso,
en la literatura nos referimos a los factores simbolizados con Z como variables
confusoras.
X = Tratamiento Y = Resultado
Z = Variables
confusoras
10
Diagrama 2. Correlacin parcial
X = Tratamiento Y = Resultado
Z = Variables
confusoras
Qu significa esto? Si quiero estimar el efecto del rgimen poltico sobre los
niveles de pobreza, comparar democracias con no democracias es una mala
estrategia porque las no democracias son a la vez menos desarrolladas que las
democracias, y esto puede ser la causa de las diferencias en los niveles de
pobreza. Tengo que comparar a las democracias con no democracias, para tener
variacin en la variable independiente, pero no con todas las no democracias, sino
slo con aquellas no democracias que son similares. Similares en qu sentido?
En los valores de las variables confusoras. As, las democracias deben ser
comparadas con el subconjunto de las no democracias que son similares en
cuanto al nivel de desarrollo y otras causas de la democracia que podran estar
11
relacionadas con el nivel de pobreza, como la escolaridad de la poblacin, la
desigualdad del ingreso, la tasa de crecimiento econmico y el nivel de
democracia de los pases vecinos.
4
En sentido estricto, los dos grupos deben ser iguales en cuanto al valor esperado de la variable
de resultado a partir del valor observado en las variables confusoras.
12
Parte II. Mtodos y tcnicas de investigacin
Anlisis de regresin
13
las X y el Producto Interno Bruto por poblacin en edad de trabajar5 en el eje de
las Y. Los datos corresponden a 133 pases en el ao 2005. Cada punto
representa la ubicacin de un pas a partir de la combinacin de valores que
presenta en las dos variables. Las observaciones son colocadas por orden
ascendente de la variable independiente, lo que nos permite observar qu pasa
con la variable dependiente (si aumenta su valor, o si disminuye o si se mantiene
ms o menos igual) a medida que el valor de la variable independiente va
aumentando.
5
Se trata de un indicador de productividad. Los datos son transformados a escala logartmica.
14
encontrar en la variable dependiente (PIB por trabajador) para un valor
determinado de la variable independiente (escolaridad).
Lo deseable es que el coeficiente nos diese una estimacin del efecto causal de
X sobre Y. Sin embargo, la regresin simple, con una sola variable independiente,
no puede arrojar esto. Las razones ya deberan ser claras. En esa asociacin no
se toma en cuenta el efecto de otras posibles causas. Por ejemplo, un
determinante de la productividad es el nivel de inversin de capital. Los recursos
de inversin tambin pueden ser usados para la formacin de capital humano. La
asociacin entre escolaridad y PIB por trabajador podra reflejar (al menos en
parte) la relacin entre inversin y escolaridad.
Supongamos que nos interesa el efecto del rgimen poltico sobre la pobreza. Una
regresin en la que la nica variable independiente fuese si el rgimen es
democrtico o no arrojara resultados que no pueden ser tomados como
15
conclusivos, por las razones ya expuestas. Sin embargo, podemos hacer un
anlisis de regresin mltiple aadiendo variables de control para escolaridad de
la poblacin, la desigualdad del ingreso, la tasa de crecimiento econmico y el
nivel de democracia de los pases vecinos. El nuevo coeficiente para la variable
democracia va a descontar el efecto del resto de las variables.6
6
Por ejemplo, cuando se incluye una variable de inversin de capital a la regresin de escolaridad
sobre PIB por trabajador, el coeficiente de escolaridad resultante es bastante ms reducido que el
arrojado por la regresin simple.
16
El procedimiento funciona as. Supngase que queremos evaluar el efecto de la
poltica educativa para que los estudiantes de zonas marginadas incrementen su
nivel de desempeo educativo. Se inicia obteniendo la probabilidad de participar
en el programa a partir de las caractersticas de los estudiantes que, segn las
reglas de la poltica, son observadas para definir quin es beneficiario y quin no.
En el caso de nuestra poltica hipottica, estas caractersticas pueden ser la zona
de residencia, el ingreso familiar y los bienes del hogar. Tambin sera
conveniente aadir otros determinantes de la marginacin y el desempeo
escolar, como la escolaridad de los padres y su oficio. Con estas variables, que
son las confusoras, se obtiene una probabilidad de participacin que adquiere
valores de cero a uno. Esta probabilidad es el ndice de propensin.
17
Se dir, razonablemente, que es imposible incluir factores que se ignora que
existen. Sin embargo, existen tcnicas para descontar el efecto de variables no
observadas. Aqu presentaremos dos.
Efectos fijos
Si se tienen diversas observaciones para cada unidad de anlisis, los datos tienen
una estructura de panel, y es posible sacar provecho de esa situacin para la
inferencia causal. Se tiene un panel, por ejemplo, cuando nuestra unidad de
observacin es el pas y para cada pas se tienen distintas mediciones de las
variables tomadas en el tiempo, como puede ser el nivel del PIB per cpita, la
inflacin, la poblacin etc. Otra variante, para un mismo momento en el tiempo,
consiste en que cada unidad se compone de unidades en un nivel inferior, como
cuando tenemos estudiantes agrupados en escuelas o trabajadores agrupados en
empresas.
Con los datos dispuestos de esta forma, es posible obtener estimaciones precisas
para hiptesis causales, an sin tener observaciones para determinadas variables
confusoras. Por ejemplo, podemos estimar el efecto del capital humano sobre la
productividad obteniendo ms observaciones de los mismos pases para distintos
aos. Se realiza una regresin similar a la que mostramos en el ejemplo, pero
ahora incluyendo una variable que indique a qu pas corresponde el dato (una
para cada pas). En la conocida como regresin con efectos fijos, las variables que
indican pertenencia del dato al pas ocupan el papel de todas las caractersticas
que distinguen a los pases entre s, que son constantes para las observaciones
de un mismo pas y que pueden influir sobre la variable dependiente. Por lo tanto,
aunque no se tengan observaciones sobre esas variables confusoras especficas,
y aunque no se conozca siquiera su existencia, su efecto ser descontado al
estimar el coeficiente para escolaridad. Recurdese que en la investigacin no
tenemos un inters sustantivo en el efecto de las variables confusoras;
nicamente deseamos controlar por su efecto.
18
Un procedimiento similar aplica cuando se registran distintas observaciones en
distintos momentos del tiempo. En este caso, se puede estimar el efecto del
cambio (esto es, la diferencia entre un ao y otro) en la variable independiente
sobre el cambio en la variable dependiente. Este mtodo se conoce como la doble
diferencia. En este caso no hace falta controlar las variables que permanecen
constantes al interior de cada unidad: como por definicin permanecen constantes
en el tiempo, no puede tener efecto con una variable que cambia en el tiempo. De
esta forma, la asociacin de los factores estructurales es descontado del efecto
causal de la variable independiente sobre la de resultado, sin necesidad introducir
observaciones para estas variables.
19
travs de X) no existen factores confusores que pudieran influir a travs del
instrumento.
20
Bibliografa
Geddes, Barbara. Paradigms and sand castles: Theory building and research
design in comparative politics. Ann Arbor: University of Michigan Press,
2003.
Gerring, John. What is a case study and what is it good for? American Political
Science Review 98, n 2 (2004): 341-54.
21