Qu queremos decir por recolectar informacin?

Esencialmente, recolectar informacin significa poner su diseo para recolectar informacin en accin. Usted ha decidido cmo usted va a obtener informacin ya sea por medio de observacin directa, entrevistas, encuestas, experimentos y evaluaciones, u otros mtodos y ahora usted y/u otros observadores tienen que implementar su plan. Sin embargo, todava hay ms que recolectar. Si ustedes estn llevando a cabo observaciones, por ejemplo, usted tiene que definir qu est observando y programar para hacer las observaciones en los momentos indicados, as usted puede realmente observar lo que usted necesita. Usted tiene que registrar las observaciones de maneras apropiadas y organizarlas para que as ellas sean lo ms tiles posibles. El documentar (registrar) y organizar la informacin puede tomar diferentes formas. Eso depende del tipo de informacin que usted est recolectando. La manera en que usted recolecta su informacin deber estar relacionada a cmo usted est planeando analizarla y usarla. Dejando de lado el mtodo que usted decida usar, documentar debe hacerse simultneamente con la recoleccin de informacin si es posible, o muy pronto despus, para que as nada se pierda y la memoria de lo que se observ no se vuelva borrosa. Algunas de las cosas que usted podra hacer con la informacin que usted recolecta incluye: Recolectar informacin de todas clases de fuentes y observaciones. Hacer fotocopias de todos los formularios, registros, grabaciones de audio y vdeo, y cualquier otro tipo de material recolectado para prevenir cualquier prdida o eliminacin accidental de informacin, u otra clase de problema. Digitalizar los relatos, nmeros, y otra informacin y guardar en un programa de computacin, donde ellos puedan ser organizados y/o pueden ser utilizados en diversas maneras. Llevar a cabo cualquier operacin matemtica o similar necesaria para tener la informacin cuantitativa lista para el anlisis. Estas podran, por ejemplo, incluir ingresar observaciones numricas en un diagrama, tabla, u hoja de clculo, o calcular la media (promedio), la mediana (valor que ocupa el lugar central), y/o la moda (valor ms repetido) de un set de nmeros. Transcribir (hacer una versin exacta palabra por palabra de) los contenidos de las grabaciones de audio o vdeo. Codificar informacin, particularmente informacin cualitativa que no est expresada en nmeros, de una manera que permita ser procesada por un programa especfico de software o puede ser sometido a un anlisis estadstico.) Organizar la informacin de manera que sea ms fcil de trabajar. Cmo lo haga depende del diseo de su investigacin y sus preguntas de evaluacin. Usted podra agrupar las observaciones con base a la variable dependiente (indicador de xito) al cual ellos se relacionan, por los individuos o grupos de participantes, por el tiempo, por la actividad, etc. Usted podra tambin agrupar las observaciones en diferentes maneras, as usted puede estudiar interacciones entre las diferentes variables. Existen dos tipos de variables en investigacin. Una variable independiente. Una variable independiente (la intervencin) es una condicin implementada por el investigador o comunidad para ver si eso crear un cambio o mejora. Esto podra ser un programa, mtodo, sistema u otra accin. Una variable dependiente es lo que puede cambiar como resultado de la variable independiente o la intervencin. Una variable dependiente podra ser un comportamiento, resultados/beneficios, u otra condicin. Un programa para dejar de fumar, por ejemplo, es una variable independiente que puede cambiar el comportamiento de los miembros del grupo hacia el fumado, la variable dependiente primaria.

Qu queremos decir por analizar informacin?

Analizar informacin incluye examinarla de maneras que muestran las relaciones, patrones, tendencias, etc. que puedan ser encontradas. Eso podra significar el someterlo a operaciones estadsticas que puedan mostrarle no solo qu tipos de relaciones parecen existir entre las variables sino a qu nivel usted puede confiar en las repuestas que usted est obteniendo. Eso podra significar comparar su informacin con la de otros grupos (un control o un grupo de comparacin, figuras a nivel estatal, etc.), para ayudar a sacar conclusiones de la informacin obtenida. El punto, en trminos de su evaluacin, es el obtener una evaluacin/valoracin precisa con el objetivo de entender de mejor manera su trabajo y sus efectos en aquellos por los cuales usted est preocupado, o con el propsito de entender de mejor maneras la situacin a nivel general. Existen dos tipos de informacin con la cual usted est propenso a trabajar, aunque no todas las evaluaciones necesariamente incluirn ambos. Informacin cuantitativa se refiere a la informacin que es recolectada como, o puede ser transformada en, nmeros, lo cual puede ser mostrado y analizado matemticamente. Informacin cualitativa es recolectada como descripciones, ancdotas, opiniones, citas, interpretaciones, etc. y son generalmente o no capaces de ser reducido a nmeros, o considerados ms valiosa o informativa si es dejada como un relato (narrativamente). Como usted podra esperarse, la informacin cuantitativa y la cualitativa necesitan ser analizadas de diferente forma. 1. Informacin cuantitativa. Como hemos mencionado, la informacin cuantitativa es recolectada normalmente directamente como nmeros. o o o o La frecuencia (ndice, duracin) de los comportamientos o condiciones especficas Puntuaciones de pruebas (ej., puntuaciones/niveles de conocimientos, habilidad, etc.) Resultado de encuestas (ej., comportamiento reportado, o consecuencias de las condiciones ambientales; ndices de satisfaccin, estrs, etc.) Nmeros o porcentajes de las personas con ciertas caractersticas en una poblacin (diagnosticados con diabetes, sin empleo, hispano-hablantes, menores de 14 aos de edad, nivel educativo completado, etc.) La informacin puede tambin ser recolectada en formas diferentes de la numrica, y ser convertido en informacin cuantitativa para el anlisis. Los investigadores pueden contar el nmero de veces que un evento es documentado en las entrevistas o registros, por ejemplo, o asignarle nmeros a los niveles de intensidad de un evento o comportamiento observado. Por ejemplo, las iniciativas comunitarias a menudo quieren documentar la cantidad e intensidad de los cambios ambientales que ellos promueven los nuevos programas y las polticas que surgen como resultado de sus esfuerzos. Si esta clase de conversin es necesaria o til depende de la naturaleza de lo que usted est observando y en los tipos de preguntas que su evaluacin necesita responder. La informacin cuantitativa es usualmente sometida a procedimientos estadsticos como calcular la media o promedio de veces que un evento o comportamiento ocurre (por da, mes, ao). Estas operaciones, debido a que los nmeros son informacin slida y no se interpreta, pueden dar respuestas definitivas, o cercanas a ser definitivas a diferentes preguntas. Varios tipos de anlisis cuantitativo pueden indicar cambios en una variable dependiente relacionada a frecuencia, duracin, momento (cuando el asunto particular pas), intensidad, nivel, etc. Ellos pueden permitirle comparar esos cambios con otros, los cambios en otra variable o cambios en otra poblacin. Ellos podran ser capaces de decirle, en un grado particular de fiabilidad, si esos cambios son propensos a ser causados por su intervencin o programa, o por otro factor, conocido o desconocido. Y ellos pueden identificar relaciones entre las diferentes variables, lo cual puede o no significar que uno causa el otro.

2. Informacin cualitativa. Diferente de los nmeros o datos rigurosos, la informacin cualitativa parece ser blanda, lo que quiere decir que no puede ser siempre reducida a algo definido. Eso es en algunas maneras una debilidad, pero es a su vez una fortaleza. Un nmero puede decirle cun bien sali un estudiante en una prueba (examen); la expresin en su cara despus de ver su nota, sin embargo puede decir mucho ms acerca del efecto del ese resultado en su vida. Esa expresin no puede ser traducida por un nmero, ni lo puede hacer el conocimiento del maestro acerca de la historia, progreso, y experiencia del estudiante, todo lo cual termina en la interpretacin del maestro de esa expresin facial. Y esa interpretacin puede ser ms valiosa en ayudar a la superacin del estudiante que saber la nota o la puntuacin numrica de la prueba. Como explicamos anteriormente, la informacin cualitativa puede ser muchas veces convertida en nmeros, usualmente al contar el nmero de veces que situaciones especficas ocurren en el curos de observaciones o entrevistas, o al asignar nmeros o ndices a dimensiones (ej., importancia, satisfaccin, facilidad del uso). Los retos de traducir datos cualitativos en cuantitativos tienen que ver con el factor humano. An si la mayora de las personas estn de acuerdo con lo que 1 (ms bajo) o 5 (ms alto) significa con respecto a los ndices de satisfaccin con un programa, los ndices 2, 3 y 4 pueden ser muy diferentes para diferentes personas. Adems, los nmeros no dicen nada acerca de por qu las personas reportaron de la manera que lo hicieron. Uno pudo no gustarle el programa debido al contenido, el facilitador, la hora del da, etc. De igual manera puede ser cierto cuando usted est contando los momentos que fue mencionado un evento, tal como al comienzo de una nueva poltica o programa en una comunidad basada en entrevistas o registros de archivo. Donde una persona pueda ver un cambio en el programa que l considera importante otra persona puede omitirlo debido a que es percibido no importante. Los datos cualitativos pueden algunas veces decirle cosas que los datos cuantitativos no pueden. Eso puede revelar el por qu ciertos mtodos estn trabajando o no, si parte de que se est haciendo entra en conflicto con la cultura del participantes, lo que los participantes ven como importante, etc. Eso puede tambin mostrar patrones en comportamiento, ambiente fsico y social, u otros factores que los nmeros en sus datos cuantitativos no y ocasionalmente an identifica variables que los investigadores no estuvieron conscientes. Es a menudo til recolectar tanto la informacin cuantitativa y cualitativa. Para ms informacin, ver Captulo 3, Seccin 15:Mtodos cualitativos para evaluar asuntos comunitarios , y Seccin 6: Recolectar y analizar informacin etnogrfica. El anlisis cuantitativo es considerado a ser objetivo sin ningn prejuicio humano adherido a ldebido a que depende de la comparacin de nmeros de acuerdo a clculos matemticos. El anlisis de datos cualitativos es generalmente logrado con mtodos ms subjetivos que dependen de las opiniones de las personas, su conocimiento, suposiciones, e inferencias (y por lo tanto prejuicios) que aquella llevada a cabo de los datos cuantitativos. La identificacin de patrones, la interpretacin de lo que dijo la gente u otra comunicacin, el reconocimiento de tendencia todos estos pueden ser influenciados por la forma en que el investigador ve el mundo. Est consciente, sin embargo, que el anlisis cuantitativo est influenciado por un nmero de factores subjetivos de igual manera. Lo que el investigador escoge medir, la precisin de las observaciones, y la manera que la investigacin est estructurada al preguntar solo ciertas preguntas puede todo influenciar los resultados, as como lo puede hacer el entendimiento y la interpretacin del investigador de los posteriores anlisis.

Por qu se debera recolectar y analizar informacin para su evaluacin?

Parte de la respuesta aqu es que no cada organizacin particularmente las pequeas con bases comunitarias o no gubernamentales necesitar tener recursos amplios para conducir una evaluacin formal. Ellos pueden tener que estar satisfechos con evaluaciones menos formales, las cuales pueden an ser extremadamente tiles al brindar direccin para un programa o

intervencin. Una evaluacin informal involucrar alguna recoleccin de datos y anlisis. Esta recoleccin de datos y que tenga sentido es crtico para una iniciativa y su xito futuro, y tiene un nmero de ventajas. 1. Los datos pueden mostrarse si hubo cualquier cambio significativo/importante en las variables dependientes que se esperando influenciar. La recoleccin y el anlisis de datos ayudan a ver si su intervencin produjo los resultados deseados. 2. Ellos pueden sacar a la luz factores que pueden estar asociados con cambios en las variables dependientes. Los anlisis de datos pueden ayudar a descubrir influencias inesperadas; por ejemplo, que el esfuerzo fuera dos veces tan largo para aquellos participantes que tambin eran parte del grupo de apoyo. Esto puede ser usado para identificar aspectos claves de implementacin.

El trmino importancia tiene un significado especfico cuando usted est discutiendo estadsticas. El nivel de importancia de un resultado estadstico es el nivel de confianza que usted puede tener en la respuesta que usted obtiene. Generalmente, los investigadores no consideran un resultado significativo/ importante solo si muestra por lo menos un 95% de certeza de que es correcto (llamado el nivel .05 de importancia, debido a que existe un 5% de posibilidad de que eso est equivocado.) El nivel de importancia est construido en frmulas estadsticas: una vez que se obtiene un resultado matemtico, una tabla (o el software que se est usando) le dir el nivel de importancia. As, si el anlisis de datos encuentra que la variable independiente (la intervencin) influenci la variable dependiente en el 0.5 nivel de importancia, eso significa que existe una probabilidad o posibilidad de un 95% de que su programa o intervencin obtuvo el efecto deseado. El nivel .05 de importancia es generalmente considerado un resultado razonable, y el .01 nivel (99% de probabilidad) es considerado a ser lo ms cercano a la certeza que ser puede llegar. Un 95% de nivel de certeza no significa que el programa trabaja en un 95% de los participantes, o que eso va a trabajar un 95% de las veces. Esto significa que existe slo un 5% de posibilidad que el programa no es realmente lo que est influenciando la(s) variable(s) dependiente(s) y causando los cambios que deberan estar asociados a l. 3. Ellos pueden mostrar conexiones entre varios factores que pueden tener un efecto en los resultados de su evaluacin. Algunos tipos de procedimientos estadsticos buscan conexiones (correlaciones es el trmino de investigacin) entre las variables. Ciertas variables dependientes pueden cambiar cuando otros cambian. Estos cambios pueden ser similares ej., ambas variables aumentan o disminuyen (ej., por forme la habilidad de en la lectura aumenta, la cantidad de lectura hecha por ellos tambin aumenta.) O lo opuesto puede pasar ej., las dos variables cambian en direcciones opuestas (conforme la cantidad de ejercicio que hacen aumenta, el peso de las personas disminuye). Correlaciones no significan que una causa la otra, o que ambas tiene la misma causa, pero ellos pueden brindar informacin valiosa acerca de asociaciones esperables en una evaluacin. 4. Ellos pueden ayudar a esclarecer las razones por las cuales su trabajo fue efectivo o, tal vez, no tan efectivo como usted esperaba. Al combinar los anlisis cuantitativos y los cualitativos, usted puede a menudo determinar no solo que funcion o que no, pero el por qu. El efecto de factores culturales, cun bien se estn usando los mtodos, lo apropiado que es su enfoque para la poblacin estos as como otros factores que influencian el xito pueden ser esclarecidos por la recoleccin cuidadosa de datos y su anlisis. Este conocimiento le da una base para adaptar y cambiar lo que usted hace para que sea ms factible que usted logre los resultados deseados en el futuro.

5. Ellos pueden brindar evidencia creble para mostrarle a los socios (interesados) que su programa fue exitoso, o que usted haba sacado a la luz, y tratado las limitaciones. Los socios, tal como los financiadores y las juntas comunitarias, quieren saber que sus inversiones estn siendo invertidas de la mejor manera. Al mostrar evidencia de los resultados intermedios (ej., nuevos programas y polticas) y resultados a largo plazo (ej., las mejoras en educacin o los indicadores de salud) se est volviendo ms y ms importante para recibir y mantener- la financiacin. 6. Su uso muestra que usted es serio acerca de la evaluacin y acerca de mejorar su trabajo. Ser un buen fideicomisario o administrador de las inversiones comunitarias incluye revisiones regulares de datos relacionados al progreso y a la mejora. 7. Ellos pueden mostrarle al rea de estudio lo que se est aprendiendo, y as pavimentar el camino para que otros implementen mtodos y enfoques exitosos. De esa manera, usted estar ayudando a mejorar los esfuerzos comunitarios y, ultimadamente, la calidad de vida para las personas que se benefician.

Cundo y por quin debera ser la informacin recolectada y analizada?

Al hablar de recoleccin de datos, la parte del cundo de la pregunta es relativamente simple: la recoleccin de datos debera no despus de que se comience a trabajar o antes de que usted comience con el objetivo de establecer una lnea de fondo o punto de comienzo y continuar a lo largo. Idealmente, usted debera recolectar datos por periodo de tiempo antes de comenzar su programa o intervencin con el propsito de determinar si existe alguna tendencia en los datos antes del comienzo de la intervencin. Adems, con el propsito de evaluar los efectos a largo plazo de su programa, usted debera recolectar datos posteriores (para el seguimiento) por un periodo de tiempo despus de la conclusin del programa. El momento del anlisis puede ser visto de por lo menos dos maneras: Una es que es mejor analizar su informacin cuando usted la ha recolectado en su totalidad. La otra es que si usted la analiza conforme usted la va recolectando, usted es capaz de cambiar de opinin acerca de la informacin que usted realmente necesita, y de ajustar su programa para que responda a la informacin de usted est obteniendo. El enfoque que se decida tomar depende de los propsitos de su investigacin. Si usted est ms interesado en una evaluacin sumativa encontrar si su enfoque fue efectivo, usted podra estar ms inclinado hacia la primera opcin. Si usted est orientado hacia la implementacin la evaluacin formativa nosotros recomendamos obtener informacin a lo largo del camino. Ambos enfoques son legtimos, pero la recoleccin de datos en proceso continuo y su revisin puede particularmente traer mejoras en su trabajo. El quin de la pregunta puede ser ms complejo. Si usted est razonablemente familiar con las estadsticas y los procedimientos estadsticos, y usted tiene recursos de tiempo, dinero, y personal, es probable que usted haga un estudio relativamente formal, al usar pruebas estadsticas estandarizada. (Existen muchos tipos de software tanto para comprar y gratuito o como opensource o cdigo abierto disponible para ayudarlo. Vnculos de algunos de estos recursos estn disponibles en esta seccin debajo de Recursos.) Si ese no es el caso, usted tiene algunas opciones: Usted puede contratar o encontrar a un evaluador externo voluntario, tal como los de una Universidad o institucin de estudios superiores cercana, para que se encargue de la recoleccin de datos y/o el anlisis por usted. Usted puede llevar a cabo una evaluacin menos formal. Sus resultados pueden no ser tan sofisticados como si usted lo hubiera llevado a cabo por medio de procedimientos estadsticos rigurosos, pero ellos pueden an decirle mucho acerca de su programa. Solo los nmeros el nmero de deserciones (y cundo desertan ms), por ejemplo, o las caractersticas de la gente a la que usted le sirve puede darle informacin importante y utilizable.

Usted puede tratar de aprender suficiente acerca de estadsticas y software estadsticos para llevar a cabo una evaluacin formal usted mismo. (Lleve un curso, por ejemplo.) Usted puede recolectar los datos y luego envirsela a alguien un programa universitario, un amigo o un investigador, o alguien contratado para procesarlo todo para usted. Usted puede recolectar y basarse principalmente en datos cualitativos. Si esto es una opcin depende principalmente de lo que se trate el programa. Usted no querr llevar a cabo una evaluacin formal de efectividad de un medicamento nuevo usando solamente datos cualitativos, pero usted podra ser capaz de mostrar algunas conclusiones razonables acerca de patrones de uso o cumplimiento con base en la informacin cualitativa. Si es posible, use un grupo de control al azar o uno lo ms similar al otro para compararlos. Si su control est apropiadamente estructurado, usted puede sacar algunas conclusiones bastantes confiables simplemente al comparar sus resultados con aquellos de su grupo de intervencin. De nuevo, estos resultados no sern tan confiables como si la comparacin fuera hecha usando procedimientos estadsticos, pero ellos pueden indicar si usted est en la direccin correcta. Es suficientemente fcil ver si hay o no una diferencia mayor entre los nmeros de los dos o ms grupos. Si el 95% de los estudiantes en su clase pas la prueba, y slo un 60 aquellos en un grupo similar pero no instruido pasaron, usted puede estar seguro que su clase hizo la diferencia de alguna manera, aunque usted pueda que no sea capaz de decir exactamente qu fue lo que import. De la misma manera, si un 72% de sus estudiantes pasaron y un 70% del grupo de control tambin pasaron, parece ser bastante claro que su instruccin tena esencialmente ningn efecto, si los grupos comenzaron aproximadamente en el mismo lugar. Quin debera realmente recolectar y analizar los datos depende de la manera de su evaluacin. Si usted est haciendo un evaluacin participativa, mucho de la recoleccin de datos y analizarlosser hecha por los miembros de la comunidad o los participantes del programa ellos mismos. Si usted est llevando a cabo una evaluacin en la cual la observacin es especializada, los recolectores de datos podran ser miembros del equipo de trabajo, profesionales, voluntarios altamente entrenados, u otros con habilidades o capacitacin especfica (estudiantes de maestra, por ejemplo). El anlisis tambin puede ser logrado por un proceso participativo. An donde procedimientos estadsticos complicados son necesarios, los participantes y/o los miembros de la comunidad podran ser involucrados al explicar que es lo que esos resultados realmente significan una vez que la matemtica est hecha y los resultados estn listos. Otra manera en que el anlisis puede ser logrado es por medio de los profesionales u otros individuos capacitados, dependiendo de la clase de la naturaleza a ser analizada, los mtodos de anlisis, y el nivel de sofisticacin al cual se intenta tener en las conclusiones.

Cmo recolectar y analizar informacin?

An si su evaluacin incluye procedimientos formales o informales, usted todava tiene que recolectar y analizar la informacin, y existen algunos pasos bsicos que usted puede tomar para hacerlo. 1. Implementar su sistema de medicin. En la Seccin 3 de este captulo, hemos discutido acerca de disear un sistema observacional para obtener informacin. Ahora es el momento de poner ese sistema a cabo. o Claramente defina y describa cules mediciones u observaciones son necesarias. La definicin y descripcin debera ser lo suficientemente clara para permitirle a los observantes estar desacuerdo en qu es lo que ellos estn observando y de buena fuente documentar los datos de igual manera. Seleccionar y capacitar a los observadores. Particularmente si esto es parte de un proceso participativo, los observadores necesitan capacitacin para saber qu documentar; para reconocer los comportamientos clave, eventos, y condiciones; y para alcanzar un nivel aceptable de confiabilidad interna (acuerdo entre los observadores.)

Llevar a cabo observaciones en momentos apropiados para el periodo apropiado. Esto puede incluir revisar material archivado; llevar a cabo entrevistas, encuestas, o grupos focales; enfocarse en la observacin directa, etc. Documentar los datos en las maneras acordadas. Esto puede incluir papel y lpiz, computadoras (al usar una computadora porttil u otro aparato de uso manual en el rea, ingresar nmeros en el programa, etc.), audio o vdeo, revistas, etc.

2. Organizar los datos que usted ha recolectado. La manera que usted haga esto depende de qu es lo que usted est planeando hacer con eso, y en qu se est interesado. o Ingresar cualquier dato a la computadora. Esto puede significar simplemente digitalizar los comentarios, descripciones, etc., e incluirlos en un programa de procesamiento de palabras, o al ingresar informacin variada (posiblemente incluir el audio o vdeo) a una base de datos, hoja de clculo, un programa GIS (sistema de informacin geogrfica por favor vea Captulo 3, Seccin 16 para ms informacin), o algn otro tipo de software o archivo. Transcribir cualquier audio- o cintas de vdeos. Esto los hace ms fciles para trabajar y copiar, y permite la oportunidad para aclarar cualquier segmento de diccin que sea difcil de entender. Darle una puntuacin a cualquier prueba y documente las puntuaciones apropiadamente. Clasificar su informacin en maneras apropiadas de su inters. Esto puede incluir clasificar por categora de observacin, por evento, por lugar, por individuo, por grupo, por el tiempo de observacin, o por una combinacin o algn otro estndar. Cuando sea posible, necesario, y apropiado, transforme los datos cualitativos en datos cuantitativos. Esto puede involucrar, por ejemplo, contar el nmero de veces que asuntos especficos fueron mencionados en las entrevistas, o cun a menudo ciertos comportamientos fueron observados.

o o o

3. Llevar a cabo grfica de datos, inspecciones visuales, anlisis estadsticos, u otras operaciones en los datos de forma apropiada. Nos hemos referido varias veces a los procedimientos estadsticos que usted puede aplicar a los datos cuantitativos. Si usted tiene los nmeros correctos, usted puede descubrir mucho acerca de si su programa est causando o contribuyendo a un cambio o mejora, cul es ese cambio, si existen conexiones esperadas o inesperadas entre las variables, cmo se compara su grupo con otro que usted est evaluando, etc. Existen otras posibilidades excelentes para el anlisis adems de los procedimientos estadsticos, sin embargo. Algunas de ellas incluyen: o o Conteo simple, inspeccin visual y grficos de frecuencia o ndices de comportamiento, eventos, etc., a travs del tiempo. Usar inspeccin visual de los patrones a lo largo del tiempo para identificar discontinuidades (aumentos, disminuciones marcadas) en las medidas a travs del tiempo (sesiones, semanas, meses). Calcular la media (promedio), la mediana (valor que ocupa el lugar central), y/o la moda (valor ms repetido) de una serie de medidas u observaciones. Cul fue la presin sangunea promedio, por ejemplo, de las personas que se ejercitaron por 30 minutos al da por lo menos cinco das a la semana, en contraposicin a aquellos que se ejercitaron dos das a la semana o menos? Usar entrevistas cualitativas, conversaciones, y observacin participativa para observar (y seguirle a pista a los cambios) en las personas o situaciones. Los diarios pueden ser particularmente reveladores en esta rea debido a que ellos documentan las experiencias de las personas y sus reflexiones a travs de un tiempo.

Encontrar patrones en los datos cualitativos. Si muchas personas se refirieron a problemas o barreras similares, estos pueden ser importantes en el entendimiento del asunto, al determinar qu funciona o qu no y por qu, o ms. Comparar los verdaderos resultados con las metas o puntos de referencia previamente determinadas. Una medida de xito podra ser alcanzar una meta para el planeamiento o programa de implementacin, por ejemplo.

4. Tome nota de cualquier resultado significativo o interesante. Dependiendo de la naturaleza de su investigacin, los resultados podran ser estadsticamente significativos (el 95% o mejor certeza de la que hemos discutido anteriormente), o simplemente importantes o inusuales. Ellos pueden o no ser socialmente significativos (p.ej., suficientemente grandes para resolver el problema). Existen un nmero de tipos diferentes de resultados que usted puede estar buscando. o Diferencias entre las personas o los grupos. Si usted ha repetido mediciones para individuos/grupos a travs del tiempo, podemos ver si existen aumentos/disminuciones marcadas en (la frecuencia, tipo) de comportamiento (eventos, etc.) despus de la introduccin del programa o intervencin. Cuando los efectos son vistos y solo cuando la intervencin es introducida y si la intervencin es escalonado (retrasado) a lo largo de la gente o los grupos esto aumenta nuestra certeza que la intervencin, y no algo ms, est produciendo los efectos observados. Diferencias entre dos o ms grupos. Si usted tiene uno o ms grupos de control al azar en un estudio formal (grupos que son escogidos al azar con una misma poblacin como el grupo en su programa, pero no estn recibiendo el mismo programa o intervencin, o no est recibiendo una del todo), luego la significancia estadstica de las diferencias entre los grupos debera decir si su programa tiene una alguna influencia mayor en la(s) variable(s) dependiente(s) que la que se est experimentando por los otros grupos. Los resultados que muestran cambios significativos estadsticamente hablando. Con o sin un grupo de control o de comparacin, muchos procedimientos estadsticos pueden decirle si los cambios en las variables dependientes son verdaderamente significativos (o posiblemente no lo sean debido al cambio). Estos resultados pueden decir muy poco acerca de las causas del cambio (o ellos pueden, dependiendo de cmo usted ha estructurado su evaluacin), pero ellos le dicen a usted que es lo que est pasando, y le dan un lugar para comenzar. Correlaciones. Correlacin significa que existen conexiones entre dos o ms variables. Correlaciones pueden algunas veces resaltar a relaciones importantes que usted podra no haber predicho. Algunas veces ellos pueden dar luz al asunto por el mismo, y algunas veces en los efectos de las prcticas culturales de un grupo. En algunos casos, ellos pueden realzar las causas potenciales de un asunto o condicin, y as pavimentar el camino para intervenciones futuras. Patrones. En ambos, tanto la informacin cuantitativa y cualitativa, patrones a menudo emergen: ciertas condiciones de salud parecen agruparse en reas geogrficas particulares; las personas de un grupo en particular se comportan de maneras similares; etc. Estos patrones podra no ser especficamente lo que usted est buscando o espera encontrar, pero ellos podran ser importantes por ellos mismos o sacar a la luz reas en las que usted est interesado. En algunos casos, usted podra necesitar someterlos a procedimientos estadsticos (anlisis de regresin, por ejemplo) ver si, en realidad, ellos estn al azar, o si ellos constituyen patrones reales. Descubrimientos importantes evidentes. Si es el resultado de un anlisis estadstico, o la evaluacin de sus datos y la aplicacin de lgica, algunos descubrimientos pueden resaltar. Si el 70% de un grupo de participantes con sobrepeso en un programa de actividad fsica y nutricin saludable bajan su peso y presin sangunea significativamente, comparado con solamente el 20% de un grupo similar no en el programa, usted puede probablemente asumir que el programa ha sido efectivo. Si no existe ningn cambio del todo en los resultados en educacin despus de dos aos de su programa educativo, entonces usted puede estar o llevando a cabo un programa no efectivo, o simplemente no est alcanzando a aquellos que tienen ms tendencias de tener pobres

resultados (lo cual tambin puede ser interpretado como que est llevando a cabo un programa que no es efectivo.) No todos los descubrimientos importantes necesariamente le dirn si su programa trabaja o que es el mtodo ms efectivo. Podra ser obvio para la recoleccin de datos, por ejemplo, que, mientras la violencia o las lesiones en la carretera no sea visto como un problema a nivel de ciudad, ellos son mucho ms altos en una o ms reas particulares, o que los ndices de diabetes estn marcadamente mucho ms altos para grupos particulares o para aquellos viviendo en reas con mayores diferencias de ingresos. Si usted tiene los recursos, es sabio ver los resultados de su investigacin en un nmero de maneras diferentes, ambos para encontrar cmo mejorar su programa, y aprender qu ms usted podra hacer para afectar el asunto. 5. Interpretar los resultados. Una vez que usted ha organizado sus resultados y que los revise a travs ya sea de un anlisis estadstico u otro que usted ya haya planeado, es el momento para descifrar qu es lo que significa su evaluacin. Probablemente la pregunta ms comn que la investigacin evaluativa es dirigida hacia si el programa que est siendo evaluado trabajo o hace una diferencia. En trminos de investigacin, que a menudo se traduce en Cules fue ron los efectos de la variable independiente (el programa, intervencin, etc.) en la(s) variable(s) independiente(s) (el comportamiento, las condiciones, u otros factores que se intentaba cambiar)? Existen un nmero de posibles preguntas a esta pregunta: o Su programa tuvo exactamente los efectos en las variables dependientes que usted esperado y deseaba que tuviera. Estadsticas u otros anlisis mostraron claros efectos positivos en un alto nivel de importancia para las personas en su programa y si usted us un diseo de grupomltiple ninguno o muy pocos, con los mismos efectos para un grupo de control similar y/o para un grupo que reciba una intervencin diferente con el mismo propsito. Su programa educativo en infancia, por ejemplo, grandemente aument los resultados de desarrollo para los nios de la comunidad, y tambin contribuy a un aumento en el porcentaje de los nios que mejoraron en la escuela. Su programa no tuvo efecto. Su programa no produjo resultados significativos en la variable dependiente, por s misma o al ser comparada con otros grupos. Esto significara que no hubo ningn cambio como resultado del programa o la intervencin. Su programa tuvo un efecto negativo. Por ejemplo, la violencia entre compaeros ntimos aument (o por lo menos parece ser) parte del resultado de su intervencin. (Es relativamente comn para los eventos reportados, tales como la violencia o las lesiones, que se aumente cuando la intervencin resulta en una mejora de vigilancia o facilidad de reporte). Su programa tuvo los efectos esperados y otros efectos tambin. Estos efectos podran ser positives. Su programa de prevencin de la violencia juvenil, por ejemplo, podra haber resultado en una reduccin grande de la violencia entre los adolescentes, y podra tambin haber tenido resultados en una mejora significativa del rendimiento acadmico por parte de los jvenes involucrados. Estos efectos podran ser neutrales. El mismo programa de prevencin de la violencia juvenil podra de alguna manera dar como resultado que los jvenes vean ms televisin despus de la escuela. Estos efectos podran ser negativos. (Estos efectos son usualmente llamados consecuencias sin intencin.) La violencia juvenil disminuy significativamente, peor la incidencia de las jvenes embarazadas o el consumo de alcohol entre los jvenes podra aumentar significativamente al mismo tiempo. Estos efectos podran ser mltiples, o mixtos. Por ejemplo, un programa para reducir el VIH/SIDA podra disminuir los rangos de sex sin proteccin pero tambin podra aumentar el conflicto y los casos de violencia entre parejas.

o o

Su programa no tuvo efecto o tuvo un efecto negativo y otros efectos al mismo tiempo. Como con los programas con efectos positivos, estos pueden ser positivos, neutrales; individuales o mltiples; o consistentes o mixtos. Si su anlisis le da una indicacin clara de que lo que usted est haciendo est logrando sus propsitos, la interpretacin es relativamente simple: Usted debera seguir hacindolo, mientras trata otras maneras de hacerlo an ms efectivo, o mientras trata de alcanzar otros asuntos relacionados de igual manera. Como lo hemos discutido a lo largo y ancho de la Caja de Herramientas Comunitarias, los programas buenos son dinmicos constantemente buscando formas de mejorar, en vez de asumir que lo estn haciendo de la mejor manera que puede ser. Si su anlisis muestra que su programa no es efectivo o es negativo, sin embargo o, en ese caso, si un anlisis positivo lo deja a usted preguntndose cmo hacer que sus esfuerzos exitosos sean an ms exitosos la interpretacin se vuelve an ms compleja. Est usted usando un mtodo absolutamente errneo? Est usted usando un enfoque que podra ser efectivo, pero est muy mal implementado? Existe un factor particular que est contribuyendo a que usted no est tomando en cuenta_ Existen barreras hacia el xito culturales, experiencias, caractersticas personales, discriminacin sistemtica presentes en la poblacin de la cual son los participantes? Existen componentes particulares o elementos que usted puede cambiar para hacer a su programa ms efectivo, o debera usted comenzar de nuevo de cero? Hacia qu se debera dirigir para hacer un buen programa an mejor? Interpretacin cuidadosa y muy perspicaz de sus datos podra permitirle responder a preguntas como stas. Usted podra ser capaz de usar correlaciones, por ejemplo, para generar hiptesis acerca de sus resultados. Como lo hemos discutido antes, si los cambios positivos o negativos en variables particulares son consistentemente asociados con cambios positivos o negativos en otras variables, las dos pueden ser conectadas. (La palabra pueden es importante aqu. Las dos pueden estar conectadas, pero podran no estarlo, o ambos podran estar relacionados a una variable tercera de la cual no se est consciente o que se considera trivial.) Tal conexin puede mostrarle la direccin hacia un factor (p.ej., acceso al apoyo) que est causando los cambios en ambas variables, y que debera ser tratada para hacer su programa exitoso. Las correlaciones podran tambin indicar patrones en sus datos, o podra dirigirlo hacia una manera no esperada de ver el asunto al que usted se est dirigiendo. Usted puede a menudo usar datos cualitativos para entender el significado de una intervencin, las reacciones de las personas hacia los resultados. La observacin que los participantes estn constantemente sufriendo de una variedad de problemas de salud podra ser localizado, a travs de datos cualitativos, en problemas de nutricin (debido a la pobreza o a la ignorancia) o a restricciones culturales (algunas mujeres musulmanas podra no estar dispuestas no ser capaces debido a una prohibicin familiar - a aceptar la asistencia o tratamiento por parte de doctores varones, por ejemplo). Una vez que usted organiz sus datos, tanto los resultados y cualquier cosa que pueda ser analizado estadsticamente necesita ser analizado lgicamente. Esto podra no brindar informacin convincente pero de seguro le dar algunas ideas para desarrollar a futuro, y algunos indicadores de conexiones y posibilidades que usted podra no haber considerado todava. Eso tambin le mostrar algunos resultados adicionales - gente reaccionando de forma diferente al programa que antes, por ejemplo. Los nmeros pueden decirle si existe un cambio, pero ellos no pueden siempre decirle qu lo causa o por qu (aunque algunas veces si lo hacen), o por qu algunas personas se benefician mientras otros no. Estos son a menudo asuntos que importan para anlisis lgicos, o para el pensamiento crtico. El anlisis y la interpretacin de los datos es ms que todo un asunto del pensamiento crtico (ver Captulo 17, Seccin 2: Pensar crticamente) y aplicar la tcnica pero, por qu? (ver Captulo 17,

Seccin 4: Analizar las causas de raz de los problemas: La tcnica Pero por qu?) El anlisis y la interpretacin de los datos que ha recolectado lo llevan, de alguna manera, de vuelta al comienzo. Usted puede usar la informacin que ha obtenido para ajustar y mejorar su programa o intervencin, evaluarlo de nuevo, y usar esa informacin para ajustar y mejorarlo an ms, mientras est vigente. Usted tiene que mantener el proceso para asegurarse que se est haciendo el mejor trabajo que se puede hacer y para promover cambios en individuos, sistemas, y polticas que hagan a una comunidad ms saludable y mejor. Usted tiene que convertirse en un detective cultural para entender su iniciativa, y, de algunas maneras, cada evaluacin es un estudio antropolgico. Nosotros tratamos este tema directamente en el Captulo 37, Seccin 6, Recolectar y analizar informacin etnogrfica.

En resumen
El corazn de la investigacin evaluativa es obtener informacin acerca del programa o la intervencin que usted est evaluando y analizando para determinar qu le dice acerca de la efectividad de lo que usted est haciendo, as como acerca de cmo puede mantener y mejorar esa efectividad. La recoleccin de los datos cuantitativos informacin expresada en nmeros y llevarla a la inspeccin visual o al anlisis estadstico formal puede decirle si su trabajo est teniendo los efectos deseados, y podra de igual manera ser capaz de decirle por qu o por qu no. Puede tambin resaltar las conexiones (correlaciones) entre las variables, y llamar la atencin hacia factores que usted podra no haber considerado. Recolectar y analizar datos cualitativos entrevistas, descripciones de factores ambientales, o eventos, y circunstancias pueden brindar una idea de cmo los participantes experimentan el asunto que usted est tratando, qu barreras y ventajas experimentan ellos, y qu se podra cambiar o agregar para mejorar lo que usted hace. Una vez que usted haya obtenido el conocimiento que brinda su informacin, es hora de comenzar el proceso de nuevo. Use lo que usted ha aprendido para continuar a evaluar lo que usted hace al recolectar y analizar los datos, y continuamente mejorar su programa.