ESQUEMAS PARA EL CURSO: DISEO DE EVALUACIN DE PROGRAMAS E INSTITUCIONES EDUCATIVAS

DR. LUIS GONZLEZ MARTNEZ GUADALAJARA, JAL. ENERO 1997

CUATRO TEORAS DE APOYO A LA EVALUACIN

LA TEORA DE LOS OBJETIVOS OBJETIVOS GENERALES OBJETIVOS PARTICULARES OBJETIVOS ESPECFICOS LOS ESPECFICOS SON LOS NICOS EVALUABLES LA TEORA DE LA PLANEACIN a) FINES, OBJETIVOS, METAS b) POLTICAS, PROCEDIMIENTOS, CURSOS DE ACCIN c) RECURSOS HUMANOS, MATERIALES, ETC.

LA TEORA DE SISTEMAS LOS SISTEMAS DE TRANSFORMACIN CONTEXTO INSUMOS PROCESOS PRODUCTOS

LA TEORA DE LOS PARADIGMAS DE INVESTIGACIN PARADIGMA CUANTITATIVO PARADIGMA CUALITATIVO

EVOLUCIN HISTRICA DE LA EVALUACIN EN LA EDUCACIN

1910 EVALUACIN Y MEDICIN SE EVALA CON BASE EN PRUEBAS DE INTELIGENCIA STANFORD - BINET THORNDIKE LA EVALUACIN SE REALIZA CON BASE EN LAS INFERENCIAS RESULTANTES DE LAS PRUEBAS ESTANDARIZADAS Y CUANTITATIVAS

1930 EVALUACIN Y ACREDITACIN

EVALUACIN REALIZADA POR EXPERTOS O EVALUADORES EXTERNOS ASOCIACIONES O INSTANCIAS DE ACREDITACIN: WASC, SASC, NASC, ETC. SE UTILIZAN CRITERIOS CUALITATIVOS PARA EVALUAR

1950 EVALUACIN Y OBJETIVOS COGNITIVOS: BLOOM AFECTIVOS: KRATHWOHL PSICOMOTRICES: SIMPSON LA EVALUACIN SE REALIZA PARA DETERMINAR EL LOGRO DE LOS OBJETIVOS

1.

1960 EVALUA CIN Y MODELOS SE EVALA CON BASE EN PRUEBAS DE INTELIGENCIA STANFORD - BINET THORNDIKE LA EVALUACIN SE REALIZA CON BASE EN LAS INFERENCIAS RESULTANTES DE LAS PRUEBAS ESTANDARIZADAS Y CUANTITATIVAS

1970 EVALUACIN Y ECLECTICISMO USO INDISCRIMINADO DE LAS ANTERIORES MODALIDADES SEGN LAS NECESIDADES DE EVALUACIN SE EMPIEZAN A UTILIZAR TCNICAS DE INDAGACIN DE TIPO CUALITATIVO.

1990 EVALUACIN Y MODERNIZACIN EL PROGRAMA SEALA CINCO TIPOS DE EVALUACIN DESEMPEO PROCESO EDUCATIVO ADMINISTRACIN POLTICAS EDUCATIVAS IMPACTO SOCIAL

CINCO CONCEPTOS SOBRE EVALUACIN

MEDICIN
QU TANTO SE ALCANZ? PIDE CIFRAS

DETERMINACIN DE NECESIDADES

SE ALCANZ EL OBJETIVO? LOGRO DE OBJETIVOS ESPECIFICACIN DE REAS DE MEJORA LAS PERSONAS RESPONSABLES TUVIERON UN BUEN DESEMPEO EN EL LOGRO DEL OBJETIVO CUMPLIMIENTO DE LO QUE SE ASIGN SE ALCANZARON LAS METAS EVALUADAS EN TRMINOS DE CRITERIOS Y ESTNDARES LOGRO DE METAS U OBJETIVOS IDEALES COMPARACIN DE LO REAL CONTRA LO IDEAL CUL ES LA RELACIN DE LAS VARIABLES ESTUDIADAS? EL POR QU DE LA RELACIN DE LAS VARIABLES
(MTODO HIPOTTICO DEDUCTIVO)

ANLISIS DE RESPONSABILIDADES

EVALUACIN

INVESTIGACIN

SIGNIFICADOS, PROCESOS, PERSPECTIVAS DE LOS SUJETOS ESTUDIADOS (MTODOS INTERPRETATIVOS INDUCTIVOS)

INVESTIGACIN Y EVALUACIN DOS ACCIONES, UN PROCESO COMN: LA INDAGACIN

INVESTIGACIN QU? DESCRIPTIVA CUALITATIVA POR QU? INFERENCIAL CUANTITATIVA UN PROCESO COMN: LA INDAGACIN EVALUACIN QU? DESCRIPTIVA TOMA DE DECISIONES

+ UTILIZAN INSTRUMENTOS SIMILARES + LA METODOLOGA DE SISTEMATIZACIN Y ANLISIS SON LOS MISMOS LO CUANTITATIVO LO CUALITATIVO

INDAGACIN

INVESTIGACIN

EVALUACIN

- QU Y POR QU? - NORMATIVA - SATISFACER LA CURIOSIDAD - BUSCA CONDICIONES Y LEYES - EXPLICA RELACIONES DE VARIABLES - EL INVESTIGADOR ES QUIEN DEFINE PROBLEMA - BUSCA VERDAD CIENTFICA Y VERIFICALIDAD CIENTFICA - BASE DISCIPLINARIA METODOLOGA DISCIPLINA -ENTRENAMIENTO CENTRADO EN EL OBJETO DE ESTUDIO

- QU? - DESCRIPTIVA - SOLUCIONES AL PROBLEMA - AYUDA A LA TOMA DE DECISIONES - DESCRIBE CON CLARIDAD - EL CLIENTE ES QUIEN SEALA EL EL PROBLEMA - BUSCA EL DETERMINAR LA UTILIDAD Y VALOR SOCIAL DE LO ENVIADO - LOS VALORES SON LA CONDICIN NECESARIA - ENTRENAMIENTO MAS DISCIPLINARIO

UNA DEFINICIN DE EVALUACIN EVALUAR ES EL PROCESO DE:

LO IDEAL LO QUE QUIERO COMPARAR LO REAL LO QUE TENGO PARA ENCONTRAR LAS DISCREPANCIAS ENTRE ESTOS TOMAR LAS DECISIONES PERTINENTES SOBRE LO EVALUADO

TERMINAR CONTINUAR RECICLAR MODIFICAR REFORZAR

DEFINICIN SOBRE EVALUACIN

1. ES EL PROCESO DE DETERMINAR, OBTENER Y PROPORCIONAR INFORMACIN RELEVANTE Y TIL QUE AYUDE A LA TOMA DE DECISIONES. DANIEL M. STUFFLEBEAM 2. ES UN PROCESO MEDIANTE EL CUAL SE RECABA INFORMACIN TIL PARA LA TOMA DE DECISIONES CON RELACIN A UN PROGRAMA EDUCATIVO. LEE. J. CRONBACH 3. PROCEDIMIENTOS MEDIANTE LOS CUALES SE ESTUDIAN Y ANALIZAN LOS PROGRAMAS EDUCATIVOS CON EL FIN DE CERTIFICAR Y VALIDAR SU EFICACIA EN EL LOGRO DE LOS OBJETIVOS QUE ESTOS SEALAN. JAMES D. GREENBERG 4. LA EVALUACIN ES UN INTENTO ORIENTADO A LA DETERMINACIN QUE LA VALIDEZ Y LA UTILIDAD DE ALGO. GENE V. GLASS

LOS OBJETIVOS DE LA EVALUACIN

LA EVALUACIN INTENTA DETERMINAR

EL LOGRO DE LOS OBJETIVOS

EL VALOR SOCIAL (IMPACTO)

LA UTILIDAD Y PERTINENCIA

EL NIVEL DE SATISFACCIN DE LOS USUARIOS

DE UN PROGRAMA O INSTITUCIN EDUCATIVA

TIPOS Y MODALIDADES DE EVALUACIN

FORMATIVA SUMATIVA

CUALITATIVA CUANTITATIVA

EVOLUTIVA, DESCRIPTIVA, ESTADSTICA, DE LOGROS, DEMOGRFICA

SU TERMINO DE DISEO LOS TIPOS Y MODALIDADES DE EVALUACIN NO SON EXCLUYENTES

DE: CONTEXTO, INSUMOS, PROCESOS, PRODUCTOS, IMPACTO COSTO - BENEFICIO

10

LOS SUJETOS QUE INTERVIENEN EN EL PROCESO DE EVALUACIN

1. EL EVALUADOR

2. LOS QUE TOMAN LAS DECISIONES

3. LOS AFECTADOS POR LA EVALUACIN

4. LAS FUENTES DE INFORMACIN

11

EVALUADOR
*EL EVALUADOR EXTERNO. EL DISEO, INSTRUMENTACIN Y ANLISIS LO REALIZA UNA PERSONA EXPERTA AJENA A LA INSTITUCIN *EL EVALUADOR INTERNO. EL DISEO DE LA INSTRUMENTACIN Y ANLISIS DE LA EVALUACIN ES REALIZADA POR PERSONAS DE LA INSTITUCIN *UN EQUIPO MIXTO. INSTITUCIN Y EXPERTO REALIZAN EN EQUIPO EL PROCESO TOTAL DE LA EVALUACIN

12

LA EVALUACIN DE PROGRAMAS Y LA TOMA DE DECISIONES

1. CONTINUAR 2. MODIFICAR 3. RECICLAR 4. TERMINAR EL PROGRAMA
MALCOM PROVIS

LAS DECISIONES BSICAS

LA CERTIFICACIN DEL PROGRAMA

MARVIN ALKIN

1. 2. 3. 4.

CONTEXTO INSUMOS PROCESOS PRODUCTOS

PLANEACIN ESTRUCTURACIN OPERACIONALIZACIN RECICLAJE TOMA DE DECISIN

DANIEL M. STUFFLEBEAM

TIPO DE EVALUACIN

LAS DECISIONES DE ACUERDO AL TIPO DE EVALUACIN

13

LA REDACCIN DE OBJETIVOS CONCEPTUALES

TIPO DE OBJETIVO

CONTENIDO EN SU REDACCIN

OBJETIVO GENERAL

QU? PARA QUE? QU? PARA QUE? DESGLOSANDO EL GENERAL INTRODUCCIN CONDUCTA ESPERADA CONDICIONES DE OPERACIN NIVEL DE EFICIENCIA

OBJETIVO PARTICULAR

OBJETIVO ESPECIFICO

14

OBJETIVOS ESPECFICOS: LOS NICOS POSIBLES A EVALUAR

1. INTRODUCCIN 2. CONDUCTA ESPERADA

LO QUE VOY A EVALUAR

3.CONDICIONES DE OPERACIN

CON BASE EN QUE VOY A EVALUAR LO CUALITATIVO DE LA EDUCACIN

4. NIVEL DE EFICIENCIA

CUANTO ESPERO QUE SE DE LO ANTERIOR LO CUANTITATIVO DE LA EVALUACIN

15

LOS OBJETIVOS ESPECFICOS Y LA METODOLOGA DE LA EVALUACIN

ELEMENTOS DEL OBJETIVO ESPECIFICO

METODOLOGA EVALUATIVA

1. INTRODUCCIN 2. CONDUCTA ESPERADA 3. CONDICIONES DE OPERACIN

LAS SITUACIONES DE EVALUACIN

LOS CRITERIOS DE EVALUACIN

4. NIVEL DE EFICIENCIA

LOS ESTANDARES DE EVALUACIN

16

EL PROCESO GENERAL PARA INSTRUMENTAR LA EVALUACIN

1. DETERMINAR LAS SITUACIONES DE EVALUACIN 2. DEFINIR LOS CRITERIOS PARA EVALUAR CADA SITUACIN 3. PRECISAR LOS ESTANDARES PARA CADA SITUACIN 4. DETERMINAR LOS INSTRUMENTOS CON BASE EN LOS CUALES SE VA A RECABAR LA INFORMACIN QUE SE REQUIERE 5. DEFINIR CULES VAN A SER LAS FUENTES DE INFORMACIN 6. PRECISAR LA MANERA DE ANLISIS DE LOS DATOS

EL DISEO DE LA EVALUACIN REQUIERE QUE SE REALICEN ESTAS ACCIONES

17

EL PROCESO EVALUATIVO
ENFOQUE QU VOY A EVALUAR? QU DECISIONES SE VAN A TOMAR? QU MODELO ES EL ADECUADO? CON BASE EN QU CRITERIOS Y ESTNDAR? ANLISIS RECOLECCIN DE DATOS QU INSTRUMENTOS SE REQUIEREN? QU O QUIEN VA A PROPORCIONAR LA INFORMACIN? A QU MUESTRA SE APLICARN LOS INSTRUMENTOS? REPORTE ORGANIZACIN CMO VA A SER SISTEMATIZADA LA INFORMACIN? CON BASE EN QU ORGANIZACIN?

ADMINISTRACIN

QUE PROCEDIMIENTO SE A QUIN SE VA A DEFINICIN DE LOS TIEMPOS UTILIZAR? REPORTAR? PARA LA EVALUACIN CMO VA A REALIZARSE EL CMO SE VA A REPORTAR? (CRONOGRAMA) ANLISIS? CUNDO SE TIENE QUE DETERMINAR LOS REPORTAR? RECURSOS PRECISAR COSTOS LA META - EVALUACIN

18

PROYECTO DE EVALUACIN DESDE UNA PERSPECTIVA CUALITATIVA

LGICAS DE SIGNIFICACIN LGICAS DE PRODUCCIN

EL PROYECTO EDUCATIVO DESDE LA PERSPECTIVA DE

NIVEL INSTITUCIONAL *DIRECTIVOS *EMPLEADOS

NIVEL DOCENCIA *MAESTROS

NIVEL APRENDIZAJE *ALUMNOS

NIVEL CONTEXTUAL *LA COMUNIDAD *LOS PADRES

19

CRITERIOS PARA DETERMINAR UNA BUENA EVALUACIN

1. SI TODAS LAS PERSONAS INTERESADAS EN LA EVALUACIN ESCUCHARON EL REPORTE CON ATENCIN 2. SI LO ENTENDIERON BIEN 3. SI LO ENCONTRARON CREBLE 4. SI TODAS LAS PREGUNTAS PLANTEADAS PARA LA EVALUACIN FUERON RESPONDIDAS DE MANERA ADECUADA 5. SI LAS RESPUESTAS DE LA EVALUACIN CAMBIARON O ALTERARON LO QUE LOS INTERESADOS CONCEDAN SOBRE LO EVALUADO 6. SI LA DISCUSIN Y DILOGO QUE GENERO EL REPORTE DE LA EVALUACIN ENRIQUECI EL PROCESO DE TOMA DE DECISIONES 7. SI HUBO APRENDIZAJE Y TOMA DE CONCIENCIA LEE J. CRONBACH

20

LA EVALUACIN SEGN L.J. CRONBACH

LA EVALUACIN CONSISTE FUNDAMENTALMENTE EN LA BSQUEDA DE INFORMACIN Y EN SU COMUNICACIN A QUIENES HAN DE TOMAR DECISIONES SOBRE LO EVALUADO. LA CALIDAD DE LA INFORMACIN ES MUY IMPORTANTE EN LA EVALUACIN LA QUE DEBE MANIFESTARSE EN LAS SIGUIENTES CARACTERISITICAS. CLARIDAD: OPORTUNIDAD: EXACTITUD: VALIDEZ CUANDO LOS CONTENDOS DE LA EVALUACIN CORRESPONDEN CON LA REALIDAD AMPLITUD: CUANDO PROPORCIONA POSIBILIDADES PARA LA ADOPCIN DE DIVERSAS ALTERNATIVAS ES DECIR COMPRENSIBLE A QUIEN SE DESTINA QUE ESTE DISPONIBLE EN EL MOMENTO EN QUE SE NECESITA CUANDO DIFERENTES OBSERVADORES PERCIBEN LA REALIDAD DE IGUAL MANERA

21

CARACTERSTICAS DE UNA EVALUACIN DE CALIDAD LA EVALUACIN ES EL ENJUICIAMIENTO SISTEMTICO DEL VALOR O MRITO DE UN OTORGA UNA CONSIDERABLE IMPORTANCIA O LA DIMENSIN VALORATIVA Y DE JUICIO LAS CARACTERSTICAS DE UNA EVALUACIN DE CALIDAD SON:
1. TIL (RELEVANCIA) 2. VIABLE (FACTIBILIDAD) 3. TICA (LEGITIMIDAD) 4. EXACTA (PRECISIN) DE LA MAS SIMPLE RECOLECCIN DE DATOS EN LA EVALUACIN OBJETO

Cuando sirve para un mejor conocimiento de las caractersticas de la enseanza y en la adopcin de decisiones en su perfeccionamiento slidamente fundamentado

Cuando este se puede llevar a cabo sin grandes dificultades y con procedimientos fcilmente aplicables Respetando los derechos de los implicados mediante su realizacin y cumplimiento de los compromisos siendo honrado en la exposicin de sus resultados presentando la realidad del objeto de evaluacin con sus virtudes y defectos.

Cuando la evaluacin esta libre de influencias y proporciona conclusiones validas fidedignas

JOINT COMMITEE ON STANDARDS FOR EDUCATIONALEVALUATION

22

CARACTERSTICAS DE UNA EVALUACIN DE CALIDAD (2) JOINT COMMITEE

NORMAS DE UTILIDAD 1. Identificacin de La audiencia 2. Confiabilidad del evaluador 3. Seleccin y alcance de la informacin 4. Interpretacin cualitativa 5. Claridad del informe 6. Oportunidad del informe 7. Trascendencia de la evaluacin NORMAS DE FACTIBILIDAD 1. Procedimientos prcticos 2. Viabilidad poltica 3. Relacin costo beneficio NORMAS DE LEGITIMIDAD 1. Obligacin formal NORMAS DE PRECISIN 1. Identificacin del objeto 2. Conflicto de intereses 2. Anlisis del contexto 3. Propsitos y 3. Exposicin total procedimientos franca 4. Fuente de informacin confiable 4. Derecho a la 5. Medicin valida informacin publica 6. Medicin confiable 7. Control sistemtico 5. Derecho del sujeto de datos 8. Anlisis de inf. 6. Interpretaciones Cuantitativa humanas 9. Anlisis de inf. Cualitativa 7. Equilibrio del informe 10. Conclusiones 11. Informe objetivo 8. Responsabilidad fiscal

23

CARACTERSTICAS DE LA EVALUACIN SEGN STEPHEN KEMMIS (1986)

LA EVALUACIN ES EL PROCESOS DE PROYECTAR, OBTENER, PROVEER, Y ORGANIZAR INFORMACIONES Y SEGUIMIENTO QUE PERMITAN A LAS PERSONAS Y GRUPOS INTERESADOS PARTICIPAR EN EL DEBATE CRITICO SOBRE UN PROGRAMA ESPECIFICO. EL OBJETIVO DE LA EVALUACIN NO ES RESOLVER O EVITAR UN CONFLICTO SINO PROPORCIONAR LA INFORMACIN BSICA NECESARIA PARA QUE LOS IMPLICADOS EN EL PROCESO EDUCATIVO PUEDAN RESOLVERLO FORMULANDO LOS JUICIOS CORRESPONDIENTES. LA EVALUACIN DEBE PROYECTARSE EN SENTIDO AMPLIO, SOBRE TODO LOS COMPONENTES EN LA EDUCACIN PROFESORES, CURRICULUM, ADMINISTRADORES, PROBLEMAS, ETC.

LA EVALUACIN CONSTITUYE UN ELEMENTO INTERACTIVO CON LA

ENSEANZA SIRVIENDO SUS RESULTADOS PARA ORIENTAR EL DESARROLLO DE LA MISMA. KEMMIS S. "SEVEN PRICIPLES FOR PROGRAM EVALUATION IN CURRICULUM" EN HOUSE. E.R. "NEW DIRECTIONS IN EDUCATIONAL EVALUATION" THE FALMER PRESS, LONDON 1986

24

SIETE PRINCIPIOS DE LA EVALUACIN S. KEMMIS

1. RACIONALIDAD O SENSATEZ. PRESENTE EN LA ACTUACIN DE LOS PARTICIPANTES EN LA TAREA DE ENSEANZA Y EL DESARROLLO DE ESTA, LA EVALUACIN TIENE QUE PONER DE MANIFIESTO ESTA RACIONALIDAD Y SUS CARACTERSTICAS. 2. AUTONOMA Y RESPONSABILIDAD LA EVALUACIN ES UNA EMPRESA COOPERATIVA EN LA QUE CADA MIEMBRO ASUME UNA CIERTA RESPONSABILIDAD QUE INTERACTA CON LA CORRESPONDIENTE AL RESTO DE LOS PARTICIPANTES. 3. COMUNIDAD DE INTERESES OTRA DE LAS TAREAS IMPLCITAS DE LA EVALUACIN CONSISTE EN CLARIFICAR LA NATURALEZA DE LOS INTERESES DE TODOS AQUELLOS QUE PARTICIPEN EN EL PROCESO Y DESARROLLO EDUCATIVO EN ESTE SENTIDO, LA EVALUACIN DEBE FACILITAR UN PROCESO DE NEGOCIACIN PARA LA ARMONIZACIN DE POSIBLES DISPARIDADES. 4. PLURALIDAD DE PERSPECTIVAS DE VALOR. COMO EN EL PRINCIPIO ANTERIOR, SE PUEDE DAR EN CUANTO A VALOR. AQU TAMBIN LA TAREA CLARIFICADORA DE LA EVALUACIN PUEDE CONTRIBUIR PARA LOGRAR EL ACUERDO.

25

SIETE PRINCIPIOS DE LA EVALUACIN S. KEMMIS (continuacin)

5. PLURALIDAD DE CRITERIOS DE EVALUACIN LA EVALUACIN DE LO EDUCATIVO SE DEBE EN PRINCIPIO A CRITERIOS RESULTANTES DEL DEBATE INTERNO ENTRE LOS PARTICIPANTES DEL MISMO. OTROS CRITERIOS, PROCEDENTES DE FUENTES EXTERNAS, COMO LA CONSULTA A EXPERTOS, POR EJEMPLO, PUEDE CONSTITUIR UN APOYO O COMPLEMENTO. 6. OPORTUNIDAD EN LA ELABORACIN Y DISTRIBUCIN DE LA INFORMACIN EN EL PROCESO DE ELABORACIN Y DISTRIBUCIN DE LA INFORMACIN, DEBERN TOMARSE EN CONSIDERACIN TODA CLASE DE CONSECUENCIAS IMPLCITAS (MORALES, SOCIALES, POLTICAS). 7. ADAPTACIN LA INFORMACIN PROPORCIONADA POR LA EVALUACIN DEBE SEGUIR EL DESARROLLO DE LO EDUCATIVO Y PRODUCIRSE PARALELAMENTE AL MISMO, PARA FACILITAR UN PERFECCIONAMIENTO.

26

UNA VISIN CONCEPTUAL DE LA EVALUACIN

CAUSAS LO PREVISTO LAS INNOVACIONES LO NO PREVISTO LA ENSEANZA Y EL APRENDIZAJE LO ADMINISTRATIVO LO INSTITUCIONAL LOS PROGRAMAS *LAS INOVACIONES CONSTATAR Y OPTIMIZAR LOGROS MODIFICAR LO PLANEADO TOMAR DECISIONES SOBRE LO EVALUADO CUANTATIVA POSITIVA CUALITATIVA INTERPRETATIVA DE OBSERVACIN Y REFLEXIN

FINALIDAD: (PARA QUE)

METODOLOGA: (COMO)

OBJETO: (SOBRE QUE)

LA EVALUACIN COMO UNA REFLEXIN SOBRE LA PRACTICA EDUCATIVA

DE CARCTER PEDAGGICO Y DIDACTICO INSTITUCIONAL PROGRAMAS SOCIOCULTURAL

EVALUADOR INTERNO EVALUADOR EXTERNO EQUIPO MIXTO AUTOEVALUACION

AGENTE: (QUIEN) CONTEXTUALIZACIN: (CIRCUNSTANCIAS)

27

LOS MODELOS DE EVALUACIN CON SU UTILIDAD EN EL DISEO

1. NOS PROPORCIONAN LA POSIBILIDAD DE ORGANIZAR LA EVALUACIN DE ACUERDO A LAS NECESIDADES CONCRETAS. 2. DESCRIBEN LA FORMA DE INSTRUMENTAR LA EVALUACIN. EVALUACIN TOTAL O PARCIAL PROCESOS DE PLANEACIN Y EVALUACIN EN FORMA PARALELA EVALUACIN FORMATIVA Y SUMATIVA TIPOS DE EVALUACIN

3. APORTAN IDEAS PARA REALIZAR LA EVALUACIN, EL CMO HACERLO. 4. LOS ELEMENTOS DE REFLEXION QUE NOS APORTAN CON RESPECTO A LA EVALUACIN NOS DAN LA POSIBILIDAD DE DISEAR UN MODELO PROPIO. LOS MODELOS SON MS TILES ADAPTNDOLOS CONCRETAS Y NO SLO ADOPTARLOS MECNICAMENTE. A NECESIDADES

28

EL MODELO DE ROBERT E. STAKE

INTENTOS OBSERVACIONES
C O N G R U E N C I A L O G I C A C O N G R U E N C I A E M P I R I C A

ESTANDARES

JUICIOS

ANTECEDENTES

TRANSACCIONES

RESULTADOS

MATRIZ DE DATOS

MATRIZ DE JUICIOS

29

EL MODELO DE DANIEL L. STUFFLEBEAM.

EVALUACIN DE CONTEXTO EVALUACIN DE PRODUCTOS

DECISIONES DE DECISIONES DE PLANEACIN RECICLAJE EVALUACIN DE EVALUACIN DE INSUMOS PROCESOS

DECISIONES DE ESTRUCTURACIN

DECISIONES DE INSTRUMENTACIN

30

EL MODELO DE MARVIN C. ALKIN

DETERMINACIN DE NECESIDADES PLANEACIN DEL PROGRAMA

CONTEXTO

INSUMOS

EVALUACIN DE LA IMPLEMENTACIN EVALUACIN DE LOS RESULTADOS

EVALUACION DEL PROCESO

PROCESOS

PRODUCTOS

31

EL MODELO DE MALCOM PROVUS

E T E T E T E T

D*

D*

D*

D*

TIPOS DE EVALUACIN: 1. DEFINICIN 2. INSTALACIN 3. PROCESO 4. PRODUCTO 5. COSTO

CODIGOS: C = COMPARAR E = ESTANDAR D = DISCREPANCIAS D* = DESEMPEO = RECICLAR LA ETAPA T = TERMINAR = RECICLAR TODO EL PROCESO

32

EL MODELO DE ROBERT L. HAMMOND

DIMENSIN COMPORTAMIENTO D I M E N S I N I N S T I T U C I N

DIMENSIN INSTRUCCIN

33

ALGUNAS IDEAS A CONSIDERAR EN LA EVALUACIN DE PROGRAMAS

LA EVALUACIN DE PROGRAMAS ES: 1. UN PROCESO MS QUE UN PROCEDIMIENTO 2. GENRICA MS QUE ESPECFICA 3. ALGO MS QUE EXAMINAR EL LOGRO DE LOS OBJETIVOS 4. ALGO MS QUE LA EVALUACIN DE LA INTERACCIN 5. ALGO MS QUE EVALUAR SOLAMENTE LOS RESULTADOS DE UN PROGRAMA. 6. DIFERENTE DE LA INVESTIGACIN EVALUATIVA Y LA INVESTIGACIN DE PROGRAMAS. 7. UNA HERRAMIENTA ADMINISTRATIVA.
8. UN PROCESO CENTRADO EN LAS PERSONAS.

34

SEIS GRUPOS DE MODELOS DE EVALUACIN

1. MODELOS QUE ENFATIZAN EN LA EVALUACIN COMO INSUMOS PARA LA TOMA DE DECISIONES. (STUFFLEBEAM, PROVUS) 2. EVALUACIN DE LAS PARTES DEL PROGRAMA. (ALKIN) 3. EVALUACIN TIPO DE DATOS Y ACTIVIDADES. (STAKE) 4. EVALUACIN Y SUS PROCESOS. (STEELE) 5. LA EVALUACIN EN TRMINOS DEL LOGRO DE OBJETIVOS. (TYLER, HAMMOND) 6. LA EVALUACIN EN TRMINOS DE RESULTADOS, EFECTOS Y LOGROS. (SCRIVEN)

SARA STEELE *CONTEMPORARY APPROACHES TO EVALUATION" ERIC, CLEARINGHOUSE

35

LA EVALUACIN COMO INSUMO PARA LA TOMA DE DECISIONES

ESTE GRUPO DE MODELOS ENFATIZAN EN EL PAPEL QUE DESEMPEA LA EVALUACIN EN LA TOMA DE DECISIONES. 1. QU CLASE DE DECISIONES SE DEBEN TOMAR EN RELACIN CON LOS PROGRAMAS? 2. QU CLASE DE DECISIONES SE TOMAN CONFORME SE EST PROGRAMANDO?

LOS MODELOS DE ESTE GRUPO: a) SEALAN PATRONES DEL TIPO DE DECISIONES QUE SE DEBEN TOMAR. b) IDENTIFICAN LAS SECUENCIAS DEL PROGRAMA QUE DEBEN EVALUARSE . c) PLANTEAN LAS PREGUNTAS DE EVALUACIN QUE DEBEN RESPONDERSE. d) IDENTIFICAN CRITERIOS QUE DEBEN APLICARSE.

36

EVALUACIN DE LAS PARTES DEL PROGRAMA...

ESTE GRUPO DE MODELOS PROPORCIONA UN AMPLIO RANGO DE MODALIDADES, MEDIANTE LAS CUALES EL PROGRAMA COMO SISTEMA PUEDE EXAMINARSE.

LAS PREGUNTAS A LAS QUE TRATAN DE RESPONDER SON: 1. QUE ELEMENTOS ESPECFICOS DE UN PROGRAMA DEBEN EVALUARSE? 2. EN QU FORMA LAS PARTES O ELEMENTOS DE UN PROGRAMA SE RELACIONAN ENTRE S FORMANDO UN SISTEMA? 3. DE QU MANERA LOS SISTEMAS AFECTAN A LOS PROGRAMAS? 4. COM EXAMINAR EL PROGRAMA COMO IDENTIFICAR SUS COMPONENTES CLAVES? SISTEMA, E

37

EVALUACIN: TIPO DE DATOS Y ACTIVIDADES

ESTE GRUPO DE MODELOS SEALA:

A)

LOS TIPOS DE DATOS A UTILIZAR EN LA EVALUACIN DADO QUE ESTOS TIENEN QUE RELACIONARSE CON EL PROPSITO DE LA EVALUACIN. SE PUEDEN RECABAR MUCHOS DATOS PERO NO TODOS SON CLAVES PARA CADA EVALUACIN.

B)

LOS TIPOS DE ACTIVIDADES EVALUATIVAS QUE SE PUEDEN EMPLEAR. LA COMPRENSION DE ESTAS, AYUDA AL EVALUADOR A SER MS SELECTIVO PARA APLICAR LOS RECURSOS EN LA ADMINISTRACIN DE LA EVALUACIN DE FORMA MS EFICIENTE, EN RELACIN CON LA RECOLECCIN DE DATOS

38

LA EVALUACIN Y SUS PROCESOS

ESTE GRUPO DE MODELOS HACE NFASIS: 1. EN LA IMPORTANCIA DE CONSIDERAR LOS PROCESOS CLAVES PARA REALIZAR UNA BUENA EVALUACIN. 2. EN RESPONDER A PREGUNTAS COMO LAS SIGUIENTES: QU DEBE HACERSE AL EVALUAR? QU PROCESOS ESTAN IMPLCITOS EN LA EVALUACIN? CULES SON LOS PROCESOS BSICOS A UTILIZAR, INDISTINTAMENTE DE LO QUE SE EVALA? 3. EN LA IMPORTANCIA PARA EL EVALUADOR DE CONOCER LOS PROCESOS BSICOS, CON LA FINALIDAD DE AGILIZAR LA EVALUACIN, AN CUANDO SE RECONOCE QUE EN ESTA ACTIVIDAD LOS PROCESOS Y ACTIVIDADES VARAN DE ACUERDO A LO QUE SE EVALA.

39

LA EVALUACION EN TRMINOS DE LOGRO DE OBJETVOS

ESTE GRUPO DE MODELOS PRIORIZAN: 1. LA IMPORTANCIA DE DISEAR LA EVALUACIN CENTRANDO EL ANLISIS EN TORNO A LOS OBJETIVOS DEL PROGRAMA Y SU LOGRO. 2. EN DETERMINAR EN QU MEDIDA LOS PROGRAMAS Y PROYECTOS EDUCATIVOS ESTN PRODUCIENDO LOS RESULTADOS QUE PRETENDIN ALCANZAR, DE ACUERDO A LO ESTABLECIDO EN LOS OBJETIVOS. 3. LA IMPORTANCIA DE RESPONDER A PREGUNTAS COMO LAS SIGUIENTES. QU CONDUCTAS Y CONTENIDOS EVALUAR? QU INSTRUMENTOS UTILIZAR PARA RECABAR INFORMACIN

RELACIONADA CON LAS CONDUCTAS Y CONTENIDOS SEALADOS EN LOS OBJETIVOS? QU ELEMENTOS DEL PROGRAMA AYUDAN, O NO, A QUE LOS ESTUDIANTES ALCANCEN LOS OBJETIVOS ?

40

LA EVALUACIN EN TRMINOS DE RESULTADOS, EFECTOS Y LOGROS.

1. ESTE GRUPO DE MODELOS DIFIEREN AL ANTERIOR EN CUANTO LA IMPORTANCIA QUE DAN A LOS OBJETIVOS PARA EVALUAR LOGROS Y EFECTOS. ESTOS MODELOS INTENTAN IR MS ALL DE ESTOS. 2. ENFATIZAN EN LA RELEVANCIA DE EVALUAR LOS RESULTADOS Y LOGROS DE LOS PROGRAMAS DESDE VARIOS PUNTOS DE VISTA. 3. CRITICAN LOS OBJETIVOS EN TRMINOS DE SU INTENTO POR PLANTEARSE COMO ESPECFICOS OBSERVABLES Y CUANTIFICABLES QUE DEFIENDE EL GRUPO 5 DE MODELOS. 4. SEALAN ESTRATEGIAS DE EVALUACIN PARA DETERMINAR RESULTADOS ANTICIPADOS Y NO ANTICIPADOS DE LOS PROGRAMAS AL IGUAL QUE LOS EFECTOS BENFICOS Y DAINOS DE LOS MISMOS.

41

PRINCIPALES ENFOQUES EN EVALUACIN:

1. 2. 3. 4. 5. 6. 7. 8.

ANLISIS DE SISTEMAS OBJETIVOS CONDUCTUALES TOMA DE DECISIONES SIN OBJETIVOS DEFINIDOS CRITICA DE ARTE REVISION PROFESIONAL CUASIJURIDICO ESTUDIO DE CASOS
ERNEST R. HOUSE EVALUACIN, ETICA Y PODER ED. MORATA 1994

42

PRINCIPALES ENFOQUES EN EVALUACIN (1)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: ANLISIS DE SISTEMAS ECONOMISTAS, DIRECTIVOS OBJETIVO, CAUSA Y EFECTOS CONOCIDOS VARIABLES CUANTIFICABLES SISTEMA DE PLANEACIN PROGRAMACIN Y PRESUPUESTACIN, PROGRAMACIN LINEAL, VARIACIN PLANIFICADA, ANLISIS COSTO PRODUCTO. EFICIENCIA 1. SE HN ALCANZADO LOS EFECTOS PREVISTOS ? 2. PUEDEN LOGRARSE LOS MISMOS EFECTOS DE MANERA MS ECONMICA ? 3. CULES SON LOS PROGRAMAS MS EFICIENTES ?

5. PRODUCTO: 6.CUESTIONES TPICAS:

43

PRINCIPALES ENFOQUES EN EVALUACION (2)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

OBJETIVOS CONDUCTUALES DIRECTIVOS, PSICLGOS OBJETIVOS ESPECIFICADOS DE ANTEMANO VARIABLES DE PRODUCTOS CAUNTIFICABLES OBJETIVOS CONDUCTUALES, TEST DE RESULTADOS FINALES PRODUTIVIDAD, REPONSABILIDAD 1. ALCANZA EL PROGRAMA LOS OBJETIVOS ? 2. ES PRODUCTIVO EL POGRAMA ?

44

PRINCIPALES ENFOQUES EN EVALUACIN (3)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA:

TOMA DE DECISIONES EJECUTIVOS, ADMNISTRADORES, PATRONATOS OBJETIVOS GENERALES. CRITERIOS ENCUESTAS, CUESTIONARIOS, ENTREVISTAS, VARIACIONES NATURALES A PARTIR DE EXPERIMENTAR EFICACIA, CONTROL DE CALIDAD 1. ES EFICAZ EL PROGRAMA ? 2. QU PARTES SON EFICACES ?

5. PRODUCTO: 6. CUESTIONES TPICAS:

45

PRINCIPALES ENFOQUES EN EVALUACIN (4)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

SIN OBJETIVOS DEFINIDOS CLIENTES CONSECUENCIAS, CRITERIOS CONTROL DE SESGOS, ANLISIS LGICO, MODO DE OPERACIN ELECCIN DEL CLIENTE, UTILIDAD SOCIAL 1. CULES SON TODOS LOS EFECTOS?

46

PRINCIPALES ENFOQUES EN EVALUACIN (5)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

CRTICA DE ARTE ENTENDIDOS, CLIENTES CRTICAS, NORMAS, NIVELES REVISIN CRTICA MEJORES NORMAS, MAYOR CONSCIENCIA 1. RESISTE EL PROGRAMA LA CRTICA? 2. AUMENTA EL APRECIO DEL PBLICO?

47

PRINCIPALES ENFOQUES EN EVALUACIN (6)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

REVISIN PROFESIONAL PROFESIONALES Y PBLICO CRITERIOS, TRIBUNAL, PROCEDIMIENTOS REVISIN A CARGO DEL TRIBUNAL, ESTUDIO ACEPTACIN PROFESIONAL 1. CMO CLASIFICARAN LOS PROFESIONALES ESTE PROGRAMA ?

48

PRINCIPALES ENFOQUES EN EVALUACIN (7)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

CUASI JURIDICO JURADO PROCEDIMIENTOS Y JUECES PROCEDIMIENTOS CUASIJURIDICOS RESOLUCIN 1. QU ARGUMENTOS HAY EN PRO Y EN CONTRA DEL PROGRAMA ?

49

PRINCIPALES ENFOQUES EN EVALUACIN (8)

1. MODELO: 2. DESTINATARIOS: 3. CONCUERDA EN: 4. METODOLOGA: 5. PRODUCTO: 6. CUESTIONES TPICAS:

ESTUDIO DE CASOS CLIENTES PROFESIONALES NEGOCIACIONES, ACTIVIDADES ESTUDIOS DE CASOS, ENTREVISTAS, OBSERVACIONES COMPRENSIN DE LA DIVERSIDAD 1. QU LES PARECE EL PROGRAMA A DIFERENTES PERSONAS ?

ERNEST R. HOUSE EVALUACIN, TICA Y PODER ED. MORATA 1994

50

PLANEACIN CURRICULAR Y EVALUACIN

1. LOS MODELOS DE PLANEACIN CURRICULAR Y DE EVALUACIN APORTAN RESPUESTAS A PREGUNTAS SIMILARES.

LA PREGUNTA PROCESUAL 1. QU PASOS DEBEN SEGUIRSE?

LA PREGUNTA DESCRIPTIVA LA PREGUNTA CONCEPTUAL 1. QU ES LO QUE EN 1. CULES SON LOS REALIDAD HACEN LOS QUE CONCEPTOS CLAVE EN LA DISEAN? PLANEACIN ?

2. QU COSAS TIENEN QUE HACERSE EN TRMINOS 2. QU ACTIVIDADES 2. CMO SE RELACIONAN DE PROCESOS Y CONCRETAS SE REALIZAN ESTOS ELEMENTOS UNOS METODOLOGAS ? EN LA PLANEACIN? CON OTROS ?

51

LAS SITUACIONES DE EVALUACIN

ES LA EXPLICITACIN DE LO QUE SE VA A EVALUAR EN RELACIN, CON UN PROGRAMA,. UNA INSTITUCIN, ETC.... EN UNA EVALUACIN DIAGNSTICA, EL TOTAL DE SITUACIONES DEBE DAR UNA VISIN TOTAL DE LO QUE SE EVALUAR. INSUMOS PROCESOS PRODUCTOS CONTEXTO

ES TIL REDACTAR LAS SITUACIONES EVALUATIVAS UTILIZANDO VERBOS QUE SEAN SINNIMOS DE EVALUAR VG: CORROBORAR DETERMINAR DEFINIR PROBAR JUZGAR

52

LOS CRITERIOS DE EVALUACIN

EL CONCEPTO DE CRITERIO SURGE DE LOS CRITERIOS DE EVALUACIN SON LAS QUE LA EVALUACIN TIENE UNA FUNCIN CARATERSTICAS RELATIVAS A LAS DE: SITUACIONES A EVALUAR VALORACIN ENJUICIAMIENTO ESTIMACIN EL REALIZAR ESTA CARACTERIZACIN PERMITIR VALORAR, ENJUICIAR, ESTIMAR LO QUE SE EST EVALUANDO DE MANERA CLARA Y OBJETIVA L. J. CRONBACH LO CUALITATIVO

LOS CRITERIOS DE EVALUACIN SERN POSTERIORMENTE EL CONTENIDO DE LOS INSTRUMENTOS QUE SE VAN A UTILIZAR PARA EVALUAR

PARA QUE ALGO SEA EVALUADO COMO BUENO, ES PRECISO ESTABLECER PREVIAMENTE CRITERIOS DE BONDAD Y LUEGO CONSTATAR QUE ESE ALGO EST DE ACUERDO O CUMPLE DICHOS CRITERIOS. R. SAPLER (1985)

53

LOS ESTNDARES DE EVALUACIN

SON EL ELEMENTO CUANTITATIVO DE LA EVALUACIN Y SEALAN LA MEDIDA DE QUE SE DESEA SE DEN LOS CRITERIOS.

1
LOS ESTANDARES EN TRMINOS DE PERCENTILES SEALAN AL REDEDOR DEL TERCER CUARTIL. 70 75 80

CUANDO EL EVALUADOR DECIDE QUE LA INSTITUCIN EVALUADA DETERMINE 4 LOS ESTANDARES, LE PERMITE REALIZAR UN ANLISIS DE CAUSA - EFECTO QUE EXPLIQUE LAS DISCREPANCIAS ENCONTRADAS.

3
LOS ESTANDARES PERMITEN DETERMINAR EL NIVEL DE DISCREPANCIA ENTRE LO QUE SE DESEA (LO IDEAL) Y LO QUE SE TIENE ( LO REAL).

54

LOS INSTRUMENTOS EN LA EVALUACIN EN EL DEBATE DE LOS PARADIGMAS

LOS PARADIGMAS DE INVESTIGACIN

PARADIGMA CUANTITATIVO

PARADIGMA CUALITATIVO

INSTRUMENTOS CERRADOS

INSTRUMENTOS ABIERTOS

PREGUNTAS CERRADAS CON ESCALAS

PREGUNTAS ABIERTAS

LA PERSPECTIVA DEL INVESTIGADOR

LA PERSPECTIVA DE LOS SUJETOS QUE SON ESTUDIADOS

LA SISTEMATIZACIN Y ANLISIS DE DATOS DESDE LA ESTADSTICA

LA SISTEMATIZACIN Y ANLISIS DE DATOS CON BASE EN UN PROCESO INDUCTIVO

55

LAS FUENTES DE INFORMACIN

DOS TIPOS DE FUENTES DE INFORMACIN

MATERIALES

HUMANOS

ARCHIVOS PROGRAMAS DOCUMENTOS OFICIALES REGISTRO DE NOTAS ACTA DE JUNTAS PRESUPUESTOS

DIRECTIVOS ADMINISTRADORES MAESTROS ALUMNOS PERSONAL PADRES DE FAMILIA PERSONAS DE LA COMUNIDAD

56

SISTEMATIZACIN Y ANLISIS DE LOS DATOS

COMO PROCESO DEDUCTIVO 1. ME ENFRENTO A UN ESQUEMA ALTERNATIVO 2. COMPARO EL ESQUEMA ALTERNATIVO CON MI ESQUEMA PREVIO. 3. RECONCILIO ELEMENTOS DEL ESQUEMA ALTERNATIVO EN EL ESQUEMA PREVIO 4. REESCRUCTURO EL ESQUEMA PREVIO CON LOS ELEMENTOS RECONCILIADOS LOS ANLISIS INDUCTIVOS Y DEDUCTIVOS SE REALIZAN SEGN EL INSTRUMENTO UTILIZADO. COMO PROCESO INDUCTIVO 1. CONCEPTUALIZACIN 2. CATEGORIZACIN 3. ORGANIZACIN 4 ESCRUCTURACIN

EL CICLO INDUCCIN - DEDUCCIN

COMPLEMENTARIEDAD DE LOS PROCESOS

LO CUANTITATIVO Y LO CUALITATIVO DEBEN INTEGRARSE EN LA EVALUACIN.

57

DOS FORMAS DE TRABAJAR EL DISEO: DESARROLLO DE DISEOS

1. SITUACIN DE EVALUACIN 2. CRITERIOS 3. ESTANDARES 4. INSTRUMENTOS 5. FUENTE DE INFORMACIN 6. SISTEMA DE ANLISIS LOS DATOS DE CADA SITUACIN DE EVALUACIN SE PONEN EN FORMA HORIZONTAL UNO TRAS OTRO. SE UTILIZA UNA HOJA PARA CADA SITUACIN DE EVALUACIN EN LA HOJA INCLUIR LOS DATOS Y SE PONEN VERTICALMENTE.

SIT. DE CRITE ESTAN INSTRU R. DE SISTEMA EVAL. RIOS DARES MENTOS INF DE ANLISIS EN LA EVALUACIN DIAGNSTICA EL NUMERO TOTAL DE LAS SITUACIONES DEBEN DAR UNA VISIN GLOBAL Y COMPLETA DEL PROGRAMA A EVALUAR 1.1 2.1 2.2 3.1 3.3 4.1

58

TRABAJO POSTERIOR AL DESARROLLO DEL DISEO

1. DETERMINAR EL NMERO DE INSTRUMENTOS QUE SE REQUERIRN PARA LA EVALUACIN.

2. DETERMINAR QU SITUACIONES DE EVALUACIN SERN INCLUIDAS EN CADA UNO DE LOS INSTRUMENTOS, INCLUYENDO SUS CRITERIOS.

3. ELABORAR CON LO REALIZADO EN LOS PUNTOS ANTERIORES UN MANUAL DE DECODIFICACIN.

4. PLANEAR EL PROCESO INSTRUMENTOS.

DE

ELABORACIN

EL

DISEO

DE

LOS

59

LOS INSTRUMENTOS EN LA EVALUACIN.

DESDE UNA PERSPECTIVA CUANTITATIVA DESDE UNA PERSPECTIVA CUALITATIVA

CERRADOS EXCLUYENTES SE CENTRA DESDE LA PERSPECTIVA DEL EVALUADOR

ABIERTOS INCLUYENTES SE CENTRA EN LA PERSPECTIVA DEL SUJETO ESTUDIADO.

OBSERVACIN ENTREVISTA CUESTIONARIO ENCUESTA ANLISIS DE DOCUMENTOS

60

LA OBSERVACIN: EL PROGRAMA OBSERVADO

ESCRUCTURADA DIRECTA NO ESCRUCTURADA

OBSERVACIN
ENTREVISTAS INDIRECTA CUESTIONARIOS DIARIO DE MAESTROS Y ALUMNOS SEALES FSICAS NO OBSTRUSIVAS ARCHIVOS, ANLISIS DE CONTENIDOS
R. MC. CORMICK Y . JAMES EVAUACIN DEL CURRICULO EN LOS CENTROS ESCOLARES ED. MORATA 1996

61

LOGROS DEL PROGRAMA

LA EVALUACIN DE LOGROS O DE RESULTADOS SE REFIERE A LOS SIGUIENTES ASPECTOS. LOGROS DIRECTOS + RESULTADOS DEL APRENDIZAJE + LOGRO DE LOS OBJETIVOS EDUCATIVOS + NIVEL DE SATISFACCIN CON EL PROGRAMA + IMPACTO SOCIAL DEL PROGRAMA

+ INCIDENCIA DE LOS INSUMOS EN LOS LOGROS + INCIDENCIA DE LOS PROCESOS EN LOS LOGROS + LOGROS Y RESULTADOS NO ANTICIPADOS

LOGROS INDIRECTOS

INSTRUMENTOS: + PRUEBAS CON BASE EN CRITERIOS + PRUEBAS DE CONOCIMENTO + ENTREVISTAS + CUESTIONARIOS ABIERTOS

62

LOS PROCESOS DEL PROGRAMA

POR PROCESOS DEL PROGRAMA SE ENTIENDE A LAS INTERACCIONES DE INSUMOS 1. LOS ANIMADOS CON OTROS ANIMADOS 2. ANIMADOS CON INANIMADOS EJEMPLOS: 1. MAESTRO - MAESTRO MAESTRO - ADMINISTRADORES MAESTRO - ALUMNO ALUMNO - ALUMNO 2. ALUMNO - LIBROS MAESTRO - METODOLOGA ALUMNO - ACTIVIDAD ESCOLAR MAESTRO - PROGRAMA INSTRUMENTOS + CUESTIONARIOS + ENTREVISTAS + OBSERVACIN + ENCUESTAS DE OPININ INTERACCIONES INTERPERSONALES

ACCIONES EDUCATIVAS

63

PROBLEMAS A RESOLVER EN LOS SISTEMAS DE OBSERVACIN ESCRUCTURADA

1. EL OBJETIVO DEL ESTUDIO 2. LA ELABORACIN DEL PLAN DE OBSERVACIN 3. EL CENTRO DE ATENCIN DE LA OBSERVACIN MAESTRO, ALUMNO, SITUACIN. 4. EL NMERO Y TIPO DE CATEGORIAS 5. LA FRECUENCIA DEL REGISTRO 6. EL PERODO DE OBSERVACIN 7. EL NMERO Y SELECCIN DE LAS PERSONAS QUE SERN OBSERVADAS
N. BENNET Y D. MC NAMARA FOCUS ON TEACHING: READINGS IN THE OBSERVATION AND CONCEPTUALIZATION OF TEACHING LONGMAN LONDRES 1979

64

CINCO CUESTIONES SOBRE VALIDEZ DE LA OBSERVACIN ESCRUCTURADA

1. VALIDEZ DE CONSTRUCTO: A) LOS ASPECTOS DE LA CONDUCTA QUE SE DESEAN MEDIR DIFIEREN DE CLASE A CLASE? B) LOS ASPECTOS DE LA CONDUCTA QUE SE DESEAN MEDIR SE MANTIENEN ESTABLES EN LA MISMA CLASE? C) CMO SE RELACIONAN LAS MEDIDAS DE LOS ASPECTOS DE LA CONDUCTA EN EL AULA? QU PRETENDE MEDIR EL SISTEMA CON OTROS ASPECTOS DE LA CONDUCTA EN CLASE, QUE ESTEN O NO RELACIONADAS CON ELLOS, DESDE LOS PUNTOS DE VISTA LGICO O TERICO 2. VALIDEZ DE CONTENIDO D) EL SISTEMA MIDE POR COMPLETO LOS ASPECTOS DE LA CONDUCTA DE CLASE QUE PRETENDE? E) LOS ASPECTOS DE LA CONDUCTA EN EL AULA QUE EL SISTEMA PRETENDE MEDIR POR COMPLETO EXISTEN EN LAS CLASES REALES?

65

CRITICAS A LA OBSERVACIN ESCRUCTURADA

1. LOS SISTEMAS CATEGORIALES MUESTRAN UNA CONCEPCIN RESTRINGIDA DE LA REALIDAD. 2. LOS SISTEMAS CATEGORIALES SLO PROPORCIONAN UNA DESCRIPCIN PARCIAL DE LA CONDUCTA EN EL AULA.

3. LOS SISTEMAS CATEGORIALES QUE EXISTEN REFLEJAN LOS SUPUESTOS DE LA REALIDAD DE UN LUGAR Y SON INADECUADOS EN OTROS CONTEXTOS.

4. LA OBSERVACIN ESCRUCTURADA 5. LA PREOCUPACIN POR LA CUANTIFICACIN REVELA LA FALTA DE PREOCUPACIN ES INECESARIA SOBRE TODO PARA QUIENES POR LOS SIGNIFICADOS VINCULADOS ESTAN INTERESADOS EN QUE LOS MAESTROS A LAS CONDUCTAS DE ALUMNOS Y INVESTIGUEN SU QUEHACER EN EL AULA. MAESTROS.

66

EL REPORTE DE LA EVALUACIN (1)

LAS AUDIENCIAS
CLARO OPORTUNO EXACTO VALIDO AMPLIO TIL VIABLE TICO PRECISO INTELIGIBLE 1. LA COMUNIDAD CIENTFICA INVESTIGADORES Y EVALUADORES 2. LOS QUE DISEAN LAS POLTICAS 3. LOS QUE TOMAN LAS DECISIONES + DEBE MANIFESTAR EL NIVEL DE AUDIENCIA + DEBE EXPLICITAR LA POSTURA 4. LAS PERSONAS QUE ESTN INTERPRETATIVA INVOLUCRADAS EN LA PRCTICA + DEBE EXPLICITAR EL COMPROMISO PERSONAL 5. LA COMUNIDAD, OBJETO DEL PROGRAMA

67

EL REPORTE DE LA EVALUACIN (2)

LOS INTERESES DE LA AUDIENCIAS LOS EXPERTOS LOS QUE DISEAN LOS QUE TOMAN LOS QUE ESTAN LA COMUNIDAD POLTICAS LAS DECISIONES EN LA PRCTICA OBJETO DEL PROGRAMA

ES EL REPORTE ADECUADO EN LO TERICO ?

DA EL REPORTE PISTAS PARA DETEMINAR POLTICAS ?

AYUDA EL REPORTE PARA TOMAR DECISIONES?

EN QUE FORMA EL REPORTE AYUDA A ENRIQUECER LA PRCTICA ?

EN QUE MEDIDA EL REPORTE RETRATA LA REALIDAD CONCRETA ?

LOGICA DE PRODUCCIN La metodologa

LOGICA DE APLICACIN Instrumentacin

LOGICA DE CONGRUENCIA Claridad y oportunidad

LGICA DE : +TRANSFERENCIA +VIABILIDAD +INTERVENCIN

LGICA DE EXACTITUD Y CONGRUENCIA DESRIPTIVA

68

UNA TIPOLOGIA PARA LA INFORMACIN DEL REPORTE

INFORMACIN CONOCIDA
"A" 1. TENER CUIDADO DE QUE LA INFORMACIN SEA TRIVIAL Y DE POCA IMPORTANCIA 2. CUIDAR LOS ENMARQUES INTERPRETATIVOS DE LOS DATOS PARA NO ARRIESGAR LA CREDIBILIDAD DE LA EVALUACIN LOS QUE TOMAN DECISIONES AUDIENCIAS LOCALES LOS DISEADORES DE POLTICAS LOS PRACTICANTES

INFORMACIN NO CONOCIDA

INFORMACIN VISTA DE UNA MANERA POSITIVA

INFORMACIN VISTA DE UNA MANERA NEGATIVA

"C" 1. ES LA MENOS PROBLEMTICA PARA REPORTAR 2. CUMPLE UNA FUNCIN EDUCATIVA 3. PREPARA PARA RECIBIR LA INFORMACIN DESAGRADABLE 4. CONVIENE ALTERNARLA CON "D" 5. CON "A" PROPICIA INTUICIONES 6. ESTIMULA UNA REFLEXION SOBRE LAS PRACTICAS 7. ES FUENTE PARA LOS DATOS "D" AUDIENCIAS LOCALES LOS QUE TOMAN DECISIONES LOS PRACTICANTES "B" "D" 1. ES INFORMACIN QUE PUEDE DESPERTAR LAS 1. ES UNA INFORMACIN QUE DEBE MANEJARSE CON SENSIBILIDADES Y HACER RUIDO CUIDADO 2. ES LA INFORMACIN OCULTA EN EL ARMARIO 2. ES PRUDENTE EXCLUIRLA Y SOLO DARLA A 3. SOLO DARLA CUANDO SEA CLAVE Y ESCENCIAL EN LA PERSONAS CLAVE EN EL PROGRAMA TOMA DE DECISIONES 3. ES TIL CUANDO ES BENEFICA A LOS USUARIOS DEL PROGRAMA EVALUADO TAMBIEN CUANDO NO LOS QUE TOMAN DECISIONES EXISTEN MUCHOS INTERESES EN JUEGO. LOS DISEADORES DE POLTICAS LOS QUE TOMAN DECISIONES LOS DISEADORES DE POLTICAS

69

ASPECTOS A CONSIDERAR PARA EL REPORTE

1. DETERMINAR A QU GRUPOS DE PERSONAS SE VAN A REPORTAR LOS RESULTADOS 2. DETERMINAR EL NMERO DE REPORTES QUE SE VAN A PRESENTAR 3. DEFINIR LOS CONTENIDOS QUE SE VAN A INCLUIR EN CADA REPORTE 4. PREVER LA MECNICA DEL REPORTE 5. PROVEER LOS APOYOS TCNICOS QUE SE VAN A NECESITAR PARA LA PRESENTACIN 6. ANTICIPAR POSIBLES CUESTIONAMIENTOS QUE PUEDAN SURGIR DE PARTE DE LA AUDIENCIA

70

EVALUACIN, PLANEACIN Y DISEO CURRICULAR

LA PLANEACIN 1. DIAGNSTICO DE NECESIDADES 2. FINES, OBJETIVOS Y METAS 3. POLTICAS, PROCEDIMIENTOS CURSOS DE ACCIN, PROGRAMAS 4. RECURSOS + MATERIALES + HUMANOS + TCNICOS + INFRAESRUCTURA + ECONOMICOS EL DISEO CURRICULAR EL ANLISIS LA REALIDAD LOS OBJETIVOS CURRICULARES CONTENIDOS MATERIAS SECUENCIAS METODOLOGAS ESTRATEGIAS CURRICULARES ACTIVIDADES EVALUACIN. LOS RECURSOS QUE EL PROYECTO EDUCATIVO REQUIERE SINTESIS (1) LA EVALUACIN EVALUACIN DEL CONTEXTO EVALUACIN DE PRODUCTO Y LOGROS EVALUACIN DE LOS PROCESOS

EVALUACIN DE LOS INSUMOS

71

FASES DE LA EVALUACIN (1)

PRIMERA FASE: DETERMINAR LOS SUPUESTOS BSICOS 1. SE SOLICITAN LOS SERVICIOS DE UN EVALUADOR PARA EVALUAR UN PROGRAMA O INSTITUCIN 2. EL EVALUADOR DEFINE CON LA INSTITUCIN LAS SITUACIONES DE EVALUACIN CON BASE EN UN MODELO 3. SE DELIMITAN Y PRIORIZAN LAS SITUACIONES DE LA EVALUACIN SEGN NECESIDADES CONCRETAS 4. EL EVALUADOR Y LA INSTITUCIN DEFINEN LOS CRITERIOS CUALITATIVOS Y LOS ESTANDARES CUANTITATIVOS PARA CADA UNA DE LAS SITUACIONES 5. SE ELABORA UN CRONOGRAMA DE TRABAJO PARA EL RESTO DEL PROCESO EVALUATIVO

SINTESIS (2)
ACTIVIDADES CONCRETAS A) ELABORACIN DE UN ANTEPROYECTO QUE DEBE PRESENTARSE A LAS PERSONAS QUE SOLICITARON LA EVALUACIN B) UNA VEZ APROBADO EL ANTEPROYECTO SE TIENE QUE COORDINAR UNA SERIE DE REUNIONES CON UN EQUIPO DE LA INSTITUCIN PARA DETERMINAR LOS SUPUESTOS BASICOS DE LA EVALUACIN SITUACI ONES CRITERIOS ESTANDARES C) ELABORACIN Y REDACCIN DE UN CRONOGRAMA DE TRABAJO

72

FASES DE LA EVALUACIN (2)

SEGUNDA FASE: LA INSTRUMENTACIN DE LA EVALUACIN 1. SEALAR PARA CADA UNA DE LAS SITUACIONES LOS POSIBLES INSTRUMENTOS CON BASE EN LOS CUALES SE RECABA LA INFORMACIN 2. DEFINIR PARA CADA UNA DE LAS SITUACIONES LAS FUENTES DE INFORMACIN QUIN DARA LA INFORMACIN ? 3. DETERMINAR EL SISTEMA DE ANLISIS PARA CADA UNA DE LAS SITUACIONES 4. REALIZAR UNA SNTESIS DE LOS INSTRUMENTOS QUE SE REQUERIRN 5. ELABORAR LOS INSTRUMENTOS PARA LA EVALUACIN 6. PROBAR Y AFINAR LOS INSTRUMENTOS ANTES DE APLICARLOS

SNTESIS (3)
ACTIVIDADES CONCRETAS A REALIZAR A) REUNIONES DEL EVALUADOR CON EL EQUIPO INSTITUCIONAL PARA DETERMINAR INSTRUMENTOS FUENTES DE INFORMACIN Y SISTEMAS DE ANALISIS B) ELABORAR UNA SNTESIS DE LOS INSTRUMENTOS QUE SE VAN A DESARROLLAR C) ELABORACIN DE LOS INSTRUMENTOS DETERMINADOS A) VARIABLES (SITUACIONES) E INDICADORES (CRITERIOS) A INCLUIR EN CADA INSTRUMENTO B) LAS VARIABLES DEMOGRAFICAS A INCLUIR EN LOS INSTRUMENTOS C) EL FORMATO DE LOS INSTRUMENTOS D) ELABORAR LOS INSTRUMENTOS E) HACER UN MANUAL DE DECODIFICACIN

F) PILOTEAR LOS INSTRUMENTOS CUANDO

SE REQUIERA

73

FASES DE LA EVALUACION (3)

TERCERA FASE: APLICACIN Y ANLISIS DE LOS DATOS 1. APLICAR LOS INSTRUMENTOS A LAS FUENTES DE INFORMACIN Y MUESTRAS PREVIAS 2. RECOLECTAR SISTEMTICAMENTE LOS DATOS 3. ORGANIZAR LOS DATOS DE ACUERDO AL MANUAL DE DECODIFICACIN EN LOS INSTRUMENTOS CERRADOS 4. SISTEMATIZAR LOS DATOS DEDUCTIVAMENTE PARA INSTRUMENTOS ABIERTOS 5. ANALIZAR E INTERPRETAR LOS DATOS Y RESULTADO DE ACUERDO A LA METODOLOGA PREVISTA 6. DETERMINAR LAS DISCREPANCIAS ENCONTRADAS EN CADA SITUACIN EVALUADA

SNTESIS (4)
LAS ACTIVIDADES CONCRETAS A REALIZAR A) APLICAR LOS INSTRUMENTOS B) ORGANIZAR LA INFORMACIN RECABADA SEGN LA METOLOGA UTILIZADA PARA LOS INSTRUMENTOS CERRADOS UTILIZANDO EL MANUAL DE DECODIFICACIN Y SEGN LA TECNICA ESTADSTICA PREVISTA EN LOS INSTRUMENTOS ABIERTOS LA SISTEMATIZACIN ES INDUCTIVA CONCEPTUALIZAR CATEGORIZAR ORGANIZAR ESCRUCTURAR D) REALIZAR EL ANLISIS DE LOS DATOS Y E) ELABORAR LAS CONCLUSIONES SEGN LAS DISCREPANCIAS ENCONTRADAS F) PREVER CONTENIDO DEL REPORTE FINAL Y DE LOS REPORTES PARCIALES QU REPORTAR Y A QUIN?

74

FASES DE LA EVALUACIN (4)

CUARTA FASE: EL REPORTE DE LA EVALUACIN 1. DISEAR Y ELABORAR EL REPORTE FINAL 2. DISEAR Y ELABORAR LOS REPORTES PARCIALES SEGN LAS DIFERENTES AUDIENCIAS 3. ELABORAR CRONOGRAMA PARA LAS SESIONES DE PRESENTACIN 4. DETERMINAR EL MATERIAL DE APOYO QUE SE VA A REQUERIR EN CADA UNA DE LAS PRESENTACIONES 5. REALIZAR LAS PRESENTACIONES DE LOS RESULTADOS SEGN LO PREVISTO EN EL CRONOGRAMA

SINTESIS (5)
LAS ACTIVIDADES CONCRETAS A REALIZAR A) REDACTAR EL INFORME GLOBAL Y LOS PARCIALES B) DISEAR LAS SESIONES DE PRESENTACIONES QU, QUIN, CMO, CUNDO, DNDE Y POR QU? C) ELABORACIN DEL MATERAL DE APOYO PARA LAS SESIONES DE PRESENTACIN MATERIAL ESCRITO FILMINAS ACETATOS VIDEO D) PRESENTAR LOS RESULTADOS DE LA EVALUACIN DE ACUERDO A LA PROGRAMACION PREVISTA EN EL CRONOGRAMA