Вы находитесь на странице: 1из 47

Fuente: UNAM, http://biblioweb.dgsca.unam.mx/libros/mexico/inicio.

html

EVALUACIN EDUCATIVA

PORTAFOLIO DE INSTRUMENTOS. DOCUMENTO DE TRABAJO DEL CURSO ELABORACIN DE INSTRUMENTOS DE MEDICIN PARA EL MBITO EDUCATIVO

Primera edicin: 2008 / Actualizacin: Enero 2014

Becerra-Gonzlez / Portafolio de instrumentos

NDICE
INSTRUMENTOS DE EJECUCIN DE LOS ALUMNOS ............................ 3 PRUEBA DE ENSAYO ..................................................................................... 4
Ejemplo de Tabla de Especificaciones e instrumento para Prueba de Ensayo......6

MAPA CONCEPTUAL .................................................................................... 10


Ejemplo de Tabla de Especificaciones e instrumento para Mapa Conceptual .....11

INSTRUMENTOS DE APOYO A LA OBSERVACIN ............................... 13 LISTAS DE COMPROBACIN (COTEJO O VERIFICACIN) ...................... 14


Ejemplo de Tabla de Especificaciones e instrumento para Lista de Comprobacin ..................................................................................................... 15 ESCALA GRFICA ........................................................................................ 17 Ejemplo de Tabla de Especificaciones e instrumento para Escala Grfica ..........19 ESCALA NUMRICA ..................................................................................... 24 Ejemplo de Tabla de Especificaciones e instrumento para Escala Numrica ......25 ESCALA DESCRIPTIVA................................................................................. 29 Ejemplo de Tabla de Especificaciones e instrumento para Escala Descriptiva....31 RBRICA O MATRIZ DE VALORACIN ....................................................... 35 Ejemplo de Tabla de Especificaciones e instrumento para Rbrica .....................36

ESTRATEGIAS DE EVALUACIN ................................................................ 40 PORTAFOLIO ................................................................................................ 41 EXMENES ORALES .................................................................................... 43 OBSERVACIN ............................................................................................. 44 USO RECOMENDADO DE CADA INSTRUMENTO ................................... 45 BIBLIOGRAFA RECOMENDADA ................................................................. 46

http://tutoredgardo.net/

Pgina | 2

Becerra-Gonzlez / Portafolio de instrumentos

INSTRUMENTOS DE EJECUCIN DE LOS ALUMNOS


(Instrumentos que responde el alumno y que califica el profesor)

http://tutoredgardo.net/

Pgina | 3

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde. Definicin.

PRUEBA DE ENSAYO
El evaluado Instrumento de evaluacin compuesto por una/algunas pregunta/s de las que se espera una respuesta libre por parte del evaluado.

Uso.

- Determinar la capacidad de seleccionar, organizar, integrar, relacionar y valorar ideas. - Conocer cmo piensa el estudiante. - Proporcionar varios datos de evaluacin. - Evaluar pensamiento crtico.

- Para evaluar grupos pequeos. - Mide directamente el pensamiento complejo. Rasgos distintivos. - Se elimina la adivinacin. - Enfatiza la integracin y aplicacin de habilidades de: Anlisis, Sntesis,
Evaluacin, Pensamiento lgico, Resolucin de problemas, Hiptesis.

Limitantes.

- Dificultad de puntuar objetivamente. - Consumen tiempo. - Respuestas influenciadas por la habilidad de escritura de los estudiantes.
Grounlud - Respuesta restringida respuesta extensiva; Ornstein - Comparar, Clasificar, Enlistar, Resumir, Organizar, Analizar, Aplicar, Inferir, Deducir, Sintetizar, Justificar, Evaluar, Predecir, Crear.

Clasificacin.

- Especificar lmites. - Estructurar de la tarea. - Hacer cada tem relativamente corto e incrementar el nmero de tems. - Dar a todos los estudiantes las mismas preguntas de ensayo. - Hacer preguntas de manera directa. Elaboracin. - Cada palabra de la pregunta debe ser tan simple y clara como sea posible. - Preparar suficientes preguntas para cubrir el contenido total. - Hacer preguntas que requieran un pensamiento complejo. - Hacer preguntas con respuestas generalmente aceptadas. - Aplicar una muestra de preguntas antes de la prueba. - Explicar las tcnicas de puntuacin previamente. - Preparar con anticipacin un esbozo de la respuesta esperada. - Usar un mtodo de calificacin: Por puntos. Compara cada respuesta con la contestacin ideal y
Calificacin. asignar puntos. De tasacin: Dividir los ensayos en montones de calidad y asignar calificacin. - Calificar todas las respuestas a una pregunta antes de pasar a la siguiente. - Calificar sin ver el nombre del alumno.

http://tutoredgardo.net/

Pgina | 4

Becerra-Gonzlez / Portafolio de instrumentos

- Para decisiones importantes, recolectar dos calificaciones independientes. - Volver a leer los ensayos despus de decidir la calificacin final. - Hacer comentarios en las hojas para indicar las bases para el puntaje.

http://tutoredgardo.net/

Pgina | 5

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Prueba de Ensayo


CIENCIAS SOCIALES Grado: SEGUNDO DESARROLLO Asignatura: Grupos: MOTIVACIONAL Horas: T: 9, P: 18 HRS. Profesor: Reflexionar sobre la motivacin en la propia persona y el momento que vive en su Objetivo de condicin de adolescente, revisando los elementos que conllevan el pensamiento asignatura creativo, la toma de decisiones y la planeacin para desarrollar un perfil emprendedor. Aplicar los procesos mentales involucrados en el uso de las herramientas en diferentes Examen: Extraordinario Propsito: situaciones de la vida diaria. Categora Uni Conten Resultados de Objetivos de aprendizaje No. % cognoscitiva dad idos aprendizaje Academia:
Con Com Apl

Introduc cin a la creativi dad

Comprender algunas caractersticas del acto creativo y de sus manifestaciones. Analizar enfoques para desarrollar la creatividad. Comprender el significado y estructura de las diferentes herramientas del pensamiento. Aplicar los procesos mentales involucrados en el uso de las herramientas en diferentes situaciones de la vida diaria. Conocer el proceso de toma de decisiones. Comprender la importancia de tomar una decisin.

Herrami entas del proceso creativo

Toma de decision es

Aplicar las habilidades de pensamiento.

Explicar el pensamiento convergente y el divergente. Identificar las caractersticas de las personas creativas. Explica las caractersticas de las herramientas del pensamiento. Emplear las herramientas del pensamiento en la solucin de problemas. Definir qu es una toma de decisin. Explicar los componentes de la toma de decisiones. Decidir sobre una situacin, empleando las herramientas del pensamiento. TOTAL

20

20

20

---

---

20

20

100

http://tutoredgardo.net/

Pgina | 6

Becerra-Gonzlez / Portafolio de instrumentos


Nombre: _______________________________________________________________ Grupo: ___________________________________________

INSTRUCCIONES. Lee con atencin cada una de las preguntas que se te presenta a continuacin. Respndelas en la parte inferior o anverso de la hoja. PREGUNTAS 1. Explica los dos tipos de pensamiento humano, sealando caractersticas, aplicaciones y un ejemplo de cada uno (valor 8 pts.) 2. Explica algunas caractersticas de las personas creativas (2 pts.) 3. Describe las caractersticas de las herramientas del pensamiento humano (PNI, PMO. APO, CyS, PB, OPV, ER), considerando su uso y formato de presentacin (valor 20 pts.) 4. Explica los componentes presentes en la toma de decisiones, sealando su importancia y ejemplifica cada uno (valor 20 pts.) 5. Resuelve el siguiente problema empleando las herramientas del pensamiento humano (valor 50 pts.) Ests a punto de concluir tu bachillerato y has decidido continuar estudiando. Hoy se ha publicado la convocatoria para presentar el examen en las tres instituciones pblicas de educacin superior de la zona (UNAM, Politcnico y UAM). En sa se enlistan los requisitos que debes cumplir para completar el trmite. La fecha de examen es dentro de un mes, cada institucin en un da diferente, y no habr una segunda oportunidad. A ti te interesa estudiar una carrera que es nueva y no ests seguro si alguna de esas instituciones la ofrece, aunque s conoces una universidad privada que la tiene, pero desconoces los costos de inscripcin y colegiatura as como el plan de estudios. Tus padres no saben si les alcanzar poder costearte los estudios, por eso te han sugerido intentes presentar el examen a la escuelas pblicas. Cul es tu decisin? Fundamenta tu respuesta anexando las herramientas del pensamiento que consideres necesarias para esto.

Valor total del examen 100 pts.

http://tutoredgardo.net/

Pgina | 7

Becerra-Gonzlez / Portafolio de instrumentos


Nombre: _______________________________________________________________ Grupo: ___________________________________________

INSTRUCCIONES. Lee con atencin cada una de las preguntas que se te presenta a continuacin. Respndelas en la parte inferior o anverso de la hoja. PREGUNTAS 1. Explica los dos tipos de pensamiento humano, sealando caractersticas, aplicaciones y un ejemplo de cada uno (valor 8 pts.) 2. Explica algunas caractersticas de las personas creativas (2 pts.) 3. Describe las caractersticas de las herramientas del pensamiento humano (PNI, PMO. APO, CyS, PB, OPV, ER), considerando su uso y formato de presentacin (valor 20 pts.) 4. Explica los componentes presentes en la toma de decisiones, sealando su importancia y ejemplifica cada uno (valor 20 pts.) 5. Resuelve el siguiente problema empleando las herramientas del pensamiento humano (valor 50 pts.) Ests a punto Fundamenta tu respuesta anexando las herramientas del pensamiento que consideres necesarias para esto. Valor total del examen 100 pts. COMPONENTES MNIMOS DE RESPUESTA
1. Pensamiento vertical o convergente. Busca soluciones lgicas y respuestas correctas, se regula por el hemisferio izquierdo del cerebro, es el que desarrollan los cientficos. Pensamiento lateral o divergente. Es llamado creativo, no existe una solucin nica, se regulador el hemisferio derecho del cerebro, es el que desarrollan los artistas. espontneas (no requieren demanda del exterior), imaginativas (buscan y ofrecen soluciones novedosas a problemas), organizadas (disciplina personalizada en su trabajo), flexibles (adaptables al entorno), originales (se desarrollan con novedad), curiosos (exploran alternativas en su entorno), sensitivos (piensan en el entorno), persistentes (ejecutan tareas sin perder el objetivo, hasta cumplirlo), atentos (se centran con facilidad en su tarea), tolerantes (aceptan lo que en el entorno les es contrario). PMO. Planteamiento de metas y objetivos, permite identificar las metas que son guas para las acciones. PNI. Positivo, negativo e interesante, evita la subjetividad y ayuda a identificar puntos de anlisis. OPV. Otros puntos de vista, ayuda a evitar el egocentrismo. APO. Alternativas, posibilidades y oportunidades, dirige la atencin hacia la bsqueda de alternativas y ayuda a salir de lo convencional. CTF. Considere todos los factores; atrae la atencin hacia los puntos que deben considerarse para tomar una decisin. CyS. Consecuencias y secuelas; identificar las consecuencias de las decisiones evaluando mejor lo que pensamos y evitar errores. PB. Prioridades bsicas; permite reconocer los ms importante al elegir factores, definir objetivos. ER. Establecimiento de reglas; establecen normas de funcionamiento, sirven para facilitar la convivencia, tiles en situaciones de emergencia. El factor ms importante es el tiempo. Toda eleccin conlleva dos o ms que deben analizarse. En la decisin interviene la razn (valoracin, rdenes, costumbres) y las emociones (caprichos, adicciones). Deben emplear al menos PMO, PNI, CTF, sealar su decisin y explicar por qu.

2.

3.

4.

5.

http://tutoredgardo.net/

Pgina | 8

R1 R2 R3 R4 R5 Tot Val. Pts. Descripcin

R1 R2 R3 R4 R5 Preestrut urada 0
No entiende la pregunta, adivina proporciona definiciones tautolgicas.

8 2 20 20 50

http://tutoredgardo.net/ 1 Valor reactivo


Slo menciona una pieza relevante de informacin.

Uniestruct urada

3 4

Menciona dos o tres elementos relacionados con la pregunta pero sin desarrollarlos. Menciona un nmero diverso de elementos, sin desarrollarlos

Puntos obtenidos 5 7 Puntos mximos

Multiestructurada Bajo Medio Alto

Menciona diversos elementos relacionados con la pregunta, los elabora e ilustra. Generaliza ideas y forma prrafos en una parte del ensayo.

Bajo

FICHA DE EVALUACIN DE EXAMEN

TOTAL Calificacin reactivo

Relacional Medio

8 9

Generaliza ideas en diferentes partes del ensayo.

Alto

Generalizacin completa en todo el ensayo.

Becerra-Gonzlez / Portafolio de instrumentos

Pgina | 9

Abstra ccin extens in

10

Generaliza ideas y desarrolla crticas sobre el tema o disciplina

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde.

MAPA CONCEPTUAL
Elabora el alumno y califica el profesor

Tcnica grfica que seala relaciones entre conceptos de un dominio. Se emplea para evaluar. Definicin. Como tcnica de evaluacin es el conjunto de procedimientos para medir aspectos importantes de la organizacin y estructura del conocimiento declarativo de los estudiantes. Uso.

- Medir y evaluar la estructura del conocimiento de los estudiantes


-De los tipos de dominio del conocimiento: declarativo, procesal y estratgico (qu, cmo, por qu-cundo) corresponde al primero. -Refleja directamente la comprensin sobre un dominio. -Es una tarea para evidenciar la estructura de conocimiento del alumno, un formato de respuesta y un sistema de calificacin. -Como tarea vara de acuerdo al grado de direccin que se imponga. -Evala cuali y/o cuantitativamente estrategias de construccin personal -Evala cmo estructuran los alumnos su conocimiento -Permite evaluar grupos de tamao diverso -Evaluacin integral o analtica, de pendiendo de la escalada adoptada -Requiere de quien elabore la escala y el mapa criterio -Requiere de tiempo para la construccin de la estrategia, el criterio y la escala -Evala el nivel declarativo, no procesal ni estratgico

Rasgos distintivos.

Ventajas

Limitantes.

- De acuerdo al grado de direccin puede ser total o nulamente dirigido, dentro de un continuo:
Grado de direccin

Clasificacin.
Conceptos, ligas, conectores y estructura Proporcionado por el profesor Elaborado por el alumno

1. 2. 3. 4. Elaboracin. 5. 6.

Definir el constructo y sus dimensiones a evaluar. Identificar proposiciones, con nodos y ligas, sustanciales sobre el dominio. Definir tipo de calificacin (con base en escala o criterio) Construir un mapa considerando las proposiciones sustanciales Definir escala (dico o politmica) Describir los extremos de la escala y, de ser necesario los puntos intermedios 7. Asignar baremos cuanti y cualitativos a cada nivel del continuo descrito 8. Considerar tiempo y esfuerzo para mostrar evidencia. -Se puede calificar de acuerdo a un mapa criterio o a la calidad de la proposiciones (con una escala dico o politmica) -Definir los atributos a calificar (ej. organizacin, comprensin, precisin) -Se coteja el mapa con la escala o criterio -Se suman los puntos obtenidos

Calificacin.

http://tutoredgardo.net/

Pgina | 10

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Mapa Conceptual


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: MAPA CONCEPTUAL DEFINICIN DE MAPA COCNEPTUAL Mapa Conceptual Definir al mapa conceptual, completando un mapa.

Contenido

Resultado de aprendizaje

Indicador

Nivel cognitivo Con Com Apl

Reactivos # %

DEFINIFIN, USO Y UTILIDAD DEL MAPA CONCEPTUAL

Definir al mapa conceptual

Sealar al mapa conceptual como herramienta de aprendizaje Sealar al mapa conceptual como tcnica de estudio Indicar el uso del mapa conceptual en informes Indicar el uso del mapa conceptual en investigacin Indicar el uso del mapa conceptual en educacin Indicar el uso del mapa conceptual en otras reas Especificar que el mapa permite al alumno organizar el conocimiento Especificar que el mapa permite al docente construir y explorar conocimiento de sus alumnos Sealar que el mapa conceptual es til para fomentar reflexin, anlisis y creatividad

11

X X X

1 1 1

11 11 11

11

11

11

11

X Total

1 9

11 100

http://tutoredgardo.net/

Pgina | 11

Becerra-Gonzlez / Portafolio de instrumentos

Nombre: ________________________________________________________________________________ Grupo: ________________________________ INSTRUCCIONES: Completa el siguiente mapa conceptual escribiendo los conceptos que faltan en los nodos.

MAPAS CONCEPTUALES son

HERRAMIENTAS de APRENDIZAJE utilizadas en

TCNICA permiten al de ESTUDIO DOCENTE ALUMNO

la

la

fomentan la

y PREESCOLAR UNIVERSIDAD INFORMES TESIS DE INVESTIGACIN CONSTRUCCIN EXPLORACIN ORGANIZACIN del CONOCIMIENTO REFLEXIN ANLISIS CREATIVIDAD

Valor 13 pts.

http://tutoredgardo.net/

Pgina | 12

Becerra-Gonzlez / Portafolio de instrumentos

INSTRUMENTOS DE APOYO A LA OBSERVACIN


(Instrumentos que emplea el evaluador para calificar el desempeo de los alumnos con base en la observacin)

http://tutoredgardo.net/

Pgina | 13

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde. Definicin.

LISTAS DE COMPROBACIN (COTEJO O VERIFICACIN)


El evaluador Lista de factores, propiedades, aspectos, tareas o dimensiones de un objeto a evaluar.

Uso.

- Verificar la presencia o ausencia de una atributo o proceso en el objeto evaluado. - Para calificar procedimientos y/o productos de ejecuciones, comprensin o desempeo en otras pruebas

- Puede haber listas de orientacin de ejecucin de la tarea. - Son dicotmicas (presencia, ausencia) - Reducen el efecto halo Rasgos distintivos. - Se entienden fcilmente - Maneja muchos datos conjuntados - Se les llama tambin de cotejo o verificacin
Limitantes.

- Requieren observador experto - Quien observe debe conocer perfectamente la lista. - Quien califique debe saber cmo.
De sper. - No hay orden Secuencial. - Fuerte. Si se cumple A entonces B - Dbil. No importa el orden pero si la presencia. Iterativa. - Requiere re-leerse varias veces Diagnstica. - Se basa en un diagrama de flujo De mrito. - Con base en un criterio, con peso en puntos

Clasificacin.

- Se define el constructo y sus dimensiones. - De las dimensiones se sealan indicadores y criterios de ejecucin. - Cada punto debe ser criterio no indicador. Elaboracin. - Los criterios se ponderan por importancia, ocurrencia, necesidad o utilidad. - Se definen los descriptivos de la escala dicotmica. - Se define el procedimiento de calificacin. - Se elaboran instrucciones con ejemplo. - Se ponderan los criterios. - Se asigna puntaje segn ponderacin. Calificacin. - Se califica por norma (media y desviacin) o por criterio (puntuacin mxima
posible, puntuacin mnima aprobatoria o porcentaje de criterios presentes. - Se valida (constructo, aparente, contenido, criterio) y se seala su confiabilidad (consistencia, estabilidad y entre jueces)

http://tutoredgardo.net/

Pgina | 14

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Lista de Comprobacin


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: Evaluacin del aprendizaje. Prueba objetiva. Lista de comprobacin. Evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple, verificando la presencia de sus atributos elementales, para obtener la validez aparente del instrumento.

Contenido

Resultado de aprendizaje

Indicador Elaborar reactivos con formato y redaccin adecuada Elaborar distractores vlidos Elaborar instrucciones adecuadas a los reactivos Incluir grficos o texto adecuados para apoyar la resolucin de reactivos

Nivel cognitivo Con Com Apl

Reactivos # %
7 27

Reactivos de opcin mltiple

Elaborar reactivos de opcin mltiple vlidos

31

23

19

Total

26

100

http://tutoredgardo.net/

Pgina | 15

Becerra-Gonzlez / Portafolio de instrumentos

LISTA DE VERIFICACIN DE REACTIVOS


La presente lista tiene por objetivo verificar la presencia de atributos en los reactivos de una prueba objetiva de opcin mltiple. Lea las afirmaciones y marque la celda SI en caso de que el reactivo cumpla con el atributo o marque la celda NO en caso contrario, marque la celda NA si el atributo No Aplica para el reactivo. Sume el total de cada columna, multiplique el total de la columna SI por 100 y divdalo entre la suma de los totales de las columnas SI y NO.
Indique si el reactivo 1 Est numerado 2 Posee distractores u opciones de respuesta 3 Posee grficos o apoyos textuales 4 Posee instrucciones 5 Est redactado con lenguaje claro y sencillo 6 Est redactado de manera positiva 7 Presenta slo un problema por resolver 8 Es adecuado para la edad a quien va dirigido 9 Mide el resultado de aprendizaje sealado en la tabla de especificaciones 10 Corresponde al nivel cognitivo sealado en la tabla de especificaciones Si el reactivo posee distractores seale si 11 Poseen vietas homogneas 12 Se distinguen de la base del reactivo 13 Estn ordenados segn su extensin 14 Estn redactados con lenguaje claro y sencillo 15 Son plausibles 16 Evitan proporcionar pistas para la solucin del mismo reactivo 17 Posee slo una respuesta correcta 18 La respuesta sealada como correcta parece serlo Si el reactivo posee instrucciones indique si 19 Se incluyen como parte de la base del reactivo 20 Poseen ortografa adecuada 21 Estn redactadas con lenguaje sencillo 22 Son comprensibles 23 Son plausibles Si el reactivo posee apoyos grficos o textuales indique si 24 Son congruentes con el resto del reactivo 25 Las grfica tiene los rtulos de nombre y ejes (apoyo grfico) 26 Incluye el ttulo y autor del texto (apoyo textual) 27 El apoyo textual est redactado adecuadamente o el apoyo grfico es ntido. Total Porcentaje SI NO NA

SI

NO

NA

SI

NO

NA

SI

NO

NA

http://tutoredgardo.net/

Pgina | 16

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde.

ESCALA GRFICA
El evaluador ESCALA. Serie de rangos descriptivos o numricos de un continuo, empleados para evaluar o juzgar niveles especficos de desempeo. Escala grfica. Tcnica observacional que consiste en presentar descripciones o caractersticas a lo largo de un continuo, vertical u horizontalmente

Definicin.

- Evaluar desempeo, procesos o productos Uso. - En ambos casos el evaluador necesita conocer el objeto y sus dimensiones. - Si es una escala de proceso debe atender tanto al procedimiento correcto
como al incorrecto (errores frecuentes). FORMATO - Al menos tres diferentes formatos, que se distinguen por la lnea continua o segmentada. - No hay evidencia que se afecte la precisin. - Se describen los extremos y/o el centro

- Su uso depende de las caractersticas del objeto a evaluar.


forma 1 Lnea segmentada Excelente Bueno Regular Malo Psimo forma 2 Lnea continua, niveles delimitados : Excelente Bueno : Regular : Malo : Psimo

Rasgos distintivos.

forma 3 Lnea continua

Excelente

Bueno

Regular

Malo

Psimo

- Calificacin rpida Ventajas. - tiles para procesos y productos - Abarcan una o ms dimensiones de
un mismo constructo

- Son objetivas - Pueden analizarse cuali o


cuantitativamente

- El evaluador requiere conocer el objeto - Se requiere capacitacin para la


Limitantes. calificacin - Susceptible de acarreamiento (efecto halo)
Problema Solucin Falta de Capacitacin entrenamiento Calificar un rasgo a la vez, Evitarlo o Que no Acarreamiento se reconozca el nombre del sujeto Indulgencia Cuidar descriptivos de (calificar con la escala reserva) Cuidar # intervalos de Tendencia central escala Ambigedad del Explicitar el rasgo y rasgo descriptivos escala

- Uso parcial de la escala - Generosidad - Percepcin diferenciada - Calificados individualmente

Consideraciones.

- Observacionales - Numricas - Grficas Clasificacin. - Descriptivas - Comparativas* - Guttman


Elaboracin.

- Rasch - No comparativas* - Thurstone - Likert


*son procedimientos

- Identificar el objeto - Definir el objeto

- Ordenar proceso o producto - Elegir escala


Pgina | 17

http://tutoredgardo.net/

Becerra-Gonzlez / Portafolio de instrumentos

- Categoras - Indicadores - Reactivos

- Pertinencia de la escala - Elegir formato - Elaborar instrucciones - Deben poseer atributos de validez, confiabilidad y generalizacin. - La confiabilidad entre pares es til en la construccin

Calificacin.

- Cuali= depende de la extensin de los descriptores - Cuanti= se asigna un valor mximo (esperado) para cada reactivo, se contabiliza - mezclar las calificaciones de diferentes observadores (promedio)

http://tutoredgardo.net/

Pgina | 18

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Escala Grfica


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: Evaluacin del aprendizaje. Prueba objetiva de opcin o seleccin mltiple. ESCALA GRFICA Evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple, describiendo sus atributos elementales, para obtener la validez aparente del instrumento. Indicador -numerar el reactivo -emplear un formato de fuente que distinga la base del reactivo de las opciones de respuesta -ordenar las opciones de respuesta con letras como vietas, iniciando con la letra A -escribir con ortografa correcta las palabras que contiene el reactivo -emplear correctamente los signos de puntuacin -distinguir el espacio donde debe completarse la afirmacin, para reactivos de completar -distinguir las columnas a relacionar, en reactivos de casamiento -ordenar cada columnas a relacionar con vietas diferentes entre s y respecto del reactivo y las opciones de respuesta, en reactivos de casamiento -emplear nmero semejante de elementos en cada columna, en reactivos de casamiento -incluir componentes de cada columna con extensin semejante, en reactivos de casamiento -escribir reactivos adecuados para la edad a quien se dirigen -escribir reactivos con informacin suficiente para comprenderlos Nivel cognitivo Con Com Apl Reactivos # %

Contenido

Resultado de aprendizaje

22

Reactivos de opcin mltiple

Elaborar reactivos de opcin mltiple con formato adecuado

17

Elaborar reactivos de opcin mltiple con redaccin adecuada http://tutoredgardo.net/

22

Pgina | 19

Becerra-Gonzlez / Portafolio de instrumentos


-escribir reactivos que correspondan al nivel cognitivo sealado en la tabla de especificaciones -escribir reactivos que midan el aprendizaje esperado sealado en la tabla de especificaciones -incluir opciones de respuesta con extensin semejante -ordenar convenientemente las opciones de respuesta (por extensin, cronologa, alfabtica o numricamente) -colocar slo una respuesta correcta -omitir distractores claramente descartables -incluir el texto o grfico necesario para comprender el reactivo -emplear un formato que permita distinguir con claridad el texto o grfico -incluir, en el texto o grfico, informacin suficiente para comprender el reactivo

Elaborar distractores plausibles

22

Incluir grficos o texto necesarios para comprender los reactivos

11

Total

18

100

http://tutoredgardo.net/

Pgina | 20

Becerra-Gonzlez / Portafolio de instrumentos

ESCALA GRFICA PARA EVALUAR REACTIVOS DE PRUEBAS OBJETIVAS DE OPCIN MULTIPLE


La presente escala grfica tiene por objetivo evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple. Lea las afirmaciones de la escala y marque el intervalo en el continuo que represente mejor el atributo del reactivo. El intervalo se compone por cuatro intervalos: Descriptivo del intervalo Deficiente Valor 0 1 2 3

Excelente

Sume los valores asignados a cada afirmacin de la escala y divdalos entre el nmero de afirmaciones resueltas.

1. 2.

La ortografa del reactivo es correcta El uso de los signos de puntuacin es correcto El formato de la base del reactivo es diferente del de las opciones y permite distinguirlas Las opciones de respuesta se ordenan con vietas correctas Los apoyos textuales o grficos poseen un formato que los muestra con claridad Los apoyos textuales o grficos contienen informacin suficiente para ayudar en la comprensin del reactivo El reactivo de completar distingue el espacio donde debe completarse la afirmacin El reactivo de casamiento distingue las columnas que deben relacionarse Las columnas, del reactivo de casamiento,

Deficiente

Excelente

Deficiente

Excelente

3.

Deficiente

Excelente

4.

Deficiente

Excelente

5.

Deficiente

Excelente

6.

Deficiente

Excelente

7.

Deficiente

Excelente

8.

Deficiente Deficiente

: :

: :

: :

Excelente Excelente

9.

http://tutoredgardo.net/

Pgina | 21

Becerra-Gonzlez / Portafolio de instrumentos son semejantes en nmero y extensin 10. Las columnas, del reactivo de casamiento, se ordenan con vietas que distinguen a la columnas entre s y respecto a las base y opciones de respuesta 11. El reactivo es adecuado para el grupo de edad a quien se dirige 12. El reactivo posee informacin suficiente para comprenderlo 13. Mide el resultado de aprendizaje sealado en la tabla de especificaciones 14. Mide en el nivel cognitivo sealado en la tabla de especificaciones 15. Las opciones de respuesta poseen extensin semejante 16. Las opciones de respuesta poseen orden conveniente 17. Existe slo una respuesta correcta 18. Las opciones de respuesta omiten distractores claramente descartables SUMA
TABLA PARA EVALUACIN No. de afirmaciones Suma total resueltas

Deficiente

Excelente

Deficiente

Excelente

Deficiente

Excelente

Deficiente

Excelente

Deficiente

Excelente

Deficiente

Excelente

Deficiente Deficiente

: :

: :

: :

Excelente Excelente

Deficiente

Excelente

No. del reactivo evaluado

Valor del reactivo

http://tutoredgardo.net/

Pgina | 22

Becerra-Gonzlez / Portafolio de instrumentos

Otros ejemplos de cmo podemos representar este tipo de escala son los siguientes cuatro:

1)

2)

3)

4)

http://tutoredgardo.net/

Pgina | 23

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde.

ESCALA NUMRICA
El evaluador ESCALA. Serie de rangos descriptivos o numricos de un continuo, empleados para evaluar o juzgar niveles especficos de desempeo. Escala numrica. Tcnica observacional que consiste en presentar una lista de nmeros para indicar el grado en que una caractersticas est presente.

Definicin.

Uso. Rasgos distintivos.

- Para calificar desempeo, procesos o productos - Es la ms sencilla de las escalas, de hecho la escala grfica incluye a la numrica y la descriptiva incluye a ambas. - El evaluador requiere conocer el objeto - Se requiere capacitacin para la - Prejuicio o propensin personal - Uso parcial de la escala - Generosidad y severidad - Calificados individualmente

Limitantes.

calificacin - Susceptible de acarreamiento (efecto halo)

Clasificacin.

- Para calificar el procedimiento, producto o desarrollo personal-social

- Identificar el objeto - Definir el objeto - Categoras - Indicadores Elaboracin. - Reactivos - Ordenar proceso o producto - Elegir escala - Asignar descripcin para cada nmero - Elaborar instrucciones - Cuali= depende de la extensin de los descriptores - Cuanti= se asigna un valor mximo (esperado) para cada reactivo, se contabiliza - Deben poseer atributos de validez, confiabilidad y generalizacin. - Debe obtenerse confiabilidad entre pares
TIP Las caractersticas deben - tener importancia educativa - ser directamente observables - definirse con claridad Las escalas deben - permitir calificar en puntos intermedios - evitar calificarse si no se es apto - mezclar las calificaciones de diferentes observadores (promedio)

Calificacin.

http://tutoredgardo.net/

Pgina | 24

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Escala Numrica


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: Evaluacin del aprendizaje. Prueba objetiva de opcin o seleccin mltiple. ESCALA NUMRICA Evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple, describiendo sus atributos elementales, para obtener la validez aparente del instrumento.

Contenido

Resultado de aprendizaje

Indicador -numerar el reactivo -emplear un formato de fuente que distinga la base del reactivo de las opciones de respuesta -ordenar las opciones de respuesta con letras como vietas, iniciando con la letra A -escribir con ortografa correcta las palabras que contiene el reactivo -emplear correctamente los signos de puntuacin -distinguir el espacio donde debe completarse la afirmacin, para reactivos de completar -distinguir las columnas a relacionar, en reactivos de casamiento -ordenar cada columnas a relacionar con vietas diferentes entre s y respecto del reactivo y las opciones de respuesta, en reactivos de casamiento -emplear nmero semejante de elementos en cada columna, en reactivos de casamiento -incluir componentes de cada columna con extensin semejante, en reactivos de casamiento -escribir reactivos adecuados para la edad a quien se dirigen -escribir reactivos con

Nivel cognitivo Con Com Apl

Reactivos # %

22

Reactivos de opcin mltiple

Elaborar reactivos de opcin mltiple con formato adecuado

17

Elaborar reactivos de opcin mltiple con redaccin http://tutoredgardo.net/

22

Pgina | 25

Becerra-Gonzlez / Portafolio de instrumentos


adecuada informacin suficiente para comprenderlos -escribir reactivos que correspondan al nivel cognitivo sealado en la tabla de especificaciones -escribir reactivos que midan el aprendizaje esperado sealado en la tabla de especificaciones -incluir opciones de respuesta con extensin semejante -ordenar convenientemente las opciones de respuesta (por extensin, cronologa, alfabtica o numricamente) -colocar slo una respuesta correcta -omitir distractores claramente descartables -incluir el texto o grfico necesario para comprender el reactivo -emplear un formato que permita distinguir con claridad el texto o grfico -incluir, en el texto o grfico, informacin suficiente para comprender el reactivo

Elaborar distractores plausibles

22

Incluir grficos o texto necesarios para comprender los reactivos

11

Total

18

100

http://tutoredgardo.net/

Pgina | 26

Becerra-Gonzlez / Portafolio de instrumentos

ESCALA NUMRICA PARA EVALUAR REACTIVOS DE PRUEBAS OBJETIVAS DE OPCIN MULTIPLE


La presente escala numrica tiene por objetivo evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple. Lea las afirmaciones de la escala y marque el intervalo en el continuo que represente mejor el atributo del reactivo. El intervalo se compone por cuatro intervalos: Valor 0 1 2 3 Descriptivo Deficiente Regular Bueno Excelente

Sume los valores asignados a cada afirmacin de la escala y divdalos entre el nmero de afirmaciones resueltas. Identifique el descriptivo para el resultado.

0 1 2 3
1. 2. 3. 4. 5. 6. 7. 8. 9. 10.

11. 12. 13. 14. 15. 16. 17.

La ortografa del reactivo es correcta El uso de los signos de puntuacin es correcto El formato de la base del reactivo es diferente del de las opciones y permite distinguirlas Las opciones de respuesta se ordenan con vietas correctas Los apoyos textuales o grficos poseen un formato que los muestra con claridad Los apoyos textuales o grficos contienen informacin suficiente para ayudar en la comprensin del reactivo El reactivo de completar distingue el espacio donde debe completarse la afirmacin El reactivo de casamiento distingue las columnas que deben relacionarse Las columnas, del reactivo de casamiento, son semejantes en nmero y extensin Las columnas, del reactivo de casamiento, se ordenan con vietas que distinguen a la columnas entre s y respecto a las base y opciones de respuesta El reactivo es adecuado para el grupo de edad a quien se dirige El reactivo posee informacin suficiente para comprenderlo Mide el resultado de aprendizaje sealado en la tabla de especificaciones Mide en el nivel cognitivo sealado en la tabla de especificaciones Las opciones de respuesta poseen extensin semejante Las opciones de respuesta poseen orden conveniente Existe slo una respuesta correcta Pgina | 27

http://tutoredgardo.net/

Becerra-Gonzlez / Portafolio de instrumentos


18. Las opciones de respuesta omiten distractores claramente

descartables SUMA

No. del reactivo evaluado

TABLA PARA EVALUACIN No. de afirmaciones Suma total Valor del reactivo resueltas

Descriptivo

http://tutoredgardo.net/

Pgina | 28

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde.

ESCALA DESCRIPTIVA
El evaluador ESCALA. Serie de rangos descriptivos o numricos de un continuo, empleados para evaluar o juzgar niveles especficos de desempeo. Escala descriptiva. Tcnica observacional que consiste en presentar frases descriptivas para identificar puntos sobre una escala grfica.

Definicin.

Uso.

- Para conocer nivel de competencia, proceso, producto o desarrollo social - Es la ms usada en escuelas. - Expresa en trminos de comportamiento cmo son los alumnos en etapas

Rasgos distintivos.

diferentes. - En ocasiones slo los extremos se describen, o se escribe una frase descriptiva debajo de cada punto designado. - Se proporciona un espacio en blanco para comentarios adicionales.

- Calificacin rpida - tiles para procesos, productos y comportamientos. Ventajas. - Abarcan una o ms dimensiones de un mismo constructo - Son objetivas - Pueden analizarse cuali o cuantitativamente - El evaluador requiere conocer el objeto - Se requiere capacitacin para la
Limitantes. calificacin - Susceptible de acarreamiento (efecto halo) - Calificados individualmente

- Prejuicio o propensin personal - Uso parcial de la escala - Generosidad y severidad - Error lgico (tendencia entre
constructos, inteligencia 1/a socializacin)

Consideraciones. Clasificacin.

- Los alumnos la pueden conocer desde antes de ser evaluados - Se describen todos los intervalos - Para calificar el procedimiento, producto o desarrollo personal-social
TIP - Se puede seleccionar una muestra del trabajo o comportamiento de los alumnos que representen los niveles de calidad deseados (ej. 5 7) - Se ordenan segn su mrito o valor - Se asigna un valor a stos - Se realizan las comparaciones

- Identificar el objeto - Definir el objeto - Categoras - Indicadores Elaboracin. - Reactivos - Ordenar proceso o producto - Elegir escala y descriptivos - Pertinencia de la escala - Elaborar instrucciones - Cuali= depende de la extensin de los descriptores - Cuanti= se asigna un valor mximo (esperado) para cada reactivo, se contabiliza

Calificacin.

TIP Las caractersticas deben - tener importancia educativa - ser directamente observables

http://tutoredgardo.net/

Pgina | 29

Becerra-Gonzlez / Portafolio de instrumentos

- Deben poseer atributos de validez, confiabilidad y generalizacin. - Debe obtenerse confiabilidad entre pares

- definirse con claridad Las escalas deben - permitir calificar en puntos intermedios - evitar calificarse si no se es apto - mezclar las calificaciones de diferentes observadores (promedio)

http://tutoredgardo.net/

Pgina | 30

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Escala Descriptiva


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: Evaluacin del aprendizaje. Prueba objetiva de opcin o seleccin mltiple. ESCALA DESCRIPTIVA Evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple, describiendo sus atributos elementales, para obtener la validez aparente del instrumento. Indicador -numerar el reactivo -emplear un formato de fuente que distinga la base del reactivo de las opciones de respuesta -ordenar las opciones de respuesta con letras como vietas, iniciando con la letra A -escribir con ortografa correcta las palabras que contiene el reactivo -emplear correctamente los signos de puntuacin -distinguir el espacio donde debe completarse la afirmacin, para reactivos de completar -distinguir las columnas a relacionar, en reactivos de casamiento -ordenar cada columnas a relacionar con vietas diferentes entre s y respecto del reactivo y las opciones de respuesta, en reactivos de casamiento -emplear nmero semejante de elementos en cada columna, en reactivos de casamiento -incluir componentes de cada columna con extensin semejante, en reactivos de casamiento -escribir reactivos adecuados para la edad a quien se dirigen -escribir reactivos con informacin suficiente para comprenderlos Nivel cognitivo Con Com Apl Reactivos # %

Contenido

Resultado de aprendizaje

25

Reactivos de opcin mltiple

Elaborar reactivos de opcin mltiple con formato adecuado

25

Elaborar reactivos de opcin mltiple con redaccin adecuada http://tutoredgardo.net/

17

Pgina | 31

Becerra-Gonzlez / Portafolio de instrumentos


-escribir reactivos que correspondan al nivel cognitivo sealado en la tabla de especificaciones -escribir reactivos que midan el aprendizaje esperado sealado en la tabla de especificaciones -incluir opciones de respuesta con extensin semejante -ordenar convenientemente las opciones de respuesta (por extensin, cronologa, alfabtica o numricamente) -colocar slo una respuesta correcta -omitir distractores claramente descartables -incluir el texto o grfico necesario para comprender el reactivo -emplear un formato que permita distinguir con claridad el texto o grfico -incluir, en el texto o grfico, informacin suficiente para comprender el reactivo

Elaborar distractores plausibles

17

Incluir grficos o texto necesarios para comprender los reactivos

Total

12

100

http://tutoredgardo.net/

Pgina | 32

Becerra-Gonzlez / Portafolio de instrumentos

ESCALA DESCRIPTIVA PARA EVALUAR REACTIVOS DE PRUEBAS OBJETIVAS DE OPCIN MULTIPLE


La presente escala descriptiva tiene por objetivo evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple. Lea las afirmaciones de la escala y marque lel intervalo del continuo que describa mejor el atributo del reactivo a evaluar. Cada intervalo del continuo posee un baremo cuantitativo. Sume los valores de las respuestas emitidas para cada afirmacin de la escala, divida entre el nmero de afirmaciones resueltas. El resultado le indicar el baremo sobre el cual valorar el reactivo.
0 El reactivo No se numera y contiene errores ortogrficos Muestra el mismo formato en la base y las opciones de respuesta y las confunde, adems muestra un uso incorrecto de signos de puntuacin Las opciones de respuesta No se ordenan con vietas alfabticas Se numera, pero contiene errores ortogrficos Muestra un uso correcto de signos de puntuacin, pero el formato de la base y de las opciones de respuesta es el mismo y las confunde Est libre de errores ortogrficos, pero no se numera Muestra un uso incorrecto de signos de puntuacin, pero el formato de la base y de las opciones de respuesta es diferente y permite distinguirlas Se numera y su ortografa es correcta Muestra un uso correcto de signos de puntuacin y el formato de la base y de las opciones de respuesta es diferente y permite distinguirlas Se ordenan con vietas, iniciando con la letra A Poseen un formato que los muestra con claridad y contienen informacin suficiente Distingue el espacio donde debe completarse la afirmacin y existe relacin lgica entre la base y la opciones de respuesta 1 2 3

Se ordenan con vietas alfabticas sin iniciar con la letra A Los apoyos grficos o textuales necesarios para comprender el reactivo Poseen un formato que los Poseen un formato que no muestra con claridad, pero No se incluyen los muestra con claridad contienen informacin insuficiente El reactivo de completar Existe relacin lgica entre No distingue el espacio Distingue el espacio donde la base y la opciones de donde debe completarse la debe completarse la respuesta, pero no afirmacin ni existe relacin afirmacin, pero no existe distingue el espacio donde lgica entre la base y la relacin lgica entre la base debe completarse la opciones de respuesta y la opciones de respuesta afirmacin El reactivo de casamiento No distingue las columnas Distingue las columnas que Existe relacin lgica entre que deben relacionarse ni deben relacionarse, pero no la base y la opciones de existe relacin lgica entre la existe relacin lgica entre la respuesta, pero no base y la opciones de base y la opciones de distingue las columnas que respuesta respuesta deben relacionarse Los componentes de las columnas a relacionar Son diferentes en nmero No son semejantes en Son semejantes en nmero pero semejantes en nmero ni en extensin pero no en extensin extensin Se ordenan con vietas que Se ordenan con vietas que distingue a las columnas distingue a las columnas No estn ordenados con entre s, pero las confunde respecto la numeracin del vietas respecto a la numeracin de reactivo o las opciones de la base o las opciones de respuesta, pero las respuesta confunde entre s El reactivo Es inadecuado para el grupo Es adecuado para el grupo Es inadecuado para el grupo de edad a quien se dirige y de edad a quien se dirige, de edad a quien se dirige, posee informacin pero posee informacin pero posee informacin insuficiente para insuficiente para suficiente para comprenderlo comprenderlo comprenderlo No mide el resultado de No mide el resultado de Mide el resultado de aprendizaje ni corresponde aprendizaje pero aprendizaje pero no al nivel cognitivo sealado corresponde al nivel corresponde al nivel en la tabla de cognitivo sealado en la cognitivo sealado en la especificaciones tabla de especificaciones tabla de especificaciones Se ordenan con vietas alfabticas

REDACCIN ADECUADA

Distingue las columnas que deben relacionarse y existe relacin lgica entre la base y la opciones de respuesta

Son semejantes en nmero y extensin Se ordenan con vietas que distinguen a la columnas entre s y respecto a las base y opciones de respuesta

CLARIDAD

Es adecuado para el grupo de edad a quien se dirige y posee informacin suficiente para comprenderlo Mide el resultado de aprendizaje en el nivel cognitivo sealado en la tabla de especificaciones

http://tutoredgardo.net/

Pgina | 33

Becerra-Gonzlez / Portafolio de instrumentos


0 Las opciones poseen Extensin diferente y desorden 1 Orden, pero extensin diferente 2 Extensin semejante, pero desorden Existe slo una respuesta correcta, pero con distractores claramente descartables 3 Extensin semejante y orden conveniente

PLAUSIBILIDAD

Ms de una respuesta correcta con distractores claramente descartables

Sin distractores claramente descartables, pero ms de una respuesta correcta

Existe slo una respuesta correcta sin distractores claramente descartables

No. del reactivo evaluado

TABLA PARA EVALUACIN No. de afirmaciones Suma de valores resueltas

Valor del reactivo

http://tutoredgardo.net/

Pgina | 34

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde.

RBRICA O MATRIZ DE VALORACIN


El evaluador Tcnica observacional derivada de las escalas empleada para evaluar desempeos o productos. Es la forma de calificacin de un instrumento. Gua de calificacin consistente en criterios de desempeo especfico preestablecidos.

Definicin.

Uso.

- Para evaluar desempeo de estudiantes en tareas especficas, as como productos resultados de tales actividades. - Rbricas Holsticas (RH): califica el proceso o producto en general, como un todo, sin evaluar las partes por separado. Evaluacin Sumativa. - Rbricas Analticas (RA): califica de manera separada las partes de un proceso o producto, para obtener un puntaje total. Evaluacin Formativa. - Evalan una dimensin. - RH para Evaluacin Sumativa y RA para Evaluacin Formativa. - RH para ensayos o donde no hay respuesta correcta, donde importa la

Clasificacin

Rasgos distintivos.

calidad final. - RA permite comparar entre jueces y sealar un perfil o debilidades y fortalezas de los desempeos o productos de los alumnos. - Una buena rbrica es inadecuada para un instrumento pobre - Requieren que el profesor revise primero, de manera general el desempeo o producto. - Debe haber el mismo nmero de intervalos

- Construccin tardada - Tiempo y calificacin costosa Limitantes. - Conocimiento de uso - Revisin previa del objeto a evaluar
1. Definir constructo 2. Definir dimensin 3. Considerar tiempo y recursos 4. Decidir por una RH o RA 5. Definir resultados de aprendizaje e Elaboracin. indicadores 6. Convertir desempeo o producto en pasos graduados 7. Definir escala descriptiva 8. Sealar etiquetas cuanti y/o cualitativas para cada nivel Objetivos de aprendizaje Indicadores Atributos Descripcin para cada atributo Completar criterios para intervalos Agregar baremos Ej. 0,1,2,3 = deficiente, regular, suficiente, excelente

- Contar puntajes para cada tem segn escala - Sumar puntajes Calificacin. - Promediar y ubicar resultado en escala - Describir obtenido - Obtener evidencias de Validez (aparente, contenido, criterio y constructo) y
Confiabilidad (entre jueces, consistencia interna)

http://tutoredgardo.net/

Pgina | 35

Becerra-Gonzlez / Portafolio de instrumentos

Ejemplo de Tabla de Especificaciones e instrumento para Rbrica


CONSTRUCTO: CATEGORA O DIMENSIN: INSTRUMENTO: OBJETIVO: Evaluacin del aprendizaje. Prueba objetiva de opcin o seleccin mltiple. RBRICA Evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple, describiendo sus atributos elementales, para obtener la validez aparente del instrumento. Indicador -numerar el reactivo -emplear un formato de fuente que distinga la base del reactivo de las opciones de respuesta -ordenar las opciones de respuesta con letras como vietas, iniciando con la letra A -escribir con ortografa correcta las palabras que contiene el reactivo -emplear correctamente los signos de puntuacin -distinguir el espacio donde debe completarse la afirmacin, para reactivos de completar -distinguir las columnas a relacionar, en reactivos de casamiento -ordenar cada columnas a relacionar con vietas diferentes entre s y respecto del reactivo y las opciones de respuesta, en reactivos de casamiento -emplear nmero semejante de elementos en cada columna, en reactivos de casamiento -incluir componentes de cada columna con extensin semejante, en reactivos de casamiento -escribir reactivos adecuados para la edad a quien se dirigen -escribir reactivos con informacin suficiente para comprenderlos -escribir reactivos que Nivel cognitivo Con Com Apl Reactivos # %

Contenido

Resultado de aprendizaje

25

Reactivos de opcin mltiple

Elaborar reactivos de opcin mltiple con formato adecuado

25

Elaborar reactivos de opcin mltiple con redaccin adecuada

17

http://tutoredgardo.net/

Pgina | 36

Becerra-Gonzlez / Portafolio de instrumentos


correspondan al nivel cognitivo sealado en la tabla de especificaciones -escribir reactivos que midan el aprendizaje esperado sealado en la tabla de especificaciones -incluir opciones de respuesta con extensin semejante -ordenar convenientemente las opciones de respuesta (por extensin, cronologa, alfabtica o numricamente) -colocar slo una respuesta correcta -omitir distractores claramente descartables -incluir el texto o grfico necesario para comprender el reactivo -emplear un formato que permita distinguir con claridad el texto o grfico -incluir, en el texto o grfico, informacin suficiente para comprender el reactivo

Elaborar distractores plausibles

17

Incluir grficos o texto necesarios para comprender los reactivos

Total

12

100

http://tutoredgardo.net/

Pgina | 37

Becerra-Gonzlez / Portafolio de instrumentos

RBRICA PARA EVALUAR REACTIVOS DE PRUEBAS OBJETIVAS DE OPCIN MULTIPLE


La presente rbrica tiene por objetivo evaluar la calidad de los reactivos de una prueba objetiva de opcin mltiple. Lea las afirmaciones de la escala y marque el intervalo del continuo que describa mejor el atributo del reactivo a evaluar. Cada intervalo del continuo posee un baremo cuantitativo y uno cualitativo. Sume los valores de las respuestas emitidas para cada afirmacin de la escala, divida entre el nmero de afirmaciones resueltas. El resultado le indicar el baremo sobre el cual valorar el reactivo.
0 DEFICIENTE El reactivo No se numera y contiene errores ortogrficos Muestra el mismo formato en la base y las opciones de respuesta y las confunde, adems muestra un uso incorrecto de signos de puntuacin Las opciones de respuesta No se ordenan con vietas alfabticas 1 REGULAR Se numera, pero contiene errores ortogrficos Muestra un uso correcto de signos de puntuacin, pero el formato de la base y de las opciones de respuesta es el mismo y las confunde 2 BIEN Est libre de errores ortogrficos, pero no se numera Muestra un uso incorrecto de signos de puntuacin, pero el formato de la base y de las opciones de respuesta es diferente y permite distinguirlas 3 EXCELENTE Se numera y su ortografa es correcta Muestra un uso correcto de signos de puntuacin y el formato de la base y de las opciones de respuesta es diferente y permite distinguirlas Se ordenan con vietas, iniciando con la letra A Poseen un formato que los muestra con claridad y contienen informacin suficiente Distingue el espacio donde debe completarse la afirmacin y existe relacin lgica entre la base y la opciones de respuesta

Se ordenan con vietas alfabticas sin iniciar con la letra A Los apoyos grficos o textuales necesarios para comprender el reactivo Poseen un formato que los Poseen un formato que no muestra con claridad, pero No se incluyen los muestra con claridad contienen informacin insuficiente El reactivo de completar Existe relacin lgica entre No distingue el espacio Distingue el espacio donde la base y la opciones de donde debe completarse la debe completarse la respuesta, pero no afirmacin ni existe relacin afirmacin, pero no existe distingue el espacio donde lgica entre la base y la relacin lgica entre la base debe completarse la opciones de respuesta y la opciones de respuesta afirmacin El reactivo de casamiento No distingue las columnas Distingue las columnas que Existe relacin lgica entre que deben relacionarse ni deben relacionarse, pero no la base y la opciones de existe relacin lgica entre la existe relacin lgica entre la respuesta, pero no base y la opciones de base y la opciones de distingue las columnas que respuesta respuesta deben relacionarse Los componentes de las columnas a relacionar Son diferentes en nmero No son semejantes en Son semejantes en nmero pero semejantes en nmero ni en extensin pero no en extensin extensin Se ordenan con vietas que Se ordenan con vietas que distingue a las columnas distingue a las columnas No estn ordenados con entre s, pero las confunde respecto la numeracin del vietas respecto a la numeracin de reactivo o las opciones de la base o las opciones de respuesta, pero las respuesta confunde entre s El reactivo Es inadecuado para el grupo Es adecuado para el grupo Es inadecuado para el grupo de edad a quien se dirige y de edad a quien se dirige, de edad a quien se dirige, posee informacin pero posee informacin pero posee informacin insuficiente para insuficiente para suficiente para comprenderlo comprenderlo comprenderlo No mide el resultado de No mide el resultado de Mide el resultado de aprendizaje ni corresponde aprendizaje pero aprendizaje pero no Se ordenan con vietas alfabticas

REDACCIN ADECUADA

Distingue las columnas que deben relacionarse y existe relacin lgica entre la base y la opciones de respuesta

Son semejantes en nmero y extensin Se ordenan con vietas que distinguen a la columnas entre s y respecto a las base y opciones de respuesta

CLARIDAD

Es adecuado para el grupo de edad a quien se dirige y posee informacin suficiente para comprenderlo Mide el resultado de aprendizaje en el nivel

http://tutoredgardo.net/

Pgina | 38

Becerra-Gonzlez / Portafolio de instrumentos


0 DEFICIENTE al nivel cognitivo sealado en la tabla de especificaciones Las opciones poseen Extensin diferente y desorden 1 REGULAR corresponde al nivel cognitivo sealado en la tabla de especificaciones Orden, pero extensin diferente 2 BIEN corresponde al nivel cognitivo sealado en la tabla de especificaciones Extensin semejante, pero desorden Existe slo una respuesta correcta, pero con distractores claramente descartables 3 EXCELENTE cognitivo sealado en la tabla de especificaciones

PLAUSIBILIDAD

Extensin semejante y orden conveniente

Ms de una respuesta correcta con distractores claramente descartables

Sin distractores claramente descartables, pero ms de una respuesta correcta

Existe slo una respuesta correcta sin distractores claramente descartables

No. del reactivo evaluado

TABLA PARA EVALUACIN No. de afirmaciones Suma de valores resueltas

Valor cualitativo del reactivo

http://tutoredgardo.net/

Pgina | 39

Becerra-Gonzlez / Portafolio de instrumentos

ESTRATEGIAS DE EVALUACIN
(Tcnicas, no instrumentos)

http://tutoredgardo.net/

Pgina | 40

Becerra-Gonzlez / Portafolio de instrumentos

Nombre.

PORTAFOLIO
Lo elabora el alumno o entre el profesor y el alumno; se califica por autoevaluacin, co-evaluacin o entre pares

Quin responde.

Es una tcnica, NO instrumento, semiformal de evaluacin que promueve diferentes formas de evaluacin (autoevaluacin, co-evaluacin o entre pares). Definicin. Coleccin de muestras o documentos seleccionados por el alumno cuyo propsito es demostrar lo que ha aprendido en un curso determinado o durante parte de su vida. Evidencia de los logros del proceso de enseanza-aprendizaje.

- En todas las disciplinas. - Para evaluar destrezas, estrategias, actitudes, organizacin y aplicacin de
Uso. conocimientos. - Reflexionar sobre el aprendizaje (alumno) o estrategias docentes empleadas (profesor). - Establecer un perfil de aprendizaje. - Desarrollar el pensamiento crtico y responsabilidad hacia el aprendizaje.

Rasgos distintivos.

- Meta: demostrar un proceso o procedimiento adquirido, conocimiento o actividades - Objetivos: 1. proporcionar evidencia del crecimiento como estudiante o profesor, segn cmo se evale; 2. demostrar el logro de los objetivos de un curso o de los perfiles de egreso de una carrera universitaria - La validez de contenido depende de su construccin - Es formativo ms que sumativo

- Consiste en realizar la coleccin de productos, totales o parciales correctos y/o incorrectos (ensayos, anlisis de textos, composiciones escritas, dibujos) e incluso exmenes errneos (colocando las respuestas corregidas) - Requiere de una exposicin razonada sobre la seleccin de las muestras y el trabajo que se logr - Si no existe evidencia original se elabora respecto al tema

- El estudiante se involucra de manera activa - Valora el proceso ms que el producto - Es una estrategia para reflexionar sobre el aprendizaje Ventajas. - Los alumnos lo perciben como instrumento que permite a) conocer sus

avances y logros, b)reflexionar su aprendizaje, c)sintetizar e integrar lo aprendido - Las evidencias pueden ser muestras de experiencias generadas dentro del aula o en espacios extracurriculares o extraescolares

Limitantes.

- Tiempo y evaluacin costosa - Tcnica de trabajo de implementacin


lenta

- Calificacin complicada - Requiere capacitacin sobre


su uso y calificacin

Clasificacin.

- Estandarizado: seala qu debe mostrar mediante qu evidencias - Flexible: permite al alumno elegir qu aprendizaje presentar y mediante
qu evidencias

http://tutoredgardo.net/

Pgina | 41

Becerra-Gonzlez / Portafolio de instrumentos

1. Definir propsitos 2. Determinar criterios - Qu incluir - Caractersticas de lo que se incluir Elaboracin. - Quin lo incluir - En qu momento lo incluir - Cmo se organizar - Cmo se presentar

3. Determinar criterios para valorar - Definirlos en conjunto o solo el profesor - Elaborar escala, lista o matriz - Definir formato de evaluacin - Definir criterios de calificacin - Darla a conocer a los alumnos - Sealar periodo de entrega

- Cualitativa - Definir estrategias para evaluar - Cuantitativa - Definir estrategias para evaluar
Calificacin. (escala, lista o matriz) - Asignar puntaje - Asignar calificacin (escala, lista o matriz) - Describir baremos de estrategia - Incluir recomendaciones - Ej.algo importante que me gustara mencionar es que no olvides agregar lo que t crees dejaste de hacer y aprender y por qu crees que pas. Esto te ayudar a que repases tus conocimiento y habilidades (Martnez, 2002:62)

http://tutoredgardo.net/

Pgina | 42

Becerra-Gonzlez / Portafolio de instrumentos

Nombre. Quin responde. Definicin. Uso.

EXMENES ORALES
El evaluador Evaluacin donde la respuesta del sujeto es verbal en lugar de escrita - Medir capacidades (conocimientos y habilidades). - Permite observar la interaccin de las personas con base en esas habilidades en la resolucin de problemas.

Rasgos distintivos.

- Pueden realizarse preguntas orales, escritas o situaciones-estmulo (caso, ejemplo, simulacin, situaciones en vivo, etc.) - Dimensiones: Estructura (abierta y cerrada) Examinadores (autoevaluacin, de pares, basada en una autoridad) Oralidad (slo oral, con apoyo grfico)
- Es flexible en tanto permite aclarar preguntas. - Es consistente cuando seala criterios de respuesta. - Requiere capacitacin para usar las escalas - Susceptible de subjetividad - Requiere establecer rapport - Inadecuado para medir o evaluar algunas habilidades y conocimientos (depende del
resultado de aprendizaje y propsito de evaluacin)

Ventajas

Limitantes.

Clasificacin.

- Estructurada, Semi- estructurada, No estructurada


- Definir el constructo y objetivos - Elaborar tabla de especificaciones - Definir indicadores - Elaborar reactivos objetivos (personal experto) - Confiabilidad - Las hojas de calificacin deben incluir las dimensiones a evaluar en conjunto con una escala - Las dimensiones variarn de acuerdo al formato del examen - Puede asignarse un peso a determinados resultados esperados VALIDEZ - Contenido, criterio, convergente. - Se recomienda que en su construccin se exponga claramente el objetivo, nmero suficientes de temas, vietas y reactivos para asegurar cobertura y formato adecuado, - Explicitar los criterios de calificacin, - Emplear ms de dos observadores, CONFIABILIDAD - Referida a la consistencia entre los juicios realizados sobre personas u objetos entre jueces. Es importante en las tcnicas de observacin para minimizar la subjetividad. - Se interpreta por porcentaje de acuerdo entre jueces, con ESCALA BIDIMENSIONAL= coeficiente Phi, procedimientos de anlisis de varianza (ndice Kappa de 0 a 1-). - Entrenar a los evaluadores, - Emplear al menos a un evaluador experimentado, - Monitorear las sesiones, y - Proporcionar tiempo suficiente a los evaluados para que proporcionen sus respuestas.

Elaboracin.

Calificacin.

Consideraciones.

http://tutoredgardo.net/

Pgina | 43

Becerra-Gonzlez / Portafolio de instrumentos

Nombre.

OBSERVACIN

Quin responde. Definicin.

Procesos deliberado y sistemtico orientado por un propsito, usado para la recoleccin de datos que proporciona una representacin de la realidad de lo fenmenos de estudio. Tcnica de evaluacin.

Permite obtener informacin sobre un fenmeno o acontecimiento tal y como se produce. Uso. Explorar, describir, comprender e identificar ambientes, para la solucin de problemas. Rasgos distintivos.

Deliberado, sistemtico, guiado por un objetivo. Es la suma de percepcin e interpretacin.

Ventajas

Con el apoyo tecnolgico (ej. videograbaciones) se puede analizar despus de haber sucedido el evento. Aceptan material no estructurado. Puede trabajar con cantidades grandes de datos.

Cualitativa de campo, directa o participante- y cuantitativa registro sistemtico, vlido y confiable de comportamiento y conducta manifiestas. Clasificacin. Sistemas de observacin (Sistemas categoriales, narrativos, descriptivos y tecnolgicos) Observacin participante -interacta- y no participante sin interaccin. Consideraciones.

Objeto de observacin Contexto de evaluacin (exclusivos o inclusivos) Seleccin de muestras o perodos de observacin (periodos o intervalos)

http://tutoredgardo.net/

Pgina | 44

Becerra-Gonzlez / Portafolio de instrumentos

USO RECOMENDADO DE CADA INSTRUMENTO


TABLA 1. USO DE DIFERENTES INSTRUMENTOS Prueba de Instrumento Examen opcin Dimensin oral mltiple o Escalas Resolucin de *** * problemas Conocimiento ** *** Comprensin *** * Habilidades *** / Caractersticas *** * personales Habilidades *** / verbales Medir opinin / *** Medir rasgos (autoestima, *** *** autoeficacias, etc.)
* adecuado es circunstancias especiales ** adecuado *** totalmente adecuado / inadecuado Fuente: Adecuado de Hill, D. (1986). Oral examination for licensing or certification: A manual for psychology boards. USA: American Association of State Psychology Boards.

Prueba de ensayo ** ** *** / / / ** **

Simulacin

Ejecucin

Observacin

*** ** * / / / / *

** / *** / / / / *

*** / * ***

***

TABLA 2. CARACTERSTICAS DE LOS TIPOS DE EXMENES ORALES No estructurada Semiestructurada Duracin


Amplia (> 1hr.) Depende de cada evaluado Baja Totalmente apropiadas Totalmente apropiadas Con base en dimensiones predeterminadas Bajo Acreditado / Revaloracin Intermedia Parte de situaciones preestablecidas y planteadas durante la evaluacin Media Apropiadas Apropiadas Con dimensiones y escalas Medio Acreditado / No acreditado, Revaloracin Verbal o escrita (probable)

Estructurada
Corta (<30 min.) Preguntas preestablecidas o estandarizadas Alta Inapropiadas Inapropiadas Con base en escala para cada reactivo Alto Acreditado / No acreditado Escrita (probable)

Contenido Consistencia de contenido Preguntas personalizadas Preguntas basadas en respuestas anteriores Calificacin Costo Decisiones

Retroalimentacin Adecuada (necesaria)


Fuente: Hill, D. (dem.)

http://tutoredgardo.net/

Pgina | 45

Becerra-Gonzlez / Portafolio de instrumentos

BIBLIOGRAFA RECOMENDADA
Bond, L. (1996). Norm and criterion-referenced testing. Recuperado de: http://ericae.net/pare/getvn.asp?v=5&n=2 Bunderson, C. V. How to build a domain theory. On the validity centered design of construct-linked scales of learning and growth. Recuperado de: http://edumetrics.org/papers/How_to_build_a_Domain_Theor.pdf Byrne, J. (Edit) (2003). Learning and memory. New York: Macmillan. Biblioteca de posgrado psicologa: BF318E53 2003 Byrne, J. (Edit) (2003). Learning and memory. New York: Macmillan. Biblioteca de posgrado psicologa: BF318E53 2003 Chan, Ch., Tsui, M., S. Chan, M. y Hong, J (2002). Applying the structure of the Observed Learning Outcomes (SOLO) Taxonomy on students learning outcomes: an empirical study. Assessment & Evaluation in Higher Education. 27 (6), pp 511-528 Coll, C. (1990). Un marco de referencia psicolgico para la educacin escolar: La concepcin constructivista del aprendizaje y de la enseanza. En Coll, C. Marchesi, A. y Palacios, J. (Comp.). Desarrollo psicolgico y educacin II. Psicologa de la educacin. Madrid: Alianza, 435-453. Cronbach, L. Meehl, P. (1955). Construct validity in psychological tests. Recuperado de: http://psychclassics.yorky.ca/Cronbach/construct.htm De Fina, A. (1992). Portfolio assessment: Getting starde. USA: Scholastic Professional Books. Daz-Barriga, A. F. y Hernndez, R. G. (2004). Estrategias docentes para un aprendizaje significativo. Mxico: McGraw-Hill Domjan, M. (2000) The essentials of conditioning and learning. Belmont: Wadsworth. Biblioteca de posgrado psicologa: BF319 D64 2000. Fuchs, L. (1995). Connecting performance assessment to instruction: A comparison of behavioral assessment, mastery learning, curriculum based measurement and performance assessment. Recuperado de: http://www.ed.gov.databases/ERIC Digests/ed381984.html Gordon, J. (1998). Dimensions of oral assessment. Assessment & Evaluation in Higher Education. 23(4), 367-377. Gronlud, N. (1998). Making performance assessments. En Gronlud, N: Assessment of student achievement. Boston: Allyn & Bacon. 135-163. Guenther, R. K. (1998). Human cognition. New Jersey: Prentice Hall. Biblioteca de posgrado psicologa: BF 311 G84 Hardy, T. y Jackson, R. (1997). Learning and cognition. New Jersey: Prentice Hall. Cap. 5 y 6. Biblioteca de posgrado psicologa: BF318 L424 1997. Herman, J.; Aschbacher, P. y Winters, L. (1997). Practical. Guide to Alternative Assessment. Association for Supervition and Curriculum Development. Alexandria, Virginia. Imrie, B. (1995). Assessment for learning: Quality and taxonomies. Assessment & Evaluation in Higher Education. 20(2), 175-190. Jones, E. D., Southern, W. Thomas, (1998). Currculo-based assessment: Testing what is taught and teaching what is tested. Intervention in School & Clinic. 33(4), 239-250. Mahn Holbrook (1999). Vygotskys methodological contribution to sociocultural theory. Remedial and special education. 20, 341-351. http://tutoredgardo.net/

Pgina | 46

Becerra-Gonzlez / Portafolio de instrumentos


Martnez, S. N. (2002). El portafolio como mecanismo de validacin de aprendizaje. Perfiles Educativos. Mxico: UNAM CESU. 24(95), 54-67. Mertler, C. (2001). Designing scoring rubrics for your classroom. Practical Assessment, Research & Evaluation. Recuperado de: http://ericae.net/pare/getvn.asp?v=7&n=25 Messick, S. (1995). Validity of psychological assessment. Validation of inferences form persons responses and performances as scientific inquiry into score meaning. American Psychologist, 50(9), 741-749. Moskal, B. y Leydens, J. (2000). Scoring rubric development: Validity and reliability. Practical Assessment, Research & Evaluation. Recuperado de: http://ericae.net/pare/getvn.asp?v=7&n=10 Novak, J. y Gowin, D. (1998). Aprendiendo a aprender. Barcelona: Martnez Roca. Ornstein, A. (1992). Essay tests: Use, development and grading. The Clearing house, 65(3), 175. Database: Academic Search Elite. Osmudson, E., Cheng, G.; Herl, H. y Klein, D. (1999). Knowledge mapping in the classroom: A tool for examining the development of students conceptual understandings. CRESST, University of California, Los Angeles Ruiz-Primo, M.A. (2000). On the use of concept maps as an assessment tool in science: What we have learned so far. Revista Electrnica de Investigacin Educativa, 2(1), 29-52. Pimienta, J. (2005). Metodologa constructivista: Gua para la planeacin docente. Mxico: Pearson Rodrguez G.; Flores J. G. y Garca, E. (1996). Metodologa de la investigacin cualitativa. Granada: Aljibe. Rudner, L. (1992). Reducing errors due to the use of judges. Practical Assessment, Research & Evaluation. Recuperado de: http://ericae.net/pare/getvn.asp?v=3&n=3 Rudner, L. Y Gagne, P. (2001). An overview of three approaches to scoring written essays by computer. Practical assessment, Research & Evaluation. Recuperado de: http://ericae.net/pare/getvn.asp?v=7&n=6 Ruiz-Primo, M. A.; Schultsz, S.; Li, M. y Shavelson, R. (1999). On the cognitive validity of interpretations of scores from alternative concept mapping techniques. CRESST, Stanford University. Sax, G. (1997). Principles of educational and psychological measurement and evaluation. USA: Wadsworth Publishing Company. Sax, G. (1997). Principles of educational and psychological measurement and evaluation. USA: Wadsworth Publishing Company. Cap. 6 Wiggins, G. (1990). The case for authentic assessment. Recuperado de: http://ericae.net/pare/getvn.asp?v=2&n=2

http://tutoredgardo.net/

Pgina | 47