C Ciclo de Evaluacin del Aprendizaje Estudiantil

Prof. Julio Rodrguez Prof. Prof Nadia Cordero Oficina de Evaluacin del Aprendizaje Estudiantil Decanato de Asuntos Acadmicos

No todo lo q que cuenta puede ser contado, contado y no todo lo que puede ser contado, cuenta.
Albert Einstein

Oficina de Evaluacin del Aprendizaje Estudiantil

OBJETIVOS

Presentar un recuento histrico del proceso de evaluacin del aprendizaje estudiantil en el l i d l di j di il l Recinto de Ro Piedras. Familiarizar a los participantes con aspectos relevantes sobre avalo avalo. Descripcin de los componentes de un ciclo de assessment.

Oficina de Evaluacin del Aprendizaje Estudiantil

OBJETIVOS (CONT ) (CONT.)

Presentacin del proceso de evaluacin de ADSO por la agencia acreditadora. Proponer acciones tranformadoras a base de los hallazgos.

MARCO DE REFERENCIA
El marco de referencia para esta presentacin se apoya en lo siguiente:
En

la revisin de la literatura del rea de evaluacin y acreditacin de programas acadmicos. documentos d l Middl States A d t de la Middle St t Associaton y i t en el de Desarrollo de un Plan de Evaluacin del Aprendizaje Estudiantil Certificacin 68 (2005-06) Estudiantil, (2005 06) del Senado Acadmico del Recinto de Ro Piedras. otras fuentes y documentos relacionados relacionados.
Oficina de Evaluacin del Aprendizaje Estudiantil

E En

En

LA EVALUACIN DE LOS PROGRAMAS ACADMICOS O CONCENTRACIONES EST REGULADO POR:

EN EL PLAN DE EVALUACIN DEL APRENDIZAJE ESTUDIANTIL

Cada programa acadmico o concentracin escoge para comenzar su proceso de d evaluacin por lo menos dos de los dominios del R i d l Recinto. Identifica uno o dos conocimientos, destrezas y conocimientos actitudes particulares del programa acadmico o concentracin segn expresados en su misin, metas y objetivos y en su perfil del egresado.
Oficina de Evaluacin del Aprendizaje Estudiantil

QU ES EL PLAN DE EVALUACIN DEL APRENDIZAJE ESTUDIANTIL?

Es un marco de referencia para implementar un sistema para recopilar evidencias acerca del aprendizaje del estudiantado. No dicta o prescribe las actividades y los instrumentos de assessment que deben usar las Facultades, Escuelas, Facultades Escuelas los Departamentos Programas Departamentos, Acadmicos o Concentraciones para evidenciar el alcance de los aprendizajes de los estudiantes.

Oficina de Evaluacin del Aprendizaje Estudiantil

EL PROCESO DE EVALUACIN DEL APRENDIZAJE ESTUDIANTIL QUE SE CONTEMPLA EN EL PLAN SE DIRIGE A CONTESTAR LAS SIGUIENTES PREGUNTAS:

En qu medida estn los estudiantes logrando los aprendizajes que se esperan, segn se expresa en la misin de la Institucin y en las metas y los objetivos j de los programas acadmicos o concentraciones? Cmo evidenciamos el logro de esos aprendizajes? Qu acciones y decisiones debemos tomar en la sala de clases en los programas acadmicos o clases, concentraciones y en la Institucin a partir de los hallazgos?
Oficina de Evaluacin del Aprendizaje Estudiantil

NUESTROS EGRESADOS DEBEN:

buenos comunicadores. pensar de manera crtica. trabajar en equipo. tener un buen dominio de las disciplinas. contribuir hacia el desarrollo econmico del pas pas. Un plan de evaluacin de aprendizaje estudiantil bien diseado puede proveer evidencia de que los indicadores anteriores se pueden alcanzar.
Oficina de Evaluacin del Aprendizaje Estudiantil

ser

A PARTIR DE LA MISIN DE LA UPR-RRP Y SE HAN IDENTIFICADO DIEZ DOMINIOS DE APRENDIZAJE:

curiosidad intelectual capacidad crtica aprendizaje continuo comunicacin efectiva aprecio, cultivo y p , compromiso con los valores e ideales de la sociedad puertorriquea

responsabilidad social capacidad para el estudio independiente investigacin y creacin integracin del conocimiento razonamiento lgicomatemtico

Oficina de Evaluacin del Aprendizaje Estudiantil

EL AVALO DEL APRENDIZAJE ESTUDIANTIL

Mide el conocimiento, destrezas, actitudes y valores de los estudiantes con el fin de mejorar la eficiencia de un programa conducente a grado. Se enfoca en el aprendizaje del estudiante, no en la p j , enseanza. Debe promover el compromiso hacia las metas del aprendizaje y una comprensin compartida respecto a los criterios que se utilizarn para su evaluacin. l i Es requerido por el Recinto y las agencias acreditadoras. dit d
Oficina de Evaluacin del Aprendizaje Estudiantil

Evaluacin a Nivel de Programas Acadmicos

Cada Programa Acadmico prepar un Plan de Evaluacin del Aprendizaje Estudiantil que responde a la Misin del Recinto y de la Facultad o Departamento/Concentracin al cual est adscrito. La responsabilidad de llevar a cabo el proceso de assessment del aprendizaje estudiantil de los estudiantes del Recinto recae de manera compartida en los Programas Acadmicos de las Facultades, las Escuelas y la propia Institucin. Cada programa acadmico o concentracin debe asegurarse que se usan evidencias directas e indirectas del aprendizaje de los estudiantes.
Oficina de Evaluacin del Aprendizaje Estudiantil

EVALUACIN A NIVEL INSTITUCIONAL

Los siguientes dominios se estn evaluando a nivel institucional como componente de Educacin General:
Comunicacin Efectiva en Espaol Espaol. Comunicacin Efectiva en Ingls. Investigacin en cursos de Ciencias Fsicas y Ciencias Biolgicas. Creacin en los cursos de Humanidades (en progreso). ( p g ) Responsabilidad Social en los cursos de Ciencias Sociales (en progreso).

Oficina de Evaluacin del Aprendizaje Estudiantil

QU ES LO NUEVO?

Las agencias acreditadoras no estn satisfechas con que las universidades hagan avalo (assessment) slo de sus estudiantes, ( assessment ) quieren ver qu hacen las instituciones con los resultados de ese avalo. Las exigencias sobre evidencias y medidas de ejecucin han aumentado.

Oficina de Evaluacin del Aprendizaje Estudiantil

CUL ES NUESTRO RETO?

Responder al incremento en la demanda y las exigencias de las agencias acreditadoras en trminos de esas evidencias (accountability)

Oficina de Evaluacin del Aprendizaje Estudiantil

Q Q QU QUIEREN LAS AGENCIAS?

Que el assessment del aprendizaje de los estudiantes demuestre que stos tienen el di d i l conocimiento, las destrezas, las competencias y actitudes cnsonas con l metas i d las institucionales. Que los estudiantes al graduarse hayan alcanzado esas metas educativas a un nivel adecuado (perfil del egresado).
Oficina de Evaluacin del Aprendizaje Estudiantil

NUESTRAS RESPUESTAS ANTE ESTE NUEVO RETO

Cambio en el foco del proceso educativo: de la enseanza al aprendizaje. aprendizaje

Participacin activa de los estudiantes

Promover mayor participacin de la facultad en los procesos de evaluacin. Integracin de un ciclo de evaluacin y mejoramiento continuo a nivel institucional, de programas o co ce t ac o es concentraciones y de la sala de clases. a sa a c ases Establecer un Assessment sistemtico del aprendizaje (cultura de Assessment). Assessment ).
Oficina de Evaluacin del Aprendizaje Estudiantil

EL AVALO DEL APRENDIZAJE ESTUDIANTIL:

Est relacionado al avalo de la efectividad institucional. institucional Es importante pues ayuda a mejorar la calidad acadmica y a l vez propicia l enseanza y el d i la i i la l aprendizaje. Se deben seleccionar evidencias que provean informacin especfica sobre el aprovechamiento de los t di t las destrezas adquiridas y l l estudiantes, l d t d i id las actitudes de stos.
Oficina de Evaluacin del Aprendizaje Estudiantil

MEDIDAS Y CRITERIOS

Medidas - son mtodos o procesos usados para evaluar la ejecutoria de los estudiantes en el contexto de un hallazgo (logro) que se p p propone para el aprendizaje. p p j Criterios - describe el nivel de ejecutoria del estudiante relacionado a un dominio. p p Especficamente operacionaliza el dominio del egresado del Recinto. (Qu es lo que estoy evaluando?)
Oficina de Evaluacin del Aprendizaje Estudiantil

TAREA I

Indique medidas directas e indirectas e instrumentos de avalo que utiliza o utilizara para evidenciar el logro esperado por sus estudiantes en un componente del rea medular.

Oficina de Evaluacin del Aprendizaje Estudiantil

EJEMPLO
Comunicacin
Medida:
Criterios
Tema

efectiva

Prueba de redaccin en Espaol

y estructura Dominio de las estructura sintcticas Dominio lxico Correccin

Oficina de Evaluacin del Aprendizaje Estudiantil

MEDIDAS DIRECTAS
Las medidas directas son mtodos que evaluan el trabajo actual del estudiante; requieren que el estudiante demuestre su conocimiento y destrezas:
Proyectos de cursos capstone. Portafolios (coleccin de trabajos de los estudiantes). Pruebas estandarizadas. Ensayos corregidos (blind-scores) como parte de un curso. curso Exhibiciones, proyectos evaluados por jurado interno o externo.

Oficina de Evaluacin del Aprendizaje Estudiantil

MEDIDAS DIRECTAS (CONT) (CONT).

j Evaluaciones de ejecutorias de los estudiantes (performance). Evaluacin de internados. Ejecutoria en un anlisis de casos/problema. Ejecutoria en un problema/anlisis (el estudiante j p / ( explica cmo resolvi el problema). Ejecutoria en exmenes de licenciatura. j Pruebas desarrolladas localmente. Pre y Post pruebas. e ost p uebas
Oficina de Evaluacin del Aprendizaje Estudiantil

MEDIDAS INDIRECTAS
Las medidas indirectas son mtodos basados en la percepcin en vez de la demostracin; le solicitan al estudiante u otra persona que refexione sobre su aprendizaje, en lugar de que ste tenga que demostrarlo:

Encuestas a graduandos, patronos y estudiantes. Entrevistas de salida a los graduandos. Grupos focales. Estudios de seguimiento a graduados graduados. Datos sobre colocacin en empleos de los egresados.

Oficina de Evaluacin del Aprendizaje Estudiantil

MEDIDAS INDIRECTAS (CONT ) (CONT.)

Porcentaje de estudiantes que siguen estudios graduados. Estadsticas de colocacin en empleos una vez graduados. Porcentaje de estudiantes que estudian en el extranjero. Porcentaje de estudiantes que finalizan sus estudios de bachillerato en 5-6 aos.

Oficina de Evaluacin del Aprendizaje Estudiantil

AL ESCOGER UNA MEDIDA DE ASSESSMENT

Use mltiples medidas para evaluar el logro de cada estudiante. Puede usar una variedad de medidas estudiante directas e indirectas. Use medidas de assessment que tengan sentido para su disciplina. Escoja medidas de assessment que evalen el logro del aprendizaje que se persigue. Seleccione instrumentos que produzcan datos manejables.
Oficina de Evaluacin del Aprendizaje Estudiantil

AL ESCOGER UNA MEDIDA DE ASSESSMENT (CONT.) ( )

Use informacin que recogen otras personas. Escoja instrumentos que avalan ms de un logro a la vez. Establezca redes de comunicacin con otros departamentos para evitar la duplicidad entre los instrumentos usados por ustedes o por ellos. Use o modifique actividades de evaluacin existentes en los cursos.
Oficina de Evaluacin del Aprendizaje Estudiantil

PRIMERA ETAPA DEL CICLO DE EVALUACIN DEL APRENDIZAJE ESTUDIANTIL A NIVEL INSTITUCIONAL

Se inicia el proceso con la seleccin de al menos dos los siguientes dominios del Recinto:
1. 2. 3. 4.

Capacidad Crtica Comunicacin Efectiva Responsabilidad Social Investigacin y Creacin

Adems, con la seleccin de al menos uno de los , conocimientos, destrezas y actitudes propios del programa acadmico o concentracin.
Oficina de Evaluacin del Aprendizaje Estudiantil

CICLO DE ASSESSMENT
Cun bien alcanzamos los objetivos de aprendizaje?

Interpretamos los datos

Perfil del Egresado Eg d (metas) Objetivos de p j Aprendizaje

Construccin de instrumentos

Toma de decisiones sobre los hallazgos

Recogemos datos d t

Evaluacin de las acciones transformadoras tomadas

RECOPILACIN E INTERPRETACIN DE LOS DATOS

Recopile datos de diversas fuentes de modo que pueda hacer un juicio con sentido (por ejemplo muestras de h j i i tid ( j l t d trabajos de los estudiantes en la sala de clases y otras muestras del trabajo hecho por los estudiantes). j p ) Recopile datos que crea tiles para contestar preguntas q que usted se ha hecho. Organice informes alrededor de issues, no solamente alrededor de datos. Interprete los datos para que pueda tomar decisiones informadas.
Oficina de Evaluacin del Aprendizaje Estudiantil

USO DE LOS RESULTADOS

Fortalecer el aprendizaje estudiantil

Detectar reas a mejorar D t t j Continuar con procesos exitosos

Mejorar l prcticas educativas M j las ti d ti Revisin de programas Acreditacin de programas Auto estudio institucional Acreditacin institucional
Oficina de Evaluacin del Aprendizaje Estudiantil

TAREA II: PARA DISCUSIN

Proponer acciones transformadoras tomando en consideracin la siguiente informacin:
Competencia C t i Mdula Comunicacin efectiva (oral) Trabajo en equipo tica Presentacin / Rbrica Tarea en equipo / Rbrica Estudio de Caso / Rbrica Estudio de Caso / Rbrica Merc 3115 Admi 4005 Cont 3105 60% 83% 85%
Persuasin, audiencia, dominio del tema (50%) Identificacin de la parte afectada (33%) Dominio, promueve participacin (50%)

Actividad / A ti id d Instrumento

Curso C

Hallazgos* H ll *

Aspectos A t especficos

Programas (Concentraciones) tica Fina 4025 63%

Explicacin de falta tica (42%)

*Porciento de estudiantes que obtuvieron una puntuacin de 70 ms.

Informacin suministrada por el CAAE

ESTADO DE IMPLANTACIN DEL PLAN DE EVALUACIN DEL APRENDIZAJE ESTUDIANTIL EN EL RECINTO

Formato del Plan Formato del Informe Anual Dominios seleccionados por los programas acadmicos del Recinto Cmo nos encontramos a octubre 9 de 2009? Blog de la OEAE
Oficina de Evaluacin del Aprendizaje Estudiantil

EJEMPLO DE UN CICLO DE ASSESSMENT: ADMINISTRACIN DE SISTEMAS DE OFICINA

Presentacin de los procesos y reflexiones del assessment del aprendizaje estudiantil en Administracin de Sistema de Oficinas. Evaluacin y comentarios de la agencia acreditadora.

Oficina de Evaluacin del Aprendizaje Estudiantil

REVISIN DEL PLAN

Considere
Han

lo siguiente:

cambiado las metas del programa?

Fueron

adecuadas las evidencias? Se pueden seguir usando? Proveen informacin vlida y confiable? Nos llevan a un anlisis significativo? usar la informacin las audiencias concernidas para mejorar los programas?

Pudieron

Oficina de Evaluacin del Aprendizaje Estudiantil

Recuerda que estamos para ayudarte a realizar la tarea. Adelante! tarea

Oficina de Evaluacin del Aprendizaje Estudiantil

PREGUNTAS

Oficina de Evaluacin del Aprendizaje Estudiantil