GUIA PARA CONSTRUCCION DE PREGUNTAS

DOCUMENTO 2

EXMENES DE ESTADO DE LA CALIDAD DE LA EDUCACIN SUPERIOR

INGENIERA 2003

ECAES

Asociacin Colombiana de Facultades de Ingeniera

ACOFI
Bogot, marzo de 2003

ORIENTACIONES BASICAS PARA EL PROCESO DE CONSTRUCCION DE PREGUNTAS

QUE ES UN EXAMEN OBJETIVO

Instrumento para medir una muestra de comportamientos de un individuo o grupo de individuos (conocimientos que opera, procesos de pensamiento que pone en accin a partir de una informacin dada). Mide muestras de comportamiento (es imposible medir el comportamiento de las personas) Implica un procedimiento sistemtico de diseo y elaboracin, un conjunto de reglas o principios que conservan un orden interno. Un examen objetivo requiere: * * * * * Una estructura: determinacin y organizacin de contenidos a evaluar; especificacin de reas, subareas, # de preguntas y tiempo / respuesta. Determinacin previa de patrones de respuesta Homogeneidad en la aplicacin: determinacin previa de grupo poblacional, condiciones y procedimientos para aplicar el examen... Confiabilidad: Estabilidad de la calificacin en diversas aplicaciones que se realicen bajo las mismas condiciones. Validez: Exactitud con que el examen mide el atributo objeto de la evaluacin; que la prueba mida aquello para lo cual fue diseada.

PROCESOS DE PENSAMENTO QUE SE PROPONE EVALUAR ESTE EXAMEN

A) RECUERDO Proceso del pensamiento referido a la capacidad del estudiante de hacer presente el material apropiado para responder a una pregunta: evocacin de datos, hechos, procedimientos, mtodos, criterios... Aunque el paso del tiempo ocasione olvido de una parte de la informacin, hay contenidos que deben permanecer en la memoria del estudiante para intervenir en el momento oportuno, por ejemplo: * terminologa, conceptos fsicos, principios, leyes, procedimientos, relaciones matemticas fundamentales, propiedades fsicas o qumicas de elementos comunes, teoras,... NOTA: En la prctica, todos los procesos de pensamiento suponen algn grado de evocacin de informacin. B) COMPRENSION Proceso de pensamiento referido al entendimiento que logra el estudiante de una informacin, la captacin de su significado, del mensaje contenido en un enunciado, una comunicacin.

La comprensin se produce a travs de procesos mentales de: * traduccin: puesta de la informacin en otro lenguaje; puede llevarse a cabo: * de un nivel de abstraccin a otro, * de una forma simblica a otra, * de una forma verbal a otra * interpretacin: disposicin diferente de los componentes de una informacin sin alterar su estructuracin como totalidad, distincin de conclusiones legtimas e ilegtimas que pueden derivarse de un cuerpo dado de informacin. extrapolacin: derivacin de conclusiones de un enunciado, corolarios, efectos...

C) APLICACION Referida a la capacidad del estudiante de identificar una teora que subyace a la dificultad o problema que se le presenta para resolver; evocar y poner en accin un procedimiento para resolverla. Tipos de dificultad: * un problema planteado en una situacin ficticia, * un problema conocido al cual se le hacen variaciones difcilmente previstas por el estudiante.

El proceso de aplicacin puede producirse a travs de enunciados que demandan al estudiante avanzar: * de lo terico a lo terico, * de lo terico a lo prctico, * de lo prctico a lo terico, * de lo prctico a lo prctico. NOTA: Se sugiere la Aplicacin como el proceso de pensamiento al que se le debe dar ms peso, en este tipo de Exmenes. D) ANALISIS Proceso de pensamiento que incluye las siguientes operaciones mentales, por parte del estudiante: Descomposicin de un todo en sus partes Determinacin de las relaciones entre las partes Comprensin de la forma como estn organizadas

Por lo anterior, el pensamiento puede proceder con tres orientaciones: * * * Anlisis de elementos, de componentes de un enunciado, Anlisis de las relaciones que articulan la informacin dada, Anlisis de los principios de organizacin que articulan la informacin dada y de sus cualidades.

RECOMENDACIONES PARA LA ELABORACION DE PREGUNTAS

"Una pregunta es la unidad mnima de medida. Al igual que el examen tiene una estructura. Hablar de pregunta tem es lo mismo que hablar de operacin de medida, entendida como todo aquello que se crea para explicitar una respuesta observable sobre el rasgo (aspecto, contenido) definido en el propsito"

Estructura de una Pregunta

Una pregunta se compone de: a) Enunciado: determina la situacin de medida ofreciendo algo y pidiendo algo. b) Campo de respuesta: ste puede ser visible o explcito, construible por el individuo utilizando las instrucciones que se le ofrecen para identificar la respuesta. Lo componen las opciones de respuesta que guardan relacin con el enunciado. Hay un cierto nmero de opciones de respuesta que son incorrectas, llamadas distractores. Segn el tipo de pregunta, la opcin correcta o clave, puede estar constituida por una sola opcin o por una combinacin de opciones correctas. El nmero de opciones que se ofrecen en el campo de respuesta debe tener en cuenta el nivel de instruccin de los individuos y puede determinar el nivel de dificultad del tem. A mayor nmero de opciones entre las cuales debe escogerse la clave, mayor dificultad. ESTRUCTURA GENERAL DE UN ITEM OBJETIVO . ? ENUNCIADO

( Un error comn ) ( Algo opuesto a la clave ) DISTRACTORES ( CLAVE ) ( Una informacin no pertinente ) ( Un absurdo ) Cada una de las tres partes del tem tiene su funcin: a) el enunciado indica el proceso y ofrece la informacin necesaria; b) los distractores, distraen a quien no posee el rasgo (a quien no tiene el conocimiento, en este caso), y moviliza el proceso de solucin hacia posibles salidas; c) la clave cierra el proceso, ofreciendo la solucin a quien pueda reconocerla. CAMPO DE RESPUESTA

Condiciones para construir preguntas tem objetivos

Para lograr que una Prueba o examen sea objetiva, confiable y vlida, sus preguntas deben constituirse teniendo en cuenta lo siguiente: Referirse nicamente a lo definido en las especificaciones propias de la prueba o examen. Emplear un lenguaje directo, sencillo y libre de ambigedades. Cada pregunta debe tener una sola respuesta. Evitar enunciados con connotaciones ideolgicas, polticas, religiosas, emotivas Evitar los enunciados negativos. En caso de emplearlos (en casos muy excepcionales), se debe resaltar el NO, para llamar la atencin hacia la formulacin negativa. Todos los tem de una prueba deben ser independientes entre s: la respuesta a un tem NO debe depender de encontrar la respuesta correcta de otro. Pero s se pueden construir tem con un enunciado comn. El enunciado de un tem NO debe dar pistas de concordancia gramatical, de contraste, de homo / heterogeneidad que lleven a identificar la clave. La clave debe colocarse al azar, al ordenar las distintas opciones de un tem. Igual ocurre al ordenar los diferentes distractores. Los distractores de un tem no deben dar indicaciones sobre la clave por ofrecer un cierto contraste evidente: de longitud; de precisin / imprecisin; de uso comn / tcnico; de generalizacin / particularizacin; de concrecin / sutileza; de semejanza /oposicin, Deben evitarse como opciones las expresiones "todas" o "Ninguna de las anteriores. La ubicacin de las claves en la prueba NO debe seguir ningn sistema. Si la prueba se orienta a medir uso o aplicacin de conocimientos anlisis crtico, asegrese de que los tem NO puedan ser respondidos sobre la base del conocimiento de hechos. No deben utilizarse, en las opciones, las mismas palabras significativas que se utilizaron en el enunciado. Repetir la misma palabra del enunciado en cualquiera de las opciones lleva a elegirla como respuesta clave, as no lo sea. RECUERDE: ES CORRIENTE QUE QUIEN SE INICIA EN LA ELABORACION DE ITEMS, TIENDA A SUBESTIMAR LA DIFICULTAD DE LOS "ITEMS" QUE CONSTRUYE. CUANDO ELABORE UN ITEM PIENSE QUE LO PUEDAN CONTESTAR CORRECTAMENTE EL 50 EL 60% DE QUIENES LO ABORDEN.

TIPOS DE PREGUNTAS ITEMS OBJETIVOS

Preguntas de seleccin mltiple con nica respuesta
Este tipo de pregunta consta de un enunciado y cinco opciones de respuesta sealadas con las letras A, B, C, D y E, de las cuales slo una completa correctamente el enunciado o resuelve el problema planteado. El examinado debe marcar en la Hoja de respuestas la opcin seleccionada.

Preguntas de Seleccin mltiple con mltiple respuesta

Este tipo de pregunta consta de un enunciado y cuatro opciones de respuesta identificadas con los nmeros 1, 2, 3 y 4. Slo dos de estas opciones responden correctamente el enunciado. El examinado debe responder de acuerdo con el siguiente Cuadro:

Si 1 Si 2 Si 3 Si 2 Si 1

y y y y y

2 son 3 son 4 son 4 son 3 son

correctas, correctas, correctas, correctas, correctas,

rellene rellene rellene rellene rellene

el valo el valo el valo el valo el valo

A B C D E

Preguntas de Anlisis de Relacin:

Este tipo de pregunta consta de una afirmacin y una razn, unidas por la palabra PORQUE. En este tipo de tem el examinado debe evaluar tanto la exactitud de la afirmacin como la de la razn, y la relacin lgica existente entre ellas. A diferencia de las preguntas de Anlisis de Postulados, en las preguntas de Anlisis de Relacin tanto la afirmacin como la razn pueden ser verdaderas o falsas. Para su construccin es necesario tener en cuenta: La afirmacin ni la razn deben ser obviamente falsas u obviamente verdaderas. La afirmacin y la razn no deben ser mutuamente excluyentes. Tanto la afirmacin como la razn deben ser frases gramaticalmente completas y estar construidas de manera que pueda juzgarse su verdad o falsedad independientemente.

El examinado debe responder de acuerdo con el siguiente Cuadro: Si la afirmacin y la razn son VERDADERAS y la razn es una explicacin CORRECTA de la afirmacin, rellene el valo Si la afirmacin y la razn son VERDADERAS pero la razn NO es es una explicacin CORRECTA de la afirmacin, rellene el valo Si la afirmacin es VERDADERA, pero la razn es una proposicin FALSA, rellene el valo Si la afirmacin es FALSA, pero la razn es una proposicin VERDADERA, rellene el valo Si tanto la afirmacin como la razn son proposiciones FALSAS, rellene el valo

A B C D E

Referencias bibliogrficas
1. Cano R. Floralba. Construccin de Pruebas de conocimientos especficos. Departamento de Sicologa Clnica. Escuela de Sicologa. Universidad del Valle. Documento mimeografiado. Cali, Colombia. Enero, 1.997. 2. Herrera R., Aura Nidia. Algunas consideraciones tcnicas sobre la construccin de tem de Pruebas objetivas segn la clasificacin de objetivos educativos de Bloom. Universidad Nacional de Colombia. Bogot D.C., Colombia. Septiembre, 1.992. 3. ICFES. Subdireccin de Aseguramiento de la calidad. Grupo de Medicin y Evaluacin. Area de Matemticas. Taller sobre construccin de preguntas. Diciembre 18 de 2.001.