Академический Документы
Профессиональный Документы
Культура Документы
Perspectiva Hermenutica
Validity and Reliability in the Evaluation of Learning from a Hermeneutical
Perspective
Sergio Garca
Universidad Nacional Experimental de Guayana, sgarcia@uneg.edu.ve
RESUMEN El presente artculo plantea aplicar el mtodo hermenutico para asegurar la
validez y la confiabilidad en el proceso de evaluar el aprendizaje, cuando ste se centra en
el aprendiz. Los enfoques cuantitativo y cualitativo orientan todo su esfuerzo, para evaluar
el aprendizaje, hacia el perfeccionamiento de tcnicas e instrumentos de medicin
elaborados por el evaluador asegurando la validez de los mismos en trminos de precisar el
rasgo del aprendizaje que se pretende medir (validez de constructo) y controlar y posibilitar
su generalizacin (validez interna y externa). As mismo, la confiabilidad se establece para
garantizar la estabilidad o consistencia interna en estas tcnicas e instrumentos de medicin
y verificar el grado de similitud entre el contexto del evaluador y el contexto del evaluado.
Bajo el enfoque hermenutico, la evaluacin del aprendizaje es concebida como un proceso
social e investigativo centrado en el aprendiz, construido, compartido y desarrollado a
travs de la experiencia intersubjetiva asociada a los procesos inteligentes, de pensamiento,
conscientes, afectivos y emocionales; y enmarcado por las interrelaciones existentes entre
el conocimiento y el aprendizaje. En este sentido, la validez adquiere otra dimensin, al
documentar fehacientemente las relaciones particulares existentes entre el aprendizaje y la
evaluacin (validez de contenido, cognitiva, ecolgica, de juicio y de interpretacin) y, por
su parte, la confiabilidad se sustenta en la intuicin y el entendimiento, enlazndose para
desarrollar un proceso de construccin de la evaluacin, sin pretender inducir
generalizaciones sino de explicar lo particular.
Palabras clave: Hermenutica, validez, confiabilidad, evaluacin, aprendizaje,
intersubjetividad, enfoque interpretativo.
ABSTRACT This article proposes the application of a hermeneutical method to assure
validity and reliability in the process of evaluating learner-centered learning. Unlike the
more traditional quantitative and qualitative approaches, a hermeneutical approach views
learning as a social and inquiring process centered on learners. Learning is construed,
shared and developed by means of an intersubjective experience related to thinking and
emotional processes and in which knowledge and learning are intertwined. In this sense,
validity means a different thing. It takes into account the specific relations between learning
and evaluation (content, cognitive, ecological, judgemental and interpretive validity).
Reliability is then based on intuition and comprehension. These factors are intertwined as
they develop a constructive process of evaluation, intending not to generalize but to explain
particular instances.
b. Validez de criterio: eficacia de la prueba para comparar un rasgo en cuestin con alguna
o algunas variables externas, midindola a travs de anlisis correlacional o de regresin
entre las puntuaciones obtenidas en la prueba y en otras basadas en el criterio.
c. Validez de constructo: basada en la integracin de cualquier evidencia que fundamenta la
interpretacin o significado de las puntuaciones de la prueba o test, medida a travs del
anlisis correlacional y de covarianza intertem.
Estas categoras, establecidas por la APA, fueron resumidas en 1985 a partir de cinco tipos
de validez sealados por esta misma Asociacin en 1954 (validez de contenido, validez de
criterio, validez predictiva, validez concurrente y validez de constructo); apuntando hacia la
concepcin nica de validez, referida a la pertinencia, significado y utilidad de las
inferencias especficas derivadas de las pruebas o tests, coincidiendo, desde este punto
vista, con Anastasi en 1982 y con Cronbach en 1984. Cronbach (1988), con la idea de que
el argumento debe unir la evidencia de los conceptos, las consecuencias sociales y
personales, y los valores, aade:
el fondo del asunto es que los que validan tienen la obligacin de revisar cundo una
prctica tiene consecuencias apropiadas para los individuos y las instituciones, y
especialmente prevenir las consecuencias adversas. Usted (.) pudiera excluir la reflexin
sobre las consecuencias a partir de los significados de la palabra validacin, pero no
puede negar la obligacin de hacerlo (p. 6).
Ahora, al tomar en consideracin la pertinencia, el significado y la utilidad de las
inferencias especficas derivadas de las pruebas o tests, conjuntamente con las
consecuencias sociales y personales, y los valores, se pudiera pensar ms bien en unificar
las tres categoras de validez en una sola: la de constructo; debido a que las otras dos
categoras tambin contribuyen al significado de las puntuaciones de la prueba o test,
reconocindolas as como aspectos de la validez de constructo (Messick, 1989: 20). De esta
manera, la validez de constructo estara conformada por tres componentes: (a) componente
substantivo (confrontacin entre la relevancia del juicio de contenido y la representatividad,
por un lado, y la consistencia de la respuesta emprica, por el otro); (b) componente
estructural (conjugacin de la fidelidad del modelo para calificar las caractersticas
estructurales de las manifestaciones del constructo y el grado de la estructura intertem); y
(c) componente externo (grado de la relacin emprica entre la prueba o test con otras
pruebas que reflejen las esperadas relaciones implcitas en la teora del constructo que se
evala).
La validez de constructo, sin embargo, debe tomar en consideracin el uso contextual de la
prueba o test y cmo se generan las puntuaciones de la misma. Cronbach (1988) seala que
"los argumentos para usar la prueba deben estar claros para extender, de manera persuasiva
y posible, la construccin de la realidad y el peso valorativo implcito, y sus aplicaciones"
(p. 7). Para recoger informacin de la validez de constructo, necesaria para justificar la
interpretacin de la prueba, los datos deben surgir, inicialmente, de la administracin y
desarrollo de la prueba, para continuar con aqullos obtenidos ms all del anlisis de las
puntuaciones, estableciendo as un proceso de bsqueda amplia y minuciosa.
Por su parte, las puntuaciones de la prueba pudieran llevar a emitir juicios errneos del
evaluador sobre el evaluado, al no considerar otros aspectos de tipo humano, social o
cultural referidos al evaluado y, adems, la informacin susceptible de ser medida limita su
existencia, dejando afuera otros aspectos que pudieran ser de significativa importancia para
validar el juicio. Al respecto Messick (1989) seala lo siguiente:
los tests no slo son imprecisos o falibles en virtud de los errores muestrales de medida
sino tambin inevitablemente imperfectos como ideales del constructo que se proponen
valorar. Los tests son medidas imperfectas de constructos porque no consideran aspectos
que pudieran incluir de acuerdo a la teora del constructo o incluyen aspectos que
pudieran quedar fuera, o ambos. Esto ltimo indica que hay dos tipos de evidencias
necesarias para validar el constructo, uno para valorar el grado con el cual las
implicaciones del constructo se evidencian con las relaciones empricas de la puntuacin y
el otro para argumentar que estas relaciones no son atribuidas a otros constructos
diferentes y alternos (p. 34).
Por su parte, Campbell y Stanley (1972) distinguen dos tipos de consideraciones para la
validez cuantitativa asociada a la evaluacin del aprendizaje: la validez interna y la externa.
a. Validez interna: concebida como la mnima imprescindible sin la cual es imposible
interpretar alguna evaluacin. Algunas variables externas que pueden generar efectos que se
confundiran con el del estmulo del aprendizaje son: (a) la historia (acontecimientos
especficos ocurridos entre mediciones sucesivas para evaluar el logro de un objetivo
instruccional); (b) la maduracin (procesos internos del evaluado como cansancio,
desmotivacin, desinters, etctera); (c) la administracin de tests (influjo que la
administracin de una prueba o test ejerce sobre los resultados de otro posterior); (d) la
instrumentacin (cambios en los instrumentos de medicin o en los evaluadores que pueden
producir variaciones en las mediciones que se obtengan); (e) la mortalidad (diferencia en la
prdida de evaluadores).
b. Validez externa: la cual plantea la interrogante sobre la posibilidad de generalizacin.
Los factores que amenazan esta validez son: (a) el efecto reactivo o de interaccin de las
pruebas o tests (aumento o disminucin de la sensibilidad o la calidad de la reaccin del
evaluado al estmulo de un aprendizaje); (b) el efecto de interaccin (sesgo de seleccin de
tcnicas e instrumentos de evaluacin y el tipo especfico de aprendizaje); (c) efectos
reactivos de la evaluacin (impedimentos para hacer extensiva las tcnicas e instrumentos
para evaluar un aprendizaje en otros aprendizajes); y (d) las interferencias de las
evaluaciones mltiples (efectos que se producen cuando al evaluado le aplican evaluaciones
mltiples y sucesivas, persistiendo aqullos de procesos y resultados de evaluaciones
anteriores).
2.2. Validez Cualitativa
La validez, bajo el enfoque cualitativo, concierne a la exactitud con que las conclusiones
representen efectivamente la realidad emprica y si los constructos diseados representan
categoras reales de la experiencia humana (Hansen, citado en Prez, 1994: 80).
evaluador sobre el tiempo, lugar y cultura donde ocurre la evaluacin, para poder as
transferir juicios hacia otros evaluadores.
Segn Goetz y LeCompte (1988), existen dos tipos de confiabilidad para la evaluacin:
a. Confiabilidad interna: consiste en conocer la congruencia existente entre las inferencias
relativas al aprendizaje, derivadas stas de los constructos elaborados por el evaluado sobre
un aprendizaje, para lo cual es fundamental la descripcin y composicin de los
acontecimientos sin tomar en cuenta su frecuencia. Usualmente se utilizan las siguientes
tcnicas e instrumentos: (a) descriptores de bajo nivel inferencial (narraciones y relatos
concretos, minuciosos y precisos, incluyendo datos discrepantes); (b) varios evaluadores
(equipos de evaluadores abocados a la evaluacin de un mismo aprendizaje), (c) revisin
por otros evaluadores (corroboracin de los hallazgos por parte de otros evaluadores); y (d)
datos registrados automticamente (registros de video, audio, fotografas, etc.)
b. Confiabilidad externa: consiste en establecer condiciones empricas en el proceso de
evaluacin que puedan ser replicadas por otros evaluadores, no significando esto que los
hallazgos sean replicables, debido a que el flujo de informacin depende del contexto
sociocultural donde ocurre la evaluacin. El evaluador aumenta la confiabilidad externa de
la evaluacin dando respuesta a cuatro aspectos: (a) status del evaluado (rol social del
evaluado frente al aprendizaje y su evaluacin); (b) seleccin de la evaluacin
(caracterizacin de las tcnicas e instrumentos que permitan la replicabilidad de la
evaluacin); (c) situaciones y condiciones sociales (contexto fsico, social e interpersonal
donde se recoge la informacin relativa a la evaluacin); (d) premisas y constructos
analticos (especificacin adecuada de los constructos, conceptos y definiciones que
caracterizan la evaluacin); y (e) mtodos y estrategias de recogida y anlisis de
informacin (presentacin difana de la estrategia y metodologa de evaluacin).
IV. La Hermenutica
El planteamiento del presente trabajo para asegurar la validez y la confiabilidad en el
proceso de evaluar el aprendizaje, cuando ste se centra en el aprendiz, se enmarca
ontolgica y epistemolgicamente en la filosofa de la interpretacin o la hermenutica; en
la cual el conocimiento se concibe como la articulacin de una comprensin originaria,
donde las cosas estn ya descubiertas (Vattimo, 1987); se abandona el objetivismo y la idea
de un sujeto originariamente vaco, concepciones que hace la filosofa moderna para definir
una realidad que se muestra al sujeto, constituida por la certeza que l mismo tiene sobre
ella.
La poca moderna impone al hombre una mentalidad alienada a una realidad constituida
por l mismo y que se reduce a l, un mundo tecnificado producto del hombre. La verdad es
absoluta, es nica, y se deriva de una ciencia que reduce el ser a la objetividad a travs del
laboratorio. La modernidad se caracteriza por la formalizacin lgico-matemtica y la
matematizacin del conocimiento natural. El objetivismo revela al mundo como
matemtica aplicada y la conciencia objetiva se apropia de lo subjetivo. Con la modernidad
se disuelve el lazo social y el paso de las colectividades sociales al estado de una masa
[ Links ]
[ Links ]
[ Links ]
[ Links ]
[ Links ]