Ttulo: MODELO PARA EVALUAR PLATAFORMAS COMERCIALES DE APRENDIZAJE EN LINEA

Nombre(s) y cargo del(os) autor(es): Maria Luisa Torres Isiordia, estudiante de la carrera de Ingeniera en Telemtica Karina Martnez Fuentes, estudiante de la carrera de Ingeniera en Comunicacin Multimedia Mara Morfn Otero, profesor Titular A y jefe del Departamento de Ciencias y Tecnologas para el Aprendizaje Vctor Manuel Gonzlez Romero,p rofesor Titular C y jefe de la Divisin de Estudios Sociales y Econmicos

Institucin de procedencia: Centro Universitario de la Costa, Universidad de Guadalajara

Mesa y temtica a la que corresponde: Mesa 5, subtema 5.1 Educacin a distancia y virtualidad

Palabras clave o descriptores: Aprendizaje en lnea, plataformas e-learning, evaluacin de e-learning

Sntesis: El objetivo de este trabajo es proporcionar una gua para la seleccin de programas comerciales orientados al aprendizaje en lnea, de acuerdo a la orientacin y costos deseados.

Definimos como aprendizaje en lnea a una serie de herramientas y procesos mediante los cuales una persona puede adquirir determinados conocimientos en un tema especfico, en donde no existen las limitaciones fsicas de tiempo y espacio, ya que el alumno puede acceder al conocimiento a cualquier hora y desde cualquier lugar, siempre y cuando se cuente con una computadora y acceso a Internet.

La web y las tecnologas del Internet son el instrumento principal del aprendizaje en lnea, ya que se utilizan como base para las plataformas de cursos en lnea, tanto para su desarrollo, como para la entrega y evaluacin. El proceso de aprendizaje en lnea est enfocado al aprendizaje del alumno ms que al mtodo tradicional de enseanza donde la educacin se centraba en el profesor.

Despus de haber revisado, seleccionado y evaluado varias plataformas comerciales para el aprendizaje en lnea, en este trabajo se define y se aplica un modelo que permita orientar a personas e instituciones en la adquisicin e implantacin de este tipo de software. Finalmente se exponen los resultados y conclusiones del modelo.

MODELO PARA EVALUAR PLATAFORMAS DE APRENDIZAJE EN LINEA

M. L. Torres Isiordia, K. Martnez Fuentes, M. Morfn Otero, V. M. Gonzlez Romero Centro Universitario de la Costa, Campus Puerto Vallarta Universidad de Guadalajara

INTRODUCCION

El objetivo de este trabajo es proporcionar una gua para la seleccin de programas orientados al aprendizaje en lnea, de acuerdo a la orientacin y caractersticas deseadas.

Definimos como aprendizaje en lnea al proceso mediante el cual una persona puede adquirir determinados conocimientos y habilidades en un tema especfico, en donde no existen las limitaciones fsicas de tiempo y espacio, ya que el alumno puede acceder al conocimiento a cualquier hora y desde cualquier lugar, siempre y cuando cuente con una computadora y acceso a Internet.

La web y las tecnologas del Internet son el instrumento principal del aprendizaje en lnea, ya que se utilizan como base para las plataformas de cursos en lnea, tanto para su desarrollo, como para la entrega y evaluacin. El proceso de aprendizaje en lnea est enfocado al aprendizaje del alumno ms que al mtodo tradicional de enseanza en donde la educacin se centraba en el profesor.

Despus de haber revisado, seleccionado y evaluado varias plataformas comerciales para el aprendizaje en lnea, en este trabajo se define y se aplica un modelo que permite orientar a personas e instituciones en la adquisicin e

implantacin de este tipo de software. Finalmente se exponen los resultados y conclusiones del modelo.

MODELO DE EVALUACIN Para efecto de comparar plataformas de aprendizaje en lnea fue necesario definir los aspectos a evaluar, para ello se realizaron bsquedas en la Web tanto de documentos que comparan plataformas as como los elaborados por las compaas que venden los programas. Con base a este estudio seleccionamos los aspectos que aparecieron con ms frecuencia en las diversas plataformas de aprendizaje. Cada uno de los aspectos tiene varias caractersticas, mismas que se pueden revisar en la siguiente tabla:

No. 1

ASPECTO Herramientas comunicacin de

CARACTERSTICAS QUE SE EVALUARON Asncrona (e-mail, bbs, foros), sncrona (compartir aplicaciones, chat, chat con voz, espacio virtual, compartir browser, pizarra blanca, teleconferencia, videoconferencia)

Herramientas para estudiante el

Anotaciones, rea de presentacin, seguimiento del progreso, preguntas preexamen, glosario-ndices-metas.

Herramientas para el instructor

Calendario,

multimedia,

exmenes,

marcar

en

lnea,

administracin de recursos, administracin del curso, monitoreo) Soporte tcnico, documentacin del sistema, ayuda en lnea, wizards, soporte al estudiante, soporte al instructor, acceso, acceso remoto.

Caractersticas Generales

Seguridad

Contrasea, permisos o derecho, recuperacin de fallas, seguridad en el servidor

Requerimientos sistema

del

Memoria RAM, espacio en disco duro, sistema operativo

7 8

Costo Nmero de

No aplica No aplica

instituciones que utilizan la plataforma

Para cada una de las caractersticas correspondientes a los cinco primeros aspectos se dio una puntuacin de acuerdo a los siguientes criterios:

VALOR 0 1

DESCRIPCIN No tiene dicha caracterstica Muy poca capacidad para hacer la tarea o no hace lo que debera hacer

2 3 4 5

Hace la tarea con limitaciones Hace la tarea adecuadamente pero necesita mejorar Hace la tarea bien con problemas leves Hace la tarea muy bien; la tarea o caracterstica est diseada tan bien como fue deseada.

Para el aspecto 6 (Requerimientos del sistema) se tomaron en cuenta la cantidad de memoria RAM y de disco duro necesarios para la plataforma evaluada, con las siguientes puntuaciones:
MEMORIA RAM CANTIDAD 4 Mb 16 Mb 24 Mb 64 Mb 128 Mb 256 Mb VALOR 5 5 4 3 2 1

ESPACIO EN DISCO DURO CANTIDAD 0- 499 Mb 500 Mb 1 Gb Ms de 1 Gb VALOR 5 3 1

Para el aspecto 7 (Costo) se tomaron en cuenta dos tipos de licencia: una para hasta 3000 alumnos y otra para ms de 3000 alumnos. El valor 5 indica que la licencia es barata o de precio bajo, y el valor 1 indica que la licencia es cara o el costo es elevado, de acuerdo a la siguiente tabla de valores:
Menos de 3000 alumnos Menos de $1 0001 $1 001 a $2 000 $2 001 a $3 000 $3 001 a $4 000 Ms de $4 001 VALOR 5 4 3 2 1

Ms de 3 000 alumnos Menos de $2 0001 $2 001 a $4 000 $4 001 a $6 000 $6 001 a $8 000

VALOR 5 4 3 2

Dlares USA

Ms de $8 001

Para el aspecto 8. (Instituciones) se tom en cuenta el nmero de instituciones que usan la plataforma, concediendo el valor 5 a aquellas plataformas que sean utilizadas en muchas instituciones y el valor 1 si es utilizada en pocas, de acuerdo a los siguientes datos:
Nmero de instituciones 1 1 000 1 001 2 000 2 001 3 000 3 001 4 000 4 001 5 000 VALOR 1 2 3 4 5

Despus de haber asignado un valor en cada aspecto, el modelo propone el uso de ponderaciones para cada aspecto. Dichas ponderaciones se definen en porcentajes y expresan las importancia relativa que se da a cada aspecto. Por ejemplo si la seguridad se considera que tiene el doble de importancia que el costo, entonces su ponderacin ser el doble.

Cada institucin debe definir la ponderacin de acuerdo a su situacin particular. A continuacin se presentan las ponderaciones utilizadas en nuestro ejercicio.
ASPECTO Herramientas de comunicacin Herramientas para el estudiante Herramientas para el instructor PONDERACIN 15% 10% 10%

Caractersticas Generales Seguridad Requerimientos del sistema Costo Uso en otras instituciones TOTAL

10% 15% 10% 15% 15% 100%

Una vez definida la ponderacin que se da a cada aspecto es necesario subdividirle para cada una de las caractersticas del mismo. Por ejemplo para el caso de herramientas de comunicacin, que a su vez se subdivide en asincrnicas y sincrnicas, dimos una ponderacin de 5% y 10% respectivamente de tal forma que la suma es 15% como se indica en la tabla anterior. Despus se procede a multiplicar, para cada caracterstica, el porcentaje P por el valor de puntacin V, para obtener un valor total T. Ejemplo:

Sumando los totales de todas y cada una de las caractersticas obtenemos el puntaje total final. El mximo puntaje que puede obtener una plataforma por con estos datos es de 800 (100%) Los resultados se expresan en porcentaje del total, as una plataforma que haya obtenido 400 puntos finales tendr un resultado de 50%. Es importante tomar en cuenta que cualquier modificacin a las ponderaciones afectar los resultados. Tambin se recomienda que sea una misma persona la que asigne los valores a cierta caracterstica de las diversas plataformas que se quieran comparar, o mejor an, utilizar varias personas y obtener el promedio de sus propuestas de valuacin.

Cuando para una plataforma no se encontr informacin respecto a determinada caracterstica, utilizamos el valor promedio que para dicha caracterstica obtuvimos del resto de las plataformas que se compararon. De esta forma el desconocimiento de datos de una plataforma no afecta el resultado comparativo.

Los resultados se pueden interpretar de la siguiente forma:

EN PUNTOS DE 641 A 800 DE 481 A 640 DE 321 A 480 DE 161 A 320 DE 1 A 160 EN PORCENTAJE E. CUALITATIVA

DEL 80.1% AL 100% EXCELENTE DEL 60.1% AL 80% MUY BIEN DEL 40.1% AL 60% BIEN DEL 20.1% AL 40% REGULAR DEL 0.1% AL 20% MAL

APLICACIN DEL MODELO

Seleccin de plataformas

La seleccin de la plataformas se hizo a travs de datos obtenidos de las pginas de las universidades. Cuando la informacin no se encontr en las pginas correspondiente, se solicit a travs de correo electrnico a la dependencia correspondiente, y se obtuvieron los siguientes datos:

EN MXICO: Utilizamos el universo de instituciones que participan en el Consorcio Universitario para el desarrollo de Internet (CUDI) por considerar que en dicha asociacin se encuentran las universidades ms desarrolladas en cmputo y telecomunicaciones.

10

Universidad

Plataforma de aprendizaje en lnea utilizada

Benemrita Universidad Autnoma de Puebla

WebCT

Centro de Investigacin cientfica y de Educacin Sistema propio Superior de Ensenada CETYS Universidad Escuela Bancaria y Comercial, SC Instituto M.G. Instituto Tecnolgico Superior de Uruapan Iteso Universidad Liceo de Monterrey Universidad Anhuac del Sur Universidad Autnoma de Baja California Universidad Autnoma de Ciudad Jurez Universidad Autnoma de Nuevo Len Universidad Autnoma de Tamaulipas Universidad de Guadalajara Universidad de las Amricas-Puebla Universidad Nacional Autnoma de Mxico Universidad Panamericana, campus Guadalajara Universidad Veracruzana WebCT WebCT WebCT Lotus Learning Space WebCT WebCT WebCT VIRTUAL U y sistema propia Sistema propio Blackboard Blackboard Sistema propio Sistema propio Sistema propio WebCT WebCT

En las universidades mexicanas encontramos que sobresalen las plataformas de Webct y las desarrolladas por las propias instituciones.

FUERA DE MXICO: Seleccionamos las instituciones que aparecieron con mayor frecuencia al hacer bsquedas bajo las palabras: e-learning y distance education, con los siguientes resultados:

11

Universidad Australian National University Cornell University Imperial College, London Johns Hopkins University London School of Economics MacGill University Massachusetts Technology Princeton University Standford University University of Minessota University of British Columbia University of California (Berkeley) University of Chicago University of Durham University of Hong Kong Institute

Lugar Australia Estados Unidos Inglaterra Estados Unidos Inglaterra Canad of Estados Unidos

Plataforma Sistema propio Blackboard y WebCT Blackboard Blckboard Sistema propio WebCT Sistema propio y WebCT

Estados Unidos Estados Unidos Estados Unidos Canad Estados Unidos Estados Unidos Inglaterra China

Blackboard Sistema propio WebCT WebCT WebCT WebCT Sistema propio Sistema propio, WebCT y Blackboard

University of Oxford, Oxford International School University of Pennsylvania

Inglaterra, Estados Unidos Estados Unidos

WebCT

WebCT

Al igual que para las universidades mexicanas encontramos que la plataforma mas usada en esas universidades fue la de WebCT, siguiendo de ah la de Blackboard, tambin se encontr que en varias de estas universidades utilizan un sistema propio. Vale la pena resaltar que observamos un crecimiento reciente en el uso de Blackboard en nuestro pas y fuera de l. En nuestras bsquedas encontramos ms de 150 plataformas comerciales mencionadas de las cuales seleccionamos las diez que aparecieron con mayor frecuencia siendo ellas:

12

1. Blackboard: Bb Learning 2. Aspen Asymetrix click2learn Toolbook 3. Docent 4. eCollege 5. FirstClass Collaborative Classroom (FCCC) 6. Lotus Learning Space 7. TopClass 8. Virtual-U 9. Web Course in a Box 10. WebCT

RESULTADOS

Aplicando el modelo a cada una de estas plataformas se obtuvieron los siguientes resultados2, en donde se especifica nicamente el valor total, obtenido de la frmula P * V (porcentaje por valor de puntacin), ya mencionada:

La tabla detallada de clculo, con aspectos y caractersticas incluidas, se puede consultar en la pgina de www.e-learning.8m.com

13

Aspen aymetrix click2learn Toolbox

FirstClass Collaborative Classroom

Plataforma

Blackboard: Bb Learning

Lotus Learning Space

Aspecto

Web Course in a Box

TopClass

eCollege

Virtual-U

Herramientas de comunicacin Herramientas para estudiante Herramientas para instructor Caractersticas Generales Seguridad Requerimientos del sistema Costo y uso en otras instituciones TOTAL % con el el

36

40

39

45

38

45

33

44

19

57

22

22

27

27

27

28

20

24

28

42

42

35

36

39

20

34

26

25

26

40

34

36

31

32

27

32

32

30

34

34

61 25

45 28

46 16

53 28

57 32

53 29

33 29

50 29

42 29

69 24

180

210

210

220

290

250

180

190

180

240

400 50

416 52

405 51

444 55

491 61

471 59

353 44

392 49

358 45

506 63

respecto a 800

El porcentaje de aqu se obtuvo de acuerdo al numero mayor de puntos que se poda haber obtenido. El nmero mayor de puntos que poda haber obtenido una

WebCT

Docent

14

plataforma es 800 puntos, por tanto 800 es el 100%. Si una plataforma como el Web Course in a Box tiene como vemos 357.8 puntos en total esto representa el 44.72% que mostramos en la ultima tabla. Esto no quiere decir que esta

plataforma est reprobada, sino que como el mximo de puntos al calificar es 5 y solo obtiene cinco el que tuvo un excelente desempeo, es decir, que sobresalga de lo ordinario, entonces se considera como algo normal quien obtuvo un 3 de puntuacin. Veamos un ejemplo de acuerdo a la ultima tabla.

La puntuacin final en si significa lo siguiente:

En puntos DE 641 A 800 DE 481 A 640 DE 321 A 480 DE 161 A 320 DE 1 A 160

En porcentaje DEL 80.1% AL 100% DEL 60.1% AL 80% DEL 40.1% AL 60% DEL 20.1% AL 40% DEL 0.1% AL 20%

Evaluacin educativa EXCELENTE MUY BIEN BIEN REGULAR MAL

Por lo tanto, el resultado final sera el siguiente:

Puntuacin final Blackboard: Bb Learning Aspen Asymetrix click2learn Toolbook Docent ECollege FirstClass Collaborative Classroom (FCCC) Lotus Learning Space TopClass Virtual-U Web Course in a Box WebCT

Ecaluacin cualitativa Bien Bien

Puntos totales 400 416

Bien Bien Muy bien

405 444 491

Bien Bien Bien Bien Muy bien

471 353 392 358 506

15

CONCLUSIONES

El modelo que se presenta pretende auxiliar a las instituciones educativas y empresas en la seleccin de sus plataformas de aprendizaje en lnea. Mediante un anlisis de informacin encontrada en la Web se definieron los aspectos a evaluar para cada plataforma as como sus caractersticas. Se toma en cuenta tanto la calidad observada para cada caracterstica (Valor) as como la importancia relativa que cada institucin otorga a la caracterstica en cuestin (Ponderacin). Cuando se dese comparar plataformas, se recomienda que sea la misma persona la que asigne los valores de cada caracterstica a las diferentes plataformas. Mejor an ser el pedir a varias personas su valoracin y utilizar el promedio de los resultados.

En nuestro ejemplo WebCT obtuvo la mayor puntuacin, siguindole First Class, y despus Lotus Learning Space. Se debe tener en cuenta que la ponderacin que se dio puede cambiarse de acuerdo a las necesidades del cliente y por lo tanto otra plataforma tal vez resultara con mayor puntuacin. Por ejemplo para una institucin, adquirira mayor ponderacin el costo si se considera una caracterstica primordial y el resultado dar mayor ponderacin a las plataformas de menor costo. Sin embargo para una institucin en que la seguridad es algo primordial, la plataforma con mayor puntuacin no sera necesariamente la misma que la que ofrece un bajo costo.

Al revisar las pginas electrnicas de las universidades encontramos que tanto en Mxico como el extranjero la plataforma de WebCT es la ms utilizada, sin embargo, observamos que recientemente Blackboard tiene un crecimiento

16

significativo por lo que estimamos que en breve un mayor nmero de instituciones utilizar dicha plataforma.

El modelo aqu propuesto tambin puede ser utilizado por empresas que necesiten decidir sobre la adquisicin de una plataforma de aprendizaje para sus programas de capacitacin, sin embargo, se deber tomar en cuenta que por lo general las empresas compran cursos ya desarrollados por terceros por lo que la seleccin de la plataforma puede estar supeditada a aquella en la que se desarrollaron los cursos. Por otra parte, en algunos casos, las empresas pueden requerir plataformas que adems les permitan administrar y evaluar habilidades de su personal (por ejemplo SUN ELP), lo que requerir incluir otros aspectos en el modelo.

Es preocupante la deficiente informacin sobre servicios de educacin a distancia encontrada en la mayora de las pginas de instituciones mexicanas. Adems, obtuvimos pocas respuestas a nuestros correos electrnicos (aproximadamente 20%) mientras que de las universidades de otros pases logramos respuesta a casi todos.

AGRADECIMIENTO

Agradecemos a Grupo Estratel por el apoyo econmico brindado a dos estudiantes del Centro Universitario de la Costa para el desarrollo de la investigacin, que dio lugar a esta ponencia.

BIBLIOGRAFA

Palloff R.M. y Pratt K., Lessons from the cyberspace classroom, Jossey-Bass (2001)

17

Dryden G. y Vos J., La revolucin del aprendizaje, Tomo (2002)

Maier P., Barnett L., Warren A. y Bruner D., Using technology in teaching and learning, Kogan Page (1998)

Rosenberg M.C., e-learning, McGraw Hill (20021)

Rossett A., The ASTD e-elearning handbook, Mc Graww Hill (2002)

LIGA A LA PAGINA DE COMPARACION DE PLATAFORMAS: www.e-learnings.8m.com

18