Академический Документы
Профессиональный Документы
Культура Документы
n
t
e
c
n
o
l
g
i
c
a
E
n
t
o
r
n
o
S
a
t
i
s
f
a
c
c
i
n
C
o
n
t
e
n
i
d
o
s
A
p
r
e
n
d
i
z
a
j
e
Acceso a las herramientas e-learning X
Aplicaciones y servicios en red X
Uso de computadores y tecnologa con fines educativos X
Usabilidad de las herramientas e-learning X
Utilidad percibida con e-learning X
Cooperatividad del estudiante X
Estrategias de entrega de cursos e-learning X X
Satisfaccin del estudiante con e-learning X
Percepcin de la calidad de los cursos e-learning X X
Desempeo del estudiante X
Caracterizacin del curso X
Fuente: Elaboracin propia
Tabla 8. Descripcin de las variables sugeridas para la medicin
Nombre de la
variable
Descripcin
Acceso a las
herramientas e-
learning (V1)
Mide el acceso por parte de los estudiantes al hardware y software
necesario para realizar actividades por la va electrnica. Adems del
hardware tambin evalan las conexiones a Internet que hacen posible el
e-learning.
Aplicaciones y
servicios en red (V2)
Con esta variable se pretende medir la variedad de aplicaciones
disponibles como parte del e-learning, as como de la variedad de
servicios en red que lo complementan.
Uso de computadores
con fines educativos
(V3)
En el saln de clase se pueden imaginar distintos usos para los
computadores, orientados al desarrollo del proceso educativo. Con esta
variable se quiere evaluar cmo se utilizan estos instrumentos en la
prctica.
53
Nombre de la
variable
Descripcin
Usabilidad de las
herramientas e-
learning (V4)
Es uno de los factores de xito identificados en la implantacin de
soluciones e-learning, como se pudo identificar en el estado del arte
presentado en el captulo anterior. Con esta variable se quiere medir qu
tan amigables resultan las herramientas e-learning para los estudiantes.
Utilidad percibida con
e-learning (V5)
Mide por una parte el avance en la calidad de la educacin, en el proceso
y en los resultados. Por otra parte, esta medida pretende mostrar qu
logros o ganancias visibles hay en el marco de un curso e-learning,
particularmente a nivel del contenido desarrollado y a nivel de ventajas
inherentes del e-learning dadas las facilidades que aporta sobre el
desarrollo de un curso.
Cooperatividad del
estudiante (V6)
Se dice que el e-learning es una manifestacin de los modelos
constructivista y colaborativo del aprendizaje (Kawachi, 2005). Con base
en esta afirmacin, por medio de esta variable se puede dar cuenta de la
efectividad y la calidad del aprendizaje cuando se realiza actividad en
grupo. Tambin se mide la capacidad de trabajo en equipo de los
estudiantes, mediante el seguimiento de las actividades desarrolladas en
colaboracin a travs de las herramientas e-learning.
Estrategias de
entrega de cursos e-
learning (V7)
La idea de esta variable es medir por una parte qu tan flexibles logran
ser los cursos presentados, especialmente en lo que tiene que ver con
tiempo y espacio. Por otro lado, se propone medir qu tanto contenido se
encuentra disponible para los estudiantes por la va del e-learning sobre el
total del contenido creado para el curso, y qu tan disponible se encuentra
este contenido en e-learning para los interesados en consultarlo.
Satisfaccin del
estudiante con e-
learning (V8)
Indica qu tan satisfechos quedan los estudiantes en cuanto a su proceso
de aprendizaje, en comparacin con el esquema tradicional donde la
tecnologa no es empleada en absoluto. Es una medida de una fase
posterior basada en las impresiones del estudiante tras el uso de las
tecnologas e-learning.
Percepcin de la
calidad de los cursos
e-learning (V9)
Ms all de la calidad de la informacin entregada por el docente o
instructor se encuentra la calidad del curso visto como un conjunto. Esta
variable pretende medir esta calidad, incluyendo todos los elementos que
lo componen adems de los contenidos.
Desempeo del
estudiante (V10)
Esta se podra considerar como la medida final de los resultados del e-
learning en el aula de clase, y particularmente si se tuvieran en cuenta las
calificaciones de los estudiantes como el medidor supremo. Sin embargo,
en trminos de esta investigacin no se le da un valor mayor ni menor que
las dems variables del conjunto. Est orientada a captar qu tanto
conocimiento distribuido en el programa del curso fue realmente adquirido
por los estudiantes.
Caracterizacin del
curso (V11)
Esta variable indica la configuracin de los aspectos generales y
transversales entre los participantes de un curso.
Fuente: Elaboracin propia
3.2.2 Indicadores
Los indicadores son el siguiente nivel en el marco de la medicin para la
evaluacin de impacto, si se repasa la definicin de Snchez-Torres en (2006)
segn la cual estos indicadores son las que dan un valor especfico a las
variables, es decir, van ms all de la definicin de la variable y le otorgan un valor
significativo, prctico y real.
54
De la misma manera que se seleccionaron las variables para esta metodologa
tambin se seleccionaron los indicadores, es decir, se tomaron en cuenta los
indicadores ms utilizados en la literatura encontrada entre estudios de referencia
y propuestas de sistemas de indicadores de alcance general, para luego revisar y
presentar aquellos que se consideran pertinentes en el entorno que se propone
evaluar en este estudio, como es el de la educacin superior presencial. En
algunos casos, las variables seleccionadas en esta metodologa venan
acompaadas de uno o ms indicadores, por lo que se revisaron tambin para ser
incluidos en la lista que se presentar enseguida. En general, con el anlisis de los
indicadores candidatos a ser seleccionados se vio la necesidad de adaptar
algunos de ellos para ser tiles en el contexto de este estudio.
Sin embargo, con el nmero de indicadores existentes que se seleccionaron no se
alcanz siquiera el nmero de variables incluidas en esta propuesta, toda vez que,
como se comentaba en el captulo anterior, en la literatura no hay una
diferenciacin clara entre variables e indicadores, de forma que se encuentran
principalmente propuestas de algunas variables sin especificar indicadores, y se
presentan luego cifras relacionadas con medidas estadsticas de centralizacin o
dispersin, como es el caso de (Chou & Liu, 2005), (Korkmaz & Karakus, 2009) y
(Feberova, et al., 2010). Por esta razn, se proponen nuevos indicadores para
todas las variables seleccionadas para esta metodologa a modo de complemento,
con el nimo de inducir la mejor manera de darle valor a dichas variables de
acuerdo al propsito particular de cada una de estas.
En la Tabla 9 se presenta la relacin de los 31 indicadores seleccionados con
respecto a las 11 variables a las que pertenecen con su respectiva descripcin.
55
Tabla 9. Relacin de indicadores propuestos por variable
Nombre de la
variable
Nombre del indicador Medida Descripcin
Acceso a las
herramientas e-
learning (V1)
Nmero medio de alumnos por
computador (I1.1)
Nmero Un indicador numrico continuo que indica la relacin de
estudiantes por computador en la muestra objeto de estudio.
Proporcin de salones de clase con
acceso a Internet (I1.2)
Porcentaje Relacin dada en trminos de porcentaje del total de salones
de clase que disponen de una conexin a Internet sobre el
total de salones estudiados en la muestra.
Aplicaciones y
servicios en red
(V2)
Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin sincrnica entre los
participantes (I2.1)
Porcentaje Con relacin a los cursos ofrecidos, se describe con este
indicador la proporcin en trminos de porcentaje de cursos
que hacen uso de herramientas de comunicacin en tiempo
real como el chat o la videoconferencia como parte del
desarrollo del mismo.
Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin asncrona entre los
participantes (I2.2)
Porcentaje En este caso se trata de la proporcin en trminos de
porcentaje de cursos que hacen uso de herramientas de
comunicacin con intercambio de informacin distante en el
tiempo, como es el caso del correo electrnico y los foros de
discusin como formas de comunicacin en el desarrollo del
curso.
Uso de
computadores con
fines educativos
(V3)
Frecuencia de uso de Internet con
fines formativos (I3.1)
Nmero de
horas
semanales
A partir de los computadores que cuentan con conexin a
Internet, se calcula la cantidad de horas promedio a la
semana que se utilizan estos para desarrollar actividades
relacionadas con el proceso de aprendizaje en un curso.
Porcentaje medio de internautas
habituales por curso e-learning (I3.2)
Porcentaje Promedio de estudiantes por curso que cuentan con
experiencia en el uso habitual de Internet con distintos fines.
Porcentaje medio de facilidades e-
learning efectivamente
aprovechadas en el desarrollo de un
curso (I3.3)
Porcentaje Proporcin de aquellas funcionalidades que efectivamente se
utilizan en el desarrollo de un curso, sobre el total de
funcionalidades ofrecidas y conocidas de las herramientas e-
learning disponibles para este.
Usabilidad de las
herramientas e-
learning (V4)
Frecuencia de ocurrencia de
problemas de uso para completar
una tarea virtual (I4.1)
Escala
numrica de
0 a 5
Opinin de los estudiantes con respecto a la dificultad para
completar las tareas virtuales por problemas de uso con el
software e-learning, en una escala numrica de 0 a 5, donde
0 representa la menor frecuencia y 5 es la mayor.
Porcentaje de tareas efectivamente
resueltas en aplicacin e- learning
por parte de los estudiantes (I4.2)
Porcentaje Proporcin de tareas o actividades realmente terminadas
sobre el total de tareas o actividades propuestas para ser
realizadas en modalidad e-learning por curso.
56
Nombre de la
variable
Nombre del indicador Medida Descripcin
Calificacin media de la facilidad de
aprendizaje de uso las herramientas
e-learning propuestas (I4.3)
Escala
numrica de
0 a 5
Calificacin numrica en una escala de 0 a 5 entregada por
los estudiantes sobre la facilidad de aprender a utilizar las
herramientas e-learning que se ponen a su disposicin, donde
5 es la mxima facilidad posible y 0 la mnima.
Tiempo medio necesario para
completar una tarea virtual en e-
learning de forma efectiva (I4.4)
Nmero de
horas
Promedio de horas que le toman a un estudiante para
terminar una actividad comn durante el desarrollo de un
curso, con la caracterstica de que esta se realiza totalmente
va e-learning.
Utilidad percibida
con e-learning (V5)
Proporcin de material cubierto en el
curso, con relacin al material
estimado inicialmente para el curso
(I5.1)
Porcentaje Corresponde a la razn del material que se logra ver con la
ayuda del e-learning sobre el total del material propuesto
inicialmente para el desarrollo del curso.
Valoracin de utilidad de disponer de
notas de clase antes de las sesiones
presenciales del curso (I5.2)
Escala
numrica de
0 a 5
Valoracin que le dan los estudiantes al hecho de disponer de
notas de clase va e-learning, as como algunos contenidos
relacionados con las sesiones presenciales. Esta valoracin
se calcula en escala numrica de 0 a 5.
Cooperatividad del
estudiante (V6)
Porcentaje de tiempo virtual
dedicado al trabajo colaborativo/en
grupo (I6.1)
Porcentaje Sobre el total del tiempo que en promedio le dedican los
estudiantes al aprendizaje en e-learning, se toma la
proporcin que se estima le corresponde a actividades
realizadas en grupo, es decir, aplicando la base de la
propuesta del modelo de aprendizaje cooperativo o
colaborativo explicado en el captulo anterior.
Calificacin promedio del aporte de
otros participantes virtuales en el
proceso de aprendizaje (I6.2)
Escala
numrica de
0 a 5
Valoracin que hacen los estudiantes de forma individual
sobre sus pares, en cuanto al aporte que ellos hacen a su
proceso de aprendizaje en particular. Se calcula como un
promedio en una escala de 0 a 5, donde 5 es la mxima
valoracin.
Porcentaje de estudiantes que
considera vital el rol del docente
para el aprendizaje mediante las
ayudas e-learning (I6.3)
Porcentaje Porcentaje de estudiantes que en su interaccin con el
docente encargado del curso por las vas de comunicacin
que se proveen con e-learning, considera este como un rol
muy importante para el aprendizaje que se logra al final del
curso.
Estrategias de
entrega de cursos
e-learning (V7)
Proporcin media de actividades en
e-learning con respecto al total de
actividades por curso (I7.1)
Porcentaje Porcentaje estimado de la participacin que tienen las
actividades llevadas de forma virtual con respecto al el total
de actividades que se realizan en el desarrollo de un curso.
57
Nombre de la
variable
Nombre del indicador Medida Descripcin
Porcentaje de actividades en e-
learning con restricciones de tiempo
(I7.2)
Porcentaje Proporcin de actividades que se deben desarrollar durante
unos horarios definidos o con plazos para su realizacin,
sobre el total de actividades propuestas para un curso e-
learning.
Nivel de disponibilidad del material
del curso (I7.3)
Porcentaje Porcentaje estimado del tiempo que est en lnea y
completamente disponible el material de un curso para los
interesados en el proceso de aprendizaje.
Proporcin del contenido propuesto
del curso con ayudas e-learning
(I7.4)
Porcentaje Qu porcentaje del programa de un curso en promedio se
lleva de la mano con actividades en e-learning.
Proporcin de estudiantes que
recibe informacin sobre
lineamientos para el uso de las
herramientas al inicio del curso (I7.5)
Porcentaje Porcentaje de estudiantes que recibe capacitacin al principio
de un curso sobre la forma y las reglas que se deben seguir
para el uso de las herramientas e-learning, con el fin de lograr
los objetivos propuestos para el mismo.
Satisfaccin del
estudiante con e-
learning (V8)
Porcentaje de aceptacin de las
herramientas e-learning como
refuerzo del proceso de aprendizaje
(I8.1)
Porcentaje Proporcin en trminos de porcentaje de estudiantes de un
curso que independientemente de sus habilidades en TIC,
han aceptado al e-learning como componente activo de su
proceso de aprendizaje en dicho curso.
Calificacin media de la satisfaccin
con la inclusin de e-learning en el
proceso de aprendizaje (I8.2)
Escala
numrica de
0 a 5
Valoracin en escala numrica de 0 a 5 del grado de
satisfaccin que sienten los estudiantes al incluir e-learning
en complemento al esquema de aprendizaje presencial para
el desarrollo de un curso, donde 0 es la mnima satisfaccin y
5 es la mxima.
Nivel de satisfaccin con las
habilidades exigidas para el
desarrollo del curso con e-learning
(I8.3)
Escala
numrica de
0 a 5
Qu tan satisfechos se sienten los estudiantes con respecto
al conocimiento previo requerido en TIC necesario para
desarrollar de forma exitosa el curso. Este indicador consiste
en una escala numrica de 0 a 5, donde 5 es la mxima
satisfaccin.
Percepcin de la
calidad de los
cursos e-learning
(V9)
Calificacin promedio de la
experiencia de aprendizaje (I9.1)
Escala
numrica de
0 a 5
Es la calificacin entregada por los estudiantes sobre la
experiencia vivida al ver un curso en modalidad blended
learning, en una escala numrica de 0 a 5, donde 5 es la
mejor experiencia.
58
Nombre de la
variable
Nombre del indicador Medida Descripcin
Percepcin de la calidad de las
anotaciones de clase en el sistema
(I9.2)
Escala
numrica de
0 a 5
Es la calificacin que le dan los estudiantes a la calidad de los
contenidos publicados en el sistema, que puede tomar
valores en una escala numrica de 0 a 5, donde 5 es el grado
de mayor excelencia en el contenido.
Desempeo del
estudiante (V10)
Porcentaje de estudiantes que
aprueban el curso (I10.1)
Porcentaje Observacin del desempeo de estudiantes que aprueban
sobre el total de estudiantes del curso con la utilizacin de
herramientas e-learning en el desarrollo del curso, en
trminos de porcentaje.
Promedio de calificaciones de los
estudiantes del curso (I10.2)
Escala
numrica de
0 a 5
Valor medio de las calificaciones de los estudiantes,
normalizadas en una escala de 0 a 5, donde 0 es la peor
calificacin y 5 es la mejor, para un curso tomado en
modalidad blended learning.
Porcentaje de estudiantes que
cumplen con el desarrollo de
actividades en e-learning dentro del
tiempo establecido (I10.3)
Porcentaje Este indicador presenta la proporcin estimada de
estudiantes que sobre el total del curso terminan las
actividades propuestas en e-learning dentro de los plazos
propuestos.
Caracterizacin del
curso (V11)
Cantidad de aos de experiencia
docente del encargado del curso
(I11.1)
Nmero Nmero de aos estimados que tiene el docente encargado
del curso como experiencia.
Cantidad de aos de experiencia con
tecnologas del encargado del curso
(I11.2)
Nmero Nmero de aos que el docente encargado de un curso
estima que tiene como experiencia en el manejo de TIC.
Fuente: Elaboracin propia
59
Como se observa, en buena parte de estos indicadores propuestos la medicin se
realiza a nivel de cursos, por lo cual para obtener una perspectiva ms amplia del
impacto de la utilizacin del e-learning en el esquema de educacin superior
presencial se debe hallar la forma de extrapolar estos resultados a dicha amplitud,
de la forma ms precisa posible.
3.3 Instrumentos de recoleccin de datos
Para recolectar los datos que permitan alimentar los indicadores recin
planteados, se propone como parte de esta metodologa la utilizacin de
encuestas como instrumento de recoleccin tanto cuantitativo como cualitativo.
Esta instrumento fue escogido por su facilidad de difusin y por la acogida
encontrada en sistemas de indicadores y otros estudios en este y otros sectores
de la SI, tomando ideas tambin de la utilizacin de cuestionarios (BISER, 2002)
(Comisin del Mercado de las Telecomunicaciones, 2007) (eBusiness Watch,
2005) (Fundacin Telefnica, 2008) (Junta de Castilla y Len, 2007) (OECD
Working Party on Indicators for the Information Society, 2005).
Con base en la naturaleza de los indicadores listados anteriormente, se determin
que se deben realizar tres encuestas para tres fuentes de informacin diferentes,
como se presenta en la Tabla 10: una encuesta para estudiantes, una encuesta
para docentes y una encuesta para la organizacin
16
. En las siguientes
subsecciones se presentan los aspectos cuantitativos y cualitativos en cada una
de estas divisiones.
Tabla 10. Tipificacin de los indicadores propuestos por instrumento de recoleccin de informacin
Nombre del indicador Forma de
recoleccin
E
n
c
u
e
s
t
a
a
e
s
t
u
d
i
a
n
t
e
s
E
n
c
u
e
s
t
a
a
i
n
s
t
i
t
u
c
i
n
E
n
c
u
e
s
t
a
a
d
o
c
e
n
t
e
s
Nmero medio de alumnos por computador (I1.1) X
Proporcin de salones de clase con acceso a Internet (I1.2) X
Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin sincrnica entre los participantes (I2.1)
X X
Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin asncrona entre los participantes (I2.2)
X X
16
En este caso la organizacin hace referencia a la institucin de educacin superior.
60
Nombre del indicador Forma de
recoleccin
E
n
c
u
e
s
t
a
a
e
s
t
u
d
i
a
n
t
e
s
E
n
c
u
e
s
t
a
a
i
n
s
t
i
t
u
c
i
n
E
n
c
u
e
s
t
a
a
d
o
c
e
n
t
e
s
Frecuencia de uso de Internet con fines formativos (I3.1) X
Porcentaje medio de internautas habituales por curso e-learning (I3.2)
X
Porcentaje medio de facilidades e-learning efectivamente aprovechadas
en el desarrollo de un curso (I3.3)
X
Frecuencia de ocurrencia de problemas de uso para completar una tarea
virtual (I4.1)
X
Porcentaje de tareas efectivamente resueltas en aplicacin e- learning
por parte de los estudiantes (I4.2)
X X
Calificacin media de la facilidad de aprendizaje de uso las herramientas
e-learning propuestas (I4.3)
X
Tiempo medio necesario para completar una tarea virtual en e-learning
de forma efectiva (I4.4)
X
Proporcin de material cubierto en el curso, con relacin al material
estimado inicialmente para el curso (I5.1)
X X
Valoracin de utilidad de disponer de notas de clase antes de las
sesiones presenciales del curso (I5.2)
X
Porcentaje de tiempo virtual dedicado al trabajo colaborativo/en grupo
(I6.1)
X
Calificacin promedio del aporte de otros participantes virtuales en el
proceso de aprendizaje (I6.2)
X
Porcentaje de estudiantes que considera vital el rol del docente para el
aprendizaje mediante las ayudas e-learning (I6.3)
X
Proporcin media de actividades en e-learning con respecto al total de
actividades por curso (I7.1)
X
Porcentaje de actividades en e-learning con restricciones de tiempo (I7.2) X
Nivel de disponibilidad del material del curso (I7.3) X
Proporcin del contenido propuesto del curso con ayudas e-learning
(I7.4)
X
Proporcin de estudiantes que recibe informacin sobre lineamientos
para el uso de las herramientas al inicio del curso (I7.5)
X
Porcentaje de aceptacin de las herramientas e-learning como refuerzo
del proceso de aprendizaje (I8.1)
X
Calificacin media de la satisfaccin con la inclusin de e-learning en el
proceso de aprendizaje (I8.2)
X
Nivel de satisfaccin con las habilidades exigidas para el desarrollo del
curso con e-learning (I8.3)
X
61
Nombre del indicador Forma de
recoleccin
E
n
c
u
e
s
t
a
a
e
s
t
u
d
i
a
n
t
e
s
E
n
c
u
e
s
t
a
a
i
n
s
t
i
t
u
c
i
n
E
n
c
u
e
s
t
a
a
d
o
c
e
n
t
e
s
Calificacin promedio de la experiencia de aprendizaje (I9.1) X
Percepcin de la calidad de las anotaciones de clase en el sistema (I9.2) X
Porcentaje de estudiantes que aprueban el curso (I10.1) X
Promedio de calificaciones de los estudiantes del curso (I10.2) X
Porcentaje de estudiantes que cumplen con el desarrollo de actividades
en e-learning dentro del tiempo establecido (I10.3)
X
Cantidad de aos de experiencia docente del encargado del curso (I11.1) X
Cantidad de aos de experiencia con tecnologas del encargado del
curso (I11.2)
X
Fuente: Elaboracin propia
3.3.1 Recoleccin de datos cuantitativos
Con base en la Tabla 10 se ha organizado un cuestionario para la encuesta de
estudiantes con preguntas para 21 indicadores, y un cuestionario para la encuesta
de los docentes con preguntas para diez (10) indicadores. En ambos casos, las
preguntas de los cuestionarios hacen referencia a datos cuantitativos capturados
en valores numricos, escalas e intervalos de valores.
Para trminos de la encuesta orientada a los estudiantes, las preguntas se
estructuraron en tres grupos: preguntas de contexto (ambiente) de los estudiantes,
de desarrollo del curso y preguntas de resultado del curso, tratando de mantener
una secuencia de preguntas fciles de seguir para el encuestado sobre aspectos
medibles al inicio, durante y al final de un curso. Para el caso de la encuesta de
docentes, los grupos que determinan la organizacin por temas de la encuesta
son: preguntas de contexto, de usuarios del e-learning y preguntas sobre el
desempeo del curso. Esta organizacin por grupos para trminos de las
encuestas fue determinada a partir de temas y palabras clave, sin tener
necesariamente una correspondencia con la organizacin por variables y
categoras que a nivel terico se ha venido explicando.
Por ltimo, se elabor tambin un cuestionario para la organizacin, es decir, la
institucin educativa, que consta de nicamente cuatro preguntas. Al igual que las
dos encuestas propuestas para los participantes del proceso de aprendizaje, las
cuatro preguntas propuestas a partir de los indicadores son de carcter
cuantitativo.
62
El detalle de la encuesta para la organizacin y las encuestas para estudiantes y
docentes se presenta en el anexo B de este documento.
3.3.2 Recoleccin de datos cualitativos
En las mismas encuestas formuladas para la alimentacin de indicadores a partir
de datos cuantitativos se encuentra tambin un componente cualitativo. Este
componente se traduce bsicamente en una pregunta adicional, con respuesta
abierta sobre las observaciones que existen desde la perspectiva y la experiencia
como docente en la realizacin de cursos presenciales complementados con e-
learning, para el caso de la encuesta orientada a docentes; tambin se tiene una
pregunta adicional en la encuesta orientada a estudiantes con la misma intencin,
esta vez con la perspectiva del directamente interesado en el proceso de
aprendizaje.
La inclusin de esta pregunta en cada encuesta permite captar de primera mano
las percepciones que tienen los participantes del proceso de aprendizaje en la
utilizacin del e-learning como complemento a la clase en el aula, que no han
podido ser manifiestas en las dems preguntas de la encuesta, de forma que se
apoya directamente el anlisis de las variables V8 y V9.
3.3.3 Prueba piloto
Con base en datos de la DNIA, se obtuvo una lista preliminar de profesores con
los cuales se pudiera eventualmente evaluar el diseo y la pertinencia del
cuestionario de la encuesta docente y su organizacin. Se contactaron a cinco
docentes de distintos programas, en este caso todos de la Facultad de Ingeniera
de la UN y se les present la encuesta en lnea directamente para su revisin.
Las respuestas obtenidas en la encuesta fueron satisfactorias y la realimentacin
recibida sobre la organizacin de la encuesta fue positiva igualmente. Al principio,
la encuesta dirigida a docentes no contaba con una pregunta sobre las
observaciones y percepciones personales sobre la utilizacin del e-learning como
complemento a sus cursos presenciales, pero por sugerencia unnime de ellos se
incluy tambin para el anlisis cualitativo, como se explic anteriormente. De la
misma forma, en la encuesta para estudiantes se incluy una pregunta similar,
para facilitar la agregacin de elementos que posiblemente no se capten con las
dems preguntas de la encuesta.
En cuanto al desarrollo de la encuesta, se observ en la prueba que la encuesta
es fcil y rpida de responder, lo que permite el total diligenciamiento de la misma.
El diligenciamiento de la encuesta para docentes se realiz durante la prueba
piloto en un tiempo no mayor a cinco (5) minutos. En el caso de la encuesta para
los estudiantes no se realiz medicin, aunque se estim una duracin de nueve
63
(9) a 11 minutos, dada la cantidad de preguntas propuestas y la pregunta con
respuesta abierta al final.
3.4 Anlisis y evaluacin de datos
Para cada uno de los instrumentos de recoleccin de informacin deben
recopilarse los datos y asignar los valores calculados para los indicadores
propuestos. Tambin deben procesarse los datos de orden cualitativo para
confirmar los datos de orden cuantitativo.
3.4.1 Estrategia de anlisis cuantitativo
A partir de las encuestas propuestas para estudiantes, docentes y organizacin,
se debe realizar una consolidacin de las respuestas para alimentar los
indicadores propuestos. Esta consolidacin debe pasar por una normalizacin de
los datos, considerando las limitaciones tecnolgicas que puedan ser impuestas
por la herramienta de difusin de las encuestas, bien sea por la forma de ingreso
de los datos o el estilo de respuesta del encuestado.
Es importante realizar un anlisis del comportamiento de los indicadores por curso
evaluado, particularmente prestando atencin a los indicadores que se alimentan
de dos fuentes de informacin, como es el caso de indicadores sobre usabilidad
de las herramientas e-learning, utilidad percibida con la utilizacin del e-learning y
aplicaciones y servicios en red. Este anlisis permite contrastar puntos de vista y
percepciones entre los actores del proceso de aprendizaje.
De otro lado, en la Tabla 11 se presenta la definicin del anlisis de cada una de
las preguntas que configuran los indicadores alimentados a partir de la encuesta
para estudiantes, sealando para cada una de ellas si sus datos son de carcter
escalar, nominal u ordinal, en trminos de clasificacin de variables estadsticas
para el procesamiento de la informacin tabulada.
As mismo, en la Tabla 12 se definen tambin los anlisis a realizar sobre las
preguntas de la encuesta para docentes, que configuran los indicadores asociados
a esta poblacin. Por ltimo, en la Tabla 13 se describen los anlisis a realizar
sobre los datos recopilados con la encuesta para la institucin.
3.4.2 Estrategia de anlisis cualitativo
En los instrumentos de recoleccin diseados para estudiantes y docentes se
incluye una pregunta de percepcin de carcter plenamente cualitativo. El
contenido de las respuestas a esta pregunta debe ser analizado y revisado para
confirmar el comportamiento de los indicadores calculados de forma cuantitativa.
Finalmente, debe generarse un reporte con el resultado de los indicadores y de los
comentarios analizados para revisin de los interesados en la toma de decisiones,
64
como sugiere Snchez-Torres en (2006), en la IES donde se ejecuta la
metodologa de evaluacin. Este reporte debe servir como base para una nueva
iteracin de ejecucin de la metodologa, que permita comparar el avance en
seguimientos de periodos semestrales o anuales, segn la institucin lo considere
necesario.
3.5 Discusin
El diseo propuesto de una metodologa para la medicin del e-learning en el
contexto de la presencialidad comprende los tres componentes presentados en
este captulo: un sistema completo de indicadores, clasificados en variables y
categoras; unos instrumentos de recoleccin de informacin para alimentar el
sistema de indicadores, y unos mecanismos para el anlisis de datos cuantitativos
y cuantitativos recogidos a partir de los instrumentos.
Con un sistema de indicadores de seis categoras, 11 variables y 31 indicadores,
tres instrumentos de recoleccin de informacin para tres tipos de participantes
respectivamente, y una instruccin en los mecanismos de anlisis de los datos
recopilados, tal y como se han presentado en este captulo se da cumplimiento al
segundo objetivo especfico de esta investigacin, es decir, disear una
aproximacin metodolgica para la evaluacin de los resultados obtenidos en los
programas de los cursos presenciales que hacen uso intensivo de TIC para apoyar
el aprendizaje de los estudiantes, en la IES seleccionada para la investigacin.
Es de resaltar que en el sistema de indicadores propuesto, estos 31 indicadores
van ms all del anlisis de cobertura en infraestructura y del acceso a
tecnologas del mercado, que es un propsito de las mediciones que propone
hacer Echeverra en (2003), con la SI por fuera del concepto de mercado de
Internet.
65
Tabla 11. Detalle de la configuracin de indicadores a partir del anlisis de preguntas del instrumento de recoleccin de informacin de
estudiantes
Variable Indicador Pregunta Medida Anlisis
V2
Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin sincrnica entre los
participantes (I2.1)
El curso hace uso de chats o
videoconferencias para el apoyo de forma
virtual?
Nominal Porcentaje de cursos
donde los estudiantes
responden
afirmativamente a la
pregunta.
V2
Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin asncrona entre los
participantes (I2.2)
El curso hace uso de foros de discusin o
mensajes va correo electrnico para el
apoyo de forma virtual?
Nominal Porcentaje de cursos
donde los estudiantes
responden
afirmativamente a la
pregunta.
V3
Porcentaje medio de internautas
habituales por curso e-learning (I3.2)
Cuntas horas dedica semanalmente a la
navegacin en Internet?
Ordinal Grfico de barras
Qu calificacin le dara a sus habilidades
para el uso de tecnologas como Internet?
Escala Media aritmtica
V3 Frecuencia de uso de Internet con fines
formativos (I3.1)
Cuntas horas dedica semanalmente a la
navegacin en Internet para realizar
actividades relacionadas con sus estudios?
Ordinal Grfico de barras
V3 Porcentaje medio de facilidades e-
learning efectivamente aprovechadas en
el desarrollo de un curso (I3.3)
Qu tan intenso fue el uso de las
siguientes herramientas para el desarrollo
del curso?
[Anuncios]
[Glosario]
[Documentos del curso]
[Herramientas de evaluacin]
[Libreta de notas]
[Tablero de discusin]
[Email de grupo]
[Intercambio de archivos]
[Calendario]
[Chats]
Ordinal Tabla de contingencia
entre los cursos y los
niveles de intensidad. El
valor del indicador est
dado por la media
aritmtica de la cantidad
de facilidades que se
utilizan con un grado
medio a alto de
intensidad por curso.
V4 Frecuencia de ocurrencia de problemas
de uso para completar una tarea virtual
(I4.1)
Con qu frecuencia Ud. enfrenta
dificultades para realizar sus actividades con
las herramientas e-learning designadas?
Ordinal Media ponderada
66
Variable Indicador Pregunta Medida Anlisis
V4 Porcentaje de tareas efectivamente
resueltas en aplicacin e- learning por
parte de los estudiantes (I4.2)
Con respecto al total de actividades
propuestas en las herramientas e-learning,
qu porcentaje de estas logr culminar
exitosamente?
Ordinal Media ponderada para
datos agrupados
V4 Calificacin media de la facilidad de
aprendizaje de uso las herramientas e-
learning propuestas (I4.3)
Qu calificacin le dara a la facilidad para
aprender a utilizar las herramientas e-
learning designadas?
Escala Media aritmtica
V4 Tiempo medio necesario para completar
una tarea virtual en e-learning de forma
efectiva (I4.4)
Cuntas horas estima Ud. que en
promedio dedic para desarrollar y
completar una actividad va e-learning?
Escala Media aritmtica
V5 Proporcin de material cubierto con
relacin al material estimado inicialmente
para el curso (I5.1)
Qu porcentaje del programa inicial del
curso fue cubierto al terminar?
Ordinal Media ponderada para
datos agrupados
V5 Valoracin de utilidad de disponer de
notas de clase antes de las sesiones
presenciales del curso (I5.2)
Qu tan til considera disponer
documentos y notas de clase va electrnica
antes de las sesiones en el saln de clase?
Escala Media aritmtica
V6 Porcentaje de tiempo virtual dedicado al
trabajo colaborativo/en grupo (I6.1)
Del tiempo invertido realizando actividades
con las herramientas e-learning, qu
proporcin de tiempo estima Ud. que invirti
realizndolas con ayuda de compaeros de
clase, monitores o tutores?
Ordinal Media ponderada para
datos agrupados
V6 Calificacin promedio del aporte de otros
participantes virtuales en el proceso de
aprendizaje (I6.2)
Qu tan til considera el aporte de sus
compaeros utilizando las herramientas e-
learning disponibles para su aprendizaje en
el curso?
Escala Media aritmtica
V6 Porcentaje de estudiantes que considera
vital el rol del docente para el aprendizaje
mediante las ayudas e-learning (I6.3)
El papel del docente encargado del curso
fue fundamental para aprender mediante las
ayudas e-learning disponibles?
Nominal Porcentaje
V7 Nivel de disponibilidad del material del
curso (I7.3)
Cmo calificara la disponibilidad del
material del curso en lnea?
Escala Media aritmtica
V7 Proporcin de estudiantes que recibe
informacin sobre lineamientos para el
uso de las herramientas al inicio del
curso (I7.5)
Se definieron claramente lineamientos para
el uso de las herramientas e-learning al
inicio del curso?
Nominal Porcentaje
67
Variable Indicador Pregunta Medida Anlisis
V8 Porcentaje de aceptacin de las
herramientas e-learning como refuerzo
del proceso de aprendizaje (I8.1)
Estara Ud. de acuerdo con la utilizacin
permanente de herramientas e-learning
como las que dispone el curso para reforzar
su aprendizaje?
Nominal Porcentaje de
respuestas afirmativas
sobre el total de
respuestas
V8 Calificacin media de la satisfaccin con
la inclusin de e-learning en el proceso
de aprendizaje (I8.2)
Qu tan satisfecho se encuentra con la
inclusin de herramientas e-learning como
parte de su proceso de aprendizaje en el
curso?
Nominal Media ponderada
V8
Nivel de satisfaccin con las habilidades
exigidas para el desarrollo del curso con
e-learning (I8.3)
Qu tan satisfecho se encuentra con el
nivel de destreza previo requerido para el
dominio de las herramientas e-learning
propuestas para el desarrollo del curso?
Nominal Media ponderada
V9 Calificacin promedio de la experiencia
de aprendizaje (I9.1)
Qu calificacin le dara al desarrollo del
curso con ayudas e-learning?
Escala Media aritmtica
V9 Percepcin de la calidad de las
anotaciones de clase en el sistema (I9.2)
Cmo calificara la calidad del material del
curso dispuesto en lnea?
Escala Media aritmtica
Tabla 12. Detalle de la configuracin de indicadores a partir del anlisis de preguntas del instrumento de recoleccin de informacin de
docentes
Variable Indicador Pregunta Medida Anlisis
V4 Porcentaje de tareas efectivamente
resueltas en aplicacin e- learning por
parte de los estudiantes (I4.2)
En qu medida los estudiantes resolvieron
las actividades propuestas a lo largo del
curso va e-learning?
Ordinal Media ponderada para
datos agrupados
V5 Proporcin de material cubierto con
relacin al material estimado
inicialmente para el curso (I5.1)
Qu proporcin del material / programa del
curso pudo ser cubierto, al combinar las
sesiones de clase con actividades e-
learning?
Ordinal Media ponderada para
datos agrupados
V7 Proporcin media de actividades en e-
learning con respecto al total de
actividades por curso (I7.1)
Qu proporcin de actividades con respecto
al total de actividades y sesiones
programadas para el curso se realizan de
forma virtual, es decir, por medio de las
herramientas e-learning disponibles?
Ordinal Media ponderada para
datos agrupados
68
Variable Indicador Pregunta Medida Anlisis
V7 Porcentaje de actividades en e-
learning con restricciones de tiempo
(I7.2)
Qu proporcin de las actividades
propuestas va e-learning tienen alguna
restriccin de tiempo, como plazos de
entrega u horas dedicadas para su
realizacin?
Ordinal Media ponderada para
datos agrupados
V7 Proporcin del contenido propuesto
del curso con ayudas e-learning (I7.4)
En qu medida los contenidos de las
sesiones de clase en el desarrollo del curso
tienen una documentacin disponible o
actividades de ayuda asociadas va e-
learning?
Ordinal Media ponderada para
datos agrupados
V10 Porcentaje de estudiantes que
cumplen con el desarrollo de
actividades en e-learning dentro del
tiempo establecido (I10.3)
Qu proporcin de los estudiantes inscritos
para el curso logr cumplir con todas las
actividades propuestas va e-learning dentro
de los parmetros establecidos?
Ordinal Media ponderada para
datos agrupados
V10 Porcentaje de estudiantes que
aprueban el curso (I10.1)
Cuntos estudiantes se encontraban
inscritos en el curso?
Escala Media aritmtica de
porcentajes de
estudiantes que
aprueban sobre el total
de estudiantes inscritos
por curso.
Cuntos estudiantes lograron aprobar el
curso?
Escala
V10 Promedio de calificaciones de los
estudiantes del curso (I10.2)
Cul es el promedio de calificaciones de los
estudiantes para este curso?
Escala Media aritmtica para
calificaciones numricas
entre 0 y 5. Se excluyen
calificaciones no-
numricas.
V11 Cantidad de aos de experiencia
docente del encargado del curso
(I11.1)
Cuntos aos tiene de experiencia como
docente?
Escala Media aritmtica
V11 Cantidad de aos de experiencia con
tecnologas del encargado del curso
(I11.2)
Cuntos aos tiene de experiencia como
usuario de tecnologas informticas?
Escala Media aritmtica
Fuente: Elaboracin propia
69
Tabla 13. Detalle de la configuracin de indicadores a partir del anlisis de preguntas del instrumento de recoleccin de informacin de la
organizacin
Variable Indicador Pregunta Medida Anlisis
V1 Nmero medio de alumnos por
computador (I1.1)
Cuntos estudiantes se matricularon para
el periodo en revisin?
Escala El valor del indicador
est determinado por la
divisin de nmero de
estudiantes
matriculados sobre el
nmero de equipos de
cmputo disponibles.
Cuntos equipos de cmputo se
encuentran a disposicin de los
estudiantes que se matricularon para este
periodo?
Escala
V1 Proporcin de salones de clase con
acceso a Internet (I1.2)
Cuntos salones de clase tienen acceso
a Internet en la institucin?
Escala El valor del indicador
est dado por la razn
entre el nmero de
salones de clase
disponibles sobre el
nmero de salones que
cuentan con acceso a
Internet
De cuntos salones de clase dispone la
institucin para los estudiantes?
Escala
Fuente: Elaboracin propia
70
4 Experimentacin
Con el propsito de poner a prueba en la prctica la primera revisin de la
metodologa con el diseo terico plasmado en el captulo anterior, se propone
aplicar la metodologa en la UN por medio de la bsqueda de cursos que sean
desarrollados por medio de sesiones de clase presenciales durante el semestre o
periodo acadmico particular al caso, y tengan alguna clase de orientacin
constructivista integrando herramientas e-learning en el proceso de aprendizaje de
los estudiantes del curso.
En este captulo se describe esta puesta en prctica en un ambiente propicio para
la consecucin de los objetivos de la investigacin como lo es algunos cursos de
pregrado y posgrado de la UN que son reconocidos por apoyarse en los conceptos
y en las herramientas e-learning que dispone la Universidad para el desarrollo de
sus respectivos programas.
4.1 Descripcin del escenario
La UN dispone de una dependencia dedicada a la educacin virtual para los
programas del campus, as como para programas por convenio o a distancia
directamente, como es el DNIA. All se gestionan todos los cursos que hacen uso
de TIC para su desarrollo, y particularmente aquellos que hacen uso de
herramientas que se ajustan a la definicin de e-learning ya discutida previamente.
Esta dependencia ha hecho parte del proceso de construccin de la metodologa,
como se ha venido explicando y cuenta con varias plataformas e-learning sobre
las cuales se disponen los recursos virtuales para los cursos que los requieren. En
la DNIA se tiene un registro de cules son los cursos de pregrado y posgrado que
tienen actividad en las plataformas durante un periodo acadmico, lo cual indica
una utilizacin real de los espacios virtuales, independientemente de si es mayor o
menor entre uno u otro.
4.2 Diseo muestral
Para la seleccin de la muestra se decide utilizar el muestreo no aleatorio,
especficamente el muestreo a conveniencia o intencional, considerando que la
experimentacin se realiza en un escenario cercano al entorno de la investigacin,
como bien explica Martnez en (2003), y se tiene de primera mano informacin
preliminar de las unidades de anlisis, en este caso estudiantes, docentes e
institucin, lo que permite trabajar con una parte de la poblacin de estudiantes
que se puede considerar representativa dentro de la investigacin.
71
Cabe reconocer que la seleccin de la muestra por conveniencia para este caso
de estudio experimental es un procedimiento que cuenta con el riesgo de errores
por el juicio subjetivo del autor, como menciona Martnez en (2003). El factor de
conveniencia de esta seleccin radica en que la DNIA tiene conocimiento
preliminar de docentes que recurren con cierta frecuencia a las capacitaciones de
la Direccin al manejo de aulas virtuales, realizan solicitudes frecuentes con
respecto a los espacios virtuales que maneja o sencillamente sobresalen por el
uso histrico de estos espacios en la Universidad. Con base en este conocimiento,
se escogieron 26 profesores para ser encuestados entre todas las sedes de la
Universidad en el pas en programas de pregrado y posgrado, de forma que por
cada uno se selecciona uno de los cursos asignados para un semestre particular
en la plataforma Blackboard, y de all se obtiene el grupo de estudiantes
encuestados.
En un anlisis preliminar, se determin que el nmero de estudiantes a encuestar
potencialmente estara alrededor de los 1300, teniendo en cuenta el promedio de
estudiantes por curso, para 26 cursos, tomando nicamente un curso por docente.
Sobre esta unidad de anlisis se centran los resultados presentados ms adelante
en este documento.
4.3 Desarrollo del experimento
Luego de los resultados preliminares obtenidos con las pruebas piloto de las
encuestas para docentes y estudiantes, y luego de realizar las correcciones
necesarias dadas las observaciones realizadas por ambos participantes del
proceso, se inici un proceso de difusin de las encuestas por va Web, a travs
de Google Docs
17
y su herramienta para formularios.
4.3.1 Primer ciclo del experimento
En este ciclo, preparado para cursos del segundo semestre de 2010 y adelantado
en el semestre siguiente, en total se envi la encuesta a los correos institucionales
de 1325 estudiantes afiliados a los cursos de 24 de 26 docentes de los cuales se
pudo encontrar informacin de contacto actualizada, seleccionando nicamente un
curso por docente, es decir, 24 cursos en total.
Particularmente, la cifra de encuestas efectivamente respondidas por los
estudiantes fue de tan solo 56, la cual es una cifra muy baja para hacer un anlisis
17
Google Docs es un servicio en lnea entregado por Google a sus suscriptores de correo
electrnico para la edicin y publicacin de documentos a modo de suite de oficina, solo que
completamente en Internet.
72
significativo de la encuesta teniendo en cuenta que se envi la encuesta a algo
ms de 1300 estudiantes.
4.3.2 Segundo ciclo del experimento
En esta ocasin, para el primer semestre de 2011, se analiz un grupo de 24
cursos a partir de la misma muestra de docentes seleccionados, lo cual arroj una
suma de 1244 estudiantes nicos inscritos en la plataforma Blackboard de la
DNIA
18
, sobre un total de 1385 estudiantes en todos los cursos seleccionados. De
este grupo de estudiantes, tras cambiar la estrategia de distribucin enviando
recordatorios semanales para diligenciar la encuesta, se obtuvieron 181
respuestas efectivas a la encuesta de esta poblacin, as como 11 respuestas de
parte de los docentes. En ambos casos se super la expectativa de respuestas
para que los datos obtenidos sean significativos para el anlisis, teniendo un
14,55% de respuestas de estudiantes y 45,83% de respuestas de docentes de la
muestra.
4.4 Anlisis de resultados
En las siguientes subsecciones se presenta el anlisis de los datos recopilados
mediante los instrumentos de recoleccin de informacin para constituir la base
propuesta de variables e indicadores, as como el anlisis de datos cualitativos
que sirven como complemento a lo antes revisado.
4.4.1 Anlisis de variables e indicadores
Con base en la descripcin del anlisis cuantitativo explicado en el captulo
anterior, se realiz el anlisis de los datos de todos los cursos de la muestra para
alimentar los valores de los indicadores propuestos y se lleg a los resultados
presentados en la Tabla 14. Para cada indicador se muestra el o los valores
calculados con base en la fuente desde la cual provienen los datos.
Cabe destacar algunos resultados inferidos a partir de la tabla:
18
La DNIA a la fecha cuenta con varias plataformas e-learning como Blackboard y Moodle, entre
otras. Se escogieron nicamente cursos de una sola plataforma para facilitar tcnicamente la unin
de los listados de estudiantes para la difusin en masa de la encuesta para los estudiantes, y por
otro lado se seleccion Blackboard, puesto que es la plataforma predominante en la Universidad y
donde se crean la mayora de cursos virtuales ofrecidos especialmente en programas de pregrado.
73
Tabla 14. Ficha resumen del anlisis de indicadores propuestos, por instrumento de recoleccin de informacin
Fuente
Nombre de la variable Nombre del indicador Medida Estudiantes Institucin Docentes
Acceso a las herramientas e-
learning
Nmero medio de alumnos por
computador Nmero 8,90
Proporcin de salones de clase con
acceso a Internet Porcentaje 17,38
Aplicaciones y servicios en red Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin sincrnica entre los
participantes Porcentaje 52,38 100
Porcentaje de cursos ofrecidos que
hacen uso de facilidades para
comunicacin asncrona entre los
participantes Porcentaje 80,95 100
Uso de computadores con fines
educativos
Frecuencia de uso de Internet con
fines formativos
Horas
semanales 10,65
Porcentaje medio de internautas
habituales por curso e-learning Porcentaje 72,38
Porcentaje medio de facilidades e-
learning efectivamente
aprovechadas en el desarrollo de
un curso Porcentaje 60
Usabilidad de las herramientas e-
learning
Frecuencia de ocurrencia de
problemas de uso para completar
una tarea virtual
Escala numrica
de 0 a 5 2,54
Porcentaje de tareas efectivamente
resueltas en aplicacin e- learning
por parte de los estudiantes Porcentaje 67,98 60,91
Calificacin media de la facilidad de
aprendizaje de uso las
herramientas e-learning propuestas
Escala numrica
de 0 a 5 3,46
Tiempo medio necesario para
completar una tarea virtual en e-
learning de forma efectiva
Nmero de
horas 9,708
74
Fuente
Nombre de la variable Nombre del indicador
Medida Estudiantes Institucin Docentes
Utilidad percibida con e-learning Proporcin de material cubierto con
relacin al material estimado
inicialmente para el curso Porcentaje 76,59 82,73
Valoracin de utilidad de disponer
de notas de clase antes de las
sesiones presenciales del curso
Escala numrica
de 0 a 5 4,51
Cooperatividad del estudiante Porcentaje de tiempo virtual
dedicado al trabajo colaborativo/en
grupo Porcentaje 34,25
Calificacin promedio del aporte de
otros participantes virtuales en el
proceso de aprendizaje
Escala numrica
de 0 a 5 3,32
Porcentaje de estudiantes que
considera vital el rol del docente
para el aprendizaje mediante las
ayudas e-learning (I6.3) Porcentaje 56,9
Estrategias de entrega de cursos e-
learning
Proporcin media de actividades en
e-learning con respecto al total de
actividades por curso Porcentaje 46,36
Porcentaje de actividades en e-
learning con restricciones de tiempo Porcentaje 51,82
Nivel de disponibilidad del material
del curso Porcentaje 74,4
Proporcin del contenido propuesto
del curso con ayudas e-learning Porcentaje 73,64
Proporcin de estudiantes que
recibe informacin sobre
lineamientos para el uso de las
herramientas al inicio del curso
(I7.5) Porcentaje 53
Satisfaccin del estudiante con e-
learning
Porcentaje de aceptacin de las
herramientas e-learning como
refuerzo del proceso de aprendizaje Porcentaje 79,01
75
Fuente
Nombre de la variable Nombre del indicador
Medida Estudiantes Institucin Docentes
Calificacin media de la satisfaccin
con la inclusin de e-learning en el
proceso de aprendizaje
Escala numrica
de 0 a 5 3,71
Nivel de satisfaccin con las
habilidades exigidas para el
desarrollo del curso con e-learning
Escala numrica
de 0 a 5 3,32
Percepcin de la calidad de los
cursos e-learning
Calificacin promedio de la
experiencia de aprendizaje
Escala numrica
de 0 a 5 3,53
Percepcin de la calidad de las
anotaciones de clase en el sistema
Escala numrica
de 0 a 5 3,7
Desempeo del estudiante Porcentaje de estudiantes que
aprueban el curso Porcentaje 85,29
Promedio de calificaciones de los
estudiantes del curso
Escala numrica
de 0 a 5 3,57
Porcentaje de estudiantes que
cumplen con el desarrollo de
actividades en e-learning dentro del
tiempo establecido Porcentaje 70
Caracterizacin del curso Cantidad de aos de experiencia
docente del encargado del curso
(I11.1) Nmero 18,73
Cantidad de aos de experiencia
con tecnologas del encargado del
curso (I11.2) Nmero 14,45
Fuente: Elaboracin propia
76
El 62% de los estudiantes que diligenciaron la encuesta dice tener
habilidades avanzadas o de experto para el uso de TIC como Internet, y tan
solo un 5% manifiesta estar por debajo de un nivel de habilidad media. A
esto se agrega que tan solo un 10% de los estudiantes encuestados
manifiesta navegar en Internet semanalmente en promedio cinco (5) horas
o menos.
El promedio de calificaciones finales de los estudiantes es aprobado con un
3,57 en la escala numrica de 0 a 5, donde 5 es la mejor calificacin. En
promedio, solo el 85,29% de los estudiantes inscritos en un curso aprueba.
Desde una perspectiva de grupo, solo el 70% de los estudiantes en
promedio en un curso de los seleccionados cumple con el desarrollo de las
actividades propuestas dentro de los tiempos establecidos. Desde una
perspectiva individual, un estudiante en promedio logra completar
aproximadamente las 2/3 partes del total de tareas propuestas (67,98%).
Segn los docentes, esta proporcin es inferior (60,91%).
La calificacin promedio de la experiencia de aprendizaje con e-learning se
encuentra entre regular y buena (3,53 sobre 5) as como la percepcin de la
calidad de las notas (lecturas) que se publican como apoyo de las clases
(3,7 sobre 5), notas que consideran muy tiles.
Las herramientas e-learning gozan de un 79,01% de aceptacin de parte de
los estudiantes encuestados, como instrumento de refuerzo del proceso de
aprendizaje.
Los niveles de satisfaccin de los estudiantes con la inclusin del e-learning
en su proceso de aprendizaje y con las habilidades que se requieren para el
desarrollo de los cursos que lo involucran, se encuentran entre regular y
bueno (3,71 y 3,32 sobre 5 respectivamente).
En promedio, el 34,25% del tiempo total que los estudiantes dedican al
desarrollo de actividades e-learning, se realiza en colaboracin con otros
compaeros de estudio y con los tutores o docentes encargados de los
cursos. Adems, a este aporte los estudiantes le dan una calificacin entre
regular y buena (3,32 sobre 5).
Los cursos que hacen uso del e-learning como complemento a las sesiones
en el aula de clase no logran abarcar todo el material estimado inicialmente.
Segn los estudiantes, se alcanza a cubrir un 76,59% del estimado inicial,
mientras que para los docentes este cubrimiento es del 82,73%.
Los estudiantes de los cursos de la muestra estn aprovechando en
promedio el 60% de las funcionalidades que se ofrecen en la plataforma e-
learning utilizada en el grupo encuestado. En las funcionalidades de
comunicacin se percibe que algo ms de la mitad de los cursos (52,38%)
hacen uso de comunicacin en tiempo real o de forma sncrona, pero no lo
hacen de forma frecuente.
Los estudiantes manifiestan que con cierta regularidad tienen problemas
para completar las tareas e-learning, aunque la facilidad que representa
77
utilizar las herramientas e-learning se encuentra entre regular y alta (3,46
sobre 5).
La cobertura tecnolgica para el desarrollo de las actividades e-learning en
el campus universitario resulta aceptable en cuanto a disponibilidad de
equipos de cmputo para estudiantes, as como la disponibilidad de acceso
a Internet en salas especializadas en relacin con otros tipos de salones
para recibir clases, a pesar de que no se incluyen en el estudio accesos con
dispositivos porttiles e inalmbricos de los que puedan disponer los
estudiantes de forma particular.
El anlisis detallado de cada uno de los indicadores propuestos se encuentra en el
Anexo C.
4.4.2 Otros anlisis
Se realizaron dos anlisis cuantitativos sobre los datos de tipo cualitativo que se
capturaron mediante la encuesta de estudiantes y a la encuesta de docentes de
forma separada. En ambos anlisis se analizaron los comentarios de los
encuestados sobre su opinin acerca de la inclusin del e-learning como
complemento de la clase en el aula, y se revisaron los aspectos ms frecuentes en
los comentarios.
El anlisis para los datos de la encuesta de estudiantes se presenta en la Figura
10, donde se observa un predominio por mencionar los beneficios y los problemas,
en ese orden, de la incorporacin del e-learning al proceso de aprendizaje cuando
el estilo de la clase presencial es el estilo principal. Luego otros aspectos
adquieren relevancia para los encuestados como lo son la aceptacin del e-
learning para ellos mismos, las estrategias de entrega y difusin de los cursos
virtuales.
78
Figura 10. Aspectos ms relevantes encontrados en las opiniones de los estudiantes encuestados
sobre el uso del e-learning como complemento para el aula de clase.
Fuente: Elaboracin propia. Software de procesamiento: Atlas.Ti 6.2 para Windows.
De otra parte, el anlisis de la opinin de los docentes al mismo respecto arroj
algunas resultados similares, destacando de nuevo beneficios del e-learning en el
proceso de aprendizaje y opiniones positivas sobre el valor del e-learning como
complemento para el aula de clase, pero por otra parte se resaltan problemas que
se han presentado con su utilizacin, adems de limitaciones tecnolgicas de las
plataformas sobre las cuales se entregan los cursos. Estos resultados se
presentan grficamente en la Figura 11 y se pueden revisar en detalle en el
Anexo C.
25
23
15
15
12
11
10
10
10
10
9
9
7
7
6
5
5
5
5
5
4
4
0 10 20 30
beneficios del e-learning
problemas del e-learning
estrategias de entrega
aceptacin del e-learning
capacitacin en herramientas
realizacin de actividades
herramientas tecnolgicas
e-learning como complemento
comunicacin con el docente
consideraciones de tiempo
subutilizacin de herramientas
importancia de la presencialidad
acompaamiento docente
aprendizaje adquirido
sugerencias
e-learning como apoyo
papel del docente
desconocimiento del e-learning
motivacin
trabajo colaborativo
comunicacin con compaeros
bsqueda y consulta de informacin
FRECUENCIA DE APARICIN EN COMENTARIOS
79
Figura 11. Aspectos ms relevantes encontrados en las opiniones de los docentes encuestados sobre
el uso del e-learning como complemento para el aula de clase.
Fuente: Elaboracin propia. Software de procesamiento: Atlas.Ti 6.2 para Windows.
Tambin se realizaron anlisis de correlaciones bivariadas entre los indicadores
con escalas numricas y otros indicadores cuyos valores pudieran ser analizados
numricamente. Se realiz en todos los casos la evaluacin del coeficiente de
Pearson entre cada pareja de indicadores. El resultado completo de este anlisis
se encuentra en el Anexo C.2, de donde se destaca para el conjunto de datos
analizado que:
Parece existir una relacin entre el nivel de disponibilidad del material del
curso en e-learning y la percepcin de la calidad de las anotaciones de
clase en el sistema, de forma que entre mayor sea la disponibilidad del
material en lnea como lo perciben los estudiantes, mayor es la calidad que
estos perciben del mismo, y viceversa. El coeficiente de correlacin para
este caso es de 0,81.
Parece existir un alto ndice de relacin (0,821) entre el porcentaje de
estudiantes que cumplen con el desarrollo de las actividades e-learning en
el tiempo establecido y el porcentaje de material cubierto en el curso. Entre
ms material se logra cubrir, mayor es la proporcin de estudiantes que
cumplen a tiempo, y viceversa.
10
6
5
4
3
3
3
2
2
2
2
2
2
2
0 2 4 6 8 10 12
beneficios del e-learning
e-learning como complemento
problemas del e-learning
limitaciones tecnolgicas
comunicacin con estudiantes
estrategias de entrega
herramientas tecnolgicas
consideraciones de tiempo
trabajo en colaboracin
efectos del e-learning
herramientas de comunicacin
implicaciones pedaggicas
desarrollo de actividades
aceptacin del e-learning
FRECUENCIA DE APARICIN EN COMENTARIOS
80
El anlisis indica que entre ms aos de experiencia tiene el docente
encargado del curso e-learning, menor es la cantidad de actividades que
programa en lnea con restricciones de tiempo, y viceversa. Esto indica una
tendencia hacia el aprovechamiento de las faclidades de restriccin en
tiempo de las tareas principalmente en los docentes ms jvenes, mientras
que los mayores la desconocen o la omiten. En este caso, el coeficiente de
correlacin es de -0,8.
En cuanto a la calificacin de la experiencia de aprendizaje con e-learning,
esta va de la mano con la calificacin que los estudiantes le dan a la
inclusin del e-learning como parte de su proceso de aprendizaje, de forma
que si una se eleva, la otra tambin, y su una desciende, igual lo har la
otra. El coeficiente de correlacin en este caso es de 0,751.
Existe cierta relacin entre la percepcin de la calidad de las anotaciones
de clase y la satisfaccin de los estudiantes con la inclusin del e-learning
en su proceso de aprendizaje, de forma que a mayor calidad percibida,
mayor es la satisfaccin, con un coeficiente de correlacin de 0,617.
As mismo, esta percepcin de la calidad de las anotaciones de clase
dispuestas en lnea muestra cierta relacin con la calificacin a la
experiencia de aprendizaje, donde esta calificacin aumenta con la calidad
de las anotaciones. Para este caso, el coeficiente de correlacin es de 0,6.
Esto teniendo en cuenta aquellos resultados que resultaron significativos dentro de
las parejas analizadas con un nivel de confianza del 95%. Algunos indicadores no
alcanzaron a tener correlacin significativa en ninguna de sus parejas, como lo
son:
Frecuencia de ocurrencia de problemas de uso para completar una tarea
virtual (I4.1)
Tiempo medio necesario para completar una tarea virtual en e-learning de
forma efectiva (I4.4)
Proporcin media de actividades en e-learning con respecto al total de
actividades por curso (I7.1)
Proporcin del contenido propuesto del curso con ayudas e-learning (I7.4)
Porcentaje de estudiantes que aprueban el curso (I10.1)
Promedio de calificaciones de los estudiantes del curso (I10.2)
Cantidad de aos de experiencia con tecnologas del encargado del curso
(I11.2)
Con excepcin de los dos primeros casos, esta falta de coeficientes significativos
puede deberse a la poca cantidad de resultados que se pueden analizar, si se
tiene en cuenta que estos indicadores se obtienen de la encuesta para docentes,
que en la prctica tuvo nicamente 11 respuestas. Se espera que con espacio
mayor de resultados, se puedan dar resultados ms concluyentes sobre la relacin
de estos indicadores con el resto del conjunto en el sistema propuesto.
81
4.5 Discusin
La puesta en prctica del diseo metodolgico inicial para la medicin del e-
learning en los programas presenciales de pregrado en la UN como objeto de
estudio arroj resultados positivos en cuanto al desarrollo metodolgico, as como
con respecto a los resultados para la Universidad.
Esta fase experimental permiti vislumbrar que algunos indicadores del diseo
inicial resultaron ser prescindibles, en vista de que no resultaron estar
correlacionados con otros dentro de la misma divisin por instrumentos de
recoleccin de informacin. Tambin se observ que se pueden reorganizar estos
indicadores entre los diferentes instrumentos diseados para realizar anlisis ms
interesantes especialmente en cuanto al desempeo particular de cada estudiante.
A pesar de que se requirieron dos fases de experimentacin para obtener datos
significativos, los instrumentos de recoleccin de informacin resultaron ser
efectivos para alimentar la informacin de los indicadores propuestos. En la
segunda fase se requiri de un componente que se escapa del alcance de esta
metodologa, como es una mejor estrategia para la difusin de los instrumentos
entre la muestra de estudiantes y docentes, a pesar de que se emple una
muestra a conveniencia.
Este captulo ha sido el primer paso para poder cumplir el tercer objetivo
especfico de la investigacin que consiste en construir una metodologa final de
evaluacin a partir del aprendizaje de la experimentacin con la metodologa inicial
para el entorno descrito, que ser cumplido en su totalidad con la metodologa
presentada en el captulo siguiente.
82
5 Diseo metodolgico final para evaluacin
A partir de la consolidacin y la validacin de los resultados de la experimentacin
con la metodologa establecida inicialmente, se formula en este captulo la
metodologa refinada con los ajustes que dan lugar tras la realimentacin obtenida
con dicho proceso.
En primera instancia se presentan las lecciones aprendidas con la fase de
experimentacin y luego se formula el detalle de cada seccin de la metodologa
final de evaluacin.
5.1 Lecciones aprendidas a partir del modelo inicial
Desde la construccin de la metodologa hasta la fase de experimentacin se
detectaron algunas lecciones para mejorar en la metodologa como lo son:
El sistema de indicadores formulado fue ms coherente al estar apoyado
por un ente con experiencia en implementaciones e-learning, teniendo en
cuenta que este conoce los aspectos que son susceptibles de ser medidos
con mayor o menor facilidad.
Los instrumentos de recoleccin de informacin propuestos permitieron
asignarle valor a los indicadores formulados en la metodologa inicial,
aunque se observ una pregunta en particular para la encuesta de
estudiantes que podra obviarse para la definicin de los instrumentos
definitivos, dada la naturaleza del enfoque de la encuesta y de las
respuestas obtenidas para dicha pregunta.
En la elaboracin de los instrumentos de recoleccin de informacin es
deseable contar con mayor informacin sobre los indicadores existentes, de
forma que se puedan construir preguntas ms precisas, puesto que en este
caso se emplearon algunas preguntas cuya respuesta no tiene un
mecanismo trivial para la obtencin del valor del indicador, como en el caso
del indicador Porcentaje medio de internautas habituales por curso e-
learning, donde se decidi inicialmente establecer categoras arbitrarias
para clasificar los internautas por tiempos de uso.
Sobre este mismo proceso, por falta de informacin sobre algunos
indicadores se haban definido medidas que tuvieron que ser modificadas al
no verse reflejadas en los instrumentos propuestos, especialmente luego de
la prueba piloto donde se ajustaron algunas respuestas.
En la prueba piloto de las encuestas se midi principalmente la facilidad
para contestarlas, no la facilidad para procesarlas, lo cual permiti que se
presentaran algunos inconvenientes y que fueran detectados nicamente
hasta el momento de procesar las encuestas reales.
83
Se deben reformular los lmites de los intervalos en los instrumentos de
recoleccin de informacin que hacen uso de ellos, con miras a hacerlos
completamente excluyentes y claros para que el encuestado ubique su
respuesta sin dudar al ubicar su respuesta en alguno de los intervalos
establecidos, especialmente cuando su respuesta se encuentra en alguno
de los valores lmite.
Con base en el anlisis de correlaciones entre los indicadores formulados,
se evindencia la necesidad de revisar los indicadores que no presentaron
coeficientes de correlacin importantes.
5.2 Elementos medibles
Los elementos medibles o categoras que en definitiva se consideran para la
medicin del e-learning con la metodologa propuesta se presentan en la Tabla 15.
En este conjunto no hubo modificaciones en comparacin con la base de seis
categoras propuestas inicialmente, excepto en la definicin de cada una de estas,
ajustando cada una a lo que se pretende medir.
Tabla 15. Categoras de medicin propuestas en metodologa final
Categora Descripcin
Infraestructura Abarca aquellos elementos tecnolgicos que hacen posible la implantacin de
estrategias e-learning en programas presenciales. En esta categora se
incluyen aquellas variables que tienen como fin dar cuenta del avance en la
apropiacin de estas tecnologas.
Evaluacin
tecnolgica
Involucra criterios que dan cuenta de cmo se utilizan las tecnologas e-
learning que han logrado entrar en funcionamiento. Tambin incluye la
medicin del beneficio o perjuicio percibido del hecho de involucrar
determinadas TIC en el proceso de aprendizaje de los estudiantes.
Entorno Categora de carcter humano, por las caractersticas observables de la
interaccin con los otros. Se trata de la medicin de componentes sociales
que intervienen en el proceso de aprendizaje de forma directa o indirecta.
Incluye, adems, las decisiones y propuestas a nivel administrativo y
organizacional tomadas para integrar de forma efectiva las TIC en los
procesos de aprendizaje en una institucin.
Contenidos Con estos se pretende evaluar y medir el avance y la calidad a nivel de
cursos y sus contenidos educativos puestos a disposicin por la va del e-
learning. Tambin se incluyen en la medicin, algunos elementos que aportan
los docentes como actores activos de la creacin de contenidos.
Satisfaccin Satisfaccin que expresan los estudiantes al utilizar tecnologas e-learning
como complemento para su proceso de aprendizaje en el aula de clase.
Aprendizaje Medicin del componente humano individual en el proceso de aprendizaje. Se
incluye en esta categora el conjunto de elementos que indican cmo se
comporta acadmicamente un estudiante al entrar en contacto con ayudas de
e-learning como soporte para su proceso de aprendizaje.
Fuente: Elaboracin propia
84
5.3 Variables e indicadores
Luego de validar el conjunto de variables e indicadores propuesto con la fase
experimental y de verificar los resultados que arrojaron al aplicarlos en un
escenario real, se ha definido el conjunto definitivo que se describe en los
siguientes dos numerales.
5.3.1 Variables
La base de 11 variables propuestas inicialmente se mantuvo para la propuesta
metodolgica definitiva, en vista de que efectivamente representan los aspectos
observables de los elementos medibles cuando se quieren evaluar los resultados
de aprendizaje y desempeo de los estudiantes de los cursos e-learning
asociados a cursos de las aulas de clase, de acuerdo al escenario que se plantea
para su aplicacin.
La relacin de las variables por categora tuvo un ajuste con relacin a la
distribucin presentada en la Tabla 7, que se consider pertinente por la relacin
encontrada, en la prctica, de la variable Aplicaciones y servicios en red con la
categora Evaluacin tecnolgica, como se presenta en la Tabla 16.
Tabla 16. Especificacin de ajustes a variables finales propuestas por categora
Nombre de la variable
Categora
I
n
f
r
a
e
s
t
r
u
c
t
u
r
a
E
v
a
l
u
a
c
i
n
t
e
c
n
o
l
g
i
c
a
E
n
t
o
r
n
o
S
a
t
i
s
f
a
c
c
i
n
C
o
n
t
e
n
i
d
o
s
A
p
r
e
n
d
i
z
a
j
e
Aplicaciones y servicios en red (V2) X X
Fuente: Elaboracin propia
En este orden de ideas, la definicin final de las variables propuestas para esta
metodologa queda como se presenta en la Tabla 17.
Tabla 17. Descripcin de las variables propuestas en la metodologa final
Nombre de la variable Descripcin
Acceso a las herramientas
e-learning (V1)
Mide el acceso por parte de los estudiantes a las tecnologas
necesarias para realizar actividades e-learning.
Aplicaciones y servicios en
red (V2)
Mide la variedad de aplicaciones y servicios en red disponibles como
parte de la implementacin e-learning en evaluacin.
85
Nombre de la variable Descripcin
Uso de computadores con
fines educativos (V3)
Evala qu tanto se utilizan los equipos de cmputo de forma
efectiva para el aprendizaje y el perfil de los usuarios con respecto a
su utilizacin de Internet en general.
Usabilidad de las
herramientas e-learning
(V4)
Mide qu tan usables resultan las tecnologas e-learning para los
estudiantes en trminos de actividades que logran terminar
efectivamente, problemas y dificultades presentadas al realizar
actividades con las herramientas e-learning.
Utilidad percibida con e-
learning (V5)
Permite mostrar qu logros o ganancias visibles hay en el marco de
un curso e-learning en trminos de la calidad percibida del mismo y
de qu tanto es cubierto el programa planteado para el desarrollo de
un curso.
Cooperatividad del
estudiante (V6)
Considerando que el e-learning es una manifestacin de los modelos
constructivista y colaborativo del aprendizaje (Kawachi, 2005), esta
variable da cuenta de la efectividad del aprendizaje en colaboracin
en funcin de su calidad, as como la capacidad de trabajo en equipo
de los estudiantes.
Estrategias de entrega de
cursos e-learning (V7)
Mide qu tan flexibles logran ser los cursos presentados, en trminos
de tiempo y espacio. Adems, se propone medir qu tanto contenido
se encuentra disponible para los estudiantes por la va del e-learning
sobre el total del contenido creado para el curso, y qu tan disponible
se encuentra este contenido e-learning para los interesados en el
aprendizaje.
Satisfaccin del estudiante
con e-learning (V8)
Indica qu tan satisfechos terminan los estudiantes en relacin a su
proceso de aprendizaje, en comparacin con el esquema tradicional
donde las tecnologas e-learning no hacen parte de dicho proceso.
Percepcin de la calidad
de los cursos e-learning
(V9)
Mide la calidad de la informacin entregada por el docente o
instructor, y ms all, la calidad del curso visto como un conjunto,
incluyendo todos los elementos que lo componen adems de los
contenidos.
Desempeo del estudiante
(V10)
Pretende captar qu tan efectivo fue el desarrollo del programa del
curso con apoyo del e-learning para el aprendizaje adquirido por los
estudiantes.
Caracterizacin del curso
(V11)
Esta variable indica la configuracin de los aspectos generales y
transversales entre los participantes de un curso.
Fuente: Elaboracin propia
5.3.2 Indicadores
Los indicadores que permiten dar cuenta de los avances en los resultados del
aprendizaje de los estudiantes con e-learning que se destacaron como definitivos
son los indicadores presentados anteriormente en la Tabla 9, con las diferencias
marcadas en la Tabla 18. Se suprimieron adems los indicadores Frecuencia de
ocurrencia de problemas de uso para completar una tarea virtual (antes I4.1) y
Tiempo necesario para completar una tarea virtual en e-learning de forma
efectiva (antes I4.4), en vista de que el anlisis de correlaciones entre indicadores
de la fase experimental mostr que estos indicadores no tienen incidencia o
relacin con otros, dados sus bajos coeficientes de Pearson en cada par analizado
(ver Anexo C.2).
86
En total se obtienen 29 indicadores, y para cada uno de ellos se indica la variable
a la cual se suscribe, adems de la medida con la que se debe realizar su clculo.
Tabla 18. Detalle de novedades en indicadores y medida del indicador propuesto para cada una de las
variables definitivas propuestas
Nombre de la variable Nombre del indicador Medida
Uso de computadores con
fines educativos (V3)
Frecuencia de uso de Internet con fines
formativos (I3.1)
Nmero de horas
diarias
Usabilidad de las
herramientas e-learning (V4)
Porcentaje de tareas efectivamente resueltas
en aplicacin e- learning por parte de los
estudiantes (I4.1)
Porcentaje
Calificacin media de la facilidad de
aprendizaje de uso las herramientas e-
learning propuestas (I4.2)
Escala numrica de
0 a 5
Fuente: Elaboracin propia
5.4 Instrumentos de recoleccin de datos
Para la propuesta definitiva se plantea utilizar las mismas tcnicas de recoleccin
de informacin, es decir, encuestas distribuidas de la misma manera que en la
propuesta inicial, a saber: una encuesta para estudiantes, una encuesta para
docentes y una encuesta para la organizacin.
Sobre la distribucin de los 29 indicadores propuestos en los diferentes
instrumentos, con relacin a la distribucin presentada en la Tabla 10 se hizo un
ajuste en los indicadores I2.1 e I2.2, sobre su forma de recoleccin, puesto que se
percibi que los datos que puede entregar la institucin para estos indicadores en
particular carecen de validez para el propsito de la medicin. Tambin se ajust
la forma de recoleccin del indicador I10.2, para poder hacer analizar cmo se
comporta el principal indicador de desempeo con respecto a los dems
indicadores del sistema, como se presenta en la Tabla 19.
Tabla 19. Tipificacin de los indicadores finales propuestos con respecto a las fuentes de informacin
a utilizar para su alimentacin
Nombre del indicador
Forma de
recoleccin
E
n
c
u
e
s
t
a
a
e
s
t
u
d
i
a
n
t
e
s
E
n
c
u
e
s
t
a
a
i
n
s
t
i
t
u
c
i
n
E
n
c
u
e
s
t
a
a
d
o
c
e
n
t
e
s
Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin sincrnica entre los participantes (I2.1)
X
87
Nombre del indicador
Forma de
recoleccin
E
n
c
u
e
s
t
a
a
e
s
t
u
d
i
a
n
t
e
s
E
n
c
u
e
s
t
a
a
i
n
s
t
i
t
u
c
i
n
E
n
c
u
e
s
t
a
a
d
o
c
e
n
t
e
s
Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin asncrona entre los participantes (I2.2)
X
Promedio de calificaciones de los estudiantes del curso (I10.2) X X
Fuente: Elaboracin propia
Los instrumentos de recoleccin de informacin definitivos con base en esta
distribucin se encuentran consignados en detalle en el Anexo D.1.
5.4.1 Recoleccin de datos cuantitativos
En vista de los cambios realizados a la organizacin de los indicadores con
respecto a los instrumentos de recoleccin de informacin la distribucin de los 29
indicadores en los instrumentos diseados es la siguiente: la encuesta para
estudiantes cuenta con 23 preguntas para calcular los valores de 20 indicadores;
de forma anloga, para la encuesta de docentes se tienen 14 preguntas que
configuran diez (10) indicadores; por ltimo, la encuesta con cuatro (4) preguntas
para la organizacin, que constituyen dos (2) indicadores.
5.4.2 Recoleccin de datos cualitativos
Adems de las preguntas que se encuentran directamente involucradas en el
clculo de los indicadores, se mantuvo la pregunta de percepcin de la
experiencia de combinar herramientas e-learning con la clase en el aula en los
instrumentos para docentes y para estudiantes, de forma que se pueden identificar
en cada aplicacin de la metodologa algunos elementos que eventualmente no
hayan sido contemplados en las dems preguntas realizadas.
5.5 Anlisis y evaluacin de datos
Tras la difusin de los instrumentos de recoleccin de informacin, el
procesamiento de los datos recopilados con estos se debe realizar de forma
cuantitativa y cualitativa, con base en las estrategias indicadas enseguida.
5.5.1 Estrategia de anlisis cuantitativo
Para los datos cuantitativos se inicia con la consolidacin de los resultados de las
encuestas para estudiantes y docentes. Luego se realiza una normalizacin de los
datos en el caso de que las herramientas tecnolgicas con que se difundieron las
88
encuestas han permitido la introduccin de datos de formas diferentes a las
esperadas para cada medida, por el mecanismo de ingreso de los datos.
De esta manera se procede a realizar el anlisis individual de los resultados para
cada pregunta de la encuesta de los estudiantes, que debe hacerse con los
ajustes propuestos en la Tabla 20, con relacin al anlisis inicialmente propuesto
en la Tabla 11, donde tambin se indica para cada una de las preguntas si las
respuestas son de carcter escalar, nominal u ordinal, para el procesamiento de la
informacin. Este ajuste incluye la eliminacin de las preguntas correspondientes
a los indicadores I4.1 e I4.4 de la propuesta inicial.
Para el procesamiento de los datos de docentes y de la institucin no se
registraron novedades en el anlisis de los datos con respecto a la propuesta de
anlisis inicial.
5.5.2 Estrategia de anlisis cualitativo
El anlisis de los datos cualitativos de la encuesta para los estudiantes comienza
con la revisin de las respuestas de la pregunta de percepcin y observaciones
sobre la experiencia del curso con apoyo e-learning. Este anlisis consiste en el
marcado con etiquetas de las frases relevantes de cada respuesta. Este marcado
permite evaluar cules son los aspectos (etiquetas) ms mencionados y ms
relevantes por parte de los estudiantes y de los docentes en las encuestas por
separado, lo que indica que requieren de ms atencin en la evaluacin.
5.6 Discusin
Con respecto a la propuesta metodolgica inicial, tras la experimentacin se vio la
necesidad de ajustar el diseo de los indicadores en dos formas: eliminar los
indicadores que no aportan al anlisis y ajustar la distribucin de los indicadores
en los instrumentos de recoleccin.
En este orden de ideas, se pas de un sistema de 31 indicadores a uno de 29, tras
suprimir dos indicadores que no se correlacionan con otros. Tambin se ajust la
distribucin de tres indicadores entre las tres encuestas diseadas como
instrumentos de recoleccin de informacin.
A propsito de los instrumentos de recoleccin, se ajustaron los intervalos en las
preguntas que tienen a estos como opciones de respuesta para obtener resultados
ms precisos procurando mantener la facilidad para contestar las encuestas. Se
requerira en el futuro una nueva fase experimental para comprobar la utilidad del
ajuste.
De esta manera, este captulo se constituye en el segundo y definitivo paso para
satisfacer el tercer objetivo especfico en esta investigacin que a saber es
89
construir una metodologa final de evaluacin a partir del aprendizaje de la
experimentacin con la metodologa inicial para el entorno descrito.
90
Tabla 20. Detalle de la configuracin definitiva de indicadores a partir del anlisis de preguntas del instrumento de recoleccin de informacin
de estudiantes
Variable Indicador Pregunta Medida Anlisis
V3 Porcentaje medio de internautas
habituales por curso e-learning (I3.1)
Se considera un usuario habitual de
Internet?
Nominal Porcentaje de
respuestas afirmativas
V3 Frecuencia de uso de Internet con fines
formativos (I3.2)
Cuntas horas dedica diariamente en
promedio a la navegacin en Internet
para realizar actividades relacionadas
con sus estudios?
Escala Media ponderada para
datos agrupados
V10 Promedio de calificaciones de los
estudiantes del curso (I10.2)
Cul fue su calificacin para este
curso?
Escala Media aritmtica para
calificaciones numricas
entre 0 y 5. Se excluyen
calificaciones no-
numricas.
Fuente: Elaboracin propia
91
6 Conclusiones y trabajo futuro
A continuacin se presentan los resultados ms importantes de este trabajo de
investigacin, sus aportes, las recomendaciones que resultaron en el camino para
la IES estudiada en la fase experimental, as como elementos de trabajo de
investigacin a futuro.
6.1 Conclusiones
A partir del trabajo adelantado en el Proyecto e-Mtrica Colombia - Fase I, donde
se ha elaborado una revisin de la literatura con respecto a antecedentes en la
medicin de sectores de la SI con alcances regionales o internacionales
(Bustamante & Snchez-Torres, 2009) (Bustamante & Snchez-Torres, 2009a), se
ha encontrado que en el sector de e-learning aplicado a la educacin superior de
carcter presencial no hay consenso para realizar la medicin y evaluacin del
avance y de los resultados en trminos de efectos en los estudiantes, dada la
variedad de perspectivas y de objetivos perseguidos con cada medicin.
En el presente trabajo se identifican, a partir de esos antecedentes, diferentes
sistemas de indicadores en propuestas de alcance general de medicin de la SI
que involucran e-learning aplicables al aula de clase, y luego sistemas en estudios
de referencia particulares, donde se aplican principios de aprendizaje
constructivista con un alcance especfico al objeto de estudio en particular. Por
medio de la caracterizacin de estos sistemas de indicadores se evidenci falta de
consenso para la evaluacin tanto en la medicin de alcance general como en la
medicin de alcance especfico, de forma que se buscaron tendencias en trminos
de categoras de medicin ms frecuentes en los estudios encontrados. Estas
tendencias dejan a la luz aspectos relevantes a la hora de evaluar el efecto del e-
learning en los procesos de aprendizaje de los estudiantes.
Con base en las tendencias encontradas en cuanto a categoras o elementos de
estudio, a las variables que proponen, y a los indicadores que les dan valor, en
ese estricto orden jerrquico, se construy un primer componente metodolgico,
que a saber es un sistema de indicadores completo para evaluar en el tiempo el
efecto que tiene el e-learning en el proceso de aprendizaje de los estudiantes.
Este sistema se compone de seis (6) categoras de medicin entre las cuales se
clasifican 11 variables y estas a su vez, se desglosan en 31 indicadores. A pesar
de que la totalidad de variables corresponden a variables encontradas en los
estudios investigados, solo diez (10) de los 31 indicadores son indicadores
existentes o adaptados de alguna manera para el propsito de la medicin. Los
indicadores restantes fueron diseados para esta propuesta metodolgica.
92
La propuesta metodolgica inicial se compone adems de tres encuestas como
instrumentos de recoleccin de informacin acordes al sistema de indicadores
construido, divididas por fuentes de informacin, que a saber son: la institucin u
organizacin educativa, los estudiantes y los docentes. Tambin se disearon los
mecanismos de anlisis tanto cuantitativos como cualitativos aplicables a dichos
instrumentos para poder interpretar los datos entregados por estudiantes,
docentes y organizacin en trminos de los indicadores del sistema. Esto
constituye un tercer y ltimo componente metodolgico para la evaluacin del e-
learning en el aula de clase.
La metodologa inicial fue puesta a prueba en una fase de experimentacin. Se
realiz un muestreo por conveniencia de un grupo de 26 profesores de diferentes
sedes de la UN para ser encuestados; solo fue posible conseguir informacin de
contacto para 24 de ellos, y para cada uno se seleccion al azar uno de sus
cursos para encuestar su grupo de estudiantes en la plataforma Blackboard. En
total se enviaron 1385 invitaciones a 1244 estudiantes diferentes inscritos en los
24 cursos seleccionados. Se obtuvieron 181 encuestas respondidas por parte de
los estudiantes y 11 encuestas respondidas por los docentes de la muestra,
adems de la encuesta nica para la institucin. Se evidenci que para que los
estudiantes se motiven a responder este tipo de encuestas, es necesario disear
mensajes altamente informativos y explicativos de la relevancia de la encuesta.
Adems, se encontr que es importante realizar recordatorios peridicos, en este
caso semanales, para el diligenciamiento de la encuesta de los estudiantes, y en
el caso de los docentes fue oportuno enviar mensajes individuales por correo
electrnico para seguir de esta forma las inquietudes de cada uno de los
encuestados.
Los resultados tras el anlisis de los datos de la experimentacin muestran ser
positivos y vislumbran un avance significativo, comparados con experiencias
previas en e-learning como Muir-Herzing en (2004), donde se concluye que el
aporte del e-learning al proceso de aprendizaje es poco significativo. Cabe resaltar
que se han realizado mediciones empricas anteriormente al interior de la DNIA en
escenarios similares de cursos de pregrado y posgrado en la UN, de forma que los
resultados arrojados por la puesta en prctica de la primera versin de esta
metodologa representaron para la DNIA un avance en los resultados y en la
aceptacin de las estrategias e-learning para cursos dictados principalmente en el
aula.
A pesar de que la experimentacin arroja resultados por primera vez y estos no
pueden ser comparados con resultados histricos, el desempeo en promedio de
los estudiantes en la muestra para el caso de estudio presentado resulta ser
aceptable en materia de calificaciones, incluso cuando la totalidad de los
estudiantes de un grupo no aprueba al final de un curso, y cuando no se cumple
con todas las actividades virtuales propuestas. Para los cursos seleccionados en
la muestra, las herramientas e-learning empleadas gozan de muy buena
93
aceptacin, y es as que se ha logrado que algo ms que la tercera parte del
tiempo que se dedica en actividades virtuales se realice en conjunto con algn otro
compaero del curso o con el docente o tutor encargado. Estos buenos resultados
se pueden explicar tambin por el cubrimiento en infraestructura que deja ver una
distribucin aceptable de equipos de cmputo para los estudiantes, y una
proporcin tambin aceptable de espacios con acceso a Internet, sin contar con
elementos sin cuantificar, como los equipos particulares no censados de los
estudiantes, que pueden enlazarse de forma inalmbrica a las plataformas e-
learning con un cubrimiento de red por sede superior al 80% en promedio, como
se muestra en (Oficina Nacional de Planeacin, Universidad Nacional de
Colombia, 2011) para el caso de la UN.
Con base en aspectos detectados durante y despus de la experimentacin, as
como por sugerencias del ente que acompa este proceso, como lo es la DNIA,
para captar informacin relevante y ms precisa alrededor de la evaluacin de los
resultados de los cursos e-learning en los estudiantes, se formularon ajustes y
mejoras a la metodologa inicial y se plante una final ajustada con seis categoras
y 11 variables pero ahora involucrando 29 indicadores, en contraste con los 31 de
la metodologa inicial. Tambin se presentan tres encuestas como instrumentos de
recoleccin de informacin, as: una encuesta para estudiantes, otra para
docentes y otra para la institucin. En estos instrumentos se ajustaron algunas
preguntas en las encuestas para hacer ms precisos los datos entregados por los
encuestados. Por ltimo, tambin se ajustaron los mecanismos de anlisis
cuantitativos y cualitativos con base en las preguntas afectadas o incorporadas por
el ajuste.
Uno de los aportes principales de la metodologa propuesta es el de recoger la
mayor cantidad de puntos de vista posibles entre los que se encontraron en los
estudios similares y se identificaron como reincidentes, buscando un consenso
entre las formas de medicin existentes, y agregando nuevos elementos a estas
formas donde fue necesario dadas las caractersticas de la informacin disponible.
Como otro aporte de esta propuesta metodolgica se puede resaltar la
formalizacin de cmo hacer mediciones y evaluar los efectos del e-learning en un
entorno de formacin donde no se ha encontrado suficiente investigacin al
respecto. Tambin se cre un proceso estructural metodolgico que puede servir
como base para medir otros sectores de la SI que eventualmente requieran de
mayor formalidad de la medicin misma tanto en sus componentes (uno o varios
sistemas de indicadores, instrumentos de recoleccin de informacin y
mecanismos de anlisis de la informacin) como en el proceso a seguir, bien sea
en estudios de carcter nacional, regional o internacional.
94
6.2 Recomendaciones
Adems de la metodologa final propuesta, se sugiere seguir algunas
recomendaciones relacionadas con los resultados ms sobresalientes de la fase
experimental, especialmente para el escenario donde se aplic la propuesta
metodolgica inicial: la DNIA. La primera de estas recomendaciones consiste en
generar mayores espacios para la capacitacin de los docentes sobre las
facilidades que ofrecen las herramientas e-learning para el apoyo de sus cursos
de forma virtual.
A pesar de que la muestra a conveniencia estuvo marcada por el conocimiento de
los docentes sobre TIC y e-learning, solo el 60% de las facilidades de las
herramientas en promedio son efectivamente utilizadas, de forma que existe un
potencial importante por explotar all, que puede cambiar los resultados de los
estudiantes al final de un curso. Adicionalmente, los estudiantes del grupo
encuestado en general conocen del potencial de las herramientas desde el punto
de vista funcional y, en las encuestas reportaron desaprovechamiento y
subutilizacin de las herramientas en algunos cursos, de forma que para ellos
tambin resulta decepcionante el uso que en algunos casos alcanzan los cursos e-
learning.
Como segunda recomendacin, existe un potencial que se debe explotar en
materia de comunicacin con los estudiantes en el espacio virtual, puesto que algo
ms de la mitad de los cursos hace uso de las facilidades de comunicacin en
tiempo real. Si se considera que an los estudiantes reportan dificultades al utilizar
las herramientas para realizar sus actividades virtuales, y que se les puede brindar
un soporte con comunicacin al instante, se esperara que la cantidad de
actividades que puedan realizar los estudiantes se incremente y su desempeo y
la satisfaccin con la experiencia del curso sea mayor que la que actualmente
reportan. As mismo, se podra esperar un mayor porcentaje del cubrimiento del
programa propuesto al hacer ms eficiente el uso de las herramientas e-learning
para el cubrimiento de los temas del curso.
Por ltimo, para poder hacer la medicin, es importante que cuando se distribuyan
los instrumentos de recoleccin entre la muestra de la poblacin a estudiar, haya
una estregegia de difusin previa del proceso que se va a llevar a cabo con ellos,
es decir, que se les informe con tiempo de anticipacin que van a ser partcipes de
la evaluacin de las herramientas e-learning que usan en su da a da acadmico,
adems del mecanismo a seguir en dicho proceso. Esto como respuesta a tres
inquietudes que se recibieron va plataforma e-learning, que fue el medio de
difusin de las encuestas, de estudiantes que no entendan por qu se les estaba
evaluando y tampoco tenan claro si esto les representaba alguna nota o
calificacin para alguna materia. Esto eventualmente puede convertirse en causal
de falta de objetividad en las respuestas e incluso en causal de abstenerse de
contestar la encuesta.
95
De esta manera se termina el ltimo objetivo de este trabajo de investigacin, que
consiste, como se enunci, en generar recomendaciones en los aspectos que
merezcan especial atencin, con base en los resultados que puedan llegarse a
identificar.
6.3 Productos de la investigacin
En el transcurso de esta investigacin se elaboraron los siguientes productos para
publicacin en conferencias:
A. Bustamante y J.M. Snchez-Torres. Indicadores de la Sociedad de la
Informacin para la medicin en e-banking y e-learning. Encuentro Nacional
de Investigacin en Posgrados, Universidad Nacional de Colombia. Bogot,
D.C. Colombia, 2009.
J.M. Snchez-Torres y A. Bustamante. Evaluation of an exercise for
measuring impact in e-learning: Case study of learning a second language.
En memorias de la 5a Conferencia de la Asociacin Euro-Americana de
Telemtica y Sistemas de Informacin EATIS. Ciudad de Panam, Panam,
2010.
A. F. Bustamante y J. M. Sanchez-Torres. Building a system of indicators
for measuring e-learning in on-campus higher education, en 2011
International Conference on Information Society (i-Society), Londres, Reino
Unido, 2011, pgs. 464-469.
As mismo, se elabor un informe ejecutivo para la DNIA con el reporte de lo
realizado en la fase experimental de la investigacin y de los hallazgos en los
datos analizados de los cursos de pregrado y posgrados de la UN seleccionados
como muestra. Todos estos productos pueden revisarse en detalle en el Anexo E.
6.4 Trabajo futuro
Se espera que la metodologa final propuesta sea aplicada en primera instancia de
forma iterativa por la DNIA para sus evaluaciones de e-learning periodo tras
periodo tanto en los cursos de pregrado como en los de posgrado, teniendo en
cuenta que tienen a su cargo ambos tipos de cursos en la UN. La aplicacin
reiterada de la metodologa permitir hacer seguimiento de los avances, de las
acciones correctivas y de las mejoras implementadas en los diferentes periodos
acadmicos en la Universidad.
Cabe recordar que para la fase experimental detallada en este documento se
emple una muestra a conveniencia, de forma que los resultados son aplicables
nicamente para los cursos seleccionados en la UN. Para hacer un anlisis
representativo de la poblacin de la institucin debera repetirse el proceso
descrito, pero esta vez realizando un muestreo aleatorio entre los cursos que
administra la DNIA en las diferentes sedes del pas.
96
De otra parte, tambin se espera que la aplicacin de esta metodologa pueda ser
replicada en otras IES para evaluar qu alcance tienen sus implementaciones de
e-learning y cmo se estn viendo afectados los resultados del aprendizaje de los
estudiantes en este nivel de educacin. Con la aplicacin de esta metodologa en
otras IES se espera que incorporen con el tiempo tambin nuevos puntos de vista
sobre la evaluacin de los efectos del e-learning, por consideraciones de
estrategias particulares de implementacin que se hayan escapado de este
estudio, bien sean de tipo pedaggico, tecnolgico o administrativo.
Finalmente, con respecto al proyecto e-Mtrica Colombia del cual hace parte esta
investigacin, se espera que la metodologa y sus componentes como se han
presentado en este trabajo sirvan como base para investigacin posterior en
medicin y evaluacin en otros sectores de la SI que no hayan presentado
resultados de investigacin al respecto en el pas.
97
Bibliografa
Alavi, M. (1994). Computer-Mediated Collaborative Learning: An Empirical
Evaluation. MIS Quarterly, 18, 159-174.
Alonso, F., Manrique, D., & Vies, J. M. (2009). A moderate constructivist e-
learning instructional model evaluated on computer specialists. Computers
& Education, 53(1), 57-65.
Anastasiades, P. S. (2003). Distance learning in elementary schools in Cyprus: the
evaluation methodology and results. Computers & Education, 40, 17-40.
Atkinson, R. D. (2002). The State New Economy Index: Benchmarking Economic
Transformation in the States. Progressive Policy Institute, Washington, D.C.
Banco Mundial. (2009). Knowledge Assessment Methodology. Recuperado el 9 de
Noviembre de 2009, de http://www.worldbank.org/kam
Bennett, C., & Pilkington, R. (2001). Using a virtual learning environment in higher
education to support independent and collaborative learning. IEEE
International Conference on Advanced Learning Technologies, (pgs. 285-
288).
Bianco, C., Lugones, G., Peirano, F., & Salazar, M. (2002). Indicadores de la
Sociedad del Conocimiento: aspectos conceptuales y metodolgicos.
Centro Redes.
BISER. (2002). List of e-Europe Regions Indicators. Recuperado el 18 de Mayo de
2009, de http://www.biser-eu.com/BISER_eIndicators.pdf
Blin, F., & Munro, M. (2008). Why hasn't technology disrupted academics' teaching
practices Understanding resistance to change through the lens of activity
theory. Computers & Education, 50, 475-490.
Bustamante, A., & Snchez-Torres, J. M. (2009). Indicadores para la medicin de
la Sociedad de la Informacin: una revisin. Universidad Nacional de
Colombia, mimeo.
Bustamante, A., & Snchez-Torres, J. M. (2009a). Indicadores de la Sociedad de
la Informacin para la medicin en e-banking y e-learning. Encuentro
Nacional de Investigacin en Posgrados, Universidad Nacional de
Colombia.
98
Cabero, J. (2006). Bases pedaggicas del e-learning. Revista de Universidad y
Sociedad del Conocimiento, 3(1).
Cardona-Romn, D. M. (2011). Propuesta de diseo de metodologa para evaluar
el impacto del e-learning en el proceso de aprendizaje de estudiantes de
educacin a distancia. Universidad Nacional de Colombia.
Carliner, S. (2004). An Overview of On-Line Learning. Human Resource
Development.
Chou, S.-W., & Liu, C.-H. (2005). Learning Effectiveness in Web-Based
Technology-Mediated Virtual Learning Environment. 38th Annual Hawaii
International Conference on System Sciences, 2005. HICSS '05, (pg. 3a).
Clegg, S., Hudson, A., & Steel, J. (2003). The Emperor's New Clothes:
Globalisation and e-Learning in Higher Education. British Journal of
Sociology of Education, 24, 39-53.
Comisin del Mercado de las Telecomunicaciones. (2007). Informe Anual 2007.
Recuperado el 17 de Junio de 2009, de
http://www.cmt.es/es/publicaciones/anexos/Informe_anual_CMT_2007_web
.pdf
Crosier, J. K., Cobb, S., & Wilson, J. R. (2002). Key lessons for the design and
integration of virtual environments in secondary science. Computers &
Education, 38, 77-94.
CSPP. (2000). Living in the Networked World Readiness Guide. Recuperado el 19
de Mayo de 2009, de
http://www.cspp.org/documents/NW_Readiness_Guide.pdf
Dearnley, C., Dunn, G., & Watson, S. (2006). An exploration of on-line access by
non-traditional students in higher education: A case study. Nurse Education
Today, 26, 409-415.
Dede, C. (1996). The evolution of distance education: Emerging technologies and
distributed learning. American Journal of Distance Education, 10(2), 4-36.
Direccin Nacional de Servicios Acadmicos Virtuales. (2008). Encuesta de
percepcin de los servicios ofrecidos: Curso ALEX Virtual, Universidad
Nacional de Colombia. Universidad Nacional de Colombia, Bogot, D.C.
Duncan, H. (2005). On-line Education for Practicing Professionals: A Case Study.
Canadian Journal of Education / Revue canadienne de l'education, 28, 874-
896.
99
eBusiness Watch. (2005). A guide to ICT usage indicators. Recuperado el 17 de
Junio de 2009, de http://www.ebusiness-
watch.org/studies/special_topics/2005/documents/TR_2005_Indicators_I.pdf
Echeverra, J. (2003). Indicadores cualitativos de la Sociedad de la Informacin.
Nmadas, 18, 114-125.
Feberova, J., Dostalova, T., Hladikova, M., Kasal, P., Polasek, J., Seydlova, M., y
otros. (2010). Evaluation of 5-year Experience with E-learning Techniques
at Charles University in Prague. Impact on Quality of Teaching and
Students' Achievements. New Educational Review, 21(2), 110-120.
Fetaji, B., & Fetaji, M. (2007). E-Learning Indicators Methodology Approach in
Designing Successful e-Learning. 29th Int. Conf. on Information Technology
Interfaces.
Foro Econmico Mundial. (2009). The Global Information Technology Report 2008-
2009. Recuperado el 22 de Mayo de 2009, de
http://www.weforum.org/pdf/gitr/2009/gitr09fullreport.pdf
Francescato, D., Porcelli, R., Mebane, M., Cuddetta, M., Klobas, J., & Renzi, P.
(2006). Evaluation of the efficacy of collaborative learning in face-to-face
and computer-supported university contexts. Computers in Human
Behavior, 22, 163-176.
Fundacin Telefnica. (2000). La Sociedad de la Informacin en Espaa 2000.
Recuperado el 11 de Agosto de 2009, de
http://info.telefonica.es/sociedaddelainformacion/pdf/informes/espana_2000/
completo.pdf
Fundacin Telefnica. (2008). La Sociedad de la Informacin en Espaa 2008.
Recuperado el 11 de Agosto de 2009, de http://e-
libros.fundacion.telefonica.com/sie08/
G-10 en Entornos Virtuales. (2004). Impacto de las TIC en 10 universidades
colombianas. I Congreso Internacional de Educacin Mediada por
Tecnologas. Barranquilla, Colombia.
Goodfellow, R. (2005). Academic literacies and e-learning: A critical approach to
writing in the online university. International Journal of Educational
Research, 43, 481-494.
Goodyear, P. (2004). Advances in research on networked learning. Springer.
Graven, O. H., Helland, M., & MacKinnon, L. (2006). The influence of staff use of a
virtual learning environment on student satisfaction. 7th International
100
Conference on Information Technology Based Higher Education and
Training, 2006. ITHET '06, (pgs. 423-441).
Green, S. M., Weaver, M., Voegeli, D., Fitzsimmons, D., Knowles, J., Harrison, M.,
y otros. (2006). The development and evaluation of the use of a virtual
learning environment (Blackboard 5) to support the learning of pre-qualifying
nursing students undertaking a human anatomy and physiology module.
Nurse Education Today, 26, 388-395.
Hakkarainen, K., Ilomki, L., Lipponen, L., Muukkonen, H., Rahikainen, M.,
Tuominen, T., y otros. (2000). Students' skills and practices of using ICT:
results of a national assessment in Finland. Computers & Education, 34(2),
103-117.
HELIOS. (2007). e-Learning for Innovation: Executive Summary 2007. Recuperado
el 11 de Septiembre de 2008, de http://www.education-
observatories.net/helios/Members/Odin/final_print_executive_summary_200
71.pdf
Hermans, R., Tondeur, J., Braak, J. v., & Valcke, M. (2008). The impact of primary
school teachers' educational beliefs on the classroom use of computers.
Computers & Education, 51(4), 1499-1509.
Jrvel, S., Jrvenoja, H., & Veermans, M. (2007). Understanding the dynamics of
motivation in socially shared learning. International Journal of Educational
Research.
Jonassen, D., Davidson, M., Collins, M., Campbell, J., & Haag, B. B. (1995).
Constructivism and computer-mediated communication in distance
education. The American Journal of Distance Education, 9, 7-26.
Jones, N., & O'Shea, J. (2004). Challenging Hierarchies: The Impact of E-Learning.
Higher Education, 48, 379-395.
Junta de Castilla y Len. (2007). Modelo de indicadores. Escenario objetivo. En
Estrategia Regional para la Sociedad Digital del Conocimiento 2007-2013.
Katz, J. M., & Hilbert, M. R. (2003). Los caminos hacia una sociedad de la
informacin en Amrica Latina y el Caribe. United Nations.
Kawachi, P. (2005). Computers, multimedia and e-learning. En Perspectives on
Distance Education: Educational media in Asia (pgs. 97-122).
Commonwealth of Learning.
101
Kim, K.-J., Liu, S., & Bonk, C. J. (2005). Online MBA students' perceptions of
online learning: Benefits, challenges, and suggestions. The Internet and
Higher Education, 8, 335-344.
Korkmaz, O., & Karakus, U. (2009). The impact of blended learning model on
student attitudes towards geography course and their critical thinking
dispositions and levels. Turkish Online Journal of Educational Technology,
8(4), 51-63.
Leidner, D. E., & Jarvenpaa, S. L. (1995). The Use of Information Technology to
Enhance Management School Education: A Theoretical View. MIS
Quarterly, 19, 265-291.
Levy, Y. (2007). Comparing dropouts and persistence in e-learning courses.
Computers & Education, 48(2), 185-204.
Martnez, C. (2003). Estadstica y Muestreo (11 ed.). Bogot, Colombia: ECOE
Ediciones.
Martinez, R.-A., del, M. M., Perez, M. H., & Nuno, A. S. (2007). Psychopedagogical
components and processes in e-learning. Lessons from an unsuccessful on-
line course. Computers in Human Behavior, 23, 146-161.
Mills, S., & T, M. M. (1999). Learning through virtual reality: a preliminary
investigation. Interacting with Computers, 11, 453-462.
Mooij, T., & Smeets, E. (2001). Modelling and supporting ICT implementation in
secondary schools. Computers & Education, 36(3), 265-281.
Muir-Herzig, R. G. (2004). Technology and its impact in the classroom. Computers
& Education, 42, 111-131.
Nichols, A. J., & Levy, Y. (2009). Empirical assessment of college student-athletes'
persistence in e-learning courses: A case study of a U.S. National
Association of Intercollegiate Athletics (NAIA) institution. The Internet and
Higher Education, 12(1), 14-25.
OECD Working Party on Indicators for the Information Society. (2005). Guide to
Measuring the Information Society. Recuperado el 22 de Mayo de 2009, de
http://www.oecd.org/dataoecd/41/12/36177203.pdf
Oficina Nacional de Planeacin, Universidad Nacional de Colombia. (2011).
Estadsticas e Indicadores de la Universidad Nacional de Colombia (Vol.
16).
102
OSILAC. (2005). Indicadores y preguntas clave para la medicin de la Sociedad
de la Informacin. Recuperado el 29 de Septiembre de 2009, de
http://www.eclac.org/socinfo/osilac/indicadores/
Ozkan, S., & Koseler, R. (2009). Multi-dimensional students' evaluation of e-
learning systems in the higher education context: An empirical investigation.
Computers & Education, 53(4), 1285-1296.
Paechter, M., Maier, B., & Macher, D. (2010). Students' expectations of, and
experiences in e-learning: Their relation to learning achievements and
course satisfaction. Computers & Education, 54(1), 222-229.
Partnership on Measuring ICT for Development. (2008). The Global Information
Society: a Statistical View. Recuperado el 29 de Junio de 2009, de
http://www.unctad.org/en/docs/LCW190_en.pdf
Punie, Y., Zinnbauer, D., & Cabrera, M. (2008). A Review of the Impact of ICT on
Learning. Joint Research Centre - Institute for Prospective Technological
Studies.
Robertson, J. S., Grant, M. M., & Jackson, L. (2005). Is online instruction perceived
as effective as campus instruction by graduate students in education? The
Internet and Higher Education, 8, 73-86.
Rosenberg, M. J. (2000). E-learning: Strategies for delivering knowledge in the
digital age. McGraw-Hill.
Rovai, A. P., Ponton, M. K., Derrick, M. G., & Davis, J. M. (2006). Student
evaluation of teaching in the virtual and traditional classrooms: A
comparative analysis. The Internet and Higher Education, 9, 23-35.
Snchez-Torres, J. M. (2006). Propuesta metodolgica para evaluar las polticas
pblicas de promocin del e-government como campo de aplicacin de la
Sociedad de la Informacin. El caso colombiano. Tesis Doctoral,
Universidad Autnoma de Madrid.
Shih, M., Feng, J., & Tsai, C.-C. (2008). Research and trends in the field of e-
learning from 2001 to 2005: A content analysis of cognitive studies in
selected journals. Computers & Education, 51(2), 955-967.
SIBIS Consortium. (2003). Indicator Handbook. Recuperado el 20 de Mayo de
2009, de http://www.sibis-eu.org/files/Sibis_Indicator_Handbook.pdf
Strijbos, J., Martens, R., Jochems, W., & Broers, N. (2007). The effect of functional
roles on perceived group efficiency during computer-supported collaborative
103
learning: a matter of triangulation. Computers in Human Behavior, 23(1),
353-380.
Sun, P.-C., Tsai, R. J., Finger, G., Chen, Y.-Y., & Yeh, D. (2008). What drives a
successful e-Learning? An empirical investigation of the critical factors
influencing learner satisfaction. Computers & Education, 50(4), 1183-1202.
Unin Internacional de Telecomunicaciones. (2009). Measuring the Information
Society: The ICT Development Index. Recuperado el 30 de Junio de 2009,
de http://www.itu.int/ITU-D/ict/publications/idi/2009/material/IDI2009_w5.pdf
US Department of Education. (2009). Evaluation of Evidence-Based Practices in
Online Learning. Recuperado el 14 de Septiembre de 2009, de
http://www.ed.gov/rschstat/eval/tech/evidence-based-
practices/finalreport.pdf
Vicente, M. R., & Lpez, A. J. (2003). Indicadores de la Sociedad de la
Informacin. Una revisin crtica.
Vicente, M. R., & Lpez, A. J. (2008). Mtricas e Indicadores de la Sociedad de la
Informacin: panormica de la situacin actual. Estadstica Espaola,
50(168), 273-320.
Virvou, M., & Katsionis, G. (2008). On the usability and likeability of virtual reality
games for education: The case of VR-ENGAGE. Computers & Education,
50, 154-178.
Wallace, R. M., Kupperman, J., Krajcik, J., & Soloway, E. (2000). Science on the
Web: Students Online in a Sixth-Grade Classroom. The Journal of the
Learning Sciences, 9, 75-104.
Wentling, T. L., Waight, C., Gallaher, J., Fleur, J. L., Wang, C., & Kanfer, A. (2000).
E-learning: A review of literature. E-learning: A review of literature.
University of Illinois at Urbana-Champaign.
104
Anexo A. Sistemas de indicadores
A.1 Sistemas de indicadores especficos
A.1.1 Evaluacin de estudios de referencia con indicadores especficos
Tabla 21. Nomenclatura de variables especficas encontradas en estudios de referencia
Fuente Ao Cd. Variable Indicador
Hakkarainen et al. 2001 V5 Actitud (del estudiante) hacia las TIC
V14 Actitud hacia el uso de herramientas TIC
V81 Habilidades tcnicas en TIC (del estudiante)
V82 Intensidad del uso recreativo de TIC
V83 Intensidad del uso educativo de TIC
V84 Inclinacin (del estudiante) hacia el aprendizaje
con TIC
V85 Apoyo (del estudiante) de las TIC para el
aprendizaje
V86 Solucin progresiva de problemas
V87 Adopcin del rol de experto por parte del
estudiante
V88 Redes de estudiantes Frecuencia de uso de computadores en el saln
de clase
V89 Uso colaborativo de TIC
Mooij y Smeets 2001 V25 Entrenamiento de los profesores
V90 Involucramiento en TIC de los interesados en el
aprendizaje
V91 Compromiso propio con el uso de TIC
V92 Objetivo educativo de usar TIC
V93 Competencia de la coordinacin de TIC
V94 Coherencia de las polticas de TIC Nmero de pginas solicitadas en el sistema
105
Fuente Ao Cd. Variable Indicador
V94 Coherencia en la implementacin de TIC Nmero de pginas visitadas por da de la
semana
V95 Calidad del soporte de TIC Nmero de pginas visitadas por hora del da
V96 Disposicin de elementos de hardware,
dispositivos, etc.
Frecuencia de acceso a pginas del sistema e-
learning
V97 Enlaces internos de hardware Cantidad de entradas por tema en el tablero de
discusin
V98 Enlaces externos de hardware Cantidad de cuestionarios efectivamente
diligenciados
V99 Disponibilidad de software Distribucin de nivel de satisfaccin con el
aprendizaje inicial requerido
V100 Integracin metdica del software
V101 Diagnstico y evaluacin del software Distribucin de gneros de los profesores
V102 Consideracin del uso de TIC Distribucin de edad de los profesores
V103 Dilogo profesional entre profesores
V104 Despliegue de TIC en clase por parte de
profesores
Levy 2004 V2 Satisfaccin del aprendiz con sistemas e-
learning
Cantidad de material cubierto en el mdulo
V4 Tasa de desercin de los cursos en modalidad e-
learning
Opinin de disponibilidad del material del curso
Chou y Liu 2005 V1 Desempeo (del estudiante) Opinin de utilidad de disponer de anotaciones
de lecciones antes de las lecciones
V2 Satisfaccin (del estudiante) con el aprendizaje
V16 Auto-eficacia (del estudiante) en el computador
V110 Efectividad del aprendizaje Calidad de las anotaciones de las lecciones en
el sistema
V111 Ambiente (clima) de aprendizaje Calificacin promedio de la experiencia de
aprendizaje
Francescato et al. 2006 V1 Eficacia acadmica percibida (del estudiante)
V2 Satisfaccin (del estudiante) con el desempeo
V61 Cooperatividad (del estudiante)
V67 Conocimiento percibido (del estudiante)
V86 Eficacia percibida (del estudiante) en resolucin
de problemas
106
Fuente Ao Cd. Variable Indicador
V107 Conocimiento real (del estudiante)
V108 Eficacia social percibida (del estudiante)
V109 Presencia social (del estudiante)
Green et al. 2006 V112 Utilizacin (de los estudiantes) del sistema e-
learning
V113 Frecuencia de uso individual (del sistema e-
learning)
V114 Uso de tableros de discusin (del sistema e-
learning)
V115 Efectividad del modo de evaluacin (en el
sistema e-learning)
V116 Evaluacin del mdulo (de aprendizaje)
Fetaji y Fetaji 2007 V1 Desempeo y auto-eficacia (del estudiante)
V6 Motivacin (de los estudiantes)
V7 Actitudes e inters (de los estudiantes)
V43 Contenido (adaptabilidad, preferencias de
formato)
V72 Colaboracin (entre los estudiantes)
V123 Bases educativas del estudiante
V124 Nivel de habilidades con los computadores
V125 Tipos de aprendices (que son los estudiantes)
V126 Estilo de aprendizaje e inteligencia
V127 Barreras del e-learning (obstculos para los
estudiantes)
V128 Atencin (de los estudiantes)
V129 Diseo instruccional
V130 Aspectos organizacionales especficos
V131 Preferencias de la logstica de e-learning
V132 Preferencias del diseo de e-learning
V133 Capacidades tcnicas disponibles para los
implicados
V134 Accesibilidad disponible para los implicados
Strijbos 2007 V72 Calidad de la colaboracin para el aprendizaje
107
Fuente Ao Cd. Variable Indicador
V73 Desarrollo del equipo de colaboradores
V74 Satisfaccin del grupo sobre el proceso
V75 Conflicto entre grupos de colaboradores
V76 Estrategia de tareas en colaboracin
DNSAV 2008 V2 Satisfaccin con la plataforma e-learning
V33 Usabilidad de la plataforma e-learning
V96 Disponibilidad de salas de cmputo
V110 Efectividad de las estrategias para aprendizaje
por mdulos interactivos
V117 Evaluacin del docente Cantidad de aos de experiencia con
computadores
V118 Evaluacin del monitor Distribucin de experiencia por tipo de uso de
los computadores
V119 Inters de los estudiantes en asistencia a
asesoras presenciales
V120 Inters de los estudiantes en asistencia a
asesoras en lnea
V121 Horarios de uso de la plataforma
V122 Dedicacin semanal al uso de la plataforma
Hermans et al. 2008 V25 Experiencia del profesor en computadores y uso
soportado de computadores
V77 Actitud de los profesores hacia los computadores
en general
V104 Uso de computadores en el saln de clase
V105 Creencias constructivistas y tradicionalistas de
los profesores
V106 Demografa de los profesores
Sun et al. 2008 V2 Satisfaccin percibida del estudiante
V5 Actitud de los estudiantes hacia los
computadores
V15 Ansiedad de los estudiantes ante los
computadores
V16 Auto-eficacia del estudiante en Internet
V21 Rapidez en la retroalimentacin por parte del
instructor
108
Fuente Ao Cd. Variable Indicador
V30 Facilidad de uso percibida
V55 Utilidad percibida con e-learning
V63 Flexibilidad de los cursos en e-learning
V64 Calidad del curso e-learning
V73 Interaccin percibida del estudiante con otros
V77 Actitud del instructor hacia la tecnologa
V78 Calidad de la tecnologa
V79 Calidad de Internet
V80 Diversidad en formas de evaluacin
Alonso et al. 2009 V1 Nota del examen final
V2 Satisfaccin del aprendiz con el aprendizaje
adquirido
V3 Tiempo de estudio
Nichols y Levy 2009 V2 Satisfaccin del aprendiz con sistemas e-
learning
V5 Actitud de los estudiantes hacia los
computadores
V6 Motivacin acadmica intrnseca de los
estudiantes
V7 Motivacin acadmica extrnseca de los
estudiantes
V8 Medida de desempeo acadmico previo de los
estudiantes
V9 Persistencia en cursos de e-learning
Ozkan y Kozeler 2009 V10 Promocin del sistema e-learning
V11 Tendencias (sociales, polticas) alrededor del
sistema e-learning
V12 Aspectos legales y ticos del sistema e-learning
V13 Costo del sistema e-learning
V14 Actitud de los estudiantes hacia el sistema e-
learning
V15 Ansiedad de los estudiantes ante los
computadores
V16 Auto-eficiencia de los estudiantes con e-learning
109
Fuente Ao Cd. Variable Indicador
V17 Experiencia disfrutable en e-learning
V18 Interaccin con otros estudiantes y el profesor
V19 Hbitos de estudio del estudiante
V20 Nivel de experiencia del estudiante con sistema
e-learning
V21 Capacidad de respuesta del instructor
V22 Capacidad de informacin del instructor
V23 Equidad del instructor
V24 Promocin de la interaccin entre estudiantes
por parte del instructor
V25 Control del instructor sobre la tecnologa
V26 Administracin del curso por parte del instructor
V27 Habilidad de comunicacin del instructor
V28 Placer producido en el instructor con el uso de e-
learning
V29 Auto-eficacia del instructor con e-learning
V30 Facilidad de uso del sistema e-learning
V31 Seguridad del sistema e-learning
V32 Confiabilidad del sistema e-learning
V33 Usabilidad del sistema e-learning
V34 Mantenimiento del sistema e-learning
V35 Disponibilidad de opciones de ayuda del sistema
e-learning
V36 Amigabilidad del sistema e-learning
V37 Buena organizacin en el sistema e-learning
V38 Disponibilidad del sistema e-learning
V39 Personalizacin del sistema e-learning
V40 Interactividad del sistema e-learning
V41 Administracin del currculum
V42 Flexibilidad de los cursos en e-learning
V43 Contenido interactivo del sistema e-learning
V44 Modelo de aprendizaje empleado en e-learning
V45 Calidad de los tutoriales del sistema e-learning
110
Fuente Ao Cd. Variable Indicador
V46 Claridad del contenido del sistema e-learning Nivel de agrado por los computadores
V47 Suficiencia del contenido del sistema e-learning Nivel de ansiedad ante los computadores
V48 Calidad del material del evaluacin del
estudiante
Nivel de confianza con los computadores
V49 Mantenimiento del contenido del sistema e-
learning
V50 Actualidad del contenido del sistema e-learning
V51 Buena organizacin del contenido en el sistema
e-learning
V52 Seguimiento a los estudiantes
V53 Autorizacin para tomar / instruir un curso
V54 Administracin de los cursos del sistema e-
learning
Paechter 2010 V6 Soporte para mantener la motivacin por
aprender
V21 Rapidez en la retroalimentacin por parte del
instructor
V22 Consejera y soporte por parte del instructor
V33 Usabilidad del sistema e-learning
V46 Claridad y organizacin del contenido del
sistema e-learning
V55 Favorabilidad en tasa beneficio-costo en
esfuerzo y resultados de aprendizaje
V56 Posibilidad de establecer contacto personal con
el instructor
V57 Accesibilidad fcil y rpida del instructor
V58 Experiencia del instructor en implementacin de
cursos e-learning
V59 Intercambio fcil y rpido de informacin y
conocimiento entre estudiantes
V60 Variedad de herramientas de comunicacin para
intercambio de informacin entre estudiantes
V61 Soporte de aprendizaje colaborativo y trabajo en
grupo con otros participantes de los cursos
V62 Contacto personal con estudiantes
111
Fuente Ao Cd. Variable Indicador
V63 Flexibilidad del aprendizaje en relacin a tiempo
y espacio
V64 Flexibilidad en eleccin de estrategias de
aprendizaje y ritmos de aprendizaje
V65 Oportunidades para ejercicios a ritmo individual y
aplicacin del conocimiento
V66 Oportunidades para controlar los resultados del
aprendizaje
V67 Adquisicin de conocimiento y habilidades en la
materia de estudio
V68 Adquisicin de habilidades en aplicacin del
conocimiento
V69 Adquisicin de habilidades en comunicacin y
cooperacin
V70 Adquisicin de habilidades en aprendizaje
autoregulado
V71 Adquisicin de habilidades en utilizacin de
Internet para prcticas cientficas
Fuente: Elaboracin propia a partir de (Hakkarainen, et al., 2000), (Mooij & Smeets, 2001), (Chou & Liu, 2005), (Francescato, Porcelli,
Mebane, Cuddetta, Klobas, & Renzi, 2006), (Green, et al., 2006), (Fetaji & Fetaji, 2007), (Levy, 2007), (Strijbos, Martens, Jochems, &
Broers, 2007), (Direccin Nacional de Servicios Acadmicos Virtuales, 2008), (Hermans, Tondeur, Braak, & Valcke, 2008), (Sun, Tsai,
Finger, Chen, & Yeh, 2008), (Alonso, Manrique, & Vies, 2009), (Nichols & Levy, 2009), (Ozkan & Koseler, 2009) y (Paechter, Maier, &
Macher, 2010).
112
Tabla 22. Homologacin de variables especficas encontradas en estudios de referencia
Cd. Descripcin de la variable Fuente Ao
V1 Nota del examen final Alonso et al. 2009
Desempeo (del estudiante) Chou y Liu 2005
Desempeo y auto-eficacia (del estudiante) Fetaji y Fetaji 2007
Eficacia acadmica percibida (del estudiante) Francescato et al. 2006
V2 Satisfaccin del aprendiz con el aprendizaje adquirido Alonso et al. 2009
Satisfaccin (del estudiante) con el aprendizaje Chou y Liu 2005
Satisfaccin con la plataforma e-learning DNSAV 2008
Satisfaccin (del estudiante) con el desempeo Francescato et al. 2006
Satisfaccin del aprendiz con sistemas e-learning Levy 2004
Satisfaccin del aprendiz con sistemas e-learning Nichols y Levy 2009
Satisfaccin percibida del estudiante Sun et al. 2008
V5 Actitud (del estudiante) hacia las TIC Hakkarainen et al. 2001
Actitud de los estudiantes hacia los computadores Nichols y Levy 2009
Actitud de los estudiantes hacia los computadores Sun et al. 2008
V6 Motivacin (de los estudiantes) Fetaji y Fetaji 2007
Motivacin acadmica intrnseca de los estudiantes Nichols y Levy 2009
Soporte para mantener la motivacin por aprender Paechter 2010
V7 Actitudes e inters (de los estudiantes) Fetaji y Fetaji 2007
Motivacin acadmica extrnseca de los estudiantes Nichols y Levy 2009
V14 Actitud hacia el uso de herramientas TIC Hakkarainen et al. 2001
Actitud de los estudiantes hacia el sistema e-learning Ozkan y Kozeler 2009
V15 Ansiedad de los estudiantes ante los computadores Ozkan y Kozeler 2009
Ansiedad de los estudiantes ante los computadores Sun et al. 2008
V16 Auto-eficacia (del estudiante) en el computador Chou y Liu 2005
Auto-eficiencia de los estudiantes con e-learning Ozkan y Kozeler 2009
Auto-eficacia del estudiante en Internet Sun et al. 2008
V21 Capacidad de respuesta del instructor Ozkan y Kozeler 2009
Rapidez en la retroalimentacin por parte del instructor Paechter 2010
Rapidez en la retroalimentacin por parte del instructor Sun et al. 2008
V22 Capacidad de informacin del instructor Ozkan y Kozeler 2009
Consejera y soporte por parte del instructor Paechter 2010
V25 Experiencia del profesor en computadores y uso soportado de
computadores
Hermans et al. 2008
Experiencia del profesor en computadores y uso soportado de
computadores
Hermans et al. 2008
Entrenamiento de los profesores Mooij y Smeets 2001
Control del instructor sobre la tecnologa Ozkan y Kozeler 2009
V30 Facilidad de uso del sistema e-learning Ozkan y Kozeler 2009
Facilidad de uso percibida Sun et al. 2008
V33 Usabilidad de la plataforma e-learning DNSAV 2008
Usabilidad del sistema e-learning Ozkan y Kozeler 2009
Usabilidad del sistema e-learning Paechter 2010
V43 Contenido (adaptabilidad, preferencias de formato) Fetaji y Fetaji 2007
Contenido interactivo del sistema e-learning Ozkan y Kozeler 2009
V46 Claridad del contenido del sistema e-learning Ozkan y Kozeler 2009
113
Cd. Descripcin de la variable Fuente Ao
Claridad y organizacin del contenido del sistema e-learning Paechter 2010
V55 Favorabilidad en tasa beneficio-costo en esfuerzo y
resultados de aprendizaje
Paechter 2010
Utilidad percibida con e-learning Sun et al. 2008
V61 Cooperatividad (del estudiante) Francescato et al. 2006
Soporte de aprendizaje colaborativo y trabajo en grupo con
otros participantes de los cursos
Paechter 2010
V63 Flexibilidad del aprendizaje en relacin a tiempo y espacio Paechter 2010
Flexibilidad de los cursos en e-learning Sun et al. 2008
V64 Flexibilidad en eleccin de estrategias de aprendizaje y ritmos
de aprendizaje
Paechter 2010
Calidad del curso e-learning Sun et al. 2008
V67 Conocimiento percibido (del estudiante) Francescato et al. 2006
Adquisicin de conocimiento y habilidades en la materia de
estudio
Paechter 2010
V72 Colaboracin (entre los estudiantes) Fetaji y Fetaji 2007
Calidad de la colaboracin para el aprendizaje Strijbos 2007
V73 Desarrollo del equipo de colaboradores Strijbos 2007
Interaccin percibida del estudiante con otros Sun et al. 2008
V77 Actitud de los profesores hacia los computadores en general Hermans et al. 2008
Actitud de los profesores hacia los computadores en general Hermans et al. 2008
Actitud de los profesores hacia los computadores en general Hermans et al. 2008
Actitud del instructor hacia la tecnologa Sun et al. 2008
V86 Eficacia percibida (del estudiante) en resolucin de problemas Francescato et al. 2006
Solucin progresiva de problemas Hakkarainen et al. 2001
V94 Coherencia de las polticas de TIC Mooij y Smeets 2001
Coherencia en la implementacin de TIC Mooij y Smeets 2001
V96 Disponibilidad de salas de cmputo DNSAV 2008
Disposicin de elementos de hardware, dispositivos, etc. Mooij y Smeets 2001
V104 Uso de computadores en el saln de clase Hermans et al. 2008
Despliegue de TIC en clase por parte de profesores Mooij y Smeets 2001
V110 Efectividad del aprendizaje Chou y Liu 2005
Efectividad de las estrategias para aprendizaje por mdulos
interactivos
DNSAV 2008
Fuente: Elaboracin propia a partir de (Hakkarainen, et al., 2000), (Mooij & Smeets, 2001), (Chou &
Liu, 2005), (Francescato, Porcelli, Mebane, Cuddetta, Klobas, & Renzi, 2006), (Green, et al., 2006),
(Fetaji & Fetaji, 2007), (Levy, 2007), (Strijbos, Martens, Jochems, & Broers, 2007), (Direccin
Nacional de Servicios Acadmicos Virtuales, 2008), (Hermans, Tondeur, Braak, & Valcke, 2008),
(Sun, Tsai, Finger, Chen, & Yeh, 2008), (Alonso, Manrique, & Vies, 2009), (Nichols & Levy, 2009),
(Ozkan & Koseler, 2009) y (Paechter, Maier, & Macher, 2010).
Tabla 23. Variables especficas determinadas por cada estudio de referencia evaluado
Variable
Estudio de referencia
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
V1 X X X X
V2 X X X X X X
114
Variable
Estudio de referencia
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
V3 X
V4 X
V5 X X X
V6 X X X
V7 X X
V8 X
V9 X
V10 X
V11 X
V12 X
V13 X
V14 X X
V15 X X
V16 X X X
V17 X
V18 X
V19 X
V20 X
V21 X X X
V22 X X
V23 X
V24 X
V25 X X X
V26 X
V27 X
V28 X
V29 X
V30 X X
V31 X
V32 X
V33 X X X
V34 X
V35 X
V36 X
V37 X
V38 X
V39 X
V40 X
V41 X
V42 X
V43 X X
V44 X
V45 X
V46 X X
V47 X
V48 X
V49 X
115
Variable
Estudio de referencia
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
V50 X
V51 X
V52 X
V53 X
V54 X
V55 X X
V56 X
V57 X
V58 X
V59 X
V60 X
V61 X X
V62 X
V63 X X
V64 X X
V65 X
V66 X
V67 X X
V68 X
V69 X
V70 X
V71 X
V72 X X
V73 X X
V74 X
V75 X
V76 X
V77 X X
V78 X
V79 X
V80 X
V81 X
V82 X
V83 X
V84 X
V85 X
V86 X X
V87 X
V88 X
V89 X
V90 X
V91 X
V92 X
V93 X
V94 X
V95 X
V96 X X
116
Variable
Estudio de referencia
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
V97 X
V98 X
V99 X
V100 X
V101 X
V102 X
V103 X
V104 X X
V105 X
V106 X
V107 X
V108 X
V109 X
V110 X X
V111 X
V112 X
V113 X
V114 X
V115 X
V116 X
V117 X
V118 X
V119 X
V120 X
V121 X
V122 X
V123 X
V124 X
V125 X
V126 X
V127 X
V128 X
V129 X
V130 X
V131 X
V132 X
V133 X
V134 X
Fuente: Elaboracin propia a partir de A= (Hakkarainen, et al., 2000), B= (Mooij & Smeets, 2001),
C= (Levy, 2007), D= (Chou & Liu, 2005), E= (Francescato, Porcelli, Mebane, Cuddetta, Klobas, &
Renzi, 2006), F= (Green, et al., 2006), G= (Fetaji & Fetaji, 2007), H= (Strijbos, Martens, Jochems, &
Broers, 2007), I= (Direccin Nacional de Servicios Acadmicos Virtuales, 2008), J= (Hermans,
Tondeur, Braak, & Valcke, 2008), K= (Sun, Tsai, Finger, Chen, & Yeh, 2008), L= (Alonso,
Manrique, & Vies, 2009), M= (Nichols & Levy, 2009), N= (Ozkan & Koseler, 2009) y O= (Paechter,
Maier, & Macher, 2010).
117
Tabla 24. Variables de carcter especfico ms utilizadas
Variable Nombre de la variable Frecuencia
V2 Satisfaccin del estudiante con el e-learning 6
V1 Desempeo del estudiante 4
V16 Auto-eficacia del estudiante con e-learning 3
V21 Rapidez en la realimentacin del instructor 3
V25 Experiencia del docente en el uso de TIC 3
V33 Usabilidad del sistema e-learning 3
V5 Actitud de los estudiantes hacia las TIC 3
V6 Motivacin de los estudiantes por el aprendizaje 3
V104 Uso de TIC en el saln de clase 2
V110 Efectividad del aprendizaje con e-learning 2
V14 Actitud de los estudiantes hacia el sistema e-learning 2
V15 Ansiedad de los estudiantes ante los computadores 2
V22 Capacidad de informacin del instructor 2
V30 Facilidad de uso percibida del sistema e-learning 2
V43 Contenido 2
V46 Claridad del contenido del sistema e-learning 2
V55 Utilidad percibida con e-learning 2
V61 Cooperatividad del estudiante 2
V63 Flexibilidad de los cursos e-learning 2
V64 Calidad del curso e-learning 2
V67 Conocimiento percibido por parte del estudiante 2
V7 Actitud e inters de los estudiantes 2
V72 Calidad de la colaboracin entre los estudiantes 2
V73 Interaccin percibida entre los estudiantes 2
V77 Actividad de los profesores / instructores hacia la tecnologa 2
V86 Eficacia percibida del estudiante en resolucin de problemas 2
V96 Disponibilidad de salas y equipo de cmputo 2
Fuente: Elaboracin propia
Tabla 25. Cantidad de variables por estudio de referencia del anlisis
Estudio
No. de variables
encontradas
(Ozkan & Koseler, 2009) 45
(Paechter, Maier, & Macher, 2010) 22
(Fetaji & Fetaji, 2007) 17
(Mooij & Smeets, 2001) 16
(Sun, Tsai, Finger, Chen, & Yeh, 2008) 14
(Hakkarainen, et al., 2000) 11
(Direccin Nacional de Servicios Acadmicos Virtuales, 2008) 10
(Francescato, Porcelli, Mebane, Cuddetta, Klobas, & Renzi, 2006) 8
(Nichols & Levy, 2009) 6
(Green, et al., 2006) 5
(Hermans, Tondeur, Braak, & Valcke, 2008) 5
(Strijbos, Martens, Jochems, & Broers, 2007) 5
(Chou & Liu, 2005) 4
118
Estudio
No. de variables
encontradas
(Alonso, Manrique, & Vies, 2009) 3
(Levy, 2007) 2
Fuente: Elaboracin propia a partir de (Hakkarainen, et al., 2000), (Mooij & Smeets, 2001), (Levy,
2007), (Chou & Liu, 2005), (Francescato, Porcelli, Mebane, Cuddetta, Klobas, & Renzi, 2006),
(Green, et al., 2006), (Fetaji & Fetaji, 2007), (Strijbos, Martens, Jochems, & Broers, 2007),
(Direccin Nacional de Servicios Acadmicos Virtuales, 2008), (Hermans, Tondeur, Braak, &
Valcke, 2008), (Sun, Tsai, Finger, Chen, & Yeh, 2008), (Alonso, Manrique, & Vies, 2009), (Nichols
& Levy, 2009), (Ozkan & Koseler, 2009) y (Paechter, Maier, & Macher, 2010).
A.1.2 Un estudio local: el programa ALEX Virtual
Un estudio de referencia de medicin en e-learning de carcter especfico es el
caso del programa UN Virtual de la Direccin Nacional de Innovacin Acadmica
DNIA (antes Direccin Nacional de Servicios Acadmicos Virtuales DNSAV) en la
Universidad Nacional de Colombia (UN), quien realiz en el ao 2008 un estudio
para medir la percepcin de la calidad de los servicios ofrecidos a travs del curso
ALEX virtual (Direccin Nacional de Servicios Acadmicos Virtuales, 2008), que se
ha convertido en una modalidad dominante en el aprendizaje de idiomas y
particularmente del idioma ingls en la UN. Este curso se caracteriza por la
utilizacin de TIC para asistir a los estudiantes en sesiones de aprendizaje
autnomo.
Particularmente, el estudio recin mencionado utiliz informacin recolectada
directamente de estudiantes que tomaron el curso de ingls en el programa ALEX
virtual durante el primer semestre de 2008. All se presentaron algunos resultados
con relacin a las secciones que se presentan a continuacin, de forma que,
segn la DNIA, reunidas entregan una idea de la percepcin de los estudiantes
sobre la calidad del servicio prestado:
Los contenidos de los mdulos interactivos
Usabilidad de la aplicacin interactiva
Apoyo docente
Apoyo del monitor/tutor
Asesoras presenciales
Asesoras en lnea
Tiempo
Espacio (lugares)
El Centro de Recursos del Programa ALEX
El examen final
A partir de (Direccin Nacional de Servicios Acadmicos Virtuales, 2008) se puede
deducir una serie de variables con sus respectivos indicadores, los cuales
permiten ms adelante comprender de qu manera afecta la tecnologa la
119
estructura de aprendizaje en este estudio. En la Tabla 26 se presenta el detalle de
las variables identificadas en este trabajo con sus respectivos indicadores.
Tabla 26. Variables e indicadores de evaluacin en el estudio del programa ALEX Virtual
Variable Indicador
Efectividad de las estrategias para
aprendizaje por mdulos interactivos
Proporcin de estudiantes por grado de aceptacin de
la efectividad de las estrategias utilizadas
Usabilidad de la plataforma e-learning Proporcin de estudiantes de acuerdo con necesidad
de ayuda de terceros para uso de la plataforma
Proporcin de estudiantes de acuerdo con facilidad de
uso de la plataforma
Proporcin de estudiantes de acuerdo con que la
plataforma es intuitiva en su profundidad
Proporcin de estudiantes de acuerdo con que la
disposicin visual de los contenidos en la plataforma
es intuitiva
Proporcin de estudiantes de acuerdo con que el
tamao de los textos en la plataforma es adecuado
Satisfaccin con la plataforma e-learning Grado de satisfaccin general promedio de los
estudiantes con la plataforma
Evaluacin del docente Calificacin general promedio al apoyo del docente
Evaluacin del monitor Calificacin general promedio al apoyo del monitor
Inters de los estudiantes en asistencia a
asesoras presenciales
Proporcin de estudiantes por frecuencia de asistencia
a asesoras presenciales
Proporcin de estudiantes por opinin de flexibilidad
de los horarios de asesoras presenciales
Inters de los estudiantes en asistencia a
asesoras en lnea
Proporcin de estudiantes por frecuencia de asistencia
asesoras en lnea
Proporcin de estudiantes por opinin de flexibilidad
de los horarios de asesoras en lnea
Horarios de uso de la plataforma Proporcin de estudiantes que utilizan la plataforma
por franjas horarias
Dedicacin semanal al uso de la
plataforma
Proporcin de estudiantes por intervalos horarios de
dedicacin a la semana
Asistencia al Centro de Recursos Proporcin de estudiantes por frecuencia de asistencia
al Centro de Recursos
Tipo de consulta en el Centro de
Recursos
Proporcin de estudiantes por tipo de consulta en el
Centro de Recursos
Frecuencia de consultas a los
orientadores del Centro de Recursos
Proporcin de estudiantes por frecuencia de consultas
a orientadores del Centro de Recursos
Uso del material didctico en el Centro de
Recursos
Proporcin de estudiantes por tipo de material
utilizado en el Centro de Recursos
Disponibilidad de salas de cmputo en el
Centro de Recursos
Proporcin de estudiantes por disponibilidad de las
salas de cmputo del Centro de Recursos
Calificacin general del Centro de
Recursos
Calificacin media del servicio ofrecido por el Centro
de Recursos
Fuente: Elaboracin propia a partir de (Direccin Nacional de Servicios Acadmicos Virtuales,
2008)
Se puede resaltar que el conjunto deducido de variables e indicadores son de un
alcance especfico en cuanto al tipo de servicio prestado en relacin con e-
120
learning, la modalidad del servicio prestado e incluso los lugares donde se presta
el servicio para el aprendizaje y donde se ejecutan los procesos de aprendizaje
acompaados con las tecnologas e-learning.
121
Anexo B. Propuesta metodolgica inicial
B.1. Instrumentos de recoleccin de informacin:
B.1.1. Encuesta para docentes
No. Descripcin
Preguntas de contexto
1 Pregunta: Cuntos aos tiene de experiencia como docente?
Respuesta: (Nmero de aos)
2 Pregunta: Cuntos aos tiene de experiencia como usuario de tecnologas informticas?
Respuesta: (Nmero de aos)
3 Pregunta: Hace uso de un aula virtual, algn espacio dedicado en Internet u otra forma de
e-learning para acompaar el desarrollo del curso?
Respuesta:
Si, frecuentemente
Si, ocasionalmente
No, aunque el curso dispone del aula / espacio
No, el curso no cuenta con aula / espacio virtual
Preguntas para usuarios e-learning
4 Pregunta: Qu proporcin de actividades con respecto al total de actividades y sesiones
programadas para el curso se realizan de forma virtual, es decir, por medio de las
herramientas e-learning disponibles?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
5 Pregunta: Qu proporcin del material / programa del curso pudo ser cubierto, al combinar
las sesiones de clase con actividades e-learning?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
6 Pregunta: En qu medida los contenidos de las sesiones de clase en el desarrollo del
curso tienen una documentacin disponible o actividades de ayuda asociadas va e-learning?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
122
No. Descripcin
7 Pregunta: En qu medida los estudiantes resolvieron las actividades propuestas a lo largo
del curso va e-learning?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
8 Pregunta: Qu proporcin de los estudiantes inscritos para el curso logr cumplir con todas
las actividades propuestas va e-learning dentro de los parmetros establecidos?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
9 Pregunta: Qu proporcin de las actividades propuestas va e-learning tienen alguna
restriccin de tiempo, como plazos de entrega u horas dedicadas para su realizacin?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
Preguntas sobre desempeo en el curso
10 Pregunta: Qu curso desea evaluar?
Respuesta: Nombre del curso a partir de lista
11 Pregunta: Cuntos estudiantes se encontraban inscritos en el curso?
Respuesta: (Nmero de estudiantes)
12 Pregunta: Cuntos estudiantes lograron aprobar el curso?
Respuesta: (Nmero de estudiantes)
13 Pregunta: Cul es el promedio de calificaciones de los estudiantes para este curso?
Respuesta: (Nmero, escala entre 0 y 5)
14 Pregunta: Qu percepcin tiene del uso de e-learning como complemento del aula de
clase?
Respuesta: (Respuesta abierta)
Fuente: Elaboracin propia
B.1.2. Encuesta para estudiantes
No. Descripcin
Preguntas de contexto
123
No. Descripcin
1 Pregunta: Cuntas horas dedica semanalmente a la navegacin en Internet?
Respuesta:
0 a 5
5 a 10
10 a 15
15 a 20
20 ms
2 Pregunta: Cuntas horas dedica semanalmente a la navegacin en Internet para realizar
actividades relacionadas con sus estudios?
Respuesta:
0 a 5
5 a 10
10 a 15
15 a 20
20 ms
3 Pregunta: Qu calificacin le dara a sus habilidades para el uso de tecnologas como
Internet?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa bsico y 5 significa experto).
Preguntas sobre el desarrollo del curso
4 Pregunta: Qu curso desea evaluar?
Respuesta: Nombre del curso a partir de lista
5 Pregunta: Se definieron claramente lineamientos para el uso de las herramientas e-
learning al inicio del curso?
Respuesta:
Si
No
Indeciso
6 Pregunta: El curso hace uso de chats o videoconferencias para el apoyo de forma virtual?
Respuesta:
Si
No
Indeciso
7 Pregunta: El curso hace uso de foros de discusin o mensajes va correo electrnico para
el apoyo de forma virtual?
Respuesta:
Si
No
Indeciso
124
No. Descripcin
8 Pregunta: Qu tan intenso fue el uso de las siguientes herramientas para el desarrollo del
curso?
Respuesta:
Herramienta
Intensidad (1 = Muy escaso / 5 = Muy intenso)
1 2 3 4 5
Anuncios
Glosario
Documentos del curso
Herramientas de evaluacin (quiz)
Libreta de notas
Tablero de discusin
Email de grupo
Intercambio de archivos
Calendario
Chats
9 Pregunta: Qu calificacin le dara a la facilidad para aprender a utilizar las herramientas
e-learning designadas?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy pobre y 5 significa muy buena)
10 Pregunta: Cuntas horas estima Ud. que en promedio dedic para desarrollar y completar
una actividad va e-learning?
Respuesta: (Nmero de horas)
11 Pregunta: Con qu frecuencia Ud. enfrenta dificultades para realizar sus actividades con
las herramientas e-learning designadas?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa nunca y 5 significa siempre)
12 Pregunta: Qu tan satisfecho se encuentra con el nivel de destreza previo requerido para
el dominio de las herramientas e-learning propuestas para el desarrollo del curso?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy insatisfecho y 5 significa muy
satisfecho)
13 Pregunta: Con respecto al total de actividades propuestas en las herramientas e-learning,
qu porcentaje de estas logr culminar exitosamente?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
14 Pregunta: Del tiempo invertido realizando actividades con las herramientas e-learning, qu
proporcin de tiempo estima Ud. que invirti realizndolas con ayuda de compaeros de
clase, monitores o tutores?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
15 Pregunta: Qu tan til considera el aporte de sus compaeros utilizando las herramientas
e-learning disponibles para su aprendizaje en el curso?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy poco til y 5 significa muy til).
125
No. Descripcin
16 Pregunta: Qu tan til considera disponer documentos y notas de clase va electrnica
antes de las sesiones en el saln de clase?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy poco til y 5 significa muy til).
17 Pregunta: Cmo calificara la disponibilidad del material del curso en lnea?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy mala y 5 significa muy buena).
18 Pregunta: Cmo calificara la calidad del material del curso dispuesto en lnea?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy mala y 5 significa muy buena).
Preguntas sobre el resultado del curso
19 Pregunta: Qu porcentaje del programa inicial del curso fue cubierto al terminar?
Respuesta:
0 20%
20 40%
40 60%
60 80%
80 100%
20 Pregunta: El papel del docente encargado del curso fue fundamental para aprender
mediante las ayudas e-learning disponibles
Respuesta:
Si
No
Indeciso
21 Pregunta: Considera que mejor en su aprendizaje gracias a las ayudas provedas por e-
learning?
Respuesta:
Si
No
Indeciso
22 Pregunta: Qu calificacin le dara al desarrollo del curso con ayudas e-learning?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy mala y 5 significa muy buena).
23 Pregunta: Qu tan satisfecho se encuentra con la inclusin de herramientas e-learning
como parte de su proceso de aprendizaje en el curso?
Respuesta: (Escala discreta de 1 a 5, donde 1 significa muy insatisfecho y 5 significa muy
satisfecho).
24 Pregunta: Estara Ud. de acuerdo con la utilizacin permanente de herramientas e-
learning como las que dispone el curso para reforzar su aprendizaje?
Respuesta:
Si
No
Indeciso
25 Pregunta: Qu observaciones tiene sobre el uso de e-learning como complemento de la
clase en el aula?
Respuesta: (Respuesta abierta)
Fuente: Elaboracin propia
B.1.3. Cuestionario para la organizacin
No. Descripcin
1 Pregunta: Cuntos estudiantes se matricularon para el periodo en revisin?
Respuesta: Respuesta abierta (Nmero de estudiantes)
126
No. Descripcin
2 Pregunta: Cuntos equipos de cmputo se encuentran a disposicin de los estudiantes
que se matricularon para este periodo?
Respuesta: Respuesta abierta (Nmero de computadores)
3 Pregunta: Cuntos salones de clase tienen acceso a Internet en la institucin?
Respuesta: Respuesta abierta (Nmero de salones)
4 Pregunta: De cuntos salones de clase dispone la institucin para los estudiantes?
Respuesta: Respuesta abierta (Nmero de salones)
Fuente: Elaboracin propia
127
Anexo C. Experimentacin
A continuacin de describen uno a uno los anlisis realizados para obtener los
valores de los indicadores propuestos en la metodologa inicial de evaluacin,
agrupados por la variable a la que pertenecen. El software de procesamiento:
utilizado para obtener estos resultados fue SPSS 18 para Windows.
C.1. Anlisis de indicadores
Variable: Acceso a las herramientas e-learning
Indicador Nmero medio de alumnos por computador
Fuente Institucin
Total de estudiantes matriculados en pregrado y posgrado: 46753
Total de computadores disponibles en salas: 4843 (existentes) + 408 (adquiridos) = 5251
Valor del indicador: 8,90 estudiantes por computador
Nota: Los datos corresponden a todas las sedes para el ao 2010 (datos disponibles ms
recientes) a partir de (Oficina Nacional de Planeacin, Universidad Nacional de Colombia, 2011)
Indicador Proporcin de salones de clase con acceso a Internet
Fuente Institucin
Total de salones de clase: 1116 (incluye aulas, salas de cmputo y auditorios)
Total de salones con acceso a Internet: 194 (salas de cmputo)
Valor del indicador: 17,38% de salones cuenta con acceso a Internet
Nota: Los datos corresponden a todas las sedes para el ao 2010 (datos disponibles ms
recientes) a partir de (Oficina Nacional de Planeacin, Universidad Nacional de Colombia, 2011)
Variable: Aplicaciones y servicios en red
Indicador Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin sincrnica entre los participantes
Fuente Estudiantes
Anlisis Tabla de contingencia: Qu curso desea evaluar? * El curso hace
uso de chats o videoconferencias para el apoyo de forma virtual?
128
Nmero de cursos reportados por estudiantes: 21
Nmero de cursos donde estudiantes reportan uso de facilidades: 11
Valor del indicador: 52,38%
Indicador Porcentaje de cursos ofrecidos que hacen uso de facilidades para
comunicacin asncrona entre los participantes
Fuente Estudiantes
Nmero de cursos reportados por estudiantes: 21
Nmero de cursos donde estudiantes reportan uso de facilidades: 11
Valor del indicador: 80,95%
Variable: Uso de computadores y tecnologa con fines educativos
Indicador Frecuencia de uso de Internet con fines formativos
Fuente Estudiantes
No. de
horas
No. de
estudiantes
Marca de
clase
20 o ms 16
22,5
15 a 20 21
17,5
0 a 5 28
2,5
10 a 15 52
12,5
5 a 10 64
7,5
N = 181
Media ponderada: 10,65 horas semanales
Valor del indicador: Los estudiantes invierten en promedio 10.65 horas semanales en Internet para
tareas relacionadas con su aprendizaje
Indicador Porcentaje medio de internautas habituales por curso e-learning
Fuente Estudiante
N = 181
Nmero de estudiantes considerados internautas habituales (ms de 10 horas a la semana): 131
Valor del indicador: 72,38% de estudiantes por curso
Indicador Porcentaje medio de facilidades e-learning efectivamente
aprovechadas en el desarrollo de un curso
Fuente Estudiante
129
N = 181
Nmero de facilidades seleccionables: 10
Facilidades reportadas como utilizadas por los estudiantes: 6
Valor del indicador: 60%
Variable: Usabilidad de las herramientas e-learning
Indicador Frecuencia de ocurrencia de problemas de uso para completar una
tarea virtual
Fuente Estudiantes
Valor Frecuencia No. de
estudiantes
1 Nunca 20
2 Rara vez 69
3 A veces 70
4 Frecuentemente 15
5 Siempre 6
N = 180
Media ponderada = 2,54
Valor del indicador: 2,54 / 5 (Ocurre entre rara vez y a veces)
Indicador Porcentaje de tareas efectivamente resueltas en aplicacin e- learning
por parte de los estudiantes
Fuente Estudiantes / Docentes
Estudiantes:
N = 178
Media ponderada para datos agrupados = 67,98%
Docentes:
N = 11
Media ponderada para datos agrupados = 60,91%
Valor del indicador: 67,98% de las tareas fueron resueltas efectivamente en e-learning segn los
estudiantes. 60,91% de las tareas se resolvieron, segn los docentes.
Indicador Calificacin media de la facilidad de aprendizaje de uso de las
herramientas e-learning propuestas
Fuente Estudiantes
130
N = 179
Media aritmtica = 3,46
Desviacin tpica. = 1,05
Valor del indicador: Calificacin de 3,46 / 5
Indicador Tiempo medio necesario para completar una tarea virtual en e-learning
de forma efectiva
Fuente Estudiantes
N = 168
Media aritmtica = 9,71
Desviacin tpica = 18,05
Valor del indicador: Se invierten en promedio 9.71 horas para completar una tarea virtual
Variable: Utilidad percibida con e-learning
Indicador Proporcin de material cubierto en el curso, con relacin al material
estimado inicialmente para el curso
Fuente Estudiantes / Docentes
Para los estudiantes:
N = 179
Media ponderada para datos agrupados = 76,59%
Para los docentes:
N = 11
Media ponderada para datos agrupados = 82,73%
Valor del indicador: Se cubri en promedio el 76,59% del programa inicialmente propuesto
utilizando e-learning, segn los estudiantes, mientras que se alcanz el 82,73% del mismo en
promedio segn los docentes.
Indicador Valoracin de utilidad de disponer de notas de clase antes de las
sesiones presenciales del curso
Fuente Estudiantes
N = 178
Media aritmtica = 4,51
Desviacin tpica = 0,86
Valor del indicador: La calificacin media de la utilidad de las notas de clase es de 4,71 / 5.
Variable: Cooperatividad del estudiante
131
Indicador Porcentaje de tiempo virtual dedicado al trabajo colaborativo/en grupo
Fuente Estudiantes
N = 179
Media ponderada para datos agrupados = 34,25%
Valor del indicador: 34,25% del tiempo que los estudiantes dedican a aprender con e-learning se
utilizan en promedio para actividades en colaboracin o en grupo.
Indicador Calificacin promedio del aporte de otros participantes virtuales en el
proceso de aprendizaje
Fuente Estudiantes
N = 176
Media aritmtica = 3,32
Desviacin tpica = 1,2
Valor del indicador: Los estudiantes califican en promedio con un 3,32 el aporte de otros
compaeros y sus tutores en las actividades en lnea para el aprendizaje.
Indicador Porcentaje de estudiantes que considera vital el rol del docente para el
aprendizaje mediante las ayudas e-learning (I6.3)
Fuente Estudiantes
N = 181
Porcentaje de respuestas afirmativas = 56,9
Valor del indicador: El 56,9% de los estudiantes considera vital el papel del docente en su
aprendizaje por va e-learning.
Variable: Estrategias de entrega de cursos e-learning
Indicador Proporcin media de actividades en e-learning con respecto al total de
actividades por curso
Fuente Docentes
N = 11
Media ponderada para datos agrupados = 46,36%
Valor del indicador: Con respecto al total de actividades propuestas para los cursos, en promedio,
el 46,36% se dedicaron a actividades e-learning
Indicador Porcentaje de actividades en e-learning con restricciones de tiempo
Fuente Docentes
N = 11
Media ponderada para datos agrupados = 51,82%
Valor del indicador: En promedio, 51,82% de las actividades e-learning propuestas en un curso
tienen restricciones de tiempo.
132
Indicador Nivel de disponibilidad del material del curso
Fuente Estudiantes
N = 177
Media aritmtica = 74,4%
Valor del indicador: La percepcin promedio de la disponibilidad de los contenidos para un curso
presencial con apoyo en e-learning fue de 74,4%
Indicador Proporcin del contenido propuesto del curso con ayudas e-learning
Fuente Docentes
N = 11
Media ponderada para datos agrupados = 73,64%
Valor del indicador: En promedio, para un curso el 73,64% de las sesiones de clase tiene alguna
clase de ayuda o documentacin extra por va e-learning.
Indicador Proporcin de estudiantes que recibe informacin sobre lineamientos
para el uso de las herramientas al inicio del curso
Fuente Estudiantes
N = 181
Porcentaje de respuestas afirmativas = 53
Valor del indicador: El 53% de los estudiantes encuestados manifiesta recibir informacin sobre
lineamientos para el uso de las herramientas al inicio del curso.
Variable: Satisfaccin del estudiante con e-learning
Indicador Porcentaje de aceptacin de las herramientas e-learning como refuerzo
del proceso de aprendizaje
Fuente Estudiantes
N = 181
Porcentaje de aceptacin = 79,01%
Valor del indicador: El 79,01% de los estudiante dice que acepta el e-learning como refuerzo en su
proceso de aprendizaje. La proporcin restante se opone o est indecisa al respecto.
Indicador Calificacin media de la satisfaccin con la inclusin de e-learning en el
proceso de aprendizaje
Fuente Estudiantes
N = 177
Media ponderada = 3,71
Valor del indicador: La calificacin media de la satisfaccin de incluir e-learning en el proceso de
aprendizaje es de 3,71 / 5
133
Indicador Nivel de satisfaccin con las habilidades exigidas para el desarrollo del
curso con e-learning
Fuente Estudiantes
N = 178
Media ponderada = 3,32
Valor del indicador: El nivel medio de satisfaccin con las habilidades previas que requiere el e-
learning para su utilizacin es de 3,32 / 5.
Variable: Percepcin de la calidad de los cursos e-learning
Indicador Calificacin promedio de la experiencia de aprendizaje
Fuente Estudiantes
N = 180
Media aritmtica = 3,53
Desviacin tpica = 1,02
Valor del indicador: Los estudiantes califican con un promedio de 3,53 / 5 la experiencia de
aprendizaje de un curso con las ayudas e-learning en su desarrollo.
Indicador Percepcin de la calidad de las anotaciones de clase en el sistema
Fuente Estudiantes
N = 179
Media aritmtica = 3,7
Desviacin tpica = 1,12
Valor del indicador: La calificacin media de la calidad que los estudiantes perciben de las
anotaciones de clase de los cursos es de 3,7 / 5.
Variable: Desempeo del estudiante
Indicador Porcentaje de estudiantes que aprueban el curso
Fuente Docentes
N = 11
Media aritmtica = 85,21%
Valor del indicador: En promedio, el 85,21% de los estudiantes inscritos en cursos presenciales
que hacen uso del e-learning logran aprobar al final del curso.
Indicador Promedio de calificaciones de los estudiantes del curso
Fuente Docentes
134
N = 9
Media aritmtica = 3,57
Desviacin tpica = 0,47
Valor del indicador: La calificacin final promedio de un estudiante inscrito en cursos en modalidad
blended learning es de 3,57 / 5
Indicador Porcentaje de estudiantes que cumplen con el desarrollo de actividades
en e-learning dentro del tiempo establecido
Fuente
N = 11
Media ponderada para datos agrupados = 70%
Valor del indicador: En promedio para un curso en modalidad blended learning, el 70% de los
estudiantes logra cumplir con el desarrollo de todas las actividades propuestas al finalizar el
mismo.
Variable: Caracterizacin del curso
Indicador
Fuente Docentes
N = 11
Media aritmtica = 85,21%
Valor del indicador: En promedio, el 85,21% de los estudiantes inscritos en cursos presenciales
que hacen uso del e-learning logran aprobar al final del curso.
Indicador
Fuente Docentes
N = 9
Media aritmtica = 3,57
Desviacin tpica = 0,47
Valor del indicador: La calificacin final promedio de un estudiante inscrito en cursos en modalidad
blended learning es de 3,57 / 5
C.2. Anlisis cualitativo
En la Tabla 27 se presentan los resultados del proceso de marcado de texto con
etiquetas de las opiniones de estudiantes sobre la inclusin del e-learning como
parte del proceso de aprendizaje para los cursos que se toman en el aula de
clase. En la Tabla 28 se presentan los resultados del mismo proceso para la
135
encuesta docente. Para trminos de ambas tablas, las etiquetas corresponden a
los temas que se presentan all.
Tabla 27. Detalle de frecuencia de los aspectos ms mencionados en opinin de estudiantes sobre
inclusin del e-learning en el proceso de aprendizaje en los cursos presenciales
Tema Menciones
beneficios del e-learning 25
problemas del e-learning 23
estrategias de entrega 15
aceptacin del e-learning 15
capacitacin en herramientas 12
realizacin de actividades 11
herramientas tecnolgicas 10
e-learning como complemento 10
comunicacin con el docente 10
consideraciones de tiempo 10
subutilizacin de herramientas 9
importancia de la presencialidad 9
acompaamiento docente 7
aprendizaje adquirido 7
sugerencias 6
e-learning como apoyo 5
papel del docente 5
desconocimiento del e-learning 5
motivacin 5
trabajo colaborativo 5
comunicacin con compaeros 4
bsqueda y consulta de informacin 4
publicacin de documentos 3
limitaciones tecnolgicas 3
documentacin del curso 3
establecimiento de reglas 2
observaciones del curso 2
lenguas extranjeras 2
herramientas de comunicacin 2
desarrollo de habilidades 2
desempeo del estudiante 2
rechazo 1
136
Tema Menciones
calidad del curso 1
evaluacin del desempeo del estudiante 1
Fuente: Elaboracin propia. Software de procesamiento: Atlas.TI 6.2 para Windows
Tabla 28. Detalle de frecuencia de los aspectos ms mencionados en opinin de los docentes sobre
inclusin del e-learning en el proceso de aprendizaje en los cursos presenciales
Tema Menciones
beneficios del e-learning 10
e-learning como complemento 6
problemas del e-learning 5
limitaciones tecnolgicas 4
comunicacin con estudiantes 3
estrategias de entrega 3
herramientas tecnolgicas 3
consideraciones de tiempo 2
trabajo en colaboracin 2
efectos del e-learning 2
herramientas de comunicacin 2
implicaciones pedaggicas 2
desarrollo de actividades 2
aceptacin del e-learning 2
aprendizaje 1
consulta de informacin 1
capacidad de acceso a tecnologa 1
motivacin 1
importancia de presencialidad 1
sugerencia 1
publicacin de informacin 1
habilidades en herramientas informticas 1
evaluacin del desempeo de estudiantes 1
afectacin a la actividad docente 1
historial entre cursos 1
Fuente: Elaboracin propia. Software de procesamiento: Atlas.TI 6.2 para Windows
C.3. Otros anlisis
A continuacin se presentan los resultados del anlisis de correlaciones de
indicadores con escalas numricas del conjunto inicial de la propuesta.
137
Tabla 29. Datos del anlisis de correlaciones entre indicadores del conjunto inicial
r de
Pearson I3.1 I4.1 I4.2 I4.3 I4.4 I5.1 I5.2 I6.1 I6.2 I7.1 I7.2 I7.3 I7.4
I3.1 X 0,104 0,204 0,074 -0,032 -0,047 0,031 0,086 0,074 0,101
I4.1 0,104 X 0,073 -0,135 0,057 0,106 0,093 0,14 0,098 0,179
I4.2 0,204 0,073 X 0,548 0,129 0,431 0,336 0,206 0,3 0,493
I4.3 0,074 -0,135 0,548 X 0,148 0,317 0,391 0,083 0,397 0,539
I4.4 -0,032 0,057 0,129 0,148 X -0,069 -0,012 0,072 0,117 0,103
I5.1 -0,047 0,106 0,431 0,317 -0,069 X 0,361 0,104 0,102 0,412 0,395 0,415 0,313
I5.2 0,031 0,093 0,336 0,391 -0,012 0,361 X -0,061 0,29 0,428
I6.1 0,086 0,14 0,206 0,083 0,072 0,104 -0,061 X 0,286 0,134
I6.2 0,074 0,098 0,3 0,397 0,117 0,102 0,29 0,286 X 0,3
I7.1 0,412 X -0,322 0,412
I7.2 0,395 -0,322 X -0,442
I7.3 0,101 0,179 0,493 0,539 0,103 0,415 0,428 0,134 0,3 X
I7.4 0,313 0,412 -0,442 X
I8.2 0,092 0,027 0,558 0,576 0,093 0,351 0,388 0,105 0,413 0,585
I8.3 0,071 -0,139 0,519 0,608 0,122 0,374 0,372 0,142 0,31 0,453
I9.1 0,119 0,039 0,563 0,51 0,062 0,427 0,323 0,203 0,389 0,564
I9.2 0,062 0,19 0,496 0,562 -0,02 0,394 0,412 0,202 0,331 0,81
I10.1
I10.2 -0,197 -0,351 0,121 0,545
I10.3 0,821 0,322 0,145 0,513
I11.1 -0,399 0,049 -0,8 0,26
I11.2 0,451 0,049 0,27 0,185
138
r de
Pearson I8.2 I8.3 I9.1 I9.2 I10.1 I10.2 I10.3 I11.1 I11.2
I3.1 0,092 0,071 0,119 0,062
I4.1 0,027 -0,139 0,039 0,19
I4.2 0,558 0,519 0,563 0,496
I4.3 0,576 0,608 0,51 0,562
I4.4 0,093 0,122 0,062 -0,02
I5.1 0,351 0,374 0,427 0,394 -0,197 0,821 -0,399 0,451
I5.2 0,388 0,372 0,323 0,412
I6.1 0,105 0,142 0,203 0,202
I6.2 0,413 0,31 0,389 0,331
I7.1 -0,351 0,322 0,049 0,049
I7.2 0,121 0,145 -0,8 0,27
I7.3 0,585 0,453 0,564 0,81
I7.4 0,545 0,513 0,26 0,185
I8.2 X 0,455 0,751 0,617
I8.3 0,455 X 0,428 0,472
I9.1 0,751 0,428 X 0,6
I9.2 0,617 0,472 0,6 X
I10.1 X 0,412 0,253 0,261 0,415
I10.2 0,412 X 0,05 -0,252 -0,076
I10.3 0,253 0,05 X -0,267 0,354
I11.1 0,261 -0,252 -0,267 X 0,07
I11.2 0,415 -0,076 0,354 0,07 X
Fuente: Elaboracin propia. Software de proceamiento: SPSS Statistics 19 para Mac OS X
139
Anexo D. Propuesta metodolgica final
D.1. Instrumentos de recoleccin de informacin
D.1.1. Encuesta para docentes
No. Descripcin
Preguntas de contexto
1 Pregunta: Cuntos aos tiene de experiencia como docente?
Respuesta: (Nmero de aos)
2 Pregunta: Cuntos aos tiene de experiencia como usuario de tecnologas informticas?
Respuesta: (Nmero de aos)
3 Pregunta: Hace uso de un aula virtual, algn espacio dedicado en Internet u otra forma de
e-learning para acompaar el desarrollo del curso?
Respuesta:
Si, frecuentemente
Si, ocasionalmente
No, aunque el curso dispone del aula / espacio
No, el curso no cuenta con aula / espacio virtual
Preguntas para usuarios e-learning
4 Pregunta: Qu proporcin de actividades con respecto al total de actividades y sesiones
programadas para el curso se realizan de forma virtual, es decir, por medio de las
herramientas e-learning disponibles?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
5 Pregunta: Qu proporcin del material / programa del curso pudo ser cubierto, al combinar
las sesiones de clase con actividades e-learning?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
140
No. Descripcin
6 Pregunta: En qu medida los contenidos de las sesiones de clase en el desarrollo del
curso tienen una documentacin disponible o actividades de ayuda asociadas va e-learning?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
7 Pregunta: En qu medida los estudiantes resolvieron las actividades propuestas a lo largo
del curso va e-learning?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
8 Pregunta: Qu proporcin de los estudiantes inscritos para el curso logr cumplir con todas
las actividades propuestas va e-learning dentro de los parmetros establecidos?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
141
No. Descripcin
9 Pregunta: Qu proporcin de las actividades propuestas va e-learning tienen alguna
restriccin de tiempo, como plazos de entrega u horas dedicadas para su realizacin?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
Preguntas sobre desempeo en el curso
10 Pregunta: Qu curso desea evaluar?
Respuesta: (Nombre del curso a partir de lista)
11 Pregunta: Cuntos estudiantes se encontraban inscritos en el curso?
Respuesta: (Nmero de estudiantes)
12 Pregunta: Cuntos estudiantes lograron aprobar el curso?
Respuesta: (Nmero de estudiantes)
13 Pregunta: Cul es el promedio de calificaciones de los estudiantes para este curso?
Respuesta: (Nmero)
14 Pregunta: Qu percepcin y qu observaciones tiene del uso de e-learning como
complemento del aula de clase?
Respuesta: (Respuesta abierta)
Fuente: Elaboracin propia
D.1.2. Encuesta para estudiantes
No. Descripcin
Preguntas de contexto
1 Pregunta: Se considera un usuario habitual de Internet?
Respuesta:
Si
No
Indeciso
2 Pregunta: Cuntas horas dedica diariamente en promedio a la navegacin en Internet
para realizar actividades relacionadas con sus estudios?
Respuesta:
0 a 3 horas
Ms de 3 a 6 horas
Ms de 6 a 9 horas
Ms de 9 a 12 horas
Ms de 12 a 15 horas
Ms de 15 a 18 horas
Ms de 18 a 21 horas
Ms de 21 a 24 horas
Preguntas sobre el desarrollo del curso
3 Pregunta: Qu curso desea evaluar?
Respuesta: (Nombre del curso a partir de lista)
142
No. Descripcin
4 Pregunta: Se definieron claramente lineamientos para el uso de las herramientas e-
learning al inicio del curso?
Respuesta:
Si
No
Indeciso
5 Pregunta: El curso hace uso de chats o videoconferencias para el apoyo de forma virtual?
Respuesta:
Si
No
Indeciso
6 Pregunta: El curso hace uso de foros de discusin o mensajes va correo electrnico para
el apoyo de forma virtual?
Respuesta:
Si
No
Indeciso
7 Pregunta: Qu tan intenso fue el uso de las siguientes herramientas para el desarrollo del
curso?
Respuesta:
Herramienta
Intensidad (0 = Ninguna / 5 = Muy intenso)
0 1
2 3 4 5
Anuncios
Glosario
Documentos del curso
Herramientas de evaluacin (quiz)
Libreta de notas
Tablero de discusin
Email de grupo
Intercambio de archivos
Calendario
Chats
8 Pregunta: Qu calificacin le dara a la facilidad para aprender a utilizar las herramientas
e-learning designadas?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa ninguna y 5 significa muy buena)
9 Pregunta: Qu tan satisfecho se encuentra con el nivel de destreza previo requerido para
el dominio de las herramientas e-learning propuestas para el desarrollo del curso?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa completamente insatisfecho y 5
significa completamente satisfecho)
143
No. Descripcin
10 Pregunta: Con respecto al total de actividades propuestas en las herramientas e-learning,
qu porcentaje de estas logr culminar exitosamente?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
11 Pregunta: Del tiempo invertido realizando actividades con las herramientas e-learning, qu
proporcin de tiempo estima Ud. que invirti realizndolas con ayuda de compaeros de
clase, monitores o tutores?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
12 Pregunta: Qu tan til considera el aporte de sus compaeros utilizando las herramientas
e-learning disponibles para su aprendizaje en el curso?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa nada til y 5 significa muy til).
13 Pregunta: Qu tan til considera disponer documentos y notas de clase va electrnica
antes de las sesiones en el saln de clase?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa nada til y 5 significa muy til).
14 Pregunta: Cmo calificara la disponibilidad del material del curso en lnea?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa ninguna y 5 significa siempre
disponible).
15 Pregunta: Cmo calificara la calidad del material del curso dispuesto en lnea?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa muy mala y 5 significa muy buena).
16 Pregunta: En qu lugar realiza principalmente la interaccin con el curso e-learning?
Respuesta:
Universidad
Casa
Caf Internet
Oficina
Otro
Preguntas sobre el resultado del curso
144
No. Descripcin
17 Pregunta: Qu porcentaje del programa inicial del curso fue cubierto al terminar?
Respuesta:
0 10%
Ms del 10 20%
Ms del 20 30%
Ms del 30 40%
Ms del 40 50%
Ms del 50 60%
Ms del 60 70%
Ms del 70 80%
Ms del 80 90%
Ms del 90 100%
18 Pregunta: El papel del docente encargado del curso fue fundamental para aprender
mediante las ayudas e-learning disponibles
Respuesta:
Si
No
Indeciso
19 Pregunta: Considera que mejor en su aprendizaje gracias a las ayudas provedas por e-
learning?
Respuesta:
Si
No
Indeciso
20 Pregunta: Qu calificacin le dara al desarrollo del curso con ayudas e-learning?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa muy mala y 5 significa muy buena).
21 Pregunta: Qu tan satisfecho se encuentra con la inclusin de herramientas e-learning
como parte de su proceso de aprendizaje en el curso?
Respuesta: (Escala discreta de 0 a 5, donde 0 significa completamente insatisfecho y 5
significa completamente satisfecho).
22 Pregunta: Estara Ud. de acuerdo con la utilizacin permanente de herramientas e-
learning como las que dispone el curso para reforzar su aprendizaje?
Respuesta:
Si
No
Indeciso
23 Pregunta: Qu observaciones tiene sobre el uso de e-learning como complemento de la
clase en el aula?
Respuesta: (Respuesta abierta)
Fuente: Elaboracin propia
D.1.3. Cuestionario para la organizacin
No. Descripcin
1 Pregunta: Cuntos estudiantes se matricularon para el periodo en revisin?
Respuesta: Respuesta abierta (Nmero de estudiantes)
2 Pregunta: Cuntos equipos de cmputo se encuentran a disposicin de los estudiantes
que se matricularon para este periodo?
Respuesta: Respuesta abierta (Nmero de computadores)
3 Pregunta: Cuntos salones de clase tienen acceso a Internet en la institucin?
Respuesta: Respuesta abierta (Nmero de salones)
145
No. Descripcin
4 Pregunta: De cuntos salones de clase dispone la institucin para los estudiantes?
Respuesta: Respuesta abierta (Nmero de salones)
Fuente: Elaboracin propia
146
Anexo E. Productos de la investigacin
A continuacin se presentan en el siguiente orden los productos publicados o
entregados como resultado de esta investigacin:
A. Bustamante y J.M. Snchez-Torres. Indicadores de la Sociedad de la
Informacin para la medicin en e-banking y e-learning. Encuentro Nacional
de Investigacin en Posgrados, Universidad Nacional de Colombia. Bogot,
D.C. Colombia, 2009.
J.M. Snchez-Torres y A. Bustamante. Evaluation of an exercise for
measuring impact in e-learning: Case study of learning a second language.
En memorias de la 5a Conferencia de la Asociacin Euro-Americana de
Telemtica y Sistemas de Informacin EATIS. Ciudad de Panam, Panam,
2010.
A. F. Bustamante y J. M. Sanchez-Torres. Building a system of indicators
for measuring e-learning in on-campus higher education, en 2011
International Conference on Information Society (i-Society), Londres, Reino
Unido, 2011, pgs. 464-469.
A. Bustamante. Informe de ejecucin de metodologa propuesta de
evaluacin de e-learning: Metodologa ejecutada en la Universidad Nacional
de Colombia para el periodo acadmico 2011-1. Universidad Nacional de
Colombia, mimeo, 2011.
Indicadores para la medicin de la Sociedad de la Informacin:
una revisin
Indicators for measuring the Information Society: a review
Andrs Felipe Bustamante Garca
1
, Jenny Marcela Snchez Torres
2
Resumen
Las tecnologas de la informacin y las comunicaciones (TIC) han tomado un papel importante en la
generacin de riqueza en las economas del mundo por medio del uso y manejo de la informacin, por lo
que se habla ahora de Sociedad de la Informacin y Sociedad del Conocimiento. Para medir la penetracin
de las TICs en diferentes mbitos de la Sociedad de la Informacin se han propuesto diversos sistemas de
indicadores que son recopilados en este documento en el marco del proyecto de investigacin e-Mtrica
Colombia, con el fin de analizar los avances logrados en la medicin de distintos mbitos de la Sociedad
de la Informacin y posteriormente poder proponer un marco de medicin de estos mbitos en el entorno
colombiano.
El intervalo de sistemas de indicadores revisados se encuentra entre 1995 y 2009, lo cual ha permitido dar
con una buena cantidad de sistemas propuestos, hecho que evidencia por una parte la falta de consenso
que existe para la medicin de la Sociedad de la Informacin, y por otra parte, el especial inters que
presentan organizaciones especializadas en la medicin de este efecto que se viene dando en las ltimas
dcadas con los avances en informtica especialmente.
Palabras clave: Sociedad de la Informacin, Tecnologas de la Informacin y las Comunicaciones,
Sistemas de indicadores.
Abstract
Information and Communication Technologies (ICT) play an important role in the generation of richness
in worlds economies through the use and management of information, and this is the origin of the
1 Estudiante de Maestra en Ingeniera de Sistemas y Computacin de la Universidad Nacional de Colombia,
Ingeniero de Sistemas de la Universidad Distrital Francisco Jos de Caldas, Bogot D.C., Colombia.
2 Profesora Asistente del Departamento de Ingeniera de Sistemas e Industrial, Universidad Nacional de Colombia.
PhD en Economa y Gestin de la Innovacin y Poltica Tecnolgica de la Universidad Autnoma de Madrid,
Espaa; MsC en Anlisis y Gestin de la Ciencia y la Tecnologa de la Universidad Carlos III, Madrid, Espaa;
MsC en Ingeniera de Sistemas de la Universidad Nacional de Colombia; Ingeniera de Sistemas de la Universidad
Nacional de Colombia, Bogot D.C., Colombia.
concepts Information Society and Knowledge Society. For measuring the penetration of ICTs in different
fields of Information Society there has been proposed some indicators systems, that are gathered in this
document framed into the research project e-Mtrica Colombia, with the purpose of analysing the
advances achieved in measuring different fields of Information Society and then, being able to propose a
measure frame of this fields in Colombia.
The time interval between 1995 and 2009 has been productive in terms of the amount of proposed
systems, and this fact makes evident, in one hand, the lack of consensus for measuring the Information
Society, and in the other hand, the special interest that organizations and experts present for measuring this
phenomenon that has been occuring in the last decades, specially with improvements in computers.
Keywords: Information Society, Information and Communication Technologies, Indicators Systems
1. Introduccin
Los avances tecnolgicos de las ltimas dcadas han dado paso a una transformacin del mundo en que
vivimos hacia una sociedad denominada de la informacin y del conocimiento, en la que el uso y el acceso
a la informacin se constituyen en fuente de riqueza.
En la Cumbre Mundial de la Sociedad de la Informacin (CMSI) celebrada en 2003 se reconoce que la
educacin, el conocimiento, la informacin y la comunicacin son esenciales para el progreso, la iniciativa
y el bienestar de los seres humanos. Es ms, las tecnologas de la informacin y las comunicaciones (TIC)
tienen inmensas repercusiones en prcticamente todos los aspectos de nuestras vidas. El rpido progreso
de estas tecnologas brinda oportunidades sin precedentes para alcanzar niveles ms elevados de
desarrollo. La capacidad de las TIC para reducir muchos obstculos tradicionales, especialmente el tiempo
y la distancia, posibilitan, por primera vez en la historia, el uso del potencial de estas tecnologas en
beneficio de millones de personas en todo el mundo. [69]
En este escenario, las TIC se han convertido en poderosas fuentes de crecimiento econmico e
incrementos de productividad, en especial de los pases desarrollados. Sin embargo, estos desarrollos no
estn producindose por igual ni en todos los sectores de la sociedad ni en todas las regiones del mundo,
lo que genera brechas y desigualdades [69].
En el proyecto e-mtrica se pretende analizar este fenmeno y su impacto en el entorno colombiano,
mediante la adaptacin de la metodologa propuesta en [66] a mbitos diferentes a e-gobierno que ya fue
tratado en dicho trabajo. En este documento se presenta el avance del desarrollo del proyecto en cuanto a
la determinacin de sistemas de indicadores para la medicin de distintos mbitos de la Sociedad de la
Informacin, con miras a llegar a dicha metodologa de evaluacin en el mbito de banca electrnica y e-
learning. Para la obtencin de estos sistemas de indicadores se realiz una bsqueda de trabajos similares
existentes a partir de la base de [65] y [66], se agregaron todos los sistemas encontrados y luego se
buscaron de forma individual nuevas actualizaciones y derivaciones de los mismos para evaluar cambios
desde su propuesta inicial. Inicialmente se trat de construir una genealoga de sistemas, para evaluar
relaciones entre los mismos, pero la dificultad para encontrar la bibliografa original de algunos sistemas
hizo imposible este trabajo.
A continuacin se dedica una seccin para introducir el concepto de la Sociedad de la Informacin con
mayor profundidad, y enseguida se encuentra una seccin con los hallazgos relacionados con los sistemas
de indicadores encontrados. Por ltimo se presentan algunas conclusiones y trabajo futuro en el curso de la
investigacin.
2. Sociedad de la Informacin
El concepto de Sociedad de la Informacin (SI) fue acuado desde la dcada de los 80s y naci como una
evolucin de la sociedad industrial y post-industrial de los siglos XIX y XX, dado el impulso que en la
dcada mencionada y en la anterior venan teniendo las TIC.
En [65] y [66] se resean algunas definiciones sobre esta, a partir de las cuales la autora considera que es
la sociedad que considera que el motor de desarrollo social y econmico est en la informacin y el
conocimiento, a travs de la implantacin y el uso de las Tecnologas de la Informacin y las
Comunicaciones en todos los mbitos. [66]. Cuando se dice todos los mbitos se hace referencia a los
mbitos de promocin y gestin, administracin digital, formacin y divulgacin, e infraestructuras y
telecomunicaciones. Para cada uno de estos mbitos existen divisiones particulares para cada nivel de la
sociedad, como se presenta en la Figura 1.
Sin embargo, la incidencia de las TIC en la sociedad actual tambin es base de estudio de la Sociedad del
Conocimiento, donde la principal diferencia con la SI radica en el objeto concreto de estudio, ya que en la
primera se estudia el papel del conocimiento como capacidad cognoscitiva, mientras que en la segunda, se
estudia el papel de la informacin como un conjunto de datos listos para emplear de forma eficiente
mediante el uso de TICs para facilitar su procesamiento y posterior transformacin en conocimiento. De
esta manera, se puede interpretar la Sociedad de la Informacin como una etapa previa a la conformacin
de la Sociedad del Conocimiento [7].
A raz del auge que tiene este nuevo concepto de desarrollo social y econmico, se desarroll en el ao
2003 la primera Cumbre Mundial de la Sociedad de la Informacin (CMSI, o WSIS por sus siglas en
ingls) en Suiza, con posteriores reuniones celebradas en Tnez en 2005 y Suiza nuevamente en mayo de
2009.
3
Figura 1. La Sociedad de la Informacin y los mbitos ms generales: estratos, reas y sectores. Fuente: [45]
3. Medicin de la Sociedad de la Informacin
Con base en estudios preliminares hechos sobre sistemas de medicin de la SI [7], [65], [66], [78] y [79],
se han identificado desde el ao de 1995 iniciativas por generar formas de medicin para distintos mbitos
dentro de la denominada SI. Al ao 2009 se han encontrado en el marco de esta investigacin un nmero
significativo de iniciativas de sistemas de indicadores, lo que muestra el especial inters que esta temtica
genera especialmente para organizaciones internacionales, gobiernos y entidades del gobierno de
diferentes pases, para poder hacer comparaciones y escalas, y no slo eso, sino tambin medir el impacto
o la contribucin del conocimiento (y la informacin) en la generacin de valor y crecimiento econmico
[7].
3
Estas reuniones fueron organizadas por la Unin Internacional de Telecomunicaciones (UIT), que hace parte de la
Organizacin de Naciones Unidas (ONU), reuniones en las que se pretendi en una primera fase el establecimiento
de bases para el desarrollo de una Sociedad de la Informacin para todos dentro de un Plan de Accin. En la segunda
fase se buscaba la puesta en marcha de este Plan de Accin y algunos acuerdos en el campo econmico y
tecnolgico, especialmente relacionados con Internet. La reunin de 2009 tuvo el carcter de foro con el fin de hacer
seguimiento a la ejecucin e implementacin del mencionado Plan de Accin [39], aunque a la fecha de edicin de
este documento no se conocen los hallazgos y conclusiones de esta ltima reunin.
3.1. Propuestas de Sistemas de indicadores
Gran parte de los sistemas de indicadores para la medicin del fenmeno de la SI y en algunos casos las
metodologas involucradas en su construccin, surgieron con el nimo de ser presentadas en la CMSI. A
partir de all, algunas propuestas de sistemas han seguido vigentes y han sido actualizadas hasta hoy, as
como otras simplemente no prosperaron.
La investigacin arroja hasta el momento un total de 67 sistemas de indicadores de diferentes mbitos de
la SI, lo cual denota gran variedad de criterios de evaluacin, de visiones sobre el tema pero sobre todo,
falta de consenso para evaluar una misma temtica. De estos 67 sistemas, cinco no pudieron ser analizados
dada la dificultad para encontrar la bibliografa original, la dificultad para acceder a una base de datos
especializada que era la nica forma de llegar a uno de ellos, y tambin la limitante que imponen algunas
empresas para slo facilitar la informacin por medio de rdenes de copias del material, o simplemente
enlaces rotos a las fuentes originales. De estos sistemas de indicadores, 24 comenzaron entre 2000 y 2001,
que con base en la evidencia encontrada parece indicar que est directamente relacionado con el cambio
de milenio, que crea la necesidad de medir el aporte de las TICs a los Objetivos de Desarrollo del Milenio,
como se menciona en [79].
El objetivo de tener este listado de sistemas es el de poder comparar los diferentes sistemas con respecto a
una serie de variables definidas previamente en [66] ms una nueva variable agregada para esta
investigacin (medicin en banca electrnica), en un intervalo de tiempo que va desde el ao de 1995,
cuando se conoci la primera propuesta de sistema de indicadores, hasta el 2009. En la Figura 2 se
presenta la dinmica de presentacin de propuestas de sistemas de indicadores para la SI, sin entrar a
diferenciar los mbitos que cada una de estos sistemas mide. All se observan tres grupos de dinmicas, de
los cuales el grupo central, que va del ao 2000 al 2006, presenta los nmeros ms altos de propuestas de
sistemas de indicadores, justamente alrededor de las dos primeras reuniones de la CMSI y despus del
cambio de milenio. La comparativa completa de los sistemas de indicadores hallados hasta ahora por
variables se puede observar en el Anexo 1.
1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009
0
2
4
6
8
10
12
14
Ao de publicacin
C
a
n
t
i
d
a
d
d
e
s
i
s
t
e
m
a
s
p
u
b
l
i
c
a
d
o
s
Figura 2. Sistemas de indicadores encontrados por ao de presentacin. Se diferencian tres agrupaciones de
dinmicas diferentes a lo largo del tiempo analizado.
3.2. Objetos de medicin
A partir del anlisis comparativo de los sistemas de indicadores encontrados se estableci la informacin
de la Tabla 1, donde se observa el inters marcado por medir los aspectos relacionados con infraestructura
en TICs, los niveles de uso de las mismas (cmo se utilizan) y el progreso del sector TIC en general. Por
otra parte, se percibe all mismo el bajo inters en la medicin de mbitos tan importantes como la salud y
la educacin, as como la baja evaluacin de los contenidos entregados por medio de estas tecnologas.
Tabla 1. Detalle de objetos de medicin en los sistemas de indicadores de la S.I.
Sistemas relacionados (%)
Objeto de medicin Actualmente* Snchez-Torres, 2006
Infraestructura 79,1 87,5
Niveles de uso 70,15 83,33
Sector TIC 47,76 20,83
E-Commerce 41,79 37,5
Habilidades y formacin 38,81 37,5
Entorno 37,31 16,67
E-Government 29,85 16,67
E-Banca 19,4 -
E-Administracin 17,91 16,67
E-Learning 14,93 12,5
E-Salud 11,94 12,5
Contenidos 7,46 12,5
Fuente: Elaboracin propia. * Para trminos de la actualidad cabe recordar que no se encontr completa la
bibliografa original de algunos sistemas de indicadores, lo que puede afectar en parte los datos de esta columna.
Si se compara con los hallazgos en [66], se percibe un incremento en el inters por medir en la actualidad
el sector TIC y el comercio electrnico, as como el entorno y el gobierno electrnico, entendiendo este
ltimo como las facilidades que entregan las instituciones gubernamentales a los ciudadanos a acceder a
sus servicios por medio de las TICs, especialmente Internet. Sin embargo, la proporcin de sistemas de
indicadores que tienen inters por medir los campos de salud y educacin ha persistido bajo desde lo
observado en el trabajo previo citado.
3.3. Sistemas de indicadores sintticos
Buena parte de los sistemas indicadores encontrados en el transcurso de la investigacin pertenecen a un
grupo de sistemas catalogados como indicadores sintticos
4
, es decir, indicadores que analizan aspectos
multidimensionales de la SI, que al final para facilitar su anlisis y la comparacin sectorial o nacional se
resumen en un nico ndice calculado de forma matemtica [79].
En los sistemas de indicadores listados en el anexo 1, se observa esta tendencia a partir del ao 2001,
cuando se present el ndice de Adelanto Tecnolgico por parte de Naciones Unidas y su Programa para el
Desarrollo. Como bien se resalta en [79], esto fue un estmulo para los dems creadores de sistemas para
desarrollar estos ndices desde entonces, observando el crecimiento notorio alrededor de esta fecha, hasta
las propuestas ms recientes, como es el caso del ltimo sistema encontrado de parte de la Unin
Internacional de Telecomunicaciones y su ndice de Desarrollo TIC (IDI) [39].
3.4. Aspectos metodolgicos de la medicin
Es de resaltar que, como se observa en el Anexo 2, 70.15% de los sistemas de indicadores encontrados
utiliza estadsticas para el desarrollo de los indicadores propuestos, 28.36% hace uso de cuestionarios y
entrevistas de elaboracin propia para la presentacin de la propuesta, mientras que un 2.99% genera
dichos indicadores apoyndose en la opinin de expertos en la temtica de la Sociedad de la informacin.
Esta predominancia del uso de estadsticas se explica bsicamente por la divulgacin y reutilizacin de
datos estadsticos relacionados con las TIC, por parte de institutos de alcance transnacional, como el
Eurobarmetro e incluso la UIT
5
.
4
Un indicador sinttico se define como la combinacin matemtica de un conjunto de indicadores simples (o
variables) con el propsito de medir conceptos multidimensionales que no se pueden captar con un nico
indicador como, por ejemplo, el desarrollo humano. [79]
5
Unin Internacional de Telecomunicaciones (International Telecommunication Union)
Por otra parte se encuentran los sistemas de indicadores basados en el uso de cuestionarios y entrevistas,
donde se miden aspectos puntuales que no son cubiertos por las estadsticas, ya que estas ltimas son de
carcter general y lgicamente pueden omitir detalles de inters particular. En cuanto a la opinin de
expertos para la validacin de los resultados, se denota su baja utilizacin, pero no se conocen las causas
con certeza y no son el centro de esta investigacin, por lo que se pueden tratar en una investigacin
posterior, junto con las causas extendidas para justificar el amplio uso de estadsticas y en menor
proporcin de cuestionarios y entrevistas.
Cuestionario
Estadsticas
Opinin de expertos
0
10
20
30
40
50
60
70
80
Tcnica empleada
P
o
r
c
e
n
t
a
j
e
d
e
s
i
s
t
e
m
a
s
Figura 3. Distribucin de tcnicas empleadas metodolgicamente para la construccin de los sistemas de indicadores
encontrados
4. Conclusiones y trabajo futuro
Es de vital importancia para el entorno colombiano el medir el impacto de las TIC en los distintos mbitos
que la Sociedad de la Informacin involucra, teniendo en cuenta el potencial que estas tecnologas tienen
para el desarrollo sostenible y para la consecucin de los Objetivos del Milenio, hablando en un contexto
ms amplio, como se explicaba en secciones anteriores. En el marco de esta medicin se han desarrollado
sistemas de indicadores que han sido encontrados en la medida de lo posible y han sido analizados para
trminos de este estudio en el periodo comprendido entre el ao de 1995 y 2009. De los sistemas
encontrados hasta ahora se observa un incremento notorio con respecto a los 17 sistemas encontrados en
[7], 24 en [66], y 35 en [79], claro est, teniendo en cuenta que no son nmeros de propuestas excluyentes
entre un trabajo y otro.
De esta variedad de sistemas tambin se observa la falta de consenso para medir los mismos mbitos en la
Sociedad de la Informacin, a pesar de que en la Cumbre de la Sociedad de la Informacin se produjo un
sistema de indicadores bsicos abarcando varios mbitos. En esta falta de consenso tambin se observa el
fenmeno de varios sistemas de indicadores para una misma organizacin, como es el caso de Naciones
Unidas y la Unin Internacional de Telecomunicaciones, entre otros.
En el curso de la investigacin se encuentra enseguida de este documento, el anlisis de los hallazgos en
torno a la investigacin en proceso en los mbitos especficos de banca electrnica y educacin con e-
learning, los cuales son los mbitos especficos que se quieren tratar en el contexto del proyecto de
investigacin de e-mtrica.
5. Bibliografa
[1] Archibugi, D. y Coco, A., 2005. Measuring technological capabilities at the country level: A survey
and a menu for choice. En: Research Policy, Vol. 34 No. 2, pp. 175-194.
[2] Asia-Pacific Economic Cooperation, 2000. E-Commerce readiness assessment guide.
[3] Atkinson, R.D., 2002. The State New Economy Index: Benchmarking Economic Transformation in the
States. Progressive Policy Institute, Washington, D.C. Disponible en:
http://www.neweconomyindex.org/states/.
[4] B2B METRICS, 2005. Statistical Indicators for the Information Society. Disponible en:
http://www.b2b-metrics.de/Final%20Report170505.pdf.
[5] Banco Mundial, 2001. Knowledge Assessment Methodology. Disponible en:
http://www.worldbank.org/kam.
[6] Barua, A. y Whinston, A., 1999. The Internet Economy Indicators. Center for Research in Electronic
Commerce, Graduate School of Business, University of Texas at Austin.
[7] Bianco, C.; Lugones, G.; Peirano F. y Salazar M., 2002. Indicadores de la Sociedad del Conocimiento:
aspectos conceptuales y metodolgicos. Disponible en:
http://www.centroredes.org.ar/documentos/documentos_trabajo/files/Doc.Nro2.pdf.
[8] BISER, 2002. List of e-Europe Regions Indicators. Disponible en: http://www.biser-
eu.com/BISER_eIndicators.pdf.
[9] Cerno, L. y Prez, T., 2006. Medicin y determinantes de la brecha tecnolgica en Espaa.
Documentos de Trabajo (ICAE). Disponible en: http://www.ucm.es/BUCM/cee/icae/doc/0601.pdf.
[10] Comisin del Mercado de las Telecomunicaciones, 2007. Informe Anual 2007, Disponible en:
http://www.cmt.es/es/publicaciones/anexos/Informe_anual_CMT_2007_web.pdf.
[11] Consejo Superior de Cmaras de Comercio de Espaa, 2001. La Sociedad de la Informacin en
Espaa y en las Comunidades Autnomas, Consejo Superior de Cmaras de Comercio de Espaa.
Disponible en: https://www.camaras.org/publicado/estudios/pdf/otras_pub/soc_inf.pdf.
[12] Corrocher, N. y Ordanini, A., 2002. Measuring the digital divide: a framework for the analysis of
cross-country differences. En: Journal of Information Technology, Vol. 17 No. 1, pp. 9-19.
[13] CSPP, 2000. Living in the Networked World Readiness Guide. Disponible en:
http://www.cspp.org/documents/NW_Readiness_Guide.pdf.
[14] Departament Governaci i Administracions Pbliques, 2002. Estadsticas de la sociedad de la
informacin. Catalua 2001. Disponible en:
http://www10.gencat.net/dursi/pdf/si/es/observatori/documents_STSI/Estadisticas_SI_2001_castellano/Est
_SI_2001_ES.pdf.
[15] Dutta, S.; Lanvin, B. y Paua, F., 2004. The Global Information Technology Report 2003-2004, New
York: Oxford University Press, INSEAD, World Economic Forum, InfoDev. Disponible en:
http://www.weforum.org/en/initiatives/gcp/Global%20Information%20Technology%20Report/.
[16] Dutta, S. y Mia, I., 2009. The Global Information Technology Report 2008-2009, New York:
INSEAD, World Economic Forum. Disponible en:
http://www.weforum.org/pdf/gitr/2009/gitr09fullreport.pdf.
[17] eBusiness Watch, 2005. A guide to ICT usage indicators. Disponible en: http://www.ebusiness-
watch.org/studies/special_topics/2005/documents/TR_2005_Indicators_I.pdf.
[18] Economist Intelligence Unit, 2008. E-readiness rankings 2008: Maintaining momentum. Disponible
en: http://graphics.eiu.com/upload/ibm_ereadiness_2008.pdf.
[19] Economist Intelligence Unit, 2006. The 2006 e-readiness rankings. Disponible en:
http://graphics.eiu.com/files/ad_pdfs/2006Ereadiness_Ranking_WP.pdf.
[20] Estrada, S., 2004. Patrones regionales de uso y consumo de TICs: hacia un ndice regional de la
sociedad de la informacin. Disponible en: http://eprints.ucm.es/6824/1/44-04.pdf.
[21] European Commission, 2005. The ICT Activity Index. Disponible en:
http://ec.europa.eu/enterprise/ict/policy/ict/ict_activity_index_2005_1.pdf.
[22] Foro Econmico Mundial, 2009. The Global Information Technology Report 2008-2009. Disponible
en: http://www.weforum.org/pdf/gitr/2009/gitr09fullreport.pdf.
[23] Fragoso, E., 2003. Indicadores de Tecnologa de la Informacin y las comunicaciones en pases de la
CAIBI: problemas conceptuales y metodolgicos. En: Taller sobre Indicadores de la Sociedad de la
Informacin, Vol. 3 No. 9.
[24] Fundacin Orange, 2008. eEspaa 2008: Informe Anual, Fundacin Orange. Disponible en:
http://www.fundacionorange.es/areas/25_publicaciones/e2008.pdf.
[25] Fundacin Telefnica, 2000. La Sociedad de la Informacin en Espaa 2000. Disponible en:
http://info.telefonica.es/sociedaddelainformacion/pdf/informes/espana_2000/completo.pdf.
[26] Fundacin Telefnica, 2008. La Sociedad de la Informacin en Espaa 2008. Disponible en: http://e-
libros.fundacion.telefonica.com/sie08/.
[27] Grigorovici, D.M. et al., 2004. InfoMetrics: A structural equation modeling approach to information
indicators and e-readiness measurement. En: Proceedings of the 15th European Regional Conference of
the International Telecommunications Society (ITS). Disponible en: http://userpage.fu-
berlin.de/~jmueller/its/conf/berlin04/Papers/Grigorovici_Constantin_Jayakar_Taylor_Schement.pdf.
[28] Hobijn, B., Stiroh, K.J. & Antoniades, A., 2003. Taking the pulse of the tech sector: a coincident
index of high-tech activity. Current Issues in Economics and Finance, Vol. 9 No. 10. Disponible en:
http://www.newyorkfed.org/research/current_issues/ci9-10.pdf.
[29] i2010 High Level Group, 2006. Benchmarking Framework. Disponible en:
http://ec.europa.eu/information_society/eeurope/i2010/docs/high_level_group/i2010_benchmarking_fram
ework.pdf.
[30] IDC, 2005. IDC's Informational Society Index. Disponible en:
http://www.idc.com/groups/isi/main.html.
[31] IESE, 2008. Indicador de la Sociedad de la Informacin (ISI). Disponible en:
http://www.iese.edu/es/files/5_37490.pdf.
[32] IESE & DMR Consulting, 2005. Indicador de la Sociedad de la InformacinISI. Disponible en:
http://www.iese.edu/en/files/nov2005_tcm4-4314.pdf.
[33] International Telecommunication Union, 2003. Core ICT Indicators. Disponible en:
http://www.itu.int/ITU-D/ict/partnership/material/CoreICTIndicators.pdf.
[34] International Telecommunication Union, 2003. Digital Access Index (DAI). Disponible en:
http://www.itu.int/ITU-D/ict/dai/.
[35] International Telecommunication Union, 2005. Digital Opportunity Index (DOI). Disponible en:
http://www.itu.int/ITU-D/ict/doi/index.html.
[36] International Telecommunication Union, 2006. ITU Digital Access Index: Worlds First Global ICT
Ranking. Disponible en: http://www.itu.int/newsroom/press_releases/2003/30.html.
[37] International Telecommunication Union, 2005. Measuring ICT: the global status of ICT indicators.
Disponible en: http://www.itu.int/ITU-D/ict/.../05-42742%20GLOBAL%20ICT.pdf.
[38] International Telecommunication Union, 2006. Measuring the Information Society. En World
Information Society Report 2006. Disponible en:
http://www.itu.int/osg/spu/publications/worldinformationsociety/2006/wisr-web.pdf.
[39] International Telecommunication Union, 2009. Measuring the Information Society: The ICT
Development Index. Disponible en: http://www.itu.int/ITU-
D/ict/publications/idi/2009/material/IDI2009_w5.pdf.
[40] International Telecommunication Union, 2007. Telecommunication Indicators Handbook. Disponible
en: http://www.itu.int/ITU-D/ict/publications/world/material/handbook.html.
[41] International Telecommunication Union, 2007. The ICT Opportunity Index (ICT-OI). En Measuring
the Information Society 2007. Disponible en:
http://www.itu.int/osg/spu/publications/worldinformationsociety/2007/WISR07-chapter7.pdf.
[42] International Telecommunication Union, 2007. World Information Society Report 2007. Disponible
en: http://www.itu.int/osg/spu/publications/worldinformationsociety/2007/WISR07_full-free.pdf.
[43] International Telecommunication Union, 2005. World Telecommunication Indicators 2004/2005.
Disponible en: http://www.itu.int/ITU-D/ict/publications/wti2004-05/index.html.
[44] Junta de Castilla y Len, 2007. Modelo de indicadores. Escenario objetivo. En: Estrategia Regional
para la Sociedad Digital del Conocimiento 2007-2013. Disponible en:
http://www.jcyl.es/scsiau/Satellite/pr/ds/ORSI/pdf;charset=UTF-
8/278/664/ersdi%20ModeloIndicadores.pdf/_?asm=jcyl.
[45] Katz, J.M. & Hilbert, M.R., 2003. Los caminos hacia una sociedad de la informacin en Amrica
Latina y el Caribe, Naciones Unidas.
[46] KEI Project, 2008. Indicators for the Knowledge-Based Economy: Summary Report. Disponible en:
http://www.uni-trier.de/fileadmin/fb4/projekte/SurveyStatisticsNet/KEI-WP2-D2.5.pdf.
[47] Mansell, R. & Wehn, U., 1998. Knowledge societies: Information technology for sustainable
development, Oxford Univ. Press.
[48] Mesenbourg, T.L., 2001. Measuring electronic business. Disponible en:
http://www.census.gov/econ/estats/papers/msrebus.pdf.
[49] Naciones Unidas, 2005. UN Global E-government Readiness Report 2005: From E-Government to
E-Inclusion. Disponible en: http://unpan1.un.org/intradoc/groups/public/documents/un/unpan021888.pdf.
[50] Naciones Unidas, 2003. UN Global E-government Survey 2003. Disponible en:
http://unpan1.un.org/intradoc/groups/public/documents/un/unpan016066.pdf.
[51] Naciones Unidas, 2008. United Nations E-government Survey 2008: From E-Government to
Connected Governance. Disponible en:
http://unpan1.un.org/intradoc/groups/public/documents/un/unpan028607.pdf.
[52] NCAER, 2007. India: E-Readiness Assessment Report 2005: For States/Union Territories. Disponible
en: http://www.ncaer.org/Downloads/Reports/E-Readiness2005.pdf.
[53] N-Economa, 2003. Penetracin regional de la Nueva Economa. Disponible en: http://www.n-
economia.com/informes_neconomia/pdf/penetracion_regional/Inf_N-economia_PRNE_jun03.pdf.
[54] N-Economa, 2008. Penetracin regional de la Nueva Economa. Disponible en: http://www.n-
economia.com/informes_neconomia/pdf/penetracion_regional/Inf_N-economia_PRNE_mayo08.pdf.
[55] O'Donnell, S., McQuillan, H. & Malina, A., 2003. eInclusion: expanding the Information Society in
Ireland. Disponible en: http://www.isc.ie/downloads/einclusion.pdf.
[56] OECD, 2008. OECD Information Technology Outlook 2008, Disponible en:
http://browse.oecdbookshop.org/oecd/pdfs/browseit/9308041E.PDF.
[57] OECD, 2005. OECD Key ICT Indicators. Disponible en: http://www.oecd.org/sti/ICTindicators.
[58] OECD Working Party on Indicators for the Information Society, 2005. Guide to Measuring the
Information Society. Disponible en: http://www.oecd.org/dataoecd/41/12/36177203.pdf.
[59] Partnership on Measuring ICT for Development, 2005. Indicadores clave de las tecnologas de la
informacin y de las comunicaciones. Disponible en:
http://new.unctad.org/upload/docs/Core%20ICT%20Indicators_Esp.pdf.
[60] Partnership on Measuring ICT for Development, 2008. The Global Information Society: a Statistical
View. Disponible en: http://www.unctad.org/en/docs/LCW190_en.pdf.
[61] Rodriguez, F. y Wilson, E.J., 2000. Are poor countries losing the information revolution. Disponible
en: http://www.cidcm.umd.edu/library/papers/ewilson/apxc.pdf.
[62] RYCYT-CYTED, UMIC & ISCTE, 2006. Manual de Lisboa, Disponible en:
http://www2.ricyt.org/docs/lisboa/manual_lisboa.pdf.
[63] Sachs, J.D., 2000. Readiness for the Networked World: A Guide for Developing Countries. Center for
International Development, Harvard University. Disponible en:
http://cyber.law.harvard.edu/readinessguide/.
[64] Snchez, M.P., 2001. La sociedad de la informacin en Espaa. E-Espaa.
[65] Snchez-Torres, J.M., 2002. Diseo de indicadores para valoracin del desarrollo de la Sociedad de la
Informacin en el sector salud (e-salud) en Espaa, Universidad Autnoma de Madrid.
[66] Snchez-Torres, J.M., 2006. Propuesta metodolgica para evaluar las polticas pblicas de promocin
del e-government como campo de aplicacin de la Sociedad de la Informacin. El caso colombiano. Tesis
Doctoral. Universidad Autnoma de Madrid.
[67] Sciadas, G., 2005. From the Digital Divide to the Digital Opportunities. Measuring infostates for
development. Disponible en: http://www.itu.int/ITU-D/ict/publications/dd/material/index_ict_opp.pdf.
[68] Sciadas, G., 2002. Monitoring the digital divide, Qubec, Canad: Orbicom. Disponible en:
http://www.orbicom.ca/projects/ddi2002/ddi2002.pdf.
[69] Secretara Ejecutiva de la CMSI, 2004. Informe final de la fase de Ginebra de la Cumbre Mundial
sobre la Sociedad de la Informacin, Disponible en: http://www.itu.int/dms_pub/itu-
s/md/03/wsis/doc/S03-WSIS-DOC-0009!R1!PDF-S.pdf.
[70] SEDISI, 2000. Mtrica de la sociedad de la informacin. Ministerio de Industria y Energa, Madrid.
Disponible en: http://www.oei.es/salactsi/Metrica.PDF.
[71] SIBIS Consortium, 2003. Indicator Handbook. Disponible en: http://www.sibis-
eu.org/files/Sibis_Indicator_Handbook.pdf.
[72] Statistics Denmark et al., 2001. The ICT Sector in the Nordic countries. Disponible en:
http://www.dst.dk/upload/ictsector.pdf.
[73] UNCTAD, 2003. Information and communication technology development indices. Disponible en:
http://www.unctad.org/en/docs/iteipc20031_en.pdf.
[74] UnderStand, 2005. European Regions Under way towards Standard indicators for benchmarking
information society: Methodology Handbook. Disponible en: http://www.understand-
eu.net/index.php.htm.
[75] Unin Europea, 2000. Information Society indicators in the Member States of the EU. Disponible en:
http://www.eu-esis.org/Basic/basic2000.htm.
[76] United Nations Development Programme, 2001. Human Development Report 2001: Making New
Technologies Work for Human Development., Oxford University Press, New York. Disponible en:
http://hdr.undp.org.
[77] United Nations Development Programme, 2007. Human Development Report 2007/2008: Fighting
Climate Change, Oxford University Press, New York. Disponible en: http://hdr.undp.org.
[78] Vicente, M.R. y Lpez, A.J., 2003. Indicadores de la Sociedad de la Informacin. Una revisin
crtica. En: Anales de Economa Aplicada - XVII Reunin ASEPELT. Almera, Espaa.
[79] Vicente, M.R. y Lpez, A.J., 2008. Mtricas e Indicadores de la Sociedad de la Informacin:
panormica de la situacin actual. En: Estadstica Espaola, Vol. 50 No. 168, 273-320.
[80] Zamora, E., 2006. Gua para la Evaluacin del Impacto de Internet en las Organizaciones. Disponible
en: http://www.acceso.or.cr/sites/acceso.or.cr/files/Acceso_documentoESP.pdf.
Anexo 1. Anlisis comparativo de sistemas de indicadores de la Sociedad de la Informacin con
respecto a las diferentes categoras de medicin.
Las letras X indican que en la propuesta correspondiente a la fila se analiza dicho mbito, los tringulos
indican que el mbito dej de ser evaluado en dicha propuesta en una versin ms reciente de esta ltima,
mientras que los crculos indican que se introdujo la evaluacin del mbito en la versin reciente de la
propuesta de sistema de indicadores.
Categoras
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
Alcance
I
n
f
r
a
e
s
t
r
u
c
t
u
r
a
H
a
b
i
l
i
d
a
d
e
s
y
f
o
r
m
a
c
i
n
N
i
v
e
l
e
s
d
e
u
s
o
S
e
c
t
o
r
T
I
C
E
-
C
o
m
m
e
r
c
e
E
-
B
a
n
c
a
C
o
n
t
e
n
i
d
o
s
E
-
L
e
a
r
n
i
n
g
E
-
G
o
v
e
r
n
m
e
n
t
E
-
A
d
m
i
n
i
s
t
r
a
c
i
n
E
-
S
a
l
u
d
E
n
t
o
r
n
o
ndice de la Sociedad de la
Informacin (ISI) [IDC]
1995 2005 Internacional X X X X
ndice de la Economa del
Conocimiento (KEI) [Banco
Mundial]
1995 2008 Internacional X X X X X X
Sistema de Indicadores [CIS] 1996 Espaa X
Manual de Indicadores de
Telecomunicaciones [UIT]
1997 2005 Internacional X X
INEXSK [Mansell y Wehn] 1998 1998 X X
Gua para la preparacin global
al comercio electrnico [CSPP]
1998 1998 Internacional X X X
Sistema de Indicadores [CMT] 1998 2007 Espaa X
Difusin Global de Internet
[Grupo Mosaic]*
1998
Indicadores de la Economa de
Internet [U. de Texas]
1999 2001 EE.UU. X X X X
ndice de la Nueva Economa
[Progressive Policy Institute]
1999 2002 EE.UU. X
Indicadores de la Sociedad de la
Informacin [ESIS]
2000 2000 Unin Europea X X X
Mtrica de la Sociedad de la
Informacin [SEDISI]
2000 2000 Espaa X X X X X X
ndice de Progreso Tecnolgico
[Rodrguez y Wilson]*
2000 2000 Internacional X
Modelo de estimacin de e-
preparacin [CID, Universidad
de Harvard]
2000 2000 Internacional X X X X X X X
Estimacin de Preparacin para
E-Commerce [APEC]
2000 2000
Asia y el
Pacfico
X X X X
Gua de Preparacin para vivir
en el Mundo de la Red [CSPP]
2000 2000 Internacional X X X X X X
Grado de Preparacin
Electrnica [McConell Intl.]*
2000 2002 Internacional
Modelo de Indicadores [Junta de
Castilla y Len]
2000 2007 Espaa X X
Indicador eEspaa [Telefnica] 2000 2008 Espaa X X X X X X X X
Categoras
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
Alcance
I
n
f
r
a
e
s
t
r
u
c
t
u
r
a
H
a
b
i
l
i
d
a
d
e
s
y
f
o
r
m
a
c
i
n
N
i
v
e
l
e
s
d
e
u
s
o
S
e
c
t
o
r
T
I
C
E
-
C
o
m
m
e
r
c
e
E
-
B
a
n
c
a
C
o
n
t
e
n
i
d
o
s
E
-
L
e
a
r
n
i
n
g
E
-
G
o
v
e
r
n
m
e
n
t
E
-
A
d
m
i
n
i
s
t
r
a
c
i
n
E
-
S
a
l
u
d
E
n
t
o
r
n
o
ndice de Capacidad Electrnica
[EIU]
2000 2008 Internacional X X X X X X
ndice de la Nueva Economa
Global [MetricNet]*
2000
Sistema de Indicadores
[Eurobarmetro, UE]*
2000
Indicador de Penetracin
Regional de las Nuevas
Tecnologas [Consejo Superior
de Cmaras, Espaa]
2001 2001 Espaa X X X
ndice de la Sociedad de la
Informacin [Lpez y
Chaminade]
2001 2001 Espaa
Midiendo el Negocio Electrnico
[Oficina de Censos, EE.UU.]
2001 2001 EE.UU. X X X X
Indicadores del sector TIC en los
pases nrdicos [Estadsticas de
Dinamarca]
2001 2001 Europa X X
Sistema de Indicadores [Junta de
Catalua]
2001 2004 Espaa X X X X X X X X
Indicadores de eBusiness Watch
[Comisin Europea]
2001 2005 Unin Europea X X X X X
ndice eEspaa [Fundacin
Orange]
2001 2008 Espaa X X X X X
ndice de Adelanto Tecnolgico
[UNDP]
2001 2009 Internacional X X X
ndice de Preparacin para la
Red (NRI) [INSEAD - Foro
Econmico Mundial]
2001 2009 Internacional X X X X X
Indicador Sinttico de la Nueva
Economa (ISNE) [N-economa]
2001 2008 Espaa X X X X X
NESIS (New Economy
Statistical Information System)
2001
Sistema de Indicadores
[Snchez]
2001 Espaa X X X X
E-Indicadores BISER [BISER] 2002 2002 Europa X X X X X X X X
La Pirmide Digital [Ballestero] 2002 2002
ndice de Digitalizacin
[Corrocher y Ordanini]
2002 2002 Internacional X X X X X X
ndice de Brecha Digital (DDI)
[ORBICOM]
2002 2005 Internacional X X X X
Indicadores Estadsticos para la
Sociedad de la Informacin
[B2B Metrics]
2002 2005 Europa y Japn X X X
Sistema de Indicadores [CESI] 2002 Espaa X X X
Nuevos Indicadores eEurope
[SIBIS]
2003 2003 Europa X X X X X X X X
Sistema de Indicadores
[Comisin de la Sociedad de la
Informacin, Gobierno de
Irlanda]
2003 2003 Irlanda X X X X X X X X
Categoras
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
Alcance
I
n
f
r
a
e
s
t
r
u
c
t
u
r
a
H
a
b
i
l
i
d
a
d
e
s
y
f
o
r
m
a
c
i
n
N
i
v
e
l
e
s
d
e
u
s
o
S
e
c
t
o
r
T
I
C
E
-
C
o
m
m
e
r
c
e
E
-
B
a
n
c
a
C
o
n
t
e
n
i
d
o
s
E
-
L
e
a
r
n
i
n
g
E
-
G
o
v
e
r
n
m
e
n
t
E
-
A
d
m
i
n
i
s
t
r
a
c
i
n
E
-
S
a
l
u
d
E
n
t
o
r
n
o
ndice de Desarrollo TIC
[UNCTAD]
2003 2003 Internacional X X X X
ndice de Acceso Digital [UIT] 2003 2003 Internacional X X X
ndice de Pulso Tecnolgico
[Hobijn et al.]
2003 2003 EE.UU. X
ndice de E-Preparacin
[NCAER]
2003 2005 India X X X X X X X
ndice de Gobierno Electrnico
[UNPAN]
2003 2008 Internacional X X X X
Indicadores de benchmarking
para eEurope [i2010 High Level
Group Comisin Europea]
2003 2006 Europa X X X X X
Sistema de Indicadores [CAIBI] 2003 Internacional X X X X X
ndice Regional de la Sociedad
de la Informacin [Estrada,
UCM]
2004 2004 Espaa X X X X X X
Mtricas de la Sociedad de la
Informacin [Grigorovici et. al.]
2004 2004 Internacional X X X X
Sistema de Indicadores
[UnderStand, Unin Europea]
2004 2005 Unin Europea X X X X X X X X X
KEI (Knowledge Economy
Indicators) [Proyecto KEI,
Comisin Europea]
2004 2008 Europa X X X X
Gua para medir la Sociedad de
la Informacin [OECD]
2005 2005 Internacional X X X X X X
ndice ArCo de Tecnologa
[Archibugi y Coco]
2005 2005 Internacional X X X
Sistema de Indicadores
[OSILAC]
2005 2005 Latinoamrica X X X X X
ndice de Actividad TIC
[Comisin Europea]
2005 2006 Europa X
ndice de Oportunidad Digital
(DOI) [UIT]
2005 2007 Internacional X X X
Indicador de la Sociedad de la
Informacin (ISI) [IESE-DMR]
2005 2008 Latinoamrica X X X
Indicadores clave de TICs
[DSTI, OECD]
2005 2008 Internacional X X X X
Indicadores bsicos de TICs
[PoMICTfD, Naciones Unidas]
2005 2009 Internacional X X X X X
ndice de Digitalizacin [Cerno y
Perez]
2006 2006 Espaa X X X X X
Gua para la Evaluacin del
Impacto de Internet [Fundacin
Acceso]
2006 2006 Centroamrica X X X X X X
Manual de Lisboa [RYCIT] 2006 2006 Iberoamrica X X X
Indicador Sinttico Global de la
Nueva Economa [Giner y
Tolosa]*
2006
ndice de Oportunidad TIC (ICT-
OI) [UIT]
2007 2007 Internacional X X X
ndice de Desarrollo TIC (IDI)
[UIT]
2009 2009 Internacional X X X
Fuente: Elaboracin propia con base en [1], [2], [3], [4], [5], [6], [7], [8], [9], [10], [11], [12], [13], [14], [15], [16],
[17], [18], [19], [20], [21], [22], [23], [24], [25], [26], [27], [28], [29], [30], [31], [32], [33], [34], [35], [36], [37],
[38], [39], [40], [41], [42], [43], [44], [46], [47], [48], [49], [50], [51], [52], [53], [54], [55], [56], [57], [58], [59],
[60], [61], [62], [63], [64], [66], [67], [68], [70], [71], [72], [73], [74], [75], [76], [77], [79], [80].
*No se encontr la bibliografa original relacionada con el sistema de indicadores.
Anexo 2. Anlisis comparativo de sistemas de indicadores de la Sociedad de la Informacin con
respecto a la metodologa utilizada y la forma de entrega de los resultados obtenidos.
Las letras X indican que en la propuesta correspondiente a la fila se analiza dicho mbito, los tringulos
indican que el mbito dej de ser evaluado en dicha propuesta en una versin ms reciente de esta ltima,
mientras que los crculos indican que se introdujo la evaluacin del mbito en la versin reciente de la
propuesta de sistema de indicadores.
Metodologa Result.
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
C
u
e
s
t
i
o
n
a
r
i
o
E
s
t
a
d
s
t
i
c
a
s
O
p
i
n
i
n
d
e
e
x
p
e
r
t
o
s
D
i
a
g
n
s
t
i
c
o
P
r
o
s
p
e
c
t
i
v
a
ndice de la Sociedad de la Informacin (ISI) [IDC] 1995 2005 X X
ndice de la Economa del Conocimiento (KEI) [Banco Mundial] 1995 2008 X X
Sistema de Indicadores [CIS] 1996 X X
Manual de Indicadores de Telecomunicaciones [UIT] 1997 2005 X X
INEXSK [Mansell y Wehn] 1998 1998 X X
Gua para la preparacin global al comercio electrnico [CSPP] 1998 1998 X X X
Sistema de Indicadores [CMT] 1998 2007 X X
Difusin Global de Internet [Grupo Mosaic]* 1998
Indicadores de la Economa de Internet [U. de Texas] 1999 2001 X X X
ndice de la Nueva Economa [Progressive Policy Institute] 1999 2002 X X
Indicadores de la Sociedad de la Informacin [ESIS] 2000 2000 X X
Mtrica de la Sociedad de la Informacin [SEDISI] 2000 2000 X X X
ndice de Progreso Tecnolgico [Rodrguez y Wilson] 2000 2000 X X
Modelo de estimacin de e-preparacin [CID, Universidad de Harvard] 2000 2000 X X
Estimacin de Preparacin para E-Commerce [APEC] 2000 2000 X X
Gua de Preparacin para vivir en el Mundo de la Red [CSPP] 2000 2000 X X
Grado de Preparacin Electrnica [McConell Intl.] 2000 2002
Modelo de Indicadores [Junta de Castilla y Len] 2000 2007 X X
Indicador eEspaa [Telefnica] 2000 2008 X X X X
ndice de Capacidad Electrnica [EIU] 2000 2008 X X X
ndice de la Nueva Economa Global [MetricNet]* 2000
Sistema de Indicadores [Eurobarmetro, UE]* 2000
Indicador de Penetracin Regional de las Nuevas Tecnologas [Consejo Superior de
Cmaras, Espaa]
2001 2001 X X
ndice de la Sociedad de la Informacin [Lpez y Chaminade] 2001 2001
Midiendo el Negocio Electrnico [Oficina de Censos, EE.UU.] 2001 2001 X X X X
Indicadores del sector TIC en los pases nrdicos [Estadsticas de Dinamarca] 2001 2001 X X
Metodologa Result.
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
C
u
e
s
t
i
o
n
a
r
i
o
E
s
t
a
d
s
t
i
c
a
s
O
p
i
n
i
n
d
e
e
x
p
e
r
t
o
s
D
i
a
g
n
s
t
i
c
o
P
r
o
s
p
e
c
t
i
v
a
Sistema de Indicadores [Junta de Catalua] 2001 2004 X X X
Indicadores de eBusiness Watch [Comisin Europea] 2001 2005 X X X
ndice eEspaa [Fundacin Orange] 2001 2008 X X
ndice de Adelanto Tecnolgico [UNDP] 2001 2009 X X
ndice de Preparacin para la Red (NRI) [INSEAD - Foro Econmico Mundial] 2001 2009 X X
Indicador Sinttico de la Nueva Economa (ISNE) [N-economa] 2001 2008 X X
NESIS (New Economy Statistical Information System)* 2001
Sistema de Indicadores [Snchez] 2001 X X X X
E-Indicadores BISER [BISER] 2002 2002 X X
La Pirmide Digital [Ballestero]* 2002 2002
ndice de Digitalizacin [Corrocher y Ordanini] 2002 2002 X X
ndice de Brecha Digital (DDI) [ORBICOM] 2002 2005 X X
Indicadores Estadsticos para la Sociedad de la Informacin [B2B Metrics] 2002 2005 X X
Sistema de Indicadores [CESI] 2002 X X
Nuevos Indicadores eEurope [SIBIS] 2003 2003 X X
Sistema de Indicadores [Comisin de la Sociedad de la Informacin, Gobierno de
Irlanda]
2003 2003 X X X
ndice de Desarrollo TIC [UNCTAD] 2003 2003 X X
ndice de Acceso Digital [UIT] 2003 2003 X X
ndice de Pulso Tecnolgico [Hobijn et al.] 2003 2003 X X X
ndice de E-Preparacin [NCAER] 2003 2005 X X X
ndice de Gobierno Electrnico [UNPAN] 2003 2008 X X
Indicadores de benchmarking para eEurope [i2010 High Level Group Comisin
Europea]
2003 2006 X X
Sistema de Indicadores [CAIBI] 2003 X X
ndice Regional de la Sociedad de la Informacin [Estrada, UCM] 2004 2004 X X
Mtricas de la Sociedad de la Informacin [Grigorovici et. al.] 2004 2004 X X
Sistema de Indicadores [UnderStand, Unin Europea] 2004 2005 X X
KEI (Knowledge Economy Indicators) [Proyecto KEI, Comisin Europea] 2004 2008 X X X
Gua para medir la Sociedad de la Informacin [OECD] 2005 2005 X X X
ndice ArCo de Tecnologa [Archibugi y Coco] 2005 2005 X X
Sistema de Indicadores [OSILAC] 2005 2005 X X
ndice de Actividad TIC [Comisin Europea] 2005 2006 X X
ndice de Oportunidad Digital (DOI) [UIT] 2005 2007 X X X
Indicador de la Sociedad de la Informacin (ISI) [IESE-DMR] 2005 2008 X X X X
Indicadores clave de TICs [DSTI, OECD] 2005 2008 X X
Indicadores bsicos de TICs [PoMICTfD, Naciones Unidas] 2005 2009 X X
Metodologa Result.
Sistema
A
o
P
u
b
l
i
c
a
c
i
n
A
l
t
i
m
a
A
c
t
u
a
l
i
z
a
c
i
n
C
u
e
s
t
i
o
n
a
r
i
o
E
s
t
a
d
s
t
i
c
a
s
O
p
i
n
i
n
d
e
e
x
p
e
r
t
o
s
D
i
a
g
n
s
t
i
c
o
P
r
o
s
p
e
c
t
i
v
a
ndice de Digitalizacin [Cerno y Perez] 2006 2006 X X X
Gua para la Evaluacin del Impacto de Internet [Fundacin Acceso] 2006 2006 X X
Manual de Lisboa [RYCIT] 2006 2006 X X
Indicador Sinttico Global de la Nueva Economa [Giner y Tolosa]* 2006
ndice de Oportunidad TIC (ICT-OI) [UIT] 2007 2007 X X
ndice de Desarrollo TIC (IDI) [UIT] 2009 2009 X X
Fuente: Elaboracin propia con base en [1], [2], [3], [4], [5], [6], [7], [8], [9], [10], [11], [12], [13], [14], [15], [16],
[17], [18], [19], [20], [21], [22], [23], [24], [25], [26], [27], [28], [29], [30], [31], [32], [33], [34], [35], [36], [37],
[38], [39], [40], [41], [42], [43], [44], [46], [47], [48], [49], [50], [51], [52], [53], [54], [55], [56], [57], [58], [59],
[60], [61], [62], [63], [64], [66], [67], [68], [70], [71], [72], [73], [74], [75], [76], [77], [79], [80].
*No se encontr la bibliografa original relacionada con el sistema de indicadores.
1
RESUMEN
A partir de los hallazgos de un trabajo previo en sistemas de
indicadores de la Sociedad de la Informacin, se desglosan en este
trabajo los elementos de medicin encontrados en dichos sistemas
como variables e indicadores, donde se recuerda su diferenciacin
dada la confusin que despiertan. Estas variables e indicadores
pertenecen a dos de los mbitos de la Sociedad de la Informacin
como son e-banking y e-learning.
Con base en estos elementos se identifican categoras de medi-
cin relevantes al interior de estos dos mbitos, con lo que se de-
nota el inters a un nivel ms atmico y el estado de avance que se
tiene particularmente en la definicin e identificacin de objetos
que aporten informacin til sobre el avance del mbito particu-
lar, comparando la proporcin de variables contra la proporcin
de indicadores encontrados. Finalmente, se entregan conclusiones
sobre los aspectos importantes y pasos a seguir a partir de estos.
Palabras Clave Banca en lnea, E-Learning, Sistemas
de Indicadores, Sociedad de la Informacin.
I. INTRODUCCIN
A Sociedad de la Informacin (SI) es un concepto que
naci para suceder a la Sociedad Industrial y Post-
Industrial de los siglos XIX y XX que tiene como principal
caracterstica la consideracin de la informacin y el conoci-
miento, a travs de la implantacin y el uso de las Tecnologas
de la Informacin y las Comunicaciones (TIC) en todos los
mbitos como motor de desarrollo social y econmico [1].
Estos mbitos hacen referencia a mbitos de configuracin de
la sociedad como son la administracin y la gestin pero ahora
vistos desde el punto de vista digital, impulsados por el avance
que se ha visto en el desarrollo y la evolucin de las TIC en las
ltimas dcadas.
En vista del inters de organizaciones de distinta ndole: gu-
bernamentales, no-gubernamentales, comerciales, acadmicas,
financieras, etc. de alcance estatal y nacional en diferentes
pases alrededor del mundo (por ejemplo la Comisin de
Cmaras de Comercio en Espaa, el Banco Mundial a nivel
A. Bustamante: afbustamanteg@unal.edu.co, Estudiante de Maestra en
Ingeniera - Ingeniera de Sistemas y Computacin, Universidad Nacional de
Colombia, Sede Bogot.
J. M. Snchez-Torres: jmsanchezt@unal.edu.co, Ing. Sistemas, PhD, Pro-
fesora, Departamento de Ingeniera de Sistemas e Industrial, Universidad
Nacional de Colombia
internacional, la Organizacin para la Cooperacin y el Desa-
rrollo Econmico (OECD), entre muchas otras, adems de los
avances en estas organizaciones y en particulares por medir el
nivel de inclusin de las TIC en mbitos como salud, educa-
cin, gobierno, y el nivel de preparacin de los territorios para
la utilizacin de las mismas en dichos mbitos, se cre la
Cumbre Mundial de la Sociedad de la Informacin (CMSI) de
la mano de la Organizacin de Naciones Unidas (ONU), y fue
celebrada por primera vez en Ginebra, Suiza en 2003 con dos
reuniones posteriores en 2005 y 2009.
Alrededor de esta y otras iniciativas de la ONU a travs de
sus distintas dependencias internas y alianzas, se han encon-
trado sistemas completos de indicadores para la medicin de
los distintos mbitos de la SI, cuya recoleccin y anlisis fue
un trabajo presentado en [2] como parte del proyecto de inves-
tigacin e-Mtrica Colombia ejecutado en la Universidad Na-
cional de Colombia.
A partir de este trabajo preliminar, es de inters para este
documento presentar un anlisis particular de los sistemas de
indicadores y concretamente de las variables e indicadores
encontrados al interior de cada uno de ellos, que hagan refe-
rencia a los mbitos de e-learning y e-banking. Para este fin,
en la seccin III se presenta un breve recuento de sistemas de
indicadores para la medicin de la SI a partir de trabajos ante-
riores, para pasar a la seccin IV donde se presentan de forma
separada tanto indicadores como variables para e-learning y e-
banking, y se explica la diferencia entre los trminos variable e
indicador, que tienden a ser confundidos. En la seccin V se
hace un anlisis de estas variables e indicadores para estos dos
mbitos particulares y luego se presentan algunas conclusiones
y comentarios sobre trabajo futuro a partir de los resultados
obtenidos en este trabajo.
II. METODOLOGA
Para la realizacin del anlisis descrito en la seccin ante-
rior, se requiere de un anlisis comparativo de sistemas de
indicadores en la SI que permita diferenciar cules de estos
sistemas intentan medir los mbitos de e-learning y e-banking.
Luego de este anlisis se deben separar los sistemas para estos
dos mbitos y con base en la documentacin que contiene las
respectivas propuestas de estos sistemas, se realiza un listado
de elementos de medicin aplicables para e-learning y e-
banking, a partir del cual se hace una clasificacin de estos
elementos entre variables e indicadores.
Indicadores de la Sociedad de la Informacin
para la medicin en e-banking y e-learning
Andrs Felipe Bustamante Garca, Jenny Marcela Snchez Torres
L
2
La idea de hacer esta clasificacin es revisar el grado de
avance en la medicin de cada mbito en particular, adems de
encontrar los aspectos puntuales que se miden en e-learning y
e-banking. Estos resultados son importantes para alimentar el
desarrollo posterior a este trabajo de una metodologa de eva-
luacin de e-banking en el medio colombiano, as como el
desarrollo de una metodologa de evaluacin de impacto en e-
learning para la educacin presencial en el mismo entorno.
En este trabajo se parte del anlisis comparativo de sistemas
de indicadores para la SI realizado en [2], y se realiza el anli-
sis de variables e indicadores en e-banking y e-learning, para
alimentar el desarrollo metodolgico posterior.
III. SISTEMAS DE INDICADORES EN LA SOCIEDAD DE LA
INFORMACIN
En [2] se describen los hallazgos sobre una serie de sistemas
de indicadores que permiten medir los diferentes mbitos o
sectores verticales de los que se compone la SI, entre los cua-
les se encuentran: e-salud (e-health), e-learning, e-gobierno (e-
government), e-administracin, e-comercio (e-commerce).
En ese trabajo se encontraron aproximadamente 67 sistemas
de indicadores que miden o medan (teniendo en cuenta que
varios de ellos han entrado en obsolescencia o desuso) uno o
varios de estos mbitos utilizando diferentes tcnicas de medi-
cin como anlisis de estadsticas, cuestionarios de encuestas,
y la opinin de expertos, en orden de mayor a menor utiliza-
cin.
A partir de esta significativa cantidad de sistemas se eviden-
ci la amplitud de criterios y puntos de vista para medir los
mismos aspectos en el rea de TIC, pero tambin el especial
inters que despierta la SI para organizaciones de alcance in-
ternacional como las Naciones Unidas y sus distintas depen-
dencias, el Banco Mundial, la Comisin Europea y la OECD
entre otras.
En la Tabla 1 se presentan algunos hallazgos con relacin al
estado de la medicin de los diferentes mbitos de la SI a 2009
con respecto a trabajos anteriores en proporcin de sistemas de
indicadores asociados por mbito. En esta tabla se resaltan los
mbitos de observacin para este trabajo, es decir, e-banking y
e-learning.
En la siguiente seccin se describen los hallazgos con mayor
detalle para estos dos mbitos objeto de observacin.
IV. VARIABLES E INDICADORES PARA LA MEDICIN EN E-
LEARNING Y E-BANKING
A. Medicin en banca electrnica
La banca electrnica o e-banking hace referencia a los servi-
cios que prestan las entidades financieras a travs de la red,
que han tomado fuerza por el impulso del sector financiero
hacia el uso de nuevas tecnologas para mejorar sus procesos
de negocio y mejorar sus relaciones con los clientes [3]. Sin
embargo, la banca electrnica no slo recoge las transaccio-
Tabla 1. Relacin de aspectos de medicin en sistemas de indicadores de la
SI.
Sistemas relacionados (%)
Objeto de medicin Actualmente* Snchez-Torres, 2006
Infraestructura 79,1 87,5
Niveles de uso 70,15 83,33
Sector TIC 47,76 20,83
E-Commerce 41,79 37,5
Habilidades y formacin 38,81 37,5
Entorno 37,31 16,67
E-Government 29,85 16,67
E-banking 19,4 -
E-Administracin 17,91 16,67
E-Learning 14,93 12,5
E-Salud 11,94 12,5
Contenidos 7,46 12,5
Fuente: Datos tomados de [2]
nes realizadas a travs de Internet, sino en general todas las
transacciones soportadas por un medio electrnico [4], por lo
que tambin se habla de los servicios en cajeros automticos,
sistemas de audiorespuesta y dems tecnologas que ponen las
entidades financieras a disposicin de sus clientes.
En la investigacin adelantada hasta ahora se ha encontrado
que el rea de banca electrnica como parte de la SI en varias
ocasiones es tomada como un mbito dependiente o como par-
te del comercio electrnico. Solamente en algunas propuestas
est claramente separada de los dems mbitos [3], [4], [5], [6]
y tiene sus propias variables e indicadores para la medicin.
Con base en las propuestas de sistemas encontradas, se ha
creado una lista de variables e indicadores, algunos de los cua-
les se presentan en la Tabla 2.
B. Medicin en e-learning
En el contexto educativo se promueve tambin el uso de las
TIC bajo el concepto de e-learning, que se define como la
adquisicin y el uso de conocimiento distribuido y facilitado
principalmente por medios electrnicos [7]. Estos medios
electrnicos incluyen CD-ROMs y DVD-ROMs para el apren-
dizaje fuera de lnea y, Entornos Virtuales de Aprendizaje
(VLEs LMS), Entornos de Aprendizaje Colaborativo Me-
diado por Computador (CMLC) y Entornos de Aprendizaje
Basados en Casos (CBL), entre otros, para el aprendizaje en
lnea apoyado por la Red. Rosenberg en [8] define e-learning
como el uso de Internet para entregar un conjunto de solucio-
nes que potencian el conocimiento y el buen desempeo en
procesos de aprendizaje. Con esta definicin se reduce el es-
pectro de TIC que se pueden considerar dentro del e-learning,
y para trminos de esta investigacin se toma esta definicin
como la ms acertada.
Buena parte de los sistemas de medicin de la SI en el mbi-
to educativo dan cuenta de la infraestructura con la que se
cuenta en las instituciones educativas para acceder a la infor-
macin disponible a travs de la Red y as poder apoyar los
3
Tabla 2. Variables e indicadores disponibles para la medicin de la banca
electrnica
DESCRIPCIN TIPO ALCANCE
Mtrica de la Sociedad de la Informacin [SEDISI]
Cajeros automticos por milln de habitantes Indicador Espaa
Transacciones per capita/ao en cajeros au-
tomticos
Indicador Espaa
Tarjetas emitidas por 1000 habitantes Indicador Espaa
Transacciones en TPV por milln de habitan-
tes
Indicador Espaa
Usuarios de banca online por 1000 habitantes Indicador Espaa
Estimacin de Preparacin para E-Commerce [APEC]
Instituciones financieras pueden proveer
tarjetas de crdito a consumidores
Variable Asia y el Pac-
fico
Lmites financieros impuestos por el gobierno
sobre el uso de tarjetas de crdito
Variable Asia y el Pac-
fico
Infraestructura tecnolgica de instituciones
financieras comerciales capaz soportar autori-
zacin en lnea y cierre de transacciones e-
commerce
Variable Asia y el Pac-
fico
Regulaciones del gobierno restringen el cierre
electrnico de transacciones e-commerce o el
uso de tecnologas de pago electrnico
Variable Asia y el Pac-
fico
Indicador eEspaa [Telefnica]
Frecuencia de uso de banca online con el
banco principal
Variable Espaa
Penetracin de usuarios de servicios banca-
rios en cada pas
Variable Espaa
Internautas que no visitan sucursales de su
banco
Variable Espaa
Adopcin de la banca online por las empresas Variable Espaa
Banca online empresas Vs. Ciudadanos Variable Espaa
Sistema de Indicadores [Junta de Catalua]
Sistemas de pago en compras por Internet Variable Espaa
Gasto durante los ltimos tres meses en com-
pras por Internet
Variable Espaa
Indicadores de eBusiness Watch [Comisin Europea]
Empresas con acceso a Internet utilizando
Internet para banca y servicios financieros
Variable Unin Europea
ndice eEspaa [Fundacin Orange]
Uso de banca electrnica y actividades finan-
cieras en % de usuarios de Internet
Indicador Espaa
Compra de seguros, valores, acciones y otros
servicios financieros en % de usuarios de
Internet
Indicador Espaa
Crecimiento en base 100 de los niveles de uso
de TPV, cajeros automticos y tarjetas de
crdito
Indicador Espaa
Crditos a los clientes concedidos por los
bancos por Internet en millones de euros
Indicador Espaa
Relacin entre la cantidad de depsitos y la
cantidad de crdito concedido a clientes de
los bancos por Internet en euros
Indicador Espaa
Nuevos Indicadores eEurope [SIBIS]
Uso de Internet para banca en lnea en % de
usuarios de Internet
Indicador Europa
Indicadores de benchmarking para eEurope [i2010 High Level Group Co-
misin Europea]
Porcentaje de personas en lnea realizando
actividades de banca en Internet
Variable Unin Europea
Sistema de Indicadores [UnderStand, Unin Europea]
Porcentaje de usuarios de Internet utilizando
banca en lnea para propsitos personales
Indicador Unin Europea
Porcentaje de empleados que trabajan en
empresas que usan banca en lnea
Indicador Unin Europea
DESCRIPCIN TIPO ALCANCE
Gua para medir la Sociedad de la Informacin [OECD]
Uso de Internet para servicios financieros por
parte de negocios en un ao
Variable Internacional
Uso de Internet para banca en lnea por parte
de personas en un ao
Variable Internacional
Sistema de Indicadores [OSILAC]
Proporcin de empresas que usan Internet
para realizar banca electrnica o acceder a
otros servicios financieros
Indicador Latinoamrica
Actividad de banca electrnica y otros servi-
cios financieros en los ltimos 12 meses
Variable Latinoamrica
Indicadores bsicos de TIC [PoMICTfD, Naciones Unidas]
Proporcin de empresas que usan Internet
para realizar banca electrnica o acceder a
otros servicios financieros
Indicador Internacional
Actividad de banca electrnica y otros servi-
cios financieros en los ltimos 12 meses
Variable Internacional
Gua para la Evaluacin del Impacto de Internet [Fundacin Acceso]
Uso de servicios (banca electrnica entre
otros)
Variable Centroamrica
Fuente: Elaboracin propia a partir de [3], [4], [9], [10],
[11], [12], [13], [14], [15], [16], [17], [18].
procesos de aprendizaje [3], [17], [19], [20], [21], [22], [23].
Sin embargo, e-learning no solamente es infraestructura tec-
nolgica para la educacin, tambin se miden otros aspectos
como se presenta en la Tabla 3, donde se presentan algunos de
los hallazgos a nivel de variables e indicadores para el mbito
de e-learning.
V. ASPECTOS INTERESANTES DE LA MEDICIN
A. Variables vs. Indicadores
Para medir los mbitos de la SI se han identificado bsica-
mente tres tipos de medidores: ndices, variables e indicadores
[1]. Particularmente, estos dos ltimos suelen confundirse o
usarse indistintamente en la literatura y vale la pena aclararlos
para trminos de su utilizacin en este contexto. Segn
Snchez-Torres en [1], una variable es un aspecto que desea
medirse de un objeto de estudio, mientras que un indicador es
una caracterstica observable e identificable dentro de una va-
riable, de forma que los indicadores permiten asignarle a una
variable un determinado valor.
Con base en esta diferenciacin, se observa en las Tablas 2
y 3 que se encontraron sistemas de indicadores donde an se
mantienen aspectos de medicin a nivel de variables y no han
sido aterrizados por una razn u otra a un conjunto de indica-
dores, tanto en el mbito de la e-banking como en e-learning.
En el caso de la e-banking se evidencia el fenmeno recin
mencionado, donde de un total de 38 aspectos de evaluacin,
un 52,6% an se mantienen al nivel de variables, es decir, no
se ha encontrado un conjunto de indicadores que permitan dar
cuentas concretas de este mbito. El porcentaje restante ya se
encuentra en forma de indicadores, tal y como se presenta en
la Fig. 1.
4
Tabla 3. Variables e indicadores para la medicin del e-learning
DESCRIPCIN TIPO ALCANCE
ndice de la Economa del Conocimiento (KEI) [Banco Mundial]
Acceso a Internet en escuelas Variable Internacional
ndice de la Nueva Economa [Progressive Policy Institute]
Porcentaje de escuelas con al menos una
conexin a Internet
Indicador EE.UU.
Porcentaje de salones de clase con acceso a
Internet
Indicador EE.UU.
Modelo de estimacin de e-preparacin [CID, Universidad de Harvard]
Acceso de las escuelas a las TIC Variable Internacional
Mejoramiento de la educacin con TIC Variable Internacional
Desarrollo de fuerza laboral con TIC Variable Internacional
Gua de Preparacin para vivir en el Mundo de la Red [CSPP]
Acceso a la red en educacin primaria Variable Internacional
Acceso a la red en educacin secundaria Variable Internacional
Aplicaciones y servicios en red para educa-
cin primaria
Variable Internacional
Aplicaciones y servicios en red para educa-
cin secundaria
Variable Internacional
Modelo de Indicadores [Junta de Castilla y Len]
Porcentaje de centros educativos que dispo-
nen de conexin a Internet de banda ancha
Indicador Espaa
Porcentaje de centros educativos que dispo-
nen de pgina Web
Indicador Espaa
Nmero medio de alumnos por ordenador
destinado a tareas de enseanza o aprendizaje
Indicador Espaa
Porcentaje de alumnado con necesidades
educativas especiales con acceso a equipa-
miento TIC adaptado
Indicador Espaa
Contenidos TIC para la educacin Variable Espaa
Indicador eEspaa [Telefnica]
Uso de Internet para actividades formativas
(escuelas y universidades) en % de internau-
tas
Indicador Espaa
Uso de Internet para actividades educativas
de post-formacin en % de internautas
Indicador Espaa
Uso de Internet entre las personas que han
realizado un curso de formacin
Variable Espaa
Distribucin de ordenadores segn activida-
des en centros pblicos de educacin secun-
daria en % de ordenadores
Indicador Espaa
Uso de TIC en colegios Variable Espaa
E-Indicadores BISER [BISER]
Relevancia del uso de e-learning por la pobla-
cin trabajadora
Indicador Europa
Relevancia del uso de e-learning por las orga-
nizaciones
Indicador Europa
Nuevos Indicadores eEurope [SIBIS]
Uso de herramientas e-learning para aprendi-
zaje relacionado con trabajo, en porcentaje de
fuerza laboral
Indicador Europa
Uso de Internet para el aprendizaje como
proporcin de la fuerza laboral
Indicador Europa
Establecimientos que proveen e-learning
como proporcin de establecimientos (comer-
cio)
Indicador Europa
Establecimientos que utilizan Intranet para
entrenamiento del personal como proporcin
de establecimientos
Indicador Europa
Sistema de Indicadores [OSILAC]
Proporcin de usuarios de Internet en estable-
cimientos educativos
Indicador Latinoamrica
DESCRIPCIN TIPO ALCANCE
Proporcin de usuarios de Internet que nave-
gan con fines de educacin formal / capacita-
cin
Indicador Latinoamrica
Indicadores bsicos de TIC [PoMICTfD, Naciones Unidas]
Proporcin de escuelas con un radio utilizado
con fines educativos
Indicador Internacional
Proporcin de escuelas con un TV utilizado
con fines educativos
Indicador Internacional
Razn de estudiantes por computador Indicador Internacional
Proporcin de escuelas con acceso a Internet,
por tipo
Indicador Internacional
Fuente: Elaboracin propia a partir de [3], [13], [16], [17],
[19], [20], [21], [22], [23], [24].
En e-learning, en cambio, es notorio el dominio del uso de
indicadores concretos para la medicin de este mbito, si se
observa la Fig. 2 donde de 39 aspectos de evaluacin, solo
30,8% son variables, mientras que el porcentaje restante son
todos indicadores.
Si se comparan las dos formas de evaluacin en estos dos
mbitos en el mismo periodo de tiempo de revisin de metodo-
logas y sistemas, como ya se haba sealado, se puede con-
cluir que en e-learning la medicin est en un estado de desa-
rrollo mayor. Adems se puede decir que las categoras de
medicin y los aspectos a medir, junto con sus respectivas
fuentes estn identificados con mayor claridad que en el lado
de la e-banking.
B. Categoras de medicin
En [2] se analizan los mbitos y categoras de medicin ms
generales para sistemas de indicadores encontrados entre 1995
y comienzos de 2009. En el presente trabajo, se baja un nivel
ms en los mbitos de e-learning y e-banking para evaluar qu
miden concretamente estos sistemas de indicadores en estos
mbitos particulares. Como ya se ha mencionado, no se trabaja
con la totalidad de 67 sistemas de indicadores encontrados en
[2], sino con una parte de ellos, de donde se extraen 39 ele-
mentos de medicin de aspectos de e-learning y 38 elementos
que miden e-banking, donde se aclara que son conjuntos que
no se excluyen mutuamente, es decir, un sistema de indicado-
res puede aportar elementos de medicin en ambos conjuntos.
En lo que a e-banking se refiere, con base en el anlisis de
la Tabla 2 completa, se identifican cuatro grandes grupos de
categoras de medicin como son: infraestructura para e-
banking, adopcin de e-banking por parte de las personas,
adopcin de e-banking por parte de las empresas, y un grupo
que agrupa otras categoras ms dispersas a nivel de medicin.
Como se observa en la Fig. 3, la categora de medicin identi-
ficada como la ms empleada entre variables e indicadores es
la que se refiere a adopcin de e-banking en personas con una
participacin del 52,6% del total de variables e indicadores
hallados. La adopcin de e-banking tambin es una categora
que ha despertado inters en estos sistemas de indicadores, con
una participacin de 39,5% de la muestra tomada de variables
e indicadores.
5
Fig. 1. Proporcin de tipos de medidores en banca electrnica. Fuente: Elabo-
racin propia.
Fig. 2. Proporcin de tipos de medidores en e-learning. Fuente: Elaboracin
propia.
En e-learning mientras tanto ocurre un fenmeno interesante
y tiene que ver con que se mide fuertemente la infraestructura
de TIC para educacin, es decir, disposicin de equipos de
cmputo, redes y acceso a Internet entre otros objetos de estu-
dio en una medida importante: 48,7% de las variables e indi-
cadores recopilados. Sin embargo, en una proporcin an ma-
yor (64,1% del total de variables e indicadores para e-learning)
se encuentra el inters por qu tanto se estn integrando las
TIC con los procesos de formacin en las instituciones educa-
tivas y en las empresas. Esta relacin se puede observar grfi-
camente en la Fig. 4.
La diferenciacin entre e-learning educativo y e-learning
empresarial podra desagregarse un poco ms, pero para
trminos de este trabajo se toma como una sola, teniendo en
cuenta el nivel de abstraccin en el que se encuentran espe-
cialmente algunas variables (p.ej. Mejoramiento de la educa-
cin con TIC en el sistema del CID de Harvard).
Inf raestructura
Adopcin en personas
Adopcin en empresas
Otras categoras
0
10
20
30
40
50
60
Categoras de medicin
P
r
o
p
o
r
c
i
n
d
e
v
a
r
i
a
b
l
e
s
e
i
n
d
i
c
a
d
o
r
e
s
r
e
l
a
c
i
o
n
a
d
o
s
Fig. 3. Proporcin de variables e indicadores para la medicin de categoras
en e-banking. Fuente: Elaboracin propia
Inf raestructura para educacin
Integracin de TICs con f ormacin
Otras categoras
0
10
20
30
40
50
60
70
Categoras de medicin
P
r
o
p
o
r
c
i
n
d
e
v
a
r
i
a
b
l
e
s
e
i
n
d
i
c
a
d
o
r
e
s
r
e
l
a
c
i
o
n
a
d
o
s
Fig. 4. Proporcin de variables e indicadores para la medicin de categoras
en e-learning. Fuente: Elaboracin propia
VI. CONCLUSIONES Y TRABAJO FUTURO
A pesar de la evaluacin de los mbitos de e-learning y e-
banking o banca electrnica se han quedado rezagados como
foco de inters en las propuestas de sistemas de indicadores en
el marco de la SI, existe un nmero significativo de variables e
indicadores definidos para su medicin en los sistemas de in-
dicadores encontrados a 2009.
De estas variables e indicadores cabe resaltar que se encuen-
tran en casi igual nmero para ambos mbitos, por lo que si se
6
comparan directamente, se observa que comparten un inters
por medir aspectos de infraestructura particular para el desa-
rrollo de cada mbito, pero se destaca especialmente en e-
learning. Asimismo, se ha encontrado que es ms significativo
el avance en el desarrollo de indicadores concretos para la
medicin en vez de variables para el caso de e-learning. En el
caso de e-banking, se dividen en partes semejantes los elemen-
tos de medicin entre variables e indicadores, lo que indica
que hay an dificultad por medir o cuantificar los avances en
este mbito de forma eficaz y sobre elementos observables
bien definidos. A pesar de que en e-learning tambin se en-
cuentran elementos de medicin a nivel de variables, la dife-
rencia con la proporcin en nivel de indicadores es notoria, lo
que indica el avance en la identificacin y definicin de obje-
tos a los cuales medir.
Para cada mbito se determinaron categoras especficas de
medicin al interior, de forma que se marcaron los aspectos
que despiertan mayor inters por parte de las propuestas de
sistemas de indicadores relacionadas.
A partir de este trabajo se espera tener luego estas variables
e indicadores, especialmente en el mbito de e-banking, para
la medicin de este mbito en el contexto colombiano, utili-
zando una metodologa desarrollada previamente en [1] para
otro mbito de la SI como es el e-government.
REFERENCIAS
[1] J.M. Snchez-Torres, Propuesta metodolgica para evaluar las polti-
cas pblicas de promocin del e-government como campo de aplicacin
de la Sociedad de la Informacin. El caso colombiano, Tesis Doctoral,
Universidad Autnoma de Madrid, 2006.
[2] A. Bustamante y J.M. Snchez-Torres, Indicadores para la medicin
de la Sociedad de la Informacin: una revisin, Universidad Nacional
de Colombia, mimeo, 2009. Disponible en:
http://www.andresbustamante.net/publicaciones/
[3] Fundacin Telefnica, La Sociedad de la Informacin en Espaa
2000, 2000. Disponible en:
http://info.telefonica.es/sociedaddelainformacion/pdf/informes/
espana_2000/completo.pdf
[4] Fundacin Orange, eEspaa 2008: Informe Anual, Fundacin Orange,
2008. Disponible en:
http://www.fundacionorange.es/areas/25_publicaciones/e2008.pdf
[5] Fundacin Auna, eEspaa 2003. Informe anual sobre el desarrollo de
la Sociedad de la informacin en Espaa, 2003.
[6] Fundacin Telefnica, La Sociedad de la Informacin en Espaa
2000, 2000. Disponible en: http://info.telefonica.es/
sociedaddelainformacion/pdf/informes/espana_2000/completo.pdf
[7] T.L. Wentling, C. Waight, J. Gallaher, J. La Fleur, C. Wang, y A. Kan-
fer, E-learning-A review of literature, 2000. Disponible en:
http://learning.ncsa.uiuc.edu/papers/elearnlit.pdf
[8] M.J. Rosenberg, E-learning: Strategies for delivering knowledge in the
digital age, McGraw-Hill, 2000.
[9] SEDISI, Mtrica de la sociedad de la informacin, Ministerio de
Industria y Energa, Madrid, 2000. Disponible en:
http://www.oei.es/salactsi/Metrica.PDF
[10] Asia-Pacific Economic Cooperation, E-Commerce readiness assess-
ment guide, Versin 5, 2000.
[11] Departament Governaci i Administracions Pbliques, Estadsticas de
la sociedad de la informacin. Catalua 2001, 2002. Disponible en:
http://www10.gencat.net/dursi/pdf/si/es/observatori/documents_STSI/
Estadisticas_SI_2001_castellano/Est_SI_2001_ES.pdf
[12] eBusiness Watch, A guide to ICT usage indicators, 2005. Disponible
en: http://www.ebusiness-watch.org/studies/special_topics/2005/
documents/TR_2005_Indicators_I.pdf
[13] SIBIS Consortium, Indicator Handbook, 2003. Disponible en:
http://www.sibis-eu.org/files/Sibis_Indicator_Handbook.pdf
[14] UnderStand, European Regions Under way towards Standard indica-
tors for benchmarking information society: Methodology Handbook,
2005. Disponible en: http://www.understand-eu.net/index.php.htm
[15] OECD Working Party on Indicators for the Information Society, Guide
to Measuring the Information Society, 2005. Disponible en:
http://www.oecd.org/dataoecd/41/12/36177203.pdf
[16] OSILAC, Indicadores y preguntas clave para la medicin de la Socie-
dad de la Informacin, 2005. Disponible en:
http://www.eclac.org/socinfo/osilac/indicadores/
[17] Partnership on Measuring ICT for Development, The Global Informa-
tion Society: a Statistical View, 2008. Disponible en:
http://www.unctad.org/en/docs/LCW190_en.pdf
[18] E. Zamora, Gua para la Evaluacin del Impacto de Internet en las
Organizaciones, 2006. Disponible en:
http://www.acceso.or.cr/sites/acceso.or.cr/files/
Acceso_documentoESP.pdf
[19] Banco Mundial, Knowledge Assessment Methodology, 2009. Dispo-
nible en: http://www.worldbank.org/kam
[20] R.D. Atkinson, The State New Economy Index: Benchmarking Eco-
nomic Transformation in the States, Progressive Policy Institute, Was-
hington, D.C , 2002. Disponible en:
http://www.neweconomyindex.org/states/
[21] J.D. Sachs, Readiness for the Networked World: A Guide for Develo-
ping Countries, Center for International Development, Harvard Uni-
versity, 2000. Disponible en:
http://cyber.law.harvard.edu/readinessguide/
[22] CSPP, Living in the Networked World Readiness Guide , 2000. Dis-
ponible en: http://www.cspp.org/documents/NW_Readiness_Guide.pdf
[23] Junta de Castilla y Len, Modelo de indicadores. Escenario objetivo,
Estrategia Regional para la Sociedad Digital del Conocimiento 2007-
2013, 2007. Disponible en:
http://www.jcyl.es/scsiau/Satellite/pr/ds/ORSI/pdf;charset=UTF-
8/278/664/ersdi%20ModeloIndicadores.pdf/_?asm=jcyl
[24] BISER, List of e-Europe Regions Indicators, 2002. Disponible en:
http://www.biser-eu.com/BISER_eIndicators.pdf
Evaluation of an exercise for measuring impact in
e-learning: Case study of learning a second language
J.M. Snchez-Torres