Cuadernos de Trabajo Social 2001> 14:99-117

SSN: 0214-0314

Anlisis estadstico de una en cuesta de satisfaccin de usuarios al alumnado de primer curso de la Escuela Universitaria de Trabajo Social
Jos Luis

PALACIOS GMEZ*

Resumen
El presente artculo recoge la explotacin estadiMica de los resultados de una modalidad de encuesta usada para medir la satisfaccin del alumnado de primer curso (turno de tarde) de la EUTS, con distintosaspectos de la enseanza que reciben y del centro universitario. Las encuestas de satisfaccin de usuarios constituyen uno de los instrumentos cuantitati vos de investigacin social que ms frecuentemente se emplean en los ltimos tiempos para medir la percepcin de la calidad de los servicios pblicos porparte de sus usuarios. Enaste caso se ha llevado a cabo una adaptacin de los parmetros de medicin del cuestionario habituales en este tipo de encuestas con el objeto de mejor recoger la opinin de los estudiantes respecto de algunas de las cuestiones que les resultan ms importantes. Del anlisis estadstico se desprende una informacin que puede ser relevantepara el propio alumnado, para los docentes y para las autoridades acadmicas de cara a establecer mejorasque redunden en un mejor servicio universitario.

Abstract
This paper takes in the satisfloal explotation of results of a kind ofsurvey used for the measurement of EUTS first course (evening groups) sudentssatistaction onseveralaspects ofbotheducation andcenter. The Users Satisfaction Surveys are one of the cuantitative instruments of social investigation more commonleyused today br the measurement of the users perception of publio services quality. In this case, an adaptation of the typics measurement parameters has be done for ihe bes reception of students opinion on importan subjets. Statistical analysis yields an information protitable tor students them selves, for proffessors and academical authorities tu improve ihe university services.

1. Introduccin
ace ya ms de un decenio que las administraciones pblicas comenzaron a asumir la filosofa de la calidad como principio rector de
-

sus modelos de gestin y organizacin. Lo que originalmente era un concepto propio de las empresas productoras de bienes, pas primero a las empresas de servicios y despus tambin a las instituciones pblicas. La calidad como

Socilogo, Tcnico de investigacin y evaluacin del Ayuntamiento de Alcobendas. Profesor de Mtodes y Tcnicas de Investigcin Social en la E.u. de Trabajo Social de la UCM.

99

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

idea-fuerza se ha establecido, al menos como referente, en todo tipo de organizaciones productivas, de bienes o de seNicios, pblicas o privadas. En las organizaciones productoras de servicios la calidad es algo que tiene que ver especialmente con la satisfaccin de los clientes respecto de los servicios recibidos. Frecuentemente, la medida de la percepcin del cliente se establece como parmetro principal que da noticia a la organizacin de la calidad del servicio prestado. Y entre los instrumentos de medicin que ms usualmente se emplean para tal fin figuran en primer plano las llamadas Encuestas de Satisfaccin de Usuarios <ESU). Las ESU son un tipo especial de encuesta sociolgica cuyo diseo, inspirado en el modelo para determinar las dimensiones de la calidad del servicio SERVQUAL (ZEITHMAL, PARASURAMAN Y RERRY, 1993), responde a las necesidades informativas para el establecimiento de la calidad en las organizaciones de servicios. Las ESU cuestionan al cliente, o al usuario, sobre una serie de elementos del servicio (dimensiones de la calidad) con objeto de medir su satisfaccin con los mismos y poder posteriormente, en consecuencia, llevar a cabo mejoras en aquelos que han recibido una valoracin ms baja y que, por tanto, constituyen las debilidades de dicho servicio. Toda vez que la enseanza universitaria es un servicio pblico cuyos usuarios (clientes) son los alumnos, es evidente quela caridad de ese servii puede tambin establecerse a partir del registro de la satisfaccin de stos con relacin a determinados aspectos tangibles e intangibles del mismo. Es decuadernos de Trabajo Social 2001, 14: 99-lI?

cir, que la ESU puede utilizarse en la Universidad como instrumento de medicin de la calidad con objeto de llevar a cabo mejoras en el servicio prestado. La ESU, cuyos resultados analizamos estadsticamente en estas pginas, est ideada, diseada e implementada, precisamente, a partir de esos presupuestos tericos y con ese fin. La explotacin de la informacin recogida en la encuesta muestra, sobre todo, cules son las fortalezas y debilidades de una prctica docente en relacin con determinadas caracteristicas y actitudes de los alumnos. La valoracin de aspectos concretos de la enseanza de una asignatura <Mtodos y Tcnicas de Investigacin Sociso, que han podido determinarse como dimensiones fundamentales de la enseanza de la misma, se relaciona mediante el anlisis estadstico con algunas variables consideradas como hipotticamente discriminantes de la satisfaccin del alumno con aqulla. Las variables discriminantes, por consiguiente, no slo describen algunos rasgos principales del alumnado encuestado, sino que permiten establecer en qu medida dichos rasgos condicionan su valoracin dolos aspectos de la enseanza considerados. Se trata, por tanto, de ver si las fortalezas y debilidades de una prctica docente son de carcter general o si, por el contrario, dependen en mayor o menor grado de rasgos subjetivos de los alumnos. [nt&e~adstabar aqui que el cuestionario de la encuesta, que fue previamente testado con una muestra del alumnado para comprobar su idoneidad, no se ha administrado a una

100

Jos Luis Palacios

Anlisis estadistico de

una encuesta de satisfaccin de usuarios...

muestra de los alumnos que reciben una enseanza determinada, sino atodala poblacin de alumnos que la reciben, ya que la encuesta abarc a todos los alumnos de los grupos 1~ O y 10 E que cursaron La asignatura de Mtodos y Tcnicas de Investigacin Social en el curso 1999-2000 en la Escuela Universitaria de Trabajo Social de la Universidad Complutense de Madrid (su nivel de confianza y su margen de error tericos son, por consiguiente, dell 00% y de 0, respectivamente). Probablemente, el (presunto) inters de esta encuesta no slo radica tanto en la informacin que proporcionan sus resultados, cuanto en que resulta patente que las ESU pueden servir al profesorado, a las autoridades acadmicas y a los propios alumnos para mejorar la calidad de la enseanza universitaria a partir de la medicin ponderada de los puntos fuertes y dbiles de la misma.

estas dos ltimas que aqu operan como discriminantes> y tiempo de estudio dedicado a la carrera en general y a la asignatura en particular. Las segundas sirven para registrar la valoracin que los alumnos hacen de la enseanza de la asignatura en sus aspectos fundamentales (determinados en gran parte en virtud de las observaciones del alumnado): contenidos, dificultad, ritmo de tratamiento de los temas, medios didcticos empleados, textos recomendados, lecturas obligatorias, explicaciones del profesor y valoracin global de ste. Seguidamente se ofrecen los resultados meramente descriptivos de cada tem del cuestionario, en primer lugar, y los tratamientos estadisticos discriminantes, en segundo. El anlisis estadistico de los datos de la encuesta ha sido realizado con el programa informtico SPSS versin 9.01. 2.1. Estadsticos descriptivos

2. Anlisis estadstica de los resultados de la encuesta

El cuestionario de la encuesta distingue dos tipos principales de variables: discriminantes y valorativas. Las primeras sirven para perfilar sociolgica y actitudinalmente a los alumnos encuestados en virtud de su sexo, edad, grupo, orden de opcin en la eleccin de la carrera, razn para cursar la carrera, forma de acceso a la Universidad, simultaneidad con otros estudios y/o con el trabajo, valoracin general de la Escuela y valoracin del plan de estudios (variables valorativas

A) Variables discriminantes Consideramos variables discrirninantes todas las que hipotticamente pueden condicionar en mayor o menor grado la valoracin de las variables relativas a los distintos aspectos involucrados en la imparticin de la asignatura. Entre otras posibles, hemos seleccionado, por entender que son las ms indicadas, las siguientes: sexo, edad, curso (O o E) al que pertenece, orden de la Diplomatura en Trabajo Social en la eleccin primigenia del alumno entre las distintas carreras que podra cursar en la Universidad, razn por la que cursa esta carrera unicuadernos de Trabajo social 2001, 74: 99-lI?

101

Jos Luis Palacios

Anlisis estadstico de una encuesta de

satisfaccin de usuarios...

versitaria, via o modalidad de acceso a la EUTS, simultaneidad con otros estudios universitarios o no, actividad laboral, valoracin de la EUTS en general y valoracin del Plan de Estudios de la Diplomatura. El cmputo simple de frecuencias de las distintas categoras de estas variables, en valores absolutos y en porcentajes <eliminando los valores de no respuesta por su escasa entidad) arroja unos resultados como los que se expresan en las tablas siguientes: Sexo Hombres Mujeres Grupo de edad Hastal8aos l9a20aos 2la22aos 23a26aos 31 yriis aos Trabajo social como Primera opcin Segunda pcin Tercera opcin V.A. 24 157 VA. 16 64 38 11 14 V.A. 90 63 28 % 13 87 % 9 35 21 .6 8 % 50 35 15

tionario a los efectos de su cruce con la variables valorativas. Por lo dems, su consideracin no ofrece novedades importantes: el 87% del alumnado es femenino (una constante en la EUTS, aunque la tasa de feminizacin ha ido descendiendo paulatinamente), el 65% tiene menos de 23 aos y el 85% eligi cursar esta carrera en primera o segunda opcin. Razn para cursar rs. Por vocacin Por relacin con 1.aopcin Por ser formativa Otras V.A. 115 21 25 18 Va 64 12 14 lO

Estas tres variables, cuya distribucin de frecuencias acabamos de presentar, podran haberse obtenido a partir de la estadistica de matrcula de la EUTS y se han incluido en el cuescuadernos de Trabajo social
2001, 14: 99-117

Una muy amplia mayora (64%) eligi esta carrera por vocacin, en tantoque otras razones influyeron en mucha menor medida en la eleccin. Con respecto a una encuesta al alumnado de la EUTS de hace ya catorce aos (AZPEITIA, 1986), no puede decirse que en este sentido se hayan producido grandes variaciones, pues nuestro item responde a mi vocacin profesional de trabajar ayudando a la gente subsume en gran medida los tems de la de 1986 referidos a la vocacin y a la voluntad de servicio a la sociedad, que entonces obtuvieron un 22% y un 42% respectivamente. Por otro lado, tampoco ha variado muy substancialmente el origen formativo (modo de acceso) del alumnado: el 91% procede de enseanzas medias y de FP y slo una exigua minora presenta otra procedencia formativa.

1 02

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios...

Va de acceso a la EUTS Bach., BUP, ESO,COU Formacin Profesional Accesrtiayores 25aos

VA. 122 43

% 67 24 3 3

Actividad laboral No tr~bja Si, ajornadacompleta Si, a tiempo parcial S, ev tualmente

~V.A. ~Q 38 34

33 421

19
20

-~ Otra catrera en curso~ 6 3

Tbajos4 vol ntajiado Otra carrera finalizada

12

Tres cuartas partes del alumnado estudia solamente la Diplomatura y quines la simultanean con otros estudios manifiestan que el carcter de stos no es universitario y que se refieren a idiomas, informtica y similares. Simultaneidad con otros est~cIios No realiza otros estudios S (otra carrera> Si (otros no universitarios)

La valoracin que hacen los alumnos de la Escuela Universitaria de Trabajo Social en general, variable aqui considerada como discriminante, podemos calificarla de media-alta, pues un 43% la juzgan como bastante bien, pero un 52% la valoran slo como regular. Valoracin EUTS Muy bien V.A. 6 77 94 4 O % 3 43 52 2 O

V.A. 134 1 40

% 76 1 22

Bastante bien Regular Bastant&mal Muy mal

En lo que respecta a su actividad laboral, los alumnos que trabajan a jornada completa alcanzan el 21% (el turno de tarde en el que asisten a la EUTS se relaciona con este elevado porcentaje), mientras que slo llegan al 33% quienes solamente se dedican a estudiar El hecho de que un 7% declaren realizar trabajos de voluntariado seria chocante en cualquier otro lugar que no fuera la EUTS (slo un 2-3% de los jvenes universitarios espaoles es voluntario social, segn MARTIN SERRANO, 1999)

Similar valoracin recibe el Plan de Estudios de la Diplomatura, con el que un 59% del alumnado se encuentra ms bien satisfecho, mientras que un 22% dice sentirse bastante satisfecho. Finalmente, el registro de los tiempos de estudio semanales dedicados a la carrera en su conjunto y a la asignatura Mtodos y Tcnicas de Investigacin Social en particular pone de relieve que la mayora de los alumnos
cuadernos de Trabajo social
2001, 14: 99-lI?

103

Jos Luis Palacios

Anlisis estadistco de una encuesta de satisfaccin de usuarios...

Valoracin Plan Estudios V.A. Muy satisfecho Bastante satisfecho Ms bien satisfecho Ms bien insatisfecho Bastante insatisfecho Muy insatisfecho 3 39 106 22 9 2

% 2 22 59 12 5 1

(71% y 50%, respectivamente) emplean entre tres y diez horas semanales en estudiar la carrera y entre una y dos horas semanales en estudiar la asignatura considerada. Tiempo estudio carrera Ms de 10 hsemana De 6 alO h/semana De 3 a 5 h/semana Menos de 3 h/semana V.A. 23 59 68 28 % 13 33 38 16 % 9 11 50 30

Tiempo estudio asignatura VA. Ms de 4 h/semana De3a4h/semana De 1 a 2 h/semana Menos de 1 h/semana B) Variables valorativas 16 21 89 53

Hemos determinado que son variables valorativas todas aquellas que hacen referencia a distintos aspectos de la docencia de la asignatura Mtodos y Tcnicas de InvestiQacin Socuadernos de Trabajo Social 2001, 14: 99-177

cial. La valoracin de estos aspectos por parte del alumnado se ha medido con una escala numrica gradada de O (mnimo) alO (mximo>, en la idea de que es un tipo de gradiente al que los alumnos se hallan habituados y puede recoger con notable fiabilidad su calificacin como si de una escala de intervalo se tratase. A pesar de que en puridad esta escala es del tipo ordinal, las ventajas aritmticas que se obtienon al considerarla intervalar compensan el posible error cometido al asignarle propiedades que slo esta ltima posee (ello no obstante, hemos empleado en los cruces correspondientes un coeficiente para asociaciones de variables ordinales, como es la de Spearman, para ajustarnos a la verdadera naturaleza de la escala y no distorsionar la entidad de la asociacin). Actuando de este modo, podemos emplear estadisticos como la media o la desviacin tipica que contribuyen notablemente a aumentar y mejorar la comprensibilidad y la interpretacin de los resultados de la encuesta. Existen en el cuestionario de esta ESU otras dos variabbes valorativas referidas a la EUTS en general y al Plan de Estudios de la Diplomatura que en principio se utilizarn como discriminantes en relacin con los aspectos de la docencia considerados, pero que posteriormente se tratarn tambin como variables valorativas del servicio prestado, cruzndolas con otras variables discriminantes cuando tales cruces resultan relevantes y estadsticamente significativos. Las puntuaciones medias de las variables valorativas del cuestionario de la ESU se recogen en la tabla siguiente, que da

1 04

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios...

cuenta tambin de la moda y la desviacin tpica para las mismas en aras de enriquecer la informacin obtenida. Variables valorativas Contenidos de la asignatura bificultad de la asignatura Ritmo tratamiento temas Medios didcticos empleados Textosrecomendados Lecturas obligatorias Explicaciones del profesor Valoracin global del profesor Media Moda 6,70 6,02 6,73 6,00 6,10 5,60 7,40 7,40 7 7 7 7 5 5 7 8 1,47 1,78 1,75 1,93 2,06 2,07 1,60 1,45

Tal como puede verse, el aspecto de la docencia mejor valorado lo constituyen las explicaciones del profesor (7,40), que ofrece adems una desviacin tipica discreta, indicativa de una considerable homogeneidad en las valoraciones, seguido del aspecto relativo al ritmo de tratamiento de los temas que comprende la asignatura (6,73), aunque en este caso la puntuacin ms frecuente o moda es algo superior a la media (7,00). Inversamente, el aspecto peor valorado de la docencia lo constituyen las lecturas temticas de carcter obligatorio que se entregan al alumnado con objeto de reforzar su aprendizaje de la materia <5,60), aun-

que la moda es an inferior (5,00) y la s indica una considerable heterogeneidad de las puntuaciones (2,07, la ms alta de la tabla). El siguiente aspecto peor considerado se refiere a los textos recomendados por el profesor, en forma de bibliografia fundamental y complementaria para mejor seguir la asignatura (6,10), tambin con moda inferior (5,00) y s elevada (2,06>. Hay que hacer notar que el aspecto denominado Dificultad de la asignatura est escalado de tal forma que un O significa dificultad mnima y un 10 dificultad mxima, de manera que la puntuacin media obtenida (6,02) es indicativa de que el alumnado entiende que la asignatura presenta una ms bien notable dificultad (conclusin reforzada con el valor que alcanza la moda, 7,00, aunquelas arroja un valor considerable>. Se puede concluir, por tanto, a partir de esta primera aproximacin analitica a los resultados de la ESU, que segn la valoracin que hacen los alumnos de la docencia de la asignatura Mtodos y Tcnicas de Investigacin Social sus mayores fortalezas radican en la actuacin del profesor y el ritmo de sus explicaciones y sus mayores debilidades en los materiales escritos y en la bibliografa que apoyan la docencia. La ESU, por consiguiente, proporciona una informacin de fortalezas y debilidades de la imparticin de una asignatura obtenida cientificamente, con un rigor y una precisin que, obviamente, van ms all de la mera interpretacin subjetiva del profesor de su prctica docente (por ms que sta llegue a ser, eventualmente, acedada>. Si existen aspectos de una docencia que hay que mejorar, desde la ptica del alumnado, la ESU los
cuadernos de Trabajo Social 2001, 14: 99-117

105

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios..

pone de relieve con objetividad. La ESU nos informa sobre el qu mejorar, pero el cmo corre por cuenta del prof esor, que habr de establecer medidas correctoras, adaptaciones, refuerzos, etc., para que las debilidades dejen de serlo o lo sean en menor grado. Pero si bien estas conclusiones tienen carcter objetivo, se refieren a toda la poblacin que forma el alumnado, sin distinguir los posibles perfiles valorativos que tal vez ofreceran los alumnos en virtud de sus caractersticas individuales. Nuestra hiptesis es que caracteres como el sexo, la edad, la actividad laboral, etc., pueden influir en las puntuaciones otorgadas a los diferentes aspectos de la asignatura considerada. El resto de nuestro anlisis estadstico de los resultados de la ESU tiene por objeto, precisamente, comprobar si tal hiptesis se cumple. Val.

2.2. Relaciones entre variables discriminantes y valore uvas Hemos procedido a cruzar todas las variables discriminantes con todas la valorativas, expresando los cruces mediante el coeficiente de asociacin r de Spearman (que vara entre O y 1), para las variables ordinales, y mediante el coeficiente de asociacin V de Cramer (que varia entreO y 1), para las variables nominales, con objeto de observar cules arrojan valores relevantes y estadisticamente significativos y determinar qu variables descriptivas resultan discriminantes en la valoracin que hacen los alumnos de los distintos aspectos de la docencia considerados. El resultado de estos cruces es el que aparece en la siguiente matriz de asociaciones:

Val. T. est. T. est. Cont. Dific. Ritm. Dida. Text. Lect. Exp. Val.

EUTS Plan. Dip. Asig. Asig. Asig. Asig. Asig. Asig. Asig. Prof. Prof. Sexo Edad Crup. Opc. Raz. Accffi. Com, Trab. V. Eu. V Pa. ,234 ,162 .086 026 183 203 113 127 100 177 ,310 011 100 033 ,232 241 124 .197 137 058 155 307 196 262 .288 140 .190 147 ,168 177 209 ,233 152

,309 .096 426 133

142 028 ,265 172 196 271

012 080 080 249 ,303 181 176 146 .188 152 176 149 136 127 .102 057 .093

075 .067 062 155 196 163 203 198 246 167 207 ,344 254

.002 ,177 075 096 046 ,314 .252 .232 216 166 290 221 266 ,309 266 209 158 195 225 012 .086 091 181 180 227 075 028

~434 .264 234 024 .071 216

1,77 .039 1,00 0,16

020 .099 039 ,150

065 041 029 101 ,238 .135

En negrita, los coeficientes que cumplen la exigencia de un nivel de significacin de 90,05.

cuadernos de Trabajo social 2001, 14: 99-117

106

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

Del estudio de la matriz de asociaciones se desprende que existen muy pocos cruces de variables que puedan considerarse relevantes en lo que se refiere a capacidad de discriminacin de las variables descriptivas con respecto a las valorativas. Si a ello le aadimos la necesidad de cumplir la prueba de significacin con a 0,05 (en negrita), necesaria para poder rechazar la hiptesis nula de que los valores de los coeficientes no reflejan verdadera discriminacin y pueden deberse al azar, son an menos los coeficientes de la matriz dignos de tener en cuenta. En el caso de la variable Sexo, solamente su cruce con las variables Valoracin general de la EUTS, Valoracin del Plan de Estudios y Ritmo de tratamiento de los temas de la asignatura considerada arroja valores de cierta consideracin y estadisticamente significativos. En el de la variable Grupo de edad, slo los cruces con las variables Valoracin del Plan de Estudios, Textos recomendados para seguir la asignatura considerada y Valoracin global del profesor. En el de la variable Grupo (O o E>, slo los cruces con las variables Valoracin del Plan de Estudios y Tiempo de estudio de la asignatura considerada. Y asi sucesivamente con el resto de las variables discriminantes (basta observar la tabla con el criteno de que los valores de los coeficientes en negrita sean al menos de 0,25 aproximadamente). Los cruces de variables ms relevantes son, por supuesto, los que arrojan valores ms altos de los coeficientes, indicativo de que la variable descriptiva posee un mayor poder discriminante en la valo-

racin dada por el alumnado a un determinado aspecto de la docencia de la asignatura considerada. Tambin la valoracin otorgada a la EUTS en general y al Plan de Estudios de la Diplomatura en Trabajo Social operan en algunos casos como variables con poder discriminante. Veamos con algn detalle los cruces con valores de los coeficientes ms notables. El Sexo del alumnado tiene cierto poder discriminante en lo que se refiere a la valoracin dada al ritmo de tratamiento de los temas que comprende la asignatura considerada. Si reducimos las categoras de la escala 0-10 con la que hemos medido la vaoracin de esta variable a slo cinco (0-2, 3-4, 5-6, 7-8 y 9-10) para hacer ms fcil la lectura de la tabla de contingencia el resultado es como sigue: Puntuaciones dadas al ritmo de tratamiento de los temas (%) 0-2 Hombres Mujres 0 3 3-4 5-6 9 4 26 37 7-8 9-10 30 45 35 11

Como vemos, la tendencia es que los hombres valoran algo mejor el ritmo de tratamiento de los temas de la asignatura considerada que las mujeres, las cuales ofrecen mayor proporcin de puntuaciones ms bajas y menor proporcin de puntuaciones ms altas. Sin embargo, esta forma de tratar la informacin proporcionada por el cruce de las variables discriminantes con las valorativas resulta ms bien confusa y es difcil percibir las difecuadernos de Trabajo social 2001, 14: 99-117

107

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios.,.

rencias (por sexo, en este caso) de las que nos da noticia el coeficiente de asociacin (por ejemplo, los hombres no dan puntuaciones de O a 2, mientras que las mujeres arrojan un 3% en ese tramo de la escala, pero al mismo tiempo los hombres arrojan un 9% en el tramo 3-4 mientras que las mujeres dan slo un 4%). Ni siquiera la representacin grfica del cruce de variables proporciona una mayor claridad al respecto (figura 1). En cruces de variables discriminantes con ms categorias (por ejempo, grupo de edad) con cualquiera de las variables valorativas, la cantidad de casillas de la tabla de contingencia correspondiente es tan considerable (treinta, en ese caso) que resulta casi imposible hacerse una idea precisa de los caracteres de la tendencia de la asociacin entre las vanabes. Por consiguiente, parece ms adecuado utilizar un estadistico que sintetice mejor la informacin que el

porcentaje: la media, mejor que otro, puede cumplir esa funcin de sntesis informativa en los cruces de variables discriminantes con valorativas, de modo que lo usaremos en el anlisis ms detallado de los cruces cuyos coeficientes de asociacin son ms notorios (el de la variable Sexo con Ritmo de tratamiento de los temas, entonces, arroja unas puntuaciones medias de 7,45 y 6,62 para hombres y mujeres, respectivamente). As, el cruce de la variable discriminante Grupo de edad con las valorativas Textos recomendados para el se9uimiento de la asignatura y Valoracin 9loblal del profesor (contemplado aqui por ser en el nico cruce con esta variable que presenta alguna significacin estadistica), utilizando la media como estadstico de comparacin, arroja unos resultados indicativos de una tendencia a valorar mejor estas cuestiones cuanto mayor es la edad del alumno:

Puntuaciones dadas al ritmo de tratamiento de las temas dela asignatura, por sexo (%) 45 40
35 30
it
- -

25 20 15
10 5 o

[RE7F57~j

0a2

3y4

5y6

7y8

9y10

Figura 1
Cuadernos de Trabajo social 2001, 14:99117

1-08

____

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios.,.

Grupo de edad

Puntuaciones medias dadasa ls variables Valorain Textos global r&omensados pmfeso? 5,50 <5,70 5,54; 6,90 6,55 7,20 7,13 6;90 7,50 7,50 7,66 8,30 para cursar T.S. Por vocacin Por estar relacionada opo. l. Por ser formativa en gral. Otras razones

Puntuaciones medias. dadas a las variables Medios Ritmo dele dldctios asignatura . baedos 6,80 6,00

HastalSaos DelYa2Oa. De2l a22a. 0e23a26. 0e27a30a. 31 y ms aos

5,90

5,62

7,12 6,83

5,88 620

El cruce de la variable discriminante Razn para cursara carrera de Trabajo Social con las valorativas Ritmo de tratamiento de los temas de la asignatura y Medios didcticos usados en la docencia de la asignatura, usando la media como estadstico de comparacin, arroja unos resultados como los siguientes:

Si consideramos el cruce entre la variable discriminante Simultaneidad de la carrera con otros estudios con las valorativas Ritmo de tratamiento de los temas de la asignatura y Lecturas recomendadas para el estudio de la asignatura, usando la media como estadstico de comparacin, los resultar

Purituaoones medias dadas a Textos

recomendados y Valoracin global del profeso5 segn el grupo de edad 9 8,5 8 7,5 7 6,5 6 5,5 5 Hastal8 aos Del9a 2Oaos De2la 22a~os De23a 26aos De27a 3O~os 3lyms aos

.-lextos recomendados Valoracin global profesor Figura 2

cuadernos de Trabajo social 2001, 14: 99-lI?

109

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

Puntuaciones medias dadas a las variables

Ritmo de tratamiento de los temas y Medios didcticos usados,segn la razn para cursar la carrera 7,5 7 6,5 6 5,5 5 Por vocacin
~

1
Figura

4
a

Por ser formativa en Otns ra~nes Por estar gral. relacionada opc. 1~

Ritmo de la asignatura .-Medios didcticos usados

a
multaneidad de la carrera de Trabajo Social con un trabajo y la valorativa Textos recomendados para el seguimiento de la asignatura, usando igualmente la media como estadstico de comparacin, los resultados ponen de relieve la tendencia de que a mayor actividad laboral, mejor valoracin de esta variable:
Puntuaciones medias dadas a la variable

dos (despreciando los valores correspondientes al tem Otra carrera universitaria porque slo un alumno se halla en este caso y no es, por tanto, significativo> muestran la tendencia a valorar mejor estas variables por parte de aquellos alumnos que cursan al tiempo otros estudios: Puntuaciones medias dadas a las variables Ritmo de la Lecturas asignatura para estudio 6,71 3,00 6,90 5,52 2,00 5,92

Otros estudios al tiempo Slo diplcmaturaT.S. Otra carrera universitaria Otros estudios no universitarios

Actividad laboral

Textos para seguir la asignatura

A jornada completa A jornada parcial Slo eventualmente Trabajos de voluntariado Ninguna

6,95 6,16 6,20 5,45 5,44

Cuando tomamos en cuenta la relacin entre la variable discriminante SiCuadernos de Trabajo Social 2001, 14: 99-117

Finalmente, si cruzamos la variable Valoracin del Flan de Estudios de la

110

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios,..

Figura 4
Diplomatura con la valorativa referida a los Textos para seguir la asignatura y expresamos los resultados con el estadistico media aritmtica, la tabla correspondiente muestra una tendencia indicativa en general (con la inflexin de la categora muy satisfecho) de que se valora mejor esta variable cuanto ms insatisfecho se encuentra el alumno con el Plan de Estudios (sorprendente resultado de difcil interpretacin>:

Textos para seguir la asignatura,segn la actividad laboral 7,5 7 6,5 6 5,5 5 Ajornada completa Ajornada Slo Trabajos de parcial eventualmente voluntariado Ninguna

Puntuaciones medias dadas a la variable

Figura 5
cuadernos de Trabajo social 2001. 14: 99-117

111

Jos Luis Palacios

Anlisis estadistico de una encuesta de satisfaccin de usuarios...

Valoracin Plan de Estudios Muy satisfcho Bastante satifecho Ms bien satisfecho Ms bien insatisfecho Bastante insatisfecho Muy insatisfecho

Puntuaciones medias dadas a lvariable Textos para seguir la asi~natura 7,33 5,46 5,90 7,25 6,67 8,00

2.1 Valaracn de la EUTS y del Plan de Estudios de la Diplomatura en funcin de algunas caractersticas del alumnado Tambin puede ser interesante considerar la asociacin entre algunas variables discriminantes y las va-

lorativas referidas a la EUTS en general y al Plan de Estudios de la Diplomatura (que han operado a su vez como discriminantes de la valoracin de los distintos aspectos de la docencia de la asignatura Mtodos y Tcnicas de Investigacin Social). Segn los resultados obtenidos en la matriz de cruces, las variables Valoracin de la EUTS en general y Valoracin del Plan de Estudios solamente arrojan asociaciones relevantes y estadsticamente significativas con las discriminantes Sexo, Grupo de edad, Grupo de clase (O y E), Razn para cursar la carrera y Va de acceso a la carrera de Trabajo Social. Toda vez que estas variables no estn medidas con escalas numricas, sino ordinales, seria preciso utilizar otros estadsticos distintos de la media aritmtica para expresar las diferencias valorativas en funcin de las distintas categorias de las variables discriminantes. Como es sabido, el

Puntuaciones medias dadas a la variable Textos para seguir la asignatura, segn la valoracin del Plan de Estudios 8,5 8 7,5 7 6,5 6. 5,5,

7
Muy Bastante Ms bien Ms bien Bastante Muy saflsfecho sat sfecho sad sfecho insatisfecho insatisfecho insatisfecho Figura 6

cuadernos de Trabajo social

2001, 14: 99-117

112

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

estadstico ms apropiado para expresar la tendencia central de las escalas ordinales es la mediana, pero en este caso sta puede oscurecer los resultados de la encuesta, ya que en las tablas de contingencia con los cruces expresados en porcentajes se aprecian diferencias de valoracin quela mediana no recoge. En consecuencia, y para evitar reproducir aqu las farragosas tablas de contingencia en porcentajes (con hasta treinta y seis casillas, en el caso ms desfavorable>, hemos recurrido al artificio de dar valores numricos a las distintas categoras de las variables Valoracin de la EUTS y Valoracin del Plan de Estudios, de modo que en la primera vara entre 5 (muy bien> y 1 (Muy mal), y la segunda entre 6 (muy satisfecho) y 1 (muy insatisfecho>. Los resultados pueden observarse en la tabla siguiente: Valoracin de la EUTS por sexo
Sexo Mediana Media s

Hombre Mujer

3,00 3,00

3,33 3,50

0,64 0,60

Como vemos en la tabla, mientras que la mediana no presenta diferencias de la valoracin de la EUTS y del Plan de Estudios (con la salvedad de la variable Va de acceso a los estudios de Trabajo Social) en funcin de las variables discriminantes seleccionadas, la media aritmtica si permite observarlas (la desviacin tipica, s, aade informacin acerca de la dispersin de las valoraciones por categora de cada variable). As, podemos
cuadernos de Trabajo socia)

113

2001. 14: 99-117

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios..

ver que las mujeres valoran algo mejor tanto la EUTS en general como el Plan de Estudios de la Diplomatura (y, adems, presentan una mayor homogeneidad en sus valoraciones). Los alumnos ms jvenes valoran mejor el Plan de Estudios que los mayores (y tambin presentan una menor dispersin de sus valoraciones). El grupo E Conten. Val. Prof, 0,296 Dificul. 0,008
-~

de la docencia considerados. Para ello hemos cruzado todas esas variabies valorativas con la variable Valoracn global del profesor utilizando el coeficiente r de Spearman para expresar el grado de asociacin entre variables. La matriz de coeficientes de asociacin correspondiente es como sigue: Textos 0205 Lecturs. 0,194 Explies. 0,772

Ritmo ~ Didot. 0,375 0,384

En negrita, los coeficientes que cumplen la exigencia de un nivel de significacin de 20,05. valora algo mejor que el grupo O el Plan de Estudios. Los alumnos que cursan la carrera por vocacin o porque est relacionada con la carrera que hubiesen querido cursar como primera opcin se muestran ms satisfechos con el Plan de Estudios que los que la cursan simplemente porque la ven formativa Upar otras razones. Finalmente, son los alumnos que accedieron a la Escuela va bachillerato~ COU y mediante la prueba de acceso a la Universidad para mayores de veinticinco aos los que tambin se manifiestan ms satisfechos con el Plan de Estudios. 2.4. Valoracin global del profesor en funcin de las otras variables valorativas relativas a la docencia cte la asignatura Tambin hemos investigado hasta qu punto la valoracin global dada al profesor de la asignatura Mtodos y Tcnicas de Investigacin Social se relacona con la valoracin dada por los alumnos a los distintos aspectos
cuadernos de Trabajo social 2001, 14: 99-117

Como vemos, los aspectos de la docencia que se asocian de forma relevante y con significacin estadstica suficiente para ser tomados en cuenta con la Valoracin global del profesor son, sobre todo, los relativos al Contenido de la asignatura, el Ritmo de tratamiento de los temas que a componen, los Medios didcticos empleados y, muy especialmente, las Explicaciones proporcionadas por el profasor. Como el coeficiente no expresa relacin de causalidad, sino intensidad y direccin de asociacin, no puede decirse con total seguridad que la valoracin del profesor depende de las otras variables, pero si que quienes otorgan altas puntuaciones a esas vanabes las dan tambin al profesor (lo cual es notoriamente significativo>. Hay que hacer notar que el aspecto Dificultad de la asignatura apenas presenta relacin con la valoracin global del profesor, de modo que se podra interpretar que el hecho de que un alumno considere la asignatura ms o menos difcil no afecta a su valoracin del profesor.

114

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

3. A modo de resumen y conclusin

Podemos resumir el anlisis estadistco de la Encuesta de Satisfaccin de Usuarios aplicada al alumnado del turno de tarde del primer curso de la Escuela Universitaria de Trabajo Social sobre determinados aspectos de la docencia de la asignatura Mtodos y Tcnicas de Investigacin Social y de la Escuela y la Diplomatura en una serie de conclusiones principales. El anlisis estadstico de las variables discriminantes pone de manifiesto lo siguiente: El 87% del alumnado son mujeres y el 65% tiene entre 18 y 22 aos. El 50% de los alumnos cursa la carrera como primera opcin y el 35% como segunda. El 64% de los alumnos cursan la carrera motivados por la vocacin por el Trabajo Social. El 67% del alumnado que cursa la Dplomatura procede del bachillerato y el 24% de la formacin profesional. El 76% de los alumnos no simultanea la carrera con la realizacin de otros estudios y el 22% la simultanea con estudios no universitarios (idiomas, informtica, etc.). Slo un 33% de los alumnos no simultanea el estudio con actividad laboral de algn tipo (incluido el voluntariado). La variable Valoracin de la EUTS, considerada en primera instancia como variable discriminante de la valoracin de la docencia de la asignatura considerada, arroja un 43% de alumnos que califican la Escuela en

general como bastante bien y un 52% que la califican comoregular. La variable Valoracin del Plan de Estudios de la Diplomatura, tambin considerada en primera instancia como discriminante de la valoracin de la docencia, arrola un 22% de alumnos que dicen estar bastante satisfechos y un 59% que declaran estar ms bien satisfechos con el mismo. El anlisis estadstico de las denominadas variables valorativas de la docencia de la asignatura considerada permite concluir que: Los aspectos de sta que pueden considerarse sus fortalezas son las Explicaciones del Profesor, con un 7,40 de media en una escala 0-10 y el Ritmo de tratamiento de los temas de la asignatura, con un 6,73 en la misma escala. Los aspectos que, por el contraro, podran consderarse sus debilidades son las Lecturas obligatorias para seguirla asignatura, con un 5,60 de meda en una escala 0-10, y los Textos recomendados para seguir la asignatura, con un 6,10 de meda en la misma escaa (y moda 5,00, en ambas variables). La variable Dificultad de la asignatura, que es valorativa de la asignatura pero no de la prctica docente, alcanza una puntuacin media de 6,02 en la escala 0-10, en la que Oes mnima dificultad y 10 mxima dificultad (con una moda de 7,00>. La variable Valoracin global del profesor es la que recaba las ms altas puntuaciones del alumnado, con un 7,40 demediaen laescala0-1O, conunamoda de 8,00 y la desviacin tpica ms baja de todas las variables consideradas. Cuando cruzamos todas las variables discriminantes con todas las

115

cuadernos de Trabajo social 2001, 14: 99-lI?

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

valorativas, tomando en cuenta slo aquellos coeficientes que expresan el cruce con un valor de al menos 0,25 y una significacin estadstica de al menos 0,05, los resultados ponen de manifiesto lo siguiente: El Sexo de los alumnos solamente puede consderarse discriminante en el aspecto de la docencia Ritmo de tratamiento de los temas de la asignatura, dndose la tendencia de que los hombres valoran algo mejor este aspecto que las mujeres (un 7,45 de meda, en la escaa 0-10, en los hombres frente a un 6,62 de meda en las mujeres) La Edad de los alumnos resulta discriminante en el aspecto de la docencia Textos recomendados para el seguimiento de la asignatura y en la Valoracin global del profesor, observndose la tendencia de que a mayor edad del alumno mejor valoracin de aquel aspecto y del profesor La Razn para cursar la carrera de Trabajo Social resulta discriminante en los aspectos de la docencia Ritmo de tratamiento de los temas de asignatura y Medios didcticos usados, destacando la mejor puntuacin que dan al primero los alumnos que la cursan por ser formativa o por otras razones y la tendencia, en el segundo, a que punten mejor aquellos que cursan la carrera por motivos no vocacionales, La Realizacin de otros estudios de forma simultnea a la carrera es discriminante respecto de los aspectos Ritmo de tratamiento deles temas de laasignatuy Lecturas para elsgFri}&~F6de la asignatura, dndose la tendencia de que, en ambos aspectos, los alumnos otorgan puntuaciones ms altas s compaginan la carrera con otros estudios.
Cuadernos de Trabajo Social 2001, 14: 99-117

La Actividad laboral resulta discriminante solamente en relacin con el aspecto de la docencia Textos para seguir la asignatura, manifestndose de forma clara la tendencia de que a menor actividad laboral peor valoracin del aspecto mencionado. La Valoracin del Flan de Estudios de la Diplomatura tambin resulta solamente discriminante en relacin con el aspecto Textos para seguir la asignatura, con una tendencia general (y chocante) a valorar mejor ese aspecto cuanto peor se valora el Plan de Estudios>. Cuando tomamos en consideracin la valoracin de la EUTS en general y el Plan de Estudios de la Diplomatura en funcin de algunas caractersticas del alumnado, resulta que slo pueden ser consideradas discriminantes la variable Sexo en el primer caso, y las variables Sexo, Edad, Grupo de clase, Razn para cursar la carrera y la Va de acceso (origen) de los alumnos, en el segundo. Los resultados observables son los siguientes: Las mujeres valoran algo mejor que los hombres la EUTS en general. Las mujeres tambin valoran algo mejor el Plan de Estudios que los hombres. Los ms jvenes valoran mejor el Plan de Estudios que los mayores. El grupo E valora algo mejor el Plan que el grupo O. Los alumnos que cursan la carrera por vocacin y porque sta se reaciona con su primera opcin de estudios universitarios valoran significativamente mejor el Plan que los dems. Los alumnos que accedieron a la carrera va bachillerato y va prueba de acceso para mayores de 25 aos

116

Jos Luis Palacios

Anlisis estadstico de una encuesta de satisfaccin de usuarios...

valoran notoriamente mejor el Plan que los que usaron otras vias de acceso a la carrera de Trabajo Social. Finalmente, el anlisis estadstico de la variable Valoracin global del profesor en relacin con el resto de variables valorativas mediante el coeficiente de asociacin de Spearman permite conocer qu variables podran interpretarse como condicionantes en mayor grado de la calificacin dada al profesor. Todo parece indicar que los alumnos que mejor valoran los Contenidos de la asignatura y los Textos recomendados para seguirla y, sobre todo, los que mejor valoran el Ritmo de tratamiento de los temas, los Medios didcticos empleados y las Explicaciones del profesor son los que mejor valoran, asi mismo, al profesor, globalmente. Como hemos podido observar, una Encuesta de Satisfaccin de Usuarios aplicada en el mbito de la Universidad permite descubrir fortalezas y debilidades de una prctica docente y de otras cuestiones y orientar a las personas involucradas en las mismas, y muy especialmente al profesorado, en relacin con las acciones que han de establecerse para mejorar la calidad de la enseanza en determinados aspectos. La ESU, por tanto, es un instrumento tcnico-cientfico que objetiva la percepcin de los alumnos respecto de la imparticin de una asignatura y recoge su nivel de satisfaccin con los factores constituyentes de la misma. El anlisis estadstico de la informacin obtenida con la ESU que aqu se ha llevado a cabo no es, obviamente, ni exhaustivo ni el nico posible. Se pueden realizar otros anlisis distintos, ms densos o ms sofisticados (o menos>, pero 117

esta es una cuestin que depende de los objetivos evaluatvos del profesor, de la poltica de calidad de la Institucin, de las caractersticas de la asignatura o del tipo de docencia y, en definitiva, de las diversas circunstancias que hacen de cada ESU un caso especifico. Lo que se ha pretendido aqu poner de manifiesto es la evidente utilidad que un instrurnento de medicin como ste tiene, tambin, en el mbito universitario.

Bibliografa
Aspeitia, M., Expectativas y valoracin acadmica y profesional de los estudiantes de Tra0 bao social, 0, 207 Ss. Cuadernos de Tabajo Social, n Grupo de trabajode adaptacion de normas de calidad de la seccin de calidad en las administraciones publicas (1997>: Gua para la gestin de calidad de los servicios pblicos (Adaptacin de la norma ISO 9004-2), Madrid, Asociacin Espaola para la calidad Hayes, BE. (1995>, cmo medir la satisfaccin del cliente, Barcelona. Gestin 2.000. v~~ (1995>: Gestin de la calidad en la Administracin Pblica, Barcelona, IVAP y Gestin 2000. Ministerio de Administraciones Pblicas (1999): Guja de autoevaluacin para la administracin pblica, Ministerio de Administraciones Pblicas y ROE., Madrid. Pairo, 3M., Martnez-Tur, y. y Ramos, 3(1999>: El tringulo de la calidad de servicio: una aproximacin psicosocial, Papeles del Psiclogo, nm. 74. 48-24. Rosander. A. 0<1992>: La bsqueda de la calidad en los servicios, Madrid, Daz de santos. segundas Jornadas sobre Medicin y Meiora de los servicios PbLicos (1996), Madrid, Ministerio de Administraciones Pblicas. Martin Serrano. M. (1999>, Informe sobre polticas de juventud en Espaa, Madrid, INJuvE. Zeithmal. VA., Parasurarnan, A.y Berry, L. (1993>: Calidad total en la gestin de servicios, cmo lograr el equilibrio entre las percepciones y las expectativas de los consumidores, Das de Santos, Madrid. vii Congreso Nacional de la Calidad (Madrid, 16 y 17 de iunio de 1998>, Madrid, Asociacin Espaola para la calidad y Gestin 2000.

Jos Luis PALACIOS GMEZ

cuadernos de Trabajo social 2001, 14: 99-117