Академический Документы
Профессиональный Документы
Культура Документы
Considerem molt rellevant que entre les sis variables ms correlacionades amb la
renda es trobi el Nivell dinstrucci superior. Aquest fet ve a corroborar la relaci
existent entre el grau de desenvolupament econmic dun territori i el nivell
dinstrucci de la seva poblaci que altres estudis ja han posat en evidncia. Aquesta
correlaci, no obstant, no es dona de forma clara a tots els grups de comarques, com
sanalitzar ms endavant.261
261
Gil Martn, Joan Carles. Desenvolupament duna metodologia per a lestabliment de tipologies
microregionals: el cas de les comarques de Catalunya. Barcelona: UPC. Departament d'Organitzaci
d'Empreses.[Tesis doctoral], 1999, Conclusions, p. 180.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 210
Si nos ceimos a los temas de recursos humanos, podemos basarnos en la mencin que hacen
Kaplan y Sweeney de la afirmacin realizada por el gerente de una renovada fbrica de
motores Ford para ver la importancia que pueden tener los mismos en la captacin real del
valor de una compaa:
Las mquinas estn diseadas para que funcionen de forma automtica. El trabajo de
la gente es pensar, solucionar problemas, asegurar la calidad, y no limitarse a
contemplar cmo las piezas van pasando ante ellos. Aqu, consideramos que la gente es
solucionadora de problemas, no costes variables.262
Tal y como ya observamos en el captulo 3, al hablar del Cuadro de Mando Integral, los
empleados deben aportar valor a la compaa y la empresa debe invertir en su conocimiento y
en su formacin. Esa nueva situacin de inversin en intangibles tambin nos lleva a un
entorno en el que los sistemas de medicin y gestin que utiliza la organizacin no pueden
ser los mismos que en el pasado y requieren cambios importantes en los mismos que nos
permitan afrontar esa nueva realidad.
La figura del director de formacin, que se ha visto en tantos casos como un elemento de
segundo nivel dentro de las empresas, se transforma aqu en una figura clave para la
conservacin y adaptacin rpida al entorno de uno de los activos crticos que posee la
compaa, sus recursos humanos. En stos, como en cualquier otro tipo de activo de la
empresa y, desde una posicin estrictamente financiera, debemos invertir, si no queremos que
se transformen en activos obsoletos incapaces de afrontar la evolucin del mercado en el largo
plazo.
Ante esta situacin pretendemos realizar una pequea aportacin que ayude a los responsables
de formacin de las empresas a mejorar sus mtodos y herramientas tcnicas de gestin,
permitindoles disponer de formas para evaluar, desde un prisma econmico, cul es el
resultado que revierte en la empresa de la inversin que realizan en la formacin y en el
mantenimiento y/o mejora de las capacidades, destrezas y actitudes que presentan los
empleados en cualquier compaa.
262
Kaplan, R.; Sweeney, A. Romero Engine Plant . Boston: Harvard Business School, 1994.
263
Kaplan, Robert S.; Norton, David. Op. Cit., p.20.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 211
...l'anlisi del valor total d'un sistema, d'un programa o d'un curs de formaci en
termes tan socials com financers. ... L'avaluaci intenta valorar el cost-benefici global
de la formaci i no nicament la consecuci del seus objectius immediats. 264
264
Kenney Donnelly, mencionado por Pineda, Pilar. Avaluaci i Auditoria de la Formaci a lEmpresa.
Documento de Trabajo presentado como material de curso en el Programa Superior de Formaci. Barcelona.
Formaci Continuada - Les Heures, Fundaci Bosch i Gimpera. Universitat de Barcelona. (23 y 24 de abril
de 1997).
265
Las siguientes dimensiones de la evaluacin estn adaptadas de Pineda, Pilar. La Formaci a l'empresa:
planificaci i avaluaci. Barcelona: CEAC, 1994.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 212
El programa de formacin puede y debe influir en las dos primeras condiciones pero
difcilmente influir en las dos ltimas.
266
Kirkpatrick, Donald L. Op. Cit.
267
Kirkpatrick, Donald L. Op. Cit , p. 21.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 213
La teora de los cuatro niveles de Kirkpatrick es completada por Phillips268 quien aade un
quinto nivel a los cuatro mencionados por Kirkpatrick, el del ROI, Return on Investment.
La postura de Phillips defiende que, aunque el nivel cuarto de evaluacin permita medir
efectivamente, el resultado conseguido por un programa formativo y, aunque ste pueda haber
producido un resultado real en trminos de variables de negocio, todava pueden existir dudas
acerca de que el coste incurrido para la ejecucin de dicho programa haya podido ser
excesivo.
Algunas otras opiniones269 consideran que el ROI presenta tres problemas cara a su
utilizacin como medida del impacto de la formacin, debido a su extraccin de la ms pura
prctica financiera:
2. El ROI es una fotografa fija en el tiempo que te informa acerca de donde has estado
pero no puede predecir a donde irs.
A ttulo anecdtico, podemos afirmar sin temor a equivocarnos, que la aparicin de la ltima
obra de Phillips 270 en 1997, provoc una reaccin en Kirkpatrick, quien, casi 40 aos despus
de haber pub licado la primera edicin de su libro, public en 1998 la segunda edicin del
mismo 271 en la que escribe una referencia clara al quinto nivel de Phillips que reproducimos a
continuacin:
268
Phillips; Jack J. Op. Cit., p. 9-10.
269
Al respecto, ver el siguiente artculo citado por Kirkpatrick, Donald L. Op. Cit. , p. 87-98: Willyerd, Karie A.
Balancing your Evaluation Act. Minneapolis, MN: Training Magazine, 1997.
270
Phillips; Jack J. Op. Cit.
271
Kirkpatrick, Donald L. Op. Cit., p. 63.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 214
difficulty is to determine just what figures are meaningful and to what extent they are
related, directly or otherwise to the training. I almost laugh when I hear people say that
training professionals should be able to show benefits in terms of return on investment
(ROI) from a company standpoint. The same thought occurs to me when they expect
trainers to relate training programs directly to profits. Just think of all the factors that
affect profits. And you can add to the list when you consider all the things that affect
ROI.
Uno de los aspectos que deber afrontar nuestro modelo cuando se refiere al grado de
evaluacin o de profundizacin necesario sobre un programa de formacin, es el de el nivel
de evidencia necesario. En muchos casos, la alta direccin de las empresas requerir de una
evidencia ms all de una duda razonable para juzgar la bondad de un programa de
formacin, mientras que en otros solamente requerirn de una preponderancia de evidencias
que, puede significar, simplemente, lo que hayan odo comentar a los participantes o a sus
jefes. Los profesionales de la funcin de recursos humanos necesitan conocer cul es la
expectativa de su alta direccin y actuar de forma coherente. Veamos al respecto un ejemplo
tomado y traducido de Kirkpatrick. 272
El ratio de rotacin del personal en una determinada compaa era demasiado alto.
La razn principal para ello, segn haba concluido el departamento de formacin, era
que los supervisores y capataces estaban haciendo una pobre labor de orientacin y
entrenamiento de los nuevos empleados. Como consecuencia, un programa de
formacin sobre cmo orientar y entrenar empleados, se llev a cabo en abril para
todos los supervisores y capataces. Aqu tenemos las cifras del ratio de rotacin antes y
despus del programa de formacin de abril: Octubre 6%, Noviembre 7%,
Diciembre 5%, Enero 7%, Febrero 6%, Marzo 7%, Abril 6%, Mayo 4%, Junio
2%, Julio 2%, Agosto 2%, Septiembre 3%.
una forma objetiva de medir los resultados y mostrar que el objetivo de reducir el ratio
de rotacin se alcanz. 273
Sea cul sea el enfoque o modelo de evaluacin o auditora de la formacin que tomemos274 ,
suele existir siempre una dimensin econmica que habla de la necesidad de medir los
resultados econmicos de la inversin en formacin y/o los beneficios de la misma y los
costes que representa. En nuestro enfoque vamos a centrarnos exclusivamente en esos
aspectos econmicos sin prestar atencin al resto de los espacios de evaluacin.
Ese enfoque no viene motivado por que no se consideren importantes los restantes niveles o
espacios de evaluacin, todo lo contrario, entendemos que difcilmente se puede abordar la
evaluacin a los niveles cuarto o quinto, con la esperanza de descubrir resultados econmicos
positivos provenientes de una actividad de formacin si las actividades bsicas del
departamento:275 anlisis de necesidades, planificacin y desarrollo de los programas
formativos, gestin de los mismos, etc., no han sido llevadas a cabo con profesionalidad y
eficacia.
Supongamos el caso de una empresa que, sin realizar un anlisis serio de las necesidades de
formacin de su plantilla y, alarmada por las afirmaciones del director comercial de que las
ventas estn bajando, estima oportuno realizar un programa de formacin en tcnicas de cierre
de ventas para sus vendedores. La empresa no profundiza sobre si es sta la medida a tomar
cuando el problema real puede ser cualquier otro, por ejemplo, que un nuevo producto que
acaba de introducir la competencia est comiendo cuota de mercado al producto de nuestra
empresa. Obviamente si introducimos tcnicas de evaluacin de la formacin al nivel de ROI
o de resultados en una situacin como la del ejemplo, stos sern muy probablemente
nefastos.
Ello, por lo tanto, implica que la evaluacin es necesario realizarla a todos los niveles y en
todas las posibles dimensiones que presenta un programa de formacin si queremos que, al
nivel de la evaluacin econmica, el resultado de nuestro trabajo sea un dato fiable y con
273
Entendemos que este ejemplo que nos muestra Kirkpatrick contiene algunas afirmaciones peligrosas que no
son asumibles en nuestro modelo. De haber existido un anlisis de necesidades adecuado y un diseo y
desarrollo de la formacin adecuado, la contestacin al individuo avispado por parte del formador, debiera
haber sido diferente, por ejemplo: en el anlisis de necesidades realizado de manera previa al lanzamiento
del programa de formacin, detectamos que ninguno de los factores que usted indica haban tenido incidencia
sustancial en el ratio de rotacin interno y que el verdadero problema estaba en los capataces y supervisores.
En cualquier caso, nuestro modelo parte de la necesidad de que el resto de funciones del departamento de
formacin se realice de una forma profesional y a conciencia, si no es as, difcilmente vamos a obtener
resultados fiables y satisfactorios.
274
Se han extendido mo delos completos de auditora de la formacin que pretenden ser un recurso auditor para
analizar la eficacia y la eficiencia de la funcin de formacin en las organizaciones. La mayora de estos
modelos parten, sin embargo, de una perspectiva pedaggica que acta como eje vertebrador del mismo. Un
ejemplo de modelo de evaluacin es el modelo MAFDENA presentado por Pineda, Pilar. Avaluaci i
Auditora de la Formaci a lEmpresa. Documento de Trabajo como material de curso presentado en el
Programa Superior de Formaci. Barcelona. Formaci Continuada - Les Heures, Fundaci Bosch i Gimpera.
Universitat de Barcelona. (23 y 24 de abril de 1997). En el mismo se detallan una serie de espacios de
anlisis de la formacin que son cinco: legal, social, pedaggico, organizativo y econmico.
275
Una descripcin en ms detalle de estos aspectos puede verse en captulos anteriores.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 216
Creemos que es imprescindible hacer un importante esfuerzo por disear modelos potentes
que permitan acercarnos a la valoracin de la rentabilidad sobre la inversin en formacin con
todas las salvedades que ello comporta y que iremos viendo a lo largo de este captulo. Ello es
as porque partimos de la concepcin de que la empresa debe conseguir resultados positivos y
que sus diferentes funciones y departamentos deben ser consideradas como centros de
beneficio 276 . En esa lnea, Francisco Segrelles escribe parafraseando a Peter Bramley:
Por ello uno de los objetivos a conseguir por el presente trabajo es el estudio y diseo de un
modelo de medida de la rentabilidad de la inversin en formacin, analizando sus
caractersticas y/o limitaciones de aplicacin. Para ello deberemos diseccionar las actividades
de formacin en funcin a las problemticas que abordan y disear, para cada uno de los
bloques resultantes, los instrumentos pertinentes. Junto con estos instrumentos de medida
incluiremos comentarios, en su caso, sobre las tcnicas intermedias que nos permitirn llegar
a medidas aproximadas de la rentabilidad de la formacin y que permitirn la utilizacin de
los mismos.
276
En captulos anteriores de este trabajo podemos ampliar ms informacin sobre qu entendemos por centro de
beneficio y sobre la gestin de la empresa orientada al beneficio.
277
Segrelles Cucala, Francisco. Evaluacin de la Formacin. Revista de AEDIPE [Madrid] (Junio 1996), p.
45-46.
278
Recordemos que el trabajo de campo se realiz en base a un universo de grandes empresas con sede social en
Catalunya y con ms de 250 empleados y de 4.000 MM. de pesetas de facturacin y, por tanto, las
conclusiones extradas son vlidas en ese entorno.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 217
- Es pequeo el nmero de empresas que han realizado en alguna ocasin intentos por
efectuar medidas de la evaluacin de la transferencia al puesto de trabajo, y todava
ms pequeo es el nmero de las que han intentado hacer mediciones sobre la
evaluacin del impacto econmico. Los intentos realizados han utilizado todo tipo de
sistemas de medicin. El modelo ha de ser lo suficientemente sencillo como para que
permita que muchas ms empresas se apunten a esta prctica.
- Sin embargo, una gran mayora de las empresas dice desconocer totalmente la
rentabilidad que, tericamente, proporciona la inversin en formacin. En contraste
con el dato de conocimiento de la inversin que hemos recordado en el prrafo
anterior, tan slo un 8,7% de las empresas reconocen tener algn conocimiento
aproximado de la rentabilidad que proporciona la inversin en formacin.
- Debe tener en cuenta las orientaciones estratgicas de la compaa y debe ser selectivo
en cuanto a su aplicacin.
279
El modelo de control de costes para el rea de formacin est descrito con todo detalle en el captulo 5 de este
trabajo.
280
Si seguimos de nuevo los razonamientos de Kirkpatrick, Op. Cit., p. 63., el importe que se debe invertir en la
evaluacin de 4 nivel se determina por el importe de coste del programa formativo a evaluar, los resultados
potenciales que puede generar dicho programa en el tiempo y el nmero de veces que el programa se repetir.
Cunto ms alto sea el valor de los potenciales resultados y mayor el nmero de veces que se repita un
programa, ms tiempo y dinero deben invertirse en su evaluacin
281
En este tema, recordamos la disquisicin entre preponderancia de evidencias y evidencia ms all de la duda,
planteada por Kirkpatrick y abordada ms arriba en este captulo. Entendemos que la preponderancia de
evidencias puede no ser suficiente en muchos casos y que, independientemente de que pueda existir una
disposicin a aceptarla por parte de la alta direccin, no debemos, como responsables de nuestro centro de
beneficios, permitir anlisis que puedan ser incorrectos.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 219
Antes de comenzar las definiciones previas a describir las etapas de nuestro modelo de
anlisis de la rentabilidad de la actividad de formacin al que, en adelante, nos referiremos de
forma abreviada como MARF, parece imprescindible terciar en la polmica entre Kirkpatrick
y Phillips que indicbamos en el anterior apartado acerca de s tena sentido (Phillips) o no
(Kirkpatrick) 283 la aplicacin de un quinto nivel de evaluacin que pretenda obtener el ROI de
la formacin.
MARF no va a entrar en tal polmica ni va a utilizar como tal la teora de los cuatro niveles
(Kirkpatrick) o de los cuatro niveles ms uno (Phillips), 284 puesto que nos vamos a basar de
una forma total en la necesidad de la compaa dndole un marco de actuacin por el que se
llegue, siempre que sea posible, al nivel de ROI y, en los casos en que no lo sea, al nivel de
indicadores de resultados de cualquier tipo. Ello implicara llegar en una gran mayora de
casos al nivel quinto o al cuarto en funcin a las caractersticas de la empresa o del tipo de
actividades a evaluar.
Por otro lado y, tal y como se coment en el apartado anterior de este mismo captulo, MARF
no pretende sustituir al resto de niveles de evaluacin (niveles uno, dos y tres segn
Kirkpatrick) ni minusvalorar la necesidad de la auditora y evaluacin de la formacin en
otros espacios distintos (legal, social, pedaggico y organizativo si seguimos a Pilar Pineda en
su modelo MAFDENA de auditora de la formacin).
282
Wilensky, citado por Ramrez del Rio, Antonio. Op. Cit., p. 43.
283
Para una visin en detalle sobre esa diferencia de opiniones entre ambos autores y las fuentes bibliogrficas
consultadas, consulten el captulo 6 apartado 1 de este mismo trabajo.
284
De nuevo recordar que en el anterior apartado de este mismo captulo encontrarn sobradas referencias a estas
teoras. En el caso de Phillips, nos hemos atrevido a rebautizar su aportacin como la teora de los cuatro
niveles ms uno en lugar de la teora de los cinco niveles, ya que utiliza los cuatro niveles de Kirkpatrick
y le aade uno de su propia creacin.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 220
MARF quiere ser un complemento al resto de espacios en los que se mueve la evaluacin de
la formacin y una alternativa, basada en la realidad y necesidad mostrada por la gran
empresa catalana, 286 a los modelos tradicionales de evaluacin econmica de la formacin.
Veremos que la implicacin de los diferentes directores, que ya debe existir en otros procesos
del rea de formacin como el anlisis de necesidades o la planificacin, torna a ser aqu
especialmente importante, en concreto en algunas de las fases del plan de evaluacin MARF,
como pueden ser la fijacin de indicadores o la aplicacin de algunas de las metodologas de
recogida de datos que veremos ms adelante.
Por ltimo, recordar lo que ya se coment en el apartado anterior, MARF - ni ningn otro
modelo de evaluacin de la formacin en el espacio econmico o de resultados de la misma
de cualquier tipo-, tiene poco sentido sino contemplamos la funcin de formacin como un
todo integrado en la que la importancia de un correcto anlisis de necesidades, de una
cuidadosa planificacin de la formacin y de una exquisita puesta en escena de las acciones
285
Phillips, Jack J. Op. Cit.
286
Encontrarn detalles sobre las caractersticas del universo de empresas analizadas en el captulo 4 de este
trabajo.
287
En cualquier caso, la importancia de los criterios de aplicacin y de que la organizacin comulgue con ellos,
es especialmente importante en MARF. Creemos, sin embargo importante recordarle al lector que, en
muchos otros casos de medicin de resultados en un entorno mucho ms consolidado cientficamente que el
que nos ocupa, la obtencin de resultados finales tambin est altamente mediatizada por los criterios de
aplicacin. Por ejemplo, en la contabilidad general, no olvidemos que la aplicacin de unos u otros criterios
de amortizacin o de periodificacin de gastos, pueden influir sustancialmente en el resultado final de una
empresa. De ah que, dada la mayor madurez cientfica en estos temas, existan ya hace mucho tiempo, claras
regulaciones -incluso legales- al respecto.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 221
de formacin resultado de los dos procesos anteriores, son piedra fundamental de la bondad
del impacto de la formacin en la compaa que, MARF o cualquier otro modelo, tan slo se
encargarn de certificar.
Hecho este prolegmeno que entendemos necesario para situar adecuadamente las
pretensiones de nuestro modelo, estableceremos una serie de conceptos y definiciones que
ayudarn a configurar las diferentes etapas imprescindibles para dibujar y comprender el
funcionamiento del modelo como un conjunto.
Nuestro modelo de anlisis de la rentabilidad, se inicia en realidad antes del comienzo de las
propias actividades de formacin. Ello implica que las empresas deben disear su plan de
evaluacin MARF de manera paralela al diseo de los planes de formacin en s. Esa actitud
permite prever de antemano los recursos necesarios para asignar al MARF, aplicar los
conceptos y mtodos que se describen a continuacin de una forma lo ms eficiente posible y
al menor coste.
El esquema del plan de evaluacin MARF, ser de hecho un dibujo del propio modelo y
contemplar todos los pasos y bloques de informacin necesarios para ejecutar el plan y que
se describen a continuacin.
Tal y como ya indicamos, y as lo certifican las conclusiones de nuestro trabajo de campo, los
sistemas de medicin para la evaluacin de la formacin a los niveles de resultado y de ROI,
suelen ser complejos e implicar un cierto coste.
288
El plan de evaluacin MARF debera tener una duracin prevista igual a la del plan de formacin operativo
de la compaa. En cualquier caso sugerimos que esta sea de un ao o periodos inferiores pero,
preferiblemente, no debera realizarse en periodos superiores dado lo cambiante del entorno al que estn
sometidas las empresas (en el captulo cuatro podemos constatar esa realidad en nuestro trabajo de campo).
289
Obviamente, esa es una decisin que pertoca a cada empresa. Si una empresa, por el motivo que sea,
considera oportuno aplicar el modelo a absolutamente todas sus actividades, no hay nada que objetar. Sin
embargo, nuestra recomendacin es la de la utilizacin de los filtros que describimos a continuacin.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 222
Entendemos como filtros de evaluacin aquellos parmetros que nos servirn para discernir
cules de las actividades de formacin sern some tidas al MARF y hasta qu nivel.
- Gran impacto previsto en los resultados. Todas las actividades del plan de
formacin sobre las que presupongamos que pueden tener un impacto especialmente
importante en los resultados deben ser sometidas al MARF. Al igual que en el caso
anterior, podemos tener multitud de ejemplos. Supongamos que una empresa adquiere
un nuevo paquete de software de gestin que utilizar todo el personal administrativo
y que puede reducir sustancialmente los costes de comunicaciones, papel y tiempo de
empleados. Para su correcta utilizacin se ponen en marcha una serie de acciones de
formacin. Otro caso sera el de la deteccin de problemas en la negociacin de
precios por parte del departamento de compras de la compaa por falta de habilidades
negociadoras. Para su solucin se inicia una actividad a medida de formacin.
290
MARF es un modelo abierto y, por tanto, todos los parmetros, subdivisiones, etc. que se indican, constituyen
una sugerencia basada en nuestra investigacin de campo y en nuestra experiencia previa ms que un dogma
de fe. Obviamente, cada empresa puede y debe modificarlos como estime oportuno.
291
En lo que se refiere a los conceptos de inversin en formacin y las diferentes tipologas de costes que
implican, encontrarn definiciones especficas y referencias en el captulo cinco del presente trabajo.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 223
forma tradicional en que se ha hecho formacin en la compaa, esa actividad debe ser
sometida al MARF. Supongamos el ejemplo de una compaa de seguros que, por
primera vez, quiere sustituir los tradicionales seminarios de formacin de producto
para sus agentes, por un curso de formacin a distancia. En ese caso, dada la
novedosidad para la compaa, es conveniente aplicar el MARF a esa actividad de
formacin.
En ocasiones, ser bastante normal que, si una actividad de formacin cumple con uno de los
filtros, por ejemplo, con el de que tenga una importancia estratgica para la compaa,
tambin cumpla con algn filtro ms, por ejemplo, que la inversin total realizada en la
misma sea elevada en relacin a la inversin total del departamento o que llegue a un
porcentaje importante de la plantilla.
292
Utilizaremos aqu la frmula de Jac Fitz-Enz que mencionbamos en el captulo anterior: Coste por persona y
hora igual al coste total del programa de formacin dividido entre el nmero de personas formadas por las
horas de formacin que han recibido.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 224
Esta subdivisin en categoras de formacin tiene una gran importancia a la hora de definir el
tipo de indicadores que sern de aplicacin para cada una de ellas, la metodologa de recogida
de datos, la metodologa de aislamiento de los efectos de la formacin, etc.
293
Dentro del trabajo de campo, complementario al que se ha llevado a cabo como fuente principal de
informacin para esta tesis doctoral, realizado por Olga Pons como base para la presentacin de su tesis
doctoral La Formaci a les Organitzacions: una perspectiva des del disseny organitzatiu de Mintzberg.
dentro del programa de doctorado del Departament d'Organitzaci d'Empreses de la Universitat Politcnica
de Catalunya, se confirma que del total de la formacin realizada por las empresas encuestadas en los
ltimos doce meses, casi un 70% se concentra en cuatro categoras temticas o de problemas a abordar:
Habilidades directivas con un 20,6%, Gestin comercial con un 11,0%, Sistemas de produccin y
tecnologas de la informacin con un 17,7%, Calidad total con un 20,1%. Si aadimos la formacin sobre
temas de idiomas y ofimtica y la relacionada con la prevencin de riesgos laborales, es decir,
incrementamos las categoras temticas hasta seis, ello nos explica un 90% de la formacin realizada por las
empresas.
294
Fitz-Enz, Jac. La medida del impacto de la formacin. Documento de Trabajo como material de curso
presentado en el Centro Europeo para la Formacin de Directores. Madrid, Julio 1990.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 225
Es este uno de los pasos ms crticos de MARF y debe tambin realizarse previamente a la
realizacin de la actividad formativa. El establecimiento de indicadores de comprobacin va
ntimamente ligado a la definicin del problema a abordar y, para el que, hemos credo
oportuno, disear y planificar una actividad concreta de formacin.
295
Parte del contenido de este bloque est adaptado de Phillips, Jack J. Op. Cit..
296
Este aspecto es mencionado por Phillips, Jack, J. Op. Cit., p.. 13, como una de las principales barreras hacia la
implantacin del ROI, la falta de destrezas y orientacin hacia los resultados de los responsables de
formacin. Tal como dice Phillips, parafraseando a Pogo, We have met the enemy and he is us . En el caso
de nuestro universo de empresas, detectamos a travs de las conclusiones de nuestro trabajo de campo, un
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 226
- Para cada actividad de formacin a medir a travs del MARF, debe existir un
nmero corto de indicadores de comprobacin (mximo tres, aunque uno o dos
seran preferibles).
En muchos casos, cualquier sistema de evaluacin que permita obtener datos fiables del
impacto de la formacin al nivel de los indicadores de comprobacin, ser ya suficiente para
la alta direccin de la empresa. Sin embargo, en el caso de MARF vamos a dar un paso ms
que nos permita trascender del dato analtico y cualitativo que, en muchas ocasiones,
representar el indicador de comprobacin, para saltar a otro dato, vinculado al mismo, pero
medible directamente en unidades monetarias.
Recordemos que, en la descripcin de las caractersticas que deben cumplir los indicadores de
comprobacin, mencionbamos que en la medida de lo posible, los indicadores de
comprobacin deben tener una inclinacin econmica. Es decir, siempre que podamos,
debemos intentar vincularlos a aspectos de ndole econmica del negocio.
Y tambin que, otra de las caractersticas a cumplir, era que esos indicadores de
comprobacin tienen que ser medibles, concretos, expresados de forma sencilla y como un
resultado a conseguir, en algunos casos con un horizonte temporal y vinculados con claridad
al punto principal del problema o problemas a resolver.
enorme inters, motivacin y convencimiento hacia la necesidad de profundizacin en este tipo de tcnicas.
Esperamos, por ello, que ese aspecto no se convierta en una barrera de aplicacin en nuestro caso. En el
captulo 4, pueden revisar las conclusiones del trabajo de campo en ese particular.
297
Parte del contenido de este bloque instrumental de MARF est adaptado de Phillips Jack J., Op. Cit., p. 114-
134.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 227
Hay multitud de maneras de construir los factores de conversin, todas ellas ligadas al propio
indicador de comprobacin al que afectan. As tendremos factores de conversin relacionados
con:
1. El coste de la calidad.
La aplicacin de los factores de conversin estar siempre matizada por el factor tiempo. En
efecto, el impacto econmico de un determinado programa de formacin, puede concentrarse
en unos pocos meses o, por el contrario, extenderse a lo largo de los aos. Probablemente,
para cada indicador de comprobacin y para cada factor de conversin, podra fijarse un
horizonte temporal de extrapolacin de los datos obtenidos. En el caso de MARF y, debido a
razones de prudencia a la hora de obtener la informacin y transformarla en datos
298
Un ejemplo de la utilizacin de este tipo de datos podra ser el de la conversin de un ratio de rotacin de
personal tcnico. De no disponerse ya en la empresa, sera muy costoso elaborar la informacin necesaria
para conseguir ese factor de conversin. Alternativamente, en el caso de que la patronal o los sindicatos,
hayan publicado informacin general de este tipo, podemos recurrir a ella aunque el nivel de exactitud del
dato final sea menor.
299
En el caso de seleccionarse factores provenientes de ese tipo de estimaciones, ello deber tenerse en cuenta al
disear las fases posteriores de recogida de datos.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 228
Siempre que sea posible, debemos intentar aplicar factores de conversin que transformen en
unidades monetarias a los indicadores de comprobacin. Sin embargo, no debemos forzar la
situacin de forma artificial y utilizar factores de conversin en ocasiones, cuando no
estamos convencidos de su idoneidad.
No menos importante que los pasos anteriores, est la decisin de ver, para cada actividad de
formacin, a qu colectivo se aplican los pasos que veremos a continuacin. En efecto, eso
nos puede llevar a tres posibilidades:
- Aplicarlo a todo el universo. Los pasos posteriores del modelo se aplicaran, por lo
tanto, a todo el personal que ha pasado por la actividad de formacin. Ello implicara
un mayor coste pero una mayor fiabilidad de los datos. Esta opcin puede ser til para
programas de alcance muy reducido entre la plantilla, aquellos que van dirigidos a un
colectivo muy especfico, etc.
- Aplicarlo a una muestra relativamente amplia del colectivo a formar. Los pasos
posteriores del modelo se aplicaran, por lo tanto, a una parte porcentualmente
importante (entre el 20 y el 40%) del personal que ha pasado por la actividad de
formacin. Los datos obtenidos se extrapolan al total del universo. Esta opcin es til
para actividades de formacin de medio alcance y permite una fiabilidad razonable de
los datos con un coste medio.
- Aplicarlo a una muestra reducida del colectivo a formar. Los pasos posteriores del
modelo se aplicaran, por lo tanto, a una parte porcentualmente pequea (entre el 5 y el
15%) del personal que ha pasado por la actividad de formacin. Los datos obtenidos
se extrapolan al total del universo. Esta opcin es til para actividades de formacin
masivas que implican a un nmero muy elevado de personas. La fiabilidad de los
datos es, obviamente, menor pero tiene la ventaja de que permite operar con unos
costes reducidos. En estos casos, una seleccin adecuada y neutra de la muestra, as
como la aquiescencia de los directivos implicados, cobran especial importancia. En
este caso se podran utilizar como ayuda a la toma de decisiones -mtodos de
tabulacin estadstica para comprobar el nivel de fiabilidad que aporta cada tamao
muestral.
300
Probablemente puedan levantarse voces en contra y, con cierta razn sin nos atenemos al purismo de
medicin del impacto, contra esta convencin. Es imprescindible recordar que la rentabilidad que
obtendremos ser siempre un dato sinttico y que, en el modelo debe primar su simplicidad de aplicacin por
encima de otras consideraciones, tal y como se concluye del trabajo de campo descrito en anteriores
captulos de este trabajo.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 229
El siguiente paso consistir en la eleccin del mtodo de recogida de datos. Ello podr tener
que realizarse:
- Despus de finalizar la actividad de formacin. En todos los casos tendr que existir
esta medida posterior a la formacin. El grado de posterioridad variar para cada caso
y ser fijado por los responsables de formacin de manera que asegure que los datos
recogidos evalan la situacin mantenida301 que es la que permite la transferencia.
En cualquier caso esa posterioridad no debera llevarse ms all de un plazo de 3 a 4
meses, tras haber finalizado la formacin ya que plazos superiores podran detectar la
interferencia de otros aspectos no relacionados con la propia actividad de formacin.
Para cada uno de los programas de formacin y, por tanto, para cada uno de sus indicadores,
deberemos seleccionar un mtodo de recogida de la informacin, teniendo en cuenta la
fidelidad de los datos que debemos de recoger y el coste de la recogida de los mismos.
Paralelamente a la eleccin del mtodo de recogida de datos, ser importante tambin fijar
cul ser la fuente de la que obtendremos los mismos. En este aspecto, podemos elegir entre:
3. Los jefes de los participantes. Otra fuente importante de datos que, se supone, tiene
un elevado inters en el proceso y deben estar implicados en el mismo. Pueden verter
su opinin sobre la utilizacin que, de las nuevas destrezas, estn haciendo sus
subordinados.
301
Beau, D. 100 Fiches de Pdagogie des Adultes. Paris: Les ditions dOrganisation, 1982.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 230
4. Los subordinados de los participantes. Cuando son los jefes los formados, sus
subordinados pueden aportar informacin sobre si se estn produciendo cambios de
actitudes entre sus superiores.
- Entrevistas de seguimiento. Las entrevistas pueden realizarse por parte del personal
de formacin, por parte del jefe del participante o por parte de terceras personas.
Permite captar aspectos e incluso mostrar pistas de xito en la aplicacin de las
destrezas aprendidas que escapan a los cuestionarios.
302
Los medios que mencionamos estn adaptados de Phillips, Jack J. Op. Cit., p. 42-86.
303
En cualquier caso, entendemos que, la descripcin de los posibles mtodos de recogida de datos constituye
una ayuda y una orientacin para los usuarios de MARF pero se aleja del objetivo de nuestra investigacin y
de nuestro modelo. Los mtodos de recogida de datos son herramientas, como pueden haber otras, de las que
se nutre nuestro modelo, para conseguir su finalidad ltima. No entraremos en detalle, por lo tanto, en la
descripcin y valoracin de cada uno de estos mtodos que podran ser perfectamente objeto de una
investigacin ad-hoc.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 231
empresa, que dispone de un registro de seguimiento de los mismos, o puede ser ste
fcilmente construible, estamos ante un buen mtodo de conseguir los datos que
necesitamos.
- Tareas resultado de un programa. Son tambin una cierta variacin del mtodo de
los planes de accin y aplicable a programas simples y con impacto en proyectos de
corto plazo. Los participantes, de hecho, completan el programa mediante la
realizacin on-the-job de tareas pactadas en el mismo que incluyen la utilizacin de
lo que han aprendido en el programa y que estn directamente relacionadas con el
proyecto que ha motivado la realizacin del mismo.
Hemos descrito brevemente aqu una serie de mtodos que nos permiten recoger los datos
necesarios de impacto para continuar con nuestro proceso de evaluacin MARF. No son stos
los nicos mtodos y, probablemente, puedan existir otros o, en empresas determinadas, se
puedan disear otros sistemas especficos. En cualquier caso, la eleccin del mtodo de
recogida de datos es un tema importante. Esta eleccin debe realizarse por parte del
departamento de formacin, en connivencia, en su caso, con los directores responsables del
bloque a formar.
La eleccin del mtodo de recogida de datos, debe hacerse inmediatame nte despus de la
fijacin de los indicadores de evaluacin, tiene que ser, por tanto, previa al desarrollo del
propio programa e incluir en el diseo del mismo, cuando sea necesario, los aspectos de
metodologa de recogida de datos que sean pertinentes.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 232
A la hora de seleccionar el mtodo de recogida de datos deben tenerse en cuenta una serie de
factores. 304
3. El tiempo que deben destinar los jefes inmediatos de los participantes a facilitar datos
o al proceso de evaluacin en general.
8. El sesgo cultural de alguno de los mtodos que pueden no ser bien vistos en
determinadas empresas.
En cualquier caso, algunos de estos factores que, efectivamente, han de ser tenidos en cuenta,
sobre todo los relacio nados de una u otra forma con el coste de la implantacin del modelo de
recogida de datos, deben ser objeto de una especial reflexin en el caso de su consideracin
dentro de MARF.
A diferencia de la consideracin de estos factores dentro de otros modelos que puedan ser
menos integrales que MARF, en nuestro caso ya existe una sensibilidad previa 305 hacia la
dificultad tcnica y/o el coste de aplicacin de los mtodos de recogida de datos. Esta
sensibilidad, se refleja en una serie de pasos previos del propio modelo.
En segundo lugar, tenemos la seleccin previa del colectivo formado al que se le aplicarn los
mtodos de recogida de datos propios de MARF. Ya reconocemos implcitamente en esta fase
304
De nuevo citamos aqu a Phillips, Jack J. Op. Cit., p. 80-82.
305
No debemos olvidar que, los resultados del trabajo de campo que nos guan a la hora de disear los aspectos
crticos de nuestro modelo y que estn detallados en el captulo 4 de este trabajo, afirman sin lugar a dudas,
que uno de los motivos ms importantes por el que las empresas no profundizan en la evaluacin del impacto
econmico, es la complejidad tcnica del procedimiento. Intentamos limitar, en el caso de MARF, la
complejidad tcnica, al mnimo imprescindible y el modelo refleja en sus etapas todas las posibles vas de
limitar esa complejidad.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 233
Esta fase del modelo 307 va ntimamente ligada a las fases anteriores, en especial a la de la
fijacin de indicadores y mtodo de recogida de datos.
Este es uno de los problemas principales con el que se encuentran las empresas a la hora de
intentar evaluar el impacto econmico de la formacin. En efecto, sea cul sea el tipo de
indicador de comprobacin que decidamos utilizar, no sabemos nunca a ciencia cierta cunta
de la variacin en el mismo ha podido ser producida como resultado de la actividad de
formacin y cunta ha podido ser producida por otros factores externos a la misma.
La actitud de MARF ante este importante aspecto va a ser la de preguntar primero a los
responsables de la empresa cul es el nivel de incertidumbre que estn dispuestos a aceptar.
Volveremos para ello sobre nuestros pasos y recordaremos la interpretacin de Kirkpatrick
sobre el nivel de evidencia necesario para aceptar un determinado resultado al nivel cuatro de
evaluacin308 y de la que veamos una muestra en el apartado uno de este mismo captulo.
En algunos casos, la alta direccin de las empresas requerir de una evidencia ms all de una
duda razonable para juzgar la bondad de un programa de formacin, mientras que en otros
casos solamente requerir de una preponderancia de evidencias suficiente que le permita
aceptar que, una parte relevante de la evolucin de los indicadores de comprobacin, ha sido
debida al programa de formacin.
Por lo tanto, el primer paso que daremos, una vez hayamos seleccionado los indicadores de
comprobacin y el mtodo de recogida de datos, ser decidir si es suficiente o no la
preponderancia de evidencias, por lo tanto, si no necesitamos o s necesitamos tamizar los
resultados obtenidos a travs de alguno de los mtodos de aislamiento de los efectos de la
formacin.
306
Descrito en detalle en el captulo 5 de este trabajo.
307
Para la descripcin de esta nueva fase instrumental, nos basaremos de nuevo en Phillips, Jack J. Op. Cit. p.
87-113.
308
Una de las recomendaciones del autor cara a la evaluacin de resultados de la formacin al nivel cuatro, se
resume en la siguiente frase: Be satisfied with evidence if proof is not possible. Kirkpatrick, Donald L.
Op. Cit., p. 61.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 234
Este paso debe producirse a priori tras escoger el indicador de comprobacin y, paralelamente
a escoger el mtodo de recogida de datos. En esta decisin es crtico contar con la opinin del
director o directores 309 responsables finales del grupo de participantes puesto que son ellos los
que mejor conocen el posible impacto de otros factores en el indicador de comprobacin
escogido y son ellos los que deben aceptar los resultados que surjan de MARF en el caso de
no aplicar mtodos de aislamiento de resultados.
Una vez decidido en qu actividades se van a utilizar tcnicas de aislamiento de los efectos de
la formacin y en cules no se van a utilizar, repasemos brevemente dichas tcnicas. 310
- Anlisis de tendencia. 311 Puede ser til para determinados indicadores claramente
numricos, siempre y cuando existan registros en la compaa. Consiste en la
proyeccin del comportamiento futuro del indicador de comprobacin, si todo el
entorno permanece invariable. La medicin de la diferencia entre esa proyeccin y la
observacin de los datos reales, es la porcin de impacto debida a la formacin.
- Mtodos de previsin. Es, en realidad, una variacin del anterior por la que,
utilizando la metodologa estadstica de la regresin, podemos prever el cambio que se
producir en el indicador de comprobacin, de producirse algn cambio significativo
en alguna otra variable independiente. La diferencia entre esa previsin y la
observacin real, es la porcin de impacto debida a la formacin. Al igual que en el
caso anterior, puede ser til para determinados indicadores claramente numricos,
siempre y cuando existan registros y anlisis previos en la compaa y, sobre todo,
como cada vez es ms habitual, en el caso de que se estn produciendo cambios
paralelos al proceso de formacin que afecten a otra de las variables independientes
que pueden afectar al indicador de comprobacin.
309
Phillips incorpora como grupos que pueden aportar informacin crtica sobre el posible impacto de otros
factores sobre el resultado a los propios participantes, las personas que han desarrollado el programa y a los
jefes inmediatos de los participantes. Probablemente tenga razn al incorporarlos pero, en nuestro caso, nos
limitaremos a los directores responsables ya que, en aras a simplificar el modelo y a incrementar la
credibilidad y utilizacin del mismo por parte de la direccin, nos parece lo ms oportuno y no creemos que
la incorporacin de los otros grupos mencionados aada mucha ms informacin.
310
En cualquier caso, entendemos que, la descripcin de los posibles mtodos de aislamiento de los efectos de la
formacin, constituye una ayuda y una orientacin para los usuarios de MARF pero se aleja del objetivo de
nuestra investigacin y de nuestro modelo. Los mtodos de aislar el efecto de la formacin respecto a otros
items que puedan afectarla son herramientas, como pueden haber otras, de las que se nutre nuestro modelo,
para conseguir su finalidad ltima. No entraremos en detalle, por lo tanto, en la descripcin y valoracin de
cada uno de estos mtodos que podran ser perfectamente objeto de una investigacin ad-hoc y, sobre los
cules, existe suficiente material bibliogrfico.
311
Una descripcin ms detallada de este mtodo as como del mtodo de previsin, con algunos ejemplos
concretos sobre ambos, puede verse en Phillips, Jack J. Op. Cit., p. 93-97.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 235
Cuando pensamos en utilizar y escoger alguno de los diferentes mtodos de aislar el impacto
de la formacin, de una manera muy similar a lo que ocurra cuando hablbamos de la
seleccin de los mtodos de recogida de datos, debemos tener en cuenta varios factores que
deben ayudarnos a seleccionar el ms apropiado:
1. La plausibilidad de su utilizacin.
De nuevo hemos de realizar una reflexin especfica relacionada con MARF al igual que la
hacamos al hablar de la seleccin de los mtodos de recogida de datos. A diferencia de la
consideracin de estos factores dentro de un modelo menos integral que MARF, en nuestro
caso ya existe una sensibilidad previa 313 hacia la dificultad tcnica y/o el coste de aplicacin
de los mtodos de aislamiento de los efectos de la formacin que se vislumbra en una serie de
pasos previos del propio modelo.
En segundo lugar, tenemos la seleccin previa del colectivo formado al que se le aplicarn
tanto los mtodos de recogida de datos propios de MARF como los de aislamiento de los
efectos de la formacin. Ya reconocemos implcitamente en esta fase la importancia de
establecer un balance entre la exactitud y fiabilidad de los datos resultantes y el coste de
aplicacin de la medicin y de sus tcnicas de aislamiento, sugiriendo se pueda tener en
cuenta la aplicacin en muestras que permitan reducir el coste de cualquier tipo que tenga la
evaluacin. Finalmente, recordemos que MARF es comp lementario de nuestro modelo de
312
De alguna forma relativa los mtodos que hemos listado estn ordenados de ms a menos fiables.
313
No debemos olvidar que, los resultados del trabajo de campo que nos guan a la hora de disear los aspectos
crticos de nuestro modelo y que estn detallados en el captulo 4 del presente trabajo, afirman sin lugar a
dudas, que uno de los motivos ms importantes por el que las empresas no profundizan en la evaluacin del
impacto econmico, es la complejidad tcnica del procedimiento. Intentamos limitar, en el caso de MARF, la
complejidad tcnica, al mnimo imprescindible y el modelo refleja en sus etapas todas las posibles vas de
limitar esa complejidad.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 237
Despus de los pasos dados hasta el momento, MARF nos ha permitido disponer de una serie
de informacin acerca de una buena parte de los programas de la compaa, por lo menos de
aquellos que tienen ms importancia para la misma. Parte de esta informacin (en un
principio no debera ser porcentualmente demasiado importante si hemos aplicado
correctamente el modelo) tendr formato de indicador de comprobacin, al no haberse podido
aplicar factores de conversin razonablemente vlidos. El resto, sin embargo, tendr formato
de unidades monetarias.
Llega aqu el momento de combinar el modelo MARF con el modelo MACF 315 para aplicar la
frmula que nos permite el clculo en porcentaje del Retorno sobre la Inversin (ROI316 o
Return on Investment en el ingls) y que es de dominio comn, ya que relaciona simplemente
el Beneficio que obtenemos a partir de una Inversin determinada. 317
Beneficio
ROI = ----------------------------- * 100
Inversin
En el caso concreto de MARF, definiremos el ROI obtenido por una actividad de formacin
como el porcentaje que el beneficio sinttico (neto de la inversin total en formacin que ha
representado el programa) hallado a travs de la aplicacin de los diversos pasos del modelo y
que aporta a la empresa durante doce meses 318 la realizacin de esa actividad de formacin,
314
Descrito en detalle en captulos anteriores de este trabajo.
315
Recordamos una vez ms que nos referimos al modelo de anlisis de los costes de formacin descrito
anteriormente en este trabajo.
316
Dada la indiscutible aceptacin internacional del trmino ROI, continuaremos refirindonos a la rentabilidad
sobre la inversin como ROI en el presente documento.
317
Podemos ver una definicin ms detallada, as como interesantes consideraciones sobre la determinacin de la
base de inversin en Bernstein, L.A. Anlisis de Estados Financieros. Bilbao: Ediciones Deusto, 1991, p.
168-171.
318
Ver, al respecto de la limitacin a los doce meses, las observaciones vertidas ms arriba en este captulo
cuando hablbamos de los factores de conversin. A ese respecto, Phillips, Jack J. Op. Cit. pgs 151-152,
argumenta que el plazo de un ao es el ms utilizado para aproximarse al concepto de ROI aunque, para
algunos tipos de programas muy especficos, ese plazo de anualizacin puede ser mayor. Nosotros
contemplaremos esa posibilidad como una excepcin a implementar en casos muy justificados.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 238
Ello quiere decir que, si un programa muestra un ROI del 30%, despus de haber recobrado la
totalidad de la inversin que ha supuesto dicho programa, el 30% de la misma, puede
computarse como beneficios.
319
Nos apuntamos aqu a la tendencia manifestada por los especialistas en mercados financieros a denominar
sintticos a aquellos ndices, productos, activos, etc., de construccin artificial. Ver al respecto Ross,
S.A., Westerfield, R.W., Jaffe, J. Corporate Finace. (3 rd . Edition). Homewood: Irwin, 1993.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 239
6.3. Visin grfica y por etapas del plan de evaluacin (MARF). Comparacin
con el modelo de ROI de Phillips. Consideraciones finales.
En el apartado anterior hemos podido ver y definir las diversas fases y etapas por las que debe
pasar MARF y hemos podido profundizar en varias de ellas, su significado y algunas normas
de aplicacin.
- Presentar una visin grfica resumida, temporizada y por etapas de MARF, que sirva
como resumen y sntesis del modelo.
- Efectuar una comparacin entre MARF y el modelo ROI de Phillips del cul hereda
MARF algunas partes, en el que se pone el nfasis en los aspectos diferenciales entre
ambos.
Pasemos, por tanto, sin ms dilaciones, a dibujar una visin grfica de MARF que nos sirva
como resumen del modelo y que nos ayude, posteriormente, a enfatizar las diferencias que
presenta nuestro MARF con el modelo ROI de Phillips.
Esta visin grfica es una interpretacin resumida de lo que hemos definido en el apartado
anterior como Plan de Evaluacin MARF.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 240
A5 FILTRO A3 DF, DA Destrezas INDIC. IC 1a3 FACTOR FC 1a3 Muestra Despus Registro Encuest
A6 S DI, CA Analticas IC 2a3 FC 2a3 amplia s a,
A3 empres Observ.
a Planes,
etc.
A9 FILTRO A5 DF, DA Destrezas INDIC. IC a5 FACTOR No hay Muestra Antes Clientes Encuest
A10 S DI, CA Interper FC total y a,
A5 despus Observ.,
Planes,
etc.
A11 FILTRO A6 DF, DA Cambio de INDIC. IC 1a6 FACTOR No hay Muestra Antes Jefes Encuest
A12 S DI, CA actitud IC 2a6 FC amplia y despus Inmedia a
A6 -tos Observ.
Planes,
etc.
En la tabla anterior, hemos podido observar resumido el proceso del plan de evaluacin
MARF. Vamos ahora a dar algunos datos adicionales sobre cada una de las fases que lo
compone.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 242
3 Establecimiento de Tras las fases 1 y 2 En la fase 8 Uno o dos indicadores por Staff de formacin ms Los indicadores tendrn que
indicadores de actividad MARF directivos responsables cumplir una serie de
comprobacin del colectivo a formar condiciones
4 Eleccin de factores de Tras las fases 1, 2 y 3 En la fase 10 Un factor de conversin por Staff de formacin ms Pueden existir indicadores
conversin por cada cada indicador directivos responsables que queden sin factor de
indicador del colectivo a formar conversin
5 Eleccin del colectivo a Tras las fases 1, 2, 3 y 4 Inmediatamente antes y/o Muestra a utilizar para Staff de formacin Podremos tener muestras
aplicar el proceso inmediatamente antes y implantar los mtodos de totales, muestras amplias o
un tiempo despus de la recogida de datos para cada muestras reducidas
formacin en funcin actividad
resultados fase 6
6 Recogida de datos Tras las fases 1, 2, 3, 4 y Inmediatamente antes y/o Para cada actividad saber si Staff de formacin ms
Antes y/o despus de la 5 inmediatamente antes y necesitamos recoger los datos directivos responsables
formacin un tiempo despus de la slo despus de la formacin o del colectivo a formar
formacin necesitamos una recogida
previa para comparar
7 Recogida de datos Fuente Tras las fases 1, 2, 3, 4 , Inmediatamente antes y/o Fuente identificada para aplicar Staff de formacin Siempre priorizaremos las
de los datos a utilizar 5 y 6 inmediatamente antes y siguiente fase a la nuestra fuentes ms fiables y
un tiempo despus de la escogida en los momentos en objetivas
formacin en funcin que debamos recoger los datos
resultados fase 6
8 Recogida de datos Tras las fases 1, 2, 3, 4 , Inmediatamente antes y/o Indicadores de comprobacin Staff de formacin, jefes Existen muchos mtodos a
Eleccin del mtodo de 5 , 6 y 7 inmediatamente antes y en bruto para cada actividad inmediatos, expertos escoger en funcin del
recogida un tiempo despus de la internos o externos, etc. binomio complejidad /
formacin en funcin fiabilidad
resultados fase 6
9 Aislar efecto de la Tras las fases 1, 2, 3, 4 , En paralelo a la fase 8 Actividades sobre las que hay Staff de formacin ms Conocer sobre qu
formacin es necesario? 5 , 6, 7 y 8 que aplicar mtodos de directivos responsables actividades hay que utilizar
aislamiento del efecto de la del colectivo a formar mtodos de aislamiento del
formacin efecto de la formacin y sobre
cules no es necesario
10 Eleccin mtodo de Tras las fases 1, 2, 3, 4 , En paralelo a la fase 8 Indicadores de comprobacin Staff de formacin ms En las actividades en las que
aislamiento del efecto de la 5 , 6, 7, 8 y 9 corregidos para cada actividad directivos responsables no haya que aplicar mtodo
formacin sobre la que haya que aplicar del colectivo a formar de aislamiento, mantenemos
mtodo de aislamiento el indicador de comprobacin
bruto
11 Aplicar factores de No procede Tras el resultado de Datos de beneficio sinttico en Staff de formacin En las actividades que no
conversin aplicar la fase 10 unidades monetarias para cada tenan factor de conversin
actividad que tena factor de dejamos como resultado el
conversin indicador de comprobacin
bruto o corregido, segn sea
el caso
12 Comparar beneficio con No procede Tras el resultado de ROI para cada actividad que Staff de formacin En las actividades que no
Inversin total en formacin aplicar la fase 11, tena beneficio sinttico tenan beneficio sinttico
comparar el beneficio dejamos como resultado el
sinttico con la inversin indicador de comprobacin
total de cada actividad bruto o corregido, segn sea
segn MACF el caso ms la inversin total
en formacin de la actividad
320
Cuadro 6.1. ROI Model.
Evaluation
Evaluation Purposes
Tabulate program
Instruments costs
Collect data Isolate the effects of Convert data to Calculate the return on
training monetary values investment
Evaluation
Evaluation Levels Identify intangible
Timing benefits
Fuente. Phillips, Jack J. Return on Investment in Training and Performance Improvement Programs.
Como ya se ha advertido a lo largo del presente captulo, MARF hereda una serie de aspectos
-sobre todo instrumentales- del modelo ROI de Phillips 321 el cul, grficamente, se podra
representar de la forma que se expone en cuadro 6.1.
En el caso de MARF, sus componentes han sido descritos con todo detalle en el apartado
anterior y, el resumen de su funcionamiento se encuentra en las dos tablas que podemos ver al
inicio de este apartado. El hecho de que MARF, como no poda ser de otra forma, herede
aspectos instrumentales de ROI y, en concreto:
es lgica ya que existen una serie de metodologas intermedias que no forman parte intrnseca
del propio modelo sino que son herramientas de otras disciplinas que toma el modelo para
poder asegurar su operatividad.
320
Phillips, Jack J. Op. Cit., page 25.
321
Phillips, Jack J. Op. Cit.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 244
El modelo ROI se define como un modelo de aproximacin paso a paso al clculo del
ROI,322 que es su finalidad ltima. Aqu estriba su primera gran diferencia con MARF,
la obtencin del Return on Investment de la actividad de formacin no es el nico objetivo de
MARF, sino que tal obtencin es uno ms de los posibles resultados del modelo pero no el
nico.
As, en el caso de MARF, el ROI es una de las conclusiones deseables pero, en el caso de no
ser aplicable, el modelo incluye como parte del mismo de forma explcita, la utilizacin,
como informacin pertinente para la accin, de los indicadores no convertidos a unidades
monetarias y la informacin sobre la inversin total en formacin por actividad. ROI tan slo
recomienda que se tengan en cuenta los beneficios intangibles al final del modelo.
La tabulacin de los costes del programa -equivalente relativo en el caso de ROI al modelo
MACF-, es exclusiva para cada actividad de formacin y no tiene una extensin a la
obtencin de la inversin total para el global del departamento de formacin. En otro orden de
cosas, MACF contempla la realidad del sistema contable de las empresas incorporando la
posibilidad de introducir en el modelo las figuras de los costes patentes y de los costes
ocultos de forma que se convierte en una importante herramienta de ayuda y reflexin para el
responsable de formacin. ROI no incorpora esas figuras en su modelo dejando la
problemtica de la inclusin del consumo de recursos de formacin no imputado al centro de
costes del departamento al arbitrio de las personas que utilicen el modelo.
Otras de las grandes diferencias es la amplitud del modelo, mientras ROI se basa en la
actividad de formacin como base (aunque da algunas recomendaciones sobre qu conviene
medir y qu no conviene medir), MARF se basa en el Plan de formacin como elemento de
partida. MARF se acerca ms a un concepto de control de gestin aplicable globalmente a un
plan de formacin generalmente anual que a una herramienta de clculo aislado de la
rentabilidad de una actividad. De hecho, como veremos en el prximo captulo, MARF y
MACF, se convierten en las fuentes de informacin de gestin bsicas para el cuadro de
mando integral del departamento de formacin.
Otra considerable diferencia es que ROI hace recomendaciones sobre maneras de abordar
o interpretar el modelo para evitar costes excesivos o complicaciones de implantacin.
322
Una definicin detallada del trmino ROI, tanto en general como en su versin aplicada a la formacin, ha
sido dada anteriormente en este mismo captulo.
323
Recordemos el modelo de anlisis de los costes de formacin (MACF), cuya descripcin detallada pueden
encontrar en anteriores captulos de este mismo trabajo.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 245
Al igual que en ROI, en el caso de MARF, es imprescindible para aplicar el modelo, que los
programas a los que se vaya a aplicar, hayan sido objeto previo de un proceso de anlisis
de necesidades de formacin. Tambin en ambos modelos se recomienda, por no decir que
se exige, que se proceda a la recogida de datos para todos los niveles de evaluacin, es
decir, no slo la referida a los niveles cuarto y quinto, sino tambin la referente a los tres
niveles previos. Slo de esa forma se puede asegurar que se de un proceso formativo que
asegure la obtencin de resultados de rentabilidad e impacto razonables.
MARF intenta vincular directamente la evaluacin del impacto econmico con el problema a
resolver por la actividad de formacin, convirtindose en una herramienta de ayuda y
reflexin para los responsables de ese departamento ya desde las fases ms tempranas de su
aplicacin y que va mas all del mero control de gestin para convertirse en gestin en s. La
etapa de establecimiento de indicadores de comprobacin y su necesaria vinculacin al
problema que intenta resolver la formacin, se convierte en un importante elemento de
reflexin, tanto para los directores de negocio como para el staff de formacin, sobre:
Adems, el establecimiento conjunto entre los directores de las reas de negocio y el staff de
formacin, previo al inicio de la actividad, de los indicadores de comprobacin, genera una
complicidad entre ambas partes, totalmente orientada al resultado, que es crtica para el xito
de la propia actividad y para la positiva aplicacin de MARF.
324
Sobre este particular, ha sido enormemente valiosa la informacin proveniente del trabajo de campo detallado
en el captulo 4, cara a poder captar con profundidad esa problemtica y a verter sus conclusiones en los
modelos MARF y MACF.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 246
Consecuentemente con ello, MARF no slo no trata de sustituir a los sistemas de evaluacin
de la reaccin, del aprendizaje o de la transferencia, que son indiscutiblemente necesarios,
sino que pretende complementarlos en la medida de lo posible y considera imprescindible su
aplicacin de forma paralela a MARF.
Es pequeo el nmero de las empresas analizadas que han realizado en alguna ocasin
intentos por hacer mediciones sobre la evaluacin del impacto econmico de la formacin.
Los intentos realizados han utilizado todo tipo de sistemas de medicin. La aplicacin de
MARF puede representar una va de concentrar los sistemas de medicin en un nico modelo
con coherencia interna.
Tan slo un 8,7% de las empresas reconocen tener algn conocimiento aproximado de la
rentabilidad que proporciona la inversin en formacin. La utilizacin de MARF junto con la
de MACF puede permitir incrementar sustancialmente ese porcentaje, si bien debemos
matizar que MARF aade el valor especial de que ese conocimiento aproximado, se
transforma en una rentabilidad expresada por una serie de cifras sintticas y reconocida por
todos los elementos de la organizacin.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 247
El trabajo de campo demostraba otra de las hiptesis de partida, el hecho de que la excesiva
complejidad tcnica y la insuficiencia de medios son las causas ms habitualmente
mencionadas por las empresas como motivo de su desconocimiento de la rentabilidad de la
formacin. De ah surge la evidencia de la necesidad de crear un modelo lo suficientemente
sencillo y que no requiera de la dotacin de demasiados medios. Entendemos que MARF,
como modelo global es lo suficientemente sencillo 325 -dentro de un orden- para poder ser de
aplicacin real en las empresas.
- Que el modelo no pretende sustituir sino que potencia a otros tipos de evaluacin de
la formacin, complementndolos con una sistemtica potente y simple que permite
una evaluacin adicional de tipo econmico.
- Que, coherentemente con los deseos de las empresas, el coste de aplicacin del
modelo y los medios a destinar al mismo, son relativamente bajos y pueden nutrirse
de redestinar medios que se utilizaban en otro tipo de labores de confeccin de
informacin relacionadas con la actividad.
- Que MARF es, por definicin un modelo que tiene especialmente en cuenta las
orientaciones estratgicas de la compaa y es selectivo en cuanto a su aplicacin.
325
Obviamente, la aplicacin de modelos absolutamente nuevos, como es el caso de MARF y MACF, y que,
adems, representan un cambio de orientacin dentro del comportamiento habitual de los departamentos de
formacin, no es tarea sencilla. Queda demostrado en nuestro trabajo de campo que la mayora de
departamentos de formacin dedican recursos adicionales y tiempo a la confeccin de informacin de gestin
destinada a la direccin y centrada en la actividad y no en los resultados. Probablemente, el cambiar un tipo
de informacin centrada en la actividad por MARF, no implicara la utilizacin de ms recursos sino la
reutilizacin de recursos que se empleaban para obtener informacin de menor valor.
Captulo 6. Construccin de un modelo de anlisis y medicin de la rentabilidad de la actividad de
formacin. 248