Вы находитесь на странице: 1из 6

Rev Md Chile 2008; 136: 125-130

ARTCULO ESPECIAL

Medicin en salud: Algunas


consideraciones metodolgicas
ANA M. ALARCN Ma, Sergio Muoz Nb.

Some methodological issues


about measurements in health
Measurement process is a part of everyday work of health
professionals. Technological advances have created precise and sensitive instruments whose
results are highly accurate and cast little doubts. However, health care has diversified,
becoming a multidimensional and complex task. This means that new aspects, that are difficult
to measure, must be addressed, such as health perception by patients or cost usefulness ratios of
health actions. Therefore, clinicians and researchers must have a good perception of the quality
of measures that they use in their daily work, to make the correct diagnostic, therapeutic or
prognostic decisions. This article explores the operational concepts that help in the development
and assessment of measuring instruments in terms of validity and truthfulness (Rev Md Chile
2008; 136: 125-30).
(Key words: Delivery of health care; Research design; Statistics as topic)

Recibido el 30 de agosto, 2006. Aceptado el 13 de marzo, 2007.


Departamento de Salud Pblica, Facultad de Medicina, Centro de Investigacin y Gestin
para la Evidencia en Salud (CIGES), Universidad de La Frontera, Temuco, Chile.
aPhD en Antropologa Mdica
bPhD en Bioestadstica

E l proceso de medicin forma parte de la


prctica diaria de todos los profesionales de
salud; est presente por ejemplo, en la evaluacin
Medicin es simplemente el proceso de asig-
nar valores a ciertos eventos de la realidad3. La
dificultad del proceso radica al menos en dos
de la capacidad funcional de los adultos mayores, aspectos: que el valor represente realmente el
en la deteccin de actitudes hacia el beber evento que se quiere medir, y que el evento sea
problema, o en la valoracin del dolor subjetivo expresado en toda su complejidad. En medicina,
de un paciente1,2. La aplicacin de cuestionarios o los instrumentos para determinar la condicin
escalas generan mediciones que muchas veces biolgica de un paciente han experimentado tal
determinan importantes decisiones pronsticas y desarrollo tecnolgico, que han logrado disminuir
teraputicas; sin embargo, en la mayora de los la incertidumbre de los resultados de una medi-
casos se desconoce el origen y capacidad real del cin4. No obstante, es la medicin de salud como
instrumento para evaluar la condicin bajo estudio. fenmeno psicosocial que requiere refinar la
precisin de sus instrumentos, dado que el objeti-
vo principal en este campo de la salud es recoger,
Correspondencia a: Ana M. Alarcn M. Departamento Sa- en forma vlida y confiable, la percepcin subjeti-
lud Pblica, Facultad de Medicina-CIGES, Universidad de va de los pacientes.
La Frontera. Montt 112, Temuco. Fono: 45- 325740. Fax: Este artculo expone, desde una perspectiva
45-325741. E mail: amalarc@ufro.cl metodolgica, algunos conceptos esenciales y

125
Rev Md Chile 2008; 136: 125-130

operativos tanto para la construccin, como para ciones a procesos, contribuyendo a delimitar
la evaluacin de instrumentos de medicin en marcos tericos, y mejorando la comprensin del
salud, particularmente escalas y cuestionarios utili- contexto en que se produce el evento de salud5,6.
zados en estudios de poblacin. Se abordarn En consecuencia, son las representaciones de los
temas tales como: la generacin y seleccin de sujetos, ms las propias del investigador clnico,
tems que configuran el objeto de medicin, las que se configuran como tems en un cuestio-
ciertas consideraciones respecto del diseo de nario. Estas formas de obtencin de tems equiva-
instrumentos, y finalmente algunas indicaciones len a las fuentes de datos necesarios para lograr
para la evaluacin de la calidad de un instrumento una muestra representativa de los tems.
de medicin; este ltimo aspecto es esencial para Los desafos inherentes a esta etapa son, deter-
quienes utilizan cuestionarios o escalas ya disea- minar el universo de tems o preguntas que
das en otras partes del mundo. Su propsito es representen totalmente al evento, establecer sus
contribuir con algunos elementos tericos bsicos lmites, y discriminar lo que pertenece o no, al
para guiar al investigador clnico a tomar decisio- evento en estudio. El tema es particularmente
nes basadas en mediciones vlidas y confiables. complejo porque no existe ms herramienta que el
criterio, experiencia y sensibilidad terica del inves-
Generacin y seleccin de tems de un instrumen- tigador clnico para reunir el mximo de propieda-
to de medicin en salud. La etapa inicial en la des observables del evento que pretende estudiar.
construccin de un cuestionario o escala que
tenga por objetivo recoger la percepcin u opi- Consideraciones sobre el diseo del instrumento
nin de los pacientes, implica los siguientes de medicin. El diseo de un instrumento de
pasos: a) definir con mxima precisin el objeto medicin sea ste escala o cuestionario, depen-
de la medicin, b) atribuir a los objetos o eventos de de mltiples factores entre los que podemos
de salud ciertos indicadores que expresen con- mencionar: el objetivo para el cual se propone el
ceptualmente las propiedades del objeto que se instrumento, los recursos financieros para su
pretende medir, y c) reflejar la variabilidad entre construccin y prueba, acceso a la informacin,
los sujetos que estn siendo objeto de medicin. edad y educacin de los pacientes quienes sern
Habitualmente el investigador parte de ideas que objeto de medicin, y el nivel de precisin de la
provienen de su experiencia clnica, del anlisis medida que se pretende obtener. El conjunto de
de literatura cientfica, y de dilogos con sus estos factores determinar la extensin del instru-
pacientes y colegas, de esta forma produce una mento, el formato, y su presentacin; sin embargo
conceptualizacin que le permite identificar di- lo ms relevante en el diseo es la decisin del
mensiones y variables de su objeto de estudio. investigador clnico sobre el nivel de medida de
Este proceso implica la construccin y recons- sus variables. Por ejemplo, es diferente decirle a
truccin del concepto que se quiere medir en la un paciente cualquiera sea su patologa, que
poblacin; tomemos como ejemplo la definicin construya una lista con sus sntomas, que elija de
del concepto calidad de vida, y la identificacin una lista aquellos que presenta con mayor fre-
de sus propiedades manifiestas, tales como, estar cuencia, o que ordene de una lista que el mdico
bien, sentirse feliz, dormir bien, visitar ami- le presenta, aquellos que le provocan mayor
gos, entre otras; son justamente estas propieda- molestia. La decisin por una u otra forma
des o caractersticas las que contribuirn a depender tanto de los intereses del clnico en
reconstruir el concepto calidad de vida como profundizar sobre los sntomas de sus pacientes,
objeto de medicin. de la aplicacin de los resultados; como de la
En esta fase, que podramos llamar explorato- calidad de sus variables, es decir, hasta dnde su
ria, la incorporacin de mtodos y tcnicas cuali- variable le permite variar en respuesta. En resu-
tativas de investigacin tales como, entrevistas en men, lo que se intenta es representar la variabili-
profundidad, observaciones no estructuradas, y dad de respuestas entre los pacientes a los que se
grupos focales constituyen herramientas esencia- les aplicar finalmente el instrumento7.
les para indagar en la condicin subjetiva de los En trminos operativos significa que para
pacientes, produciendo descripciones y explica- construir un cuestionario, el clnico deber seguir

A R T C U L O

126 E S P E C I A L
MEDICIN EN SALUD - AM Alarcn et al

los siguientes pasos: definir el concepto y objetivo Determinacin de la validez de un instrumento.


de la medicin, elaborar una lista extensiva de sus La validez de un instrumento se refiere a la
tems, determinar la forma de medicin de las pertinencia de las inferencias realizadas a partir de
respuestas, expresar las preguntas (variables) en las mediciones; en otras palabras, validez significa
palabras apropiadas a la cultura, educacin y edad cun bien un resultado obtenido refleja al fen-
de sus pacientes, construir un borrador de prueba, meno bajo estudio, o la capacidad del instrumento
y finalmente probar el instrumento en una mues- para medir la cualidad para la que fue construi-
tra de pacientes. Los resultados de su prueba do9,10. Por ejemplo, un test que mida depresin
determinarn: el contenido esencial del instru- en un paciente debe dar cuenta de la calidad y
mento, la dificultad de aplicacin y comprensin, magnitud de ese fenmeno, y no del stress de ese
y la posibilidad de anlisis de las medidas obteni- paciente; por lo tanto, cuando un investigador
das. clnico construya un cuestionario o intente aplicar
alguno ya existente debe en primer trmino-
Calidad y pertinencia de un instrumento: temas examinar con profundidad la naturaleza del even-
de validez y confiabilidad. La determinacin de la to que desea medir (llmese depresin, stress,
calidad de un instrumento implica plantearse angustia, calidad de vida, etc.), y al mismo tiempo,
preguntas tanto de la exactitud con que mide el examinar si las variables del cuestionario repre-
fenmeno bajo estudio, la estabilidad de la medi- sentan en forma precisa el fenmeno que desea
cin o resultado, como de la pertinencia del medir.
instrumento para los sujetos o realidad en que se Existen diversas formas de determinar la vali-
aplican las mediciones. Por ejemplo, un clnico dez de un instrumento, no obstante la distincin
que evale la calidad de vida de sus pacientes sea entre ellas, refleja ms una necesidad operativa
sta en forma especfica o genrica, se enfrenta a que conceptual para el investigador. Entre stas se
la incertidumbre de si los valores obtenidos a encuentran la validez de: a) criterio, b) constructo,
travs del cuestionario reflejan o no la condicin y c) contenido.
del paciente, si el instrumento es capaz de
detectar diferencias entre los sujetos, si cambios Validez de criterio. Este tipo de validez se asocia
en los resultados de la medicin en un paciente generalmente a la capacidad de un instrumento
son consecuencia de cambios en su condicin de para predecir una conducta o evento de salud. En
salud, y finalmente si las preguntas del cuestiona- clnica es comn evaluar ciertas conductas de
rio fueron respondidas comprensivamente por el riesgo sanitario y predecir quines tienen el riesgo
paciente. potencial de desencadenar el problema, enferme-
Este conjunto de interrogantes aluden directa- dades cardiovasculares, depresin entre otros
mente a los conceptos de confiabilidad y validez ejemplos. El procedimiento ms comn para
de un instrumento. La estimacin de la calidad de determinar la capacidad predictiva de un instru-
un cuestionario o escala es requisito esencial, no mento, es demostrar una correlacin entre las
slo en su proceso de construccin, sino tambin medidas obtenidas con algn criterio exterior
en la utilizacin de aquellos obtenidos en la habitualmente llamado gold standard, de modo
literatura mdica internacional. Por ejemplo, aun- que, si la correlacin es alta, la medida obtenida
que el investigador clnico haya encontrado algn es considerada vlida11. Desafortunadamente no
cuestionario muy apropiado a sus objetivos, vali- siempre se dispone de un criterio de comparacin
dado y utilizado en otras partes del mundo; aceptable, por lo tanto el desafo para el clnico
deber igualmente validarlo con sus pacientes, ya ser buscar o construir alguno con el que pueda
que su aplicabilidad se limita slo al contexto comparar los resultados de su medicin, para lo
social y cultural en que fue creado. Para ello debe cual deber conjugar tanto su experiencia clnica
utilizar, si corresponde, los mismos procedimien- como la revisin crtica de literatura.
tos de determinacin de validez y confiabilidad La seleccin del criterio se basa en una
que aqu se exponen, sin embargo, deber iniciar supuesta relacin entre el evento medido y el
el proceso de validacin del instrumento, con una criterio elegido, como ejemplos clsicos se pue-
adaptacin idiomtica y cultural8. den mencionar los cuestionarios de calidad de

A R T C U L O

E S P E C I A L
127
Rev Md Chile 2008; 136: 125-130

vida especficos, cuyos resultados son contrasta- por ello, la validez de constructo se pregunta cun
dos con criterios clnicos elaborados por socieda- bien la medicin refleja la naturaleza del concepto
des profesionales12,13. o constructo que se pretende medir15. Por ejem-
Algunas variantes de este tipo de validez se plo si el propsito es medir la depresin post-parto
asocian al tiempo en que se realizan las pruebas al (como constructo), el investigador debera pregun-
paciente. Por ejemplo, si se realizan las medicio- tarse por las dimensiones tericas que subyacen en
nes antes que aparezca el evento, y se espera su el tema, y las relaciones que se configuran entre
ocurrencia, estamos frente a una forma de validez stas. El anlisis factorial es el procedimiento
predictiva. Estas mediciones son bastantes apro- estadstico ms apropiado para determinar este tipo
piadas para determinar la asociacin entre riesgo de validez, ya que puede identificar la cantidad de
sanitario y evento, o prediccin de xito o fracaso constructos o factores que existen en el test, y la
de intervenciones. medida en que cada tem est relacionado con cada
Por otra parte, si se selecciona un gold standard factor16. En la construccin o evaluacin de un
o criterio, y se compara simultneamente con los instrumento de medicin, el anlisis de factores se
resultados obtenidos a travs del test aplicado, puede utilizar de forma exploratoria o confirmato-
estamos frente a una forma de validez concurrente. ria. Usualmente esta tcnica estadstica es empleada
En este caso se busca saber si la medida obtenida en forma exploratoria, ya que su anlisis proporcio-
con el test diseado para tal efecto se acerca o no al na al investigador una idea de cules y cuntas son
criterio, de forma tal que el clnico pueda sustituir el las dimensiones que conforman el constructo que
criterio por la medida obtenida a travs de su test. est investigando.
No obstante, al aplicar criterios o medidas compara- Existen dos variantes de validacin de constructo
tivas, siempre debera preguntarse si stas son denominadas: validez convergente y validez concu-
apropiadas a la cultura, situacin social o nivel rrente. En la primera, se correlaciona la medicin
educativo en que se aplican, de modo que constitu- obtenida a travs de un instrumento con otro, que
yan una fuente vlida de comparacin. mide el mismo constructo. Tomemos como ejemplo
la medicin del dolor postoperatorio en un mismo
Validez de contenido o aparente. La validez de grupo de pacientes; una medida se obtendr a travs
contenido se refiere al grado en que un instru- de la escala anloga visual, y la otra mediante el test
mento representa el universo o la totalidad de los de dolor especfico para pacientes quirrgicos. Si los
contenidos del fenmeno que se pretende medir, resultados con una y otra medida, correlacionan
apunta por tanto, a cun bien la muestra de positivamente o convergen, significa que ambos
preguntas del cuestionario representa el concepto test miden el mismo constructo.
bajo estudio14. Sin embargo, no se espera que un En la segunda variante validez concurrente- ,
instrumento cubra detalladamente cada uno de los los resultados de un test se comparan con los de
dominios que conforman un concepto ello impli- otro que mide un constructo diferente. Siguiendo
cara un instrumento extremadamente largo, lo el ejemplo anterior, se pueden comparar los
que debera esperarse es que el instrumento resultados de percepcin del dolor postoperatorio
contenga una muestra representativa de sus domi- con capacidad funcional, en el mismo grupo de
nios y posibles preguntas. Una forma habitual de pacientes. En teora, ambos test debiesen tener
establecer la validez de contenido es la consulta a correlaciones negativas o inversas, de lo contrario
expertos en el tema, quienes evalan a travs de significa que el test de dolor postoperatorio no es
una pauta elaborada por el investigador, si los suficientemente especfico para medir ese cons-
contenidos de un test son pertinentes y adecua- tructo en pacientes quirrgicos.
dos; no obstante, es el investigador clnico, quien
finalmente decidir hasta dnde desea extender el
contenido de su cuestionario. CONFIABILIDAD O ESTABILIDAD DE LAS MEDIDAS

Validez de constructo. El propsito de la validez de La confiabilidad se refiere al grado en que los


constructo es ratificar la teora que fundamenta la puntajes observados en una medicin estn libres
utilizacin de un test, ms que el test en s mismo; de error de medida; se relaciona con la estabilidad

A R T C U L O

128 E S P E C I A L
MEDICIN EN SALUD - AM Alarcn et al

de las observaciones e inferencias realizadas y su aplica un cuestionario o escala para evaluar la


precisin17. Para obtener un alto grado de confia- presencia de stress en ciertos sujetos, probable-
bilidad, el esfuerzo debe dirigirse hacia el control mente se obtendrn resultados diferentes si el
del error en las respuestas de los pacientes, dado cuestionario se aplica antes o despus de las
que el supuesto es que, si las condiciones son vacaciones de los trabajadores. Es por ello, que el
constantes los resultados sern idnticos. Por investigador clnico que desee realizar un test-
ejemplo, al aplicar un test de esfuerzo, el clnico retest debe aplicar su cuestionario resguardando
debe controlar ciertos factores como: la motiva- que las condiciones en que se aplica sean simila-
cin de sus pacientes, las condiciones del ambien- res entre la primera y segunda aplicacin.
te fsico en que aplica la prueba, o la dificultad del
test. Algunas formas de estimar la confiabilidad de Confiabilidad interobservador o equivalencia.
los datos son: a) anlisis de consistencia interna, Esta forma de estimar confiabilidad se utiliza
b) test-retest, y c) confiabilidad interobservador. principalmente en observaciones clnicas diagns-
ticas, y cuestionarios con preguntas abiertas19. El
Consistencia interna o inter-tem. Consiste en objeto es correlacionar los puntajes obtenidos
determinar cun bien los tems de un cuestionario entre distintos observadores, indicando de esta
o escala correlacionan unos con otros a travs de forma, el porcentaje de acuerdo respecto de la
diversos procedimientos estadsticos. Uno de stos medida observada corrigiendo el factor azar. La
consiste en partir el cuestionario en dos mitades; forma habitual de obtener esta confiabilidad es a
por ejemplo todas las respuestas pares y todas las travs del coeficiente de Kappa; considerando un
impares, y correlacionar ambos grupos de res- valor muy bueno a partir de 0,8 y muy malo por
puestas. Otra forma consiste en correlacionar cada debajo de 0,20, as mientras ms cerca de cero es
tem con todos los otros, en este caso se estima la el valor, ms azar hay presente en las medidas20.
consistencia del tem en forma individual en Finalmente es necesario sealar que los ele-
relacin con todos los dems. El coeficiente alpha mentos discutidos sobre evaluacin de calidad de
de Cronbach es el ms apropiado para tems que las medidas obtenidas a travs de la aplicacin de
tienen tres o ms alternativas de respuestas, y instrumentos, deben cumplir dos requisitos funda-
Kuder Richardson para tems que ofrecen respues- mentales; primero, un equipo de trabajo multidis-
tas dicotmicas; ambas son pruebas estadsticas ciplinario con el cual discutir contenidos,
que evalan el tem y su relacin con la extensin resultados y tomar decisiones, y segundo la
del cuestionario18. El anlisis de consistencia provisin de programas de estadsticos adecuados
interna de un instrumento es frecuentemente para realizar las pruebas mencionadas, entre stos
realizado con posterioridad al anlisis factorial, y el ms utilizado en ciencias de la salud es Stata, y
contribuye complementariamente a evaluar su en ciencias sociales SPSS.
validez. Basado en estos resultados el investigador
clnico podr determinar la pertinencia de un tem
en el cuestionario; decisin que va a depender DISCUSIN
tanto de sus intereses y motivaciones, como de los
parmetros estadsticos obtenidos. El diseo y construccin de un instrumento de
medicin en salud constituye un proceso complejo
Test-retest o medida de estabilidad. Consiste en en el que confluyen mltiples disciplinas y metodo-
repetir la prueba dos o ms veces a los mismos logas, en particular si el propsito es construir
sujetos con el objeto de correlacionar sus respues- escalas de medida. En su fase inicial el aporte de
tas y determinar su estabilidad. Este mtodo tiene los mtodos cualitativos de investigacin es funda-
la dificultad que muchas veces las diferencias mental para obtener un mayor acercamiento a los
observadas en las respuestas no se deben slo al atributos del objeto de estudio; es as como
azar, interviniendo por ejemplo, sesgos de memo- entrevistas y grupos focales con la poblacin
ria de los pacientes, cambios en la forma de objetivo, incrementan el universo de tems al
plantear las instrucciones, o de las condiciones en construir un instrumento de medicin21. Por otra
que se administra la prueba. Por ejemplo, si se parte, las herramientas estadsticas evidencian la

A R T C U L O

E S P E C I A L
129
Rev Md Chile 2008; 136: 125-130

validez y consistencia del constructo y sus propie- muestra cumplir con los estndares estadsticos
dades a travs del anlisis tanto de los tems, como adecuados al tipo de medicin, y a los supuestos
de su interaccin en el conjunto del instrumento. que fundamentan su construccin.
Sin embargo, el uso de tcnicas cualitativas y Los elementos presentados en este artculo,
estadsticas debe ser apropiado al tipo de medicin proveen guas operacionales y analticas para
que el clnico desea realizar, y a la naturaleza del construir medidas en salud que reflejen con
constructo que desea conocer. Un instrumento de mayor grado de validez y confiabilidad aquellas
medicin es vlido y confiable cuando es pertinen- condiciones y percepciones subjetivas de los
te a la cultura que le dio origen, es amigable y pacientes, reconociendo que ninguna medida de
comprensible para quienes lo responden, y de- este tipo es libre de error.

REFERENCIAS Organizaciones: Epistemologa y Tcnicas. Bue-


nos Aires: Editorial de las Ciencias, 2004.
1. CLANCY C, EISENBERG J. Outcomes research: measu- 10. STREINER D, NORMAN G. Health measurement scales
ring the end results of health care. Science 1998; a practical guide to their development and use.
282: 246-7. NY: Oxford Medical Publications, 2003.
2. GARRANT A, SCHMITH P, MACKINTOSH A. Quality of life 11. NUNNALLY J. Psychometric theory. NY: McGraw-
measurement: bibliographic study of patients as- Hill, 1978.
sessed health outcome measures. BMJ 2002; 324: 12. JUNNIPER E, GUYANTT G, FEENY D. Measuring quality
1417-22. of life in children with asthma. Qual Life Res
3. KERLINGER F, LEE H. Investigacin del comporta- 1996; 5: 35-46.
miento. Mtodos de investigacin en ciencias 13. STREINER D. A checklists for evaluating the usefulness
sociales. Mxico: McGraw-Hill, 2002. of rating scales. Con J Psychiatry 1991; 38: 140-8.
4. BANGDIWALA S, MUOZ S. Medicin de confiabilidad 14. DOOLEY D. Social research methods. NY: Prentice-
y validez en instrumentos clnicos. Rev Md Chile hall Inc. 1995.
1997; 125: 446-73. 15. CRONBACH L. Essentials of psychological testing.
5. MILES M, HUBERMAN A. Qualitative data analysis. NY: Harper and Row, 1984.
CA: Thousands Oaks Sage Publications, 1994. 16. HARMAN H. Modern factor analysis. Chicago: Uni-
6. CRABTREE B, MILLER W. Doing qualitative research versity of Chicago Press, 1976.
methods for primary care. CA: Newbury Park 17. STREINER DL. Starting at the beginning: An intro-
Sage Publications, 1992. duction to coefficient alpha and internal consis-
7. HANDWERKER WP, BORGATTI S. Reasoning with num- tency. J Personality Ass 2003; 80: 99-103.
bers. En: H. Russell Bernard, ed. Handbook of 18. NORMAN G, STREINER D. PDQ statistics. Toronto:
Methods in Cultural Anthropology. CA: Altamira Decker, 2003.
Press, 1998; 593-549. 19. MUOZ S, BANGDIWALA S. Interpretation of Kappa
8. SNCHEZ R, ECHEVERRY J. Validacin de escalas de and B statistics measures of agreement. J App Stat
medicin en salud. Rev Salud Pblica 2004; 1997; 24: 105-11.
6:302-318. Disponible en: http:/www.scielos 20. HANLEY B. Standard error of the kappa statistic.
p.org/scielo.php?pid=S0124-00642004000 Psychological Bulletin 1987; 114: 235-41.
300006&script=sci_arttext [Consultado el 13 de 21. DE SOUZA M. El desafo del conocimiento: Investi-
noviembre de 2006]. gacin cualitativa en salud. Buenos Aires: Lugar
9. VIEYTES R. Metodologa de la Investigacin en Editorial, 2004.

A R T C U L O

130 E S P E C I A L

Вам также может понравиться