INFORME ENSAYO INTERLABORATORIO IL201203

DICIEMBRE 2012

TABLA DE CONTENIDO INTRODUCCIN OBJETIVOS 1. PARTICIPANTES 1.1 DISTRIBUCIN DE LOS PARTICIPANTES EN EL PAIS 1.2 DISTRIBUCIN DE LOS LABORATORIOS PARTICIPANTES SEGN ACTIVIDAD ECONOMICA 1.3 DISTRIBUCION DE LOS LABORATORIOS PARTICIPANTES SEGN EL METODO UTILIZADO PARA EL ANLISIS 2. MATERIAL DE REFERENCIA 2.1 CALIDAD HIGINICA 2.1.1 Homogeneidad del Material de Referencia 2.2 CALIDAD COMPOSICIONAL 2.2.1 Homogeneidad del Material de Referencia 3. VALOR ASIGNADO 4. RESULTADOS 4.1 VALORES DE Z-SCORE OBTENIDO POR LOS LABORATORIOS PARTICIPANTES CON RESPECTO AL VALOR ASIGNADO OBTENIDO CON LA MEDIA ROBUSTA DE LOS LABORATORIOS 4.1.1 Evaluacin de la Calidad Higinica Resultados de Z-score Anlisis de recuento de Bacterias Mesofilas Aerobias 4.1.2 Evaluacin de la calidad Composicional Anlisis de Protena 4.1.3 Evaluacin de la calidad Composicional Anlisis de Slidos Totales 4.1.4 Evaluacin de la calidad Composicional Anlisis de Grasa 4.2 Desempeo de los laboratorios por mensurando 4.3 Desempeo de los laboratorios por departamento 5.COMPARACION DE LOS VALORES DE Z-SCORE PARA LOS TRES ENSAYOS INTERLABORATORIO 5.1 COMPARACION DE LOS VALORES DE Z-SCORE PARA MICROBIOLOGIA 5.2 COMPARACION DE LOS VALORES DE Z-SCORE PARA PROTEINA 5.3 COMPARACION DE LOS VALORES DE Z-SCORE PARA SOLIDOS TOTALES 5.4 COMPARACION DE LOS VALORES DE Z-SCORE PARA GRASA 5 6 6 6 7 7 9 9 9 10 11 12 12 14

14 15 16 17 18 19 21 21 22 23 24

GRFICAS Grfica 1: Distribucin de los laboratorios de acuerdo al sector econmico al que pertenecen Grfica 2: Distribucin de mtodos empleados por los laboratorios para el Recuento de Bacterias Mesfilas Aerobias Grfica 3: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Protena Grfica 4: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Grasa Grfica 5: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Slidos Totales Grfica 6: Porcentaje de los laboratorios participantes y su desempeo global Grfica 7: Comparacin de los valores de Z-score para microbiologa. Grfica 8: Comparacin de los valores de Z-score para proteina Grfica 9: Comparacin de los valores de Z-score para Solidos totales Grfica10: Comparacin de los valores de Z-score para Grasa Grfica11: Comparacin de los porcentajes de laboratorios habilitados y no habilitados. 7 7 8 8 9 19 21 22 23 24 25

TABLAS Tabla 1: Distribucin de los laboratorios inscritos al ensayo interlaboratorio a nivel nacional Tabla 2: Anlisis estadstico para determinar homogeneidad de muestra referencia calidad higinica Tabla 3: Anlisis estadstico para determinar homogeneidad de muestra referencia Calidad Composicional Tabla 4: Comparacin de los valores obtenidos por CORPOICA y los Laboratorios Participantes del material de referencia Tabla 5: Distribucin de la habilitacin Tabla 6: Distribucin de la conformidad por mensurando Tabla 7: Resultados globales por desempeo Tabla 8: Distribucin de los laboratorios inscritos y habilitados por departamento 6 10 11 12 13 13 18 20

INTRODUCCIN La Tercera ronda del ensayo interlaboratorio fue estructurado bajo la norma ISO NTC 17043: Evaluacin de la conformidad. Requisitos generales para los ensayos de aptitud ; con el esquema de participacin simultanea. Este tercer ensayo cont con la participacin de 107 laboratorios que aplicaron con los anlisis de calidad composicional y calidad higinica de la leche cruda para pago por calidad al proveedor. CORPOICA teniendo en cuenta los datos de anlisis reportados por los laboratorios participantes determin la conformidad del resultado de los siguientes mensurandos: recuento de bacterias mesfilas aerobias, porcentaje de grasa, protena y slidos totales. El informe individual fue publicado en la pgina web de CORPOICA y cada participante obtuvo acceso con su usuario y contrasea garantizando as la confidencialidad de sus resultados. El concepto de laboratorio habilitado o no habilitado fue finalmente publicado el pasado 14 de diciembre y puede ser consultado en la pgina web: www.corpoica.org.co botn de enlace Corpolac - Publicacin de los laboratorios habilitados y no habilitados.

OBJETIVOS 1. Evaluar el desempeo de los laboratorios que realizan anlisis para el pago por calidad composicional e higinica de la leche cruda. 2. Comparar el desempeo de los resultados de los laboratorios participantes contra el valor asignado, motivando de esta manera programas de mejora continua. 3. Fomentar el inters de los laboratorios para identificar fuentes de incertidumbre e implementar acciones correctivas

4. Servir como herramienta para que los laboratorios participantes cumplan con el requisito de la Norma NTC-ISO/IEC 17025: Requisitos generales para la competencia de los laboratorios de ensayo y calibracin, en lo que se refiere a su participacin en pruebas de evaluacin de su desempeo analtico. 5. Realizar una comparacin de los resultados en trminos de Z-score para los ensayos interlaboratorio realizados hasta el momento.

1. PARTICIPANTES 1.1 DISTRIBUCIN DE LOS LABORATORIOS PARTICIPANTES EN EL PAS. Para el ensayo Interlaboratorio se inscribieron en total 107 laboratorios distribuidos en los diferentes departamentos del pas de la siguiente manera:
Departamento N laboratorios Amazonas Antioquia Arauca Atlantico Bogota D.C. Bolivar 19 2 12 Departamento Guajira Huila Magdalena Meta Nario Norte de Santander N laboratorios 2 1 9 1

Boyaca Caldas Caqueta Casanare Cauca

6 4 2

Putumayo Quindio Risaralda San Andrs y Providencia Santander 2

Cesar Choc Cordoba Cundinamarca Guaina

6 3 27

Sucre Tolima Valle del Cauca Vaups Vichada

1 4

Tabla 1: Distribucin de los laboratorios inscritos al ensayo interlaboratorio a nivel nacional.

1.2 DISTRIBUCIN DE LOS LABORATORIOS PARTICIPANTES SEGN ACTIVIDAD ECONMICA. De acuerdo al sector econmico a que pertenecen los laboratorios tienen la siguiente distribucin:
3% 7% 12% Privado Independiente Privado Industrial

Cooperativa 78%

Estatal o Institucional

Grfica 1: Distribucin de los laboratorios por actividad econmica.

1.3 DISTRIBUCIN DE LOS LABORATORIOS PARTICIPANTES SEGN EL MTODO UTILIZADO PARA ANLISIS. En cuanto a los mtodos utilizados por los laboratorios para el anlisis composicional e higinico de la leche cruda se encontr: Anlisis Higinico de Leche Cruda:

Grfica 2: Distribucin de mtodos empleados por los laboratorios para el Recuento de Bacterias Mesfilas Aerobias.

Anlisis Composicional de Leche Cruda:

Grfica 3: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Protena.

Grfica 4: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Grasa.

Grfica 5: Distribucin de los mtodos empleados por los laboratorios para el Anlisis de Slidos Totales.

2. MATERIAL DE REFERENCIA 2.1 CALIDAD HIGINICA Para esta ronda se prepar una muestra como material de referencia para medir el desempeo de los laboratorios al hacer anlisis de la calidad higinica de la leche cruda, sta se desarroll usando como matriz leche estril y adicionando un volumen especifico de inoculo estandarizado de una cepa de referencia de Micrococcus luteus ATCC 10240 en el material con el fin de obtener una concentracin cercana al lmite de cuantificacin de la metodologa. 2.1.1 Homogeneidad y estabilidad del Material de Referencia

Para asegurar una distribucin homognea del microorganismo en la matriz un volumen del inoculo fue homogenizado mecnicamente. Con el fin de verificar las caractersticas de homogeneidad del material de referencia se efectu un muestreo aleatorio sobre el lote producido, las muestras colectadas fueron analizadas por el mtodo de referencia. Se obtuvieron resultados para el lote y se aplicaron los anlisis estadsticos descritos en la tabla 2. Para probar la estabilidad de la muestra de referencia los datos tomados durante cuatro das fueron analizados con una prueba ANOVA, para la cual se plantearon las siguientes hiptesis:

Ho: No hay diferencia significativa entre las medias del mensurando para cada da de anlisis. HA: Hay diferencia significativa entre las medias del mensurando para cada da de anlisis. Los resultados del anlisis estadstico fueron evaluados bajo un nivel de significancia del 1 % ( = 0.01). En la comparacin de las medias para el mensurando en cada da de anlisis el valor obtenido expresado como p-valor fue de 0,176. Como el p-valor para el mensurando es mayor que 0.01, la hiptesis nula es aceptada, y no se detectan diferencias estadsticamente significativas entre los promedios de las medidas para cada da de anlisis, siendo esto un Indicador de estabilidad del material de referencia en un periodo de tiempo de cuatro das bajo refrigeracin.

Estadstico

Bacterias Mesofilas Aerobias (UFC/mL) 27 62,58 56 69 2,99 4,79

Datos Media Mnimo Mximo Desv. Estndar C.V.(%)

Tabla 2: Anlisis estadstico para determinar homogeneidad de muestra referencia calidad higinica.

De los datos analizados se obtiene un coeficiente de variacin de 4,79% como dicho coeficiente es menor al 5% se considera que no hay variacin estadsticamente significativa en el recuento de bacterias mesfilas aerobias. De esta manera se prueba la homogeneidad del material de referencia. 2.2 CALIDAD COMPOSICIONAL En esta ronda para fisicoqumica se cont con una muestra como material de referencia, correspondientes a un tipo de leche cruda preservada con conservante, esto permiti que no sufriera modificaciones en su composicin ocasionada por la presencia de bacterias.

10

2.2.1

Homogeneidad y estabilidad del Material de Referencia

La evaluacin de la homogeneidad se realiz utilizando 27 muestras para el material de referencia seleccionadas aleatoriamente a las cuales se les determin el contenido de protena, grasa y slidos totales y se realiz un anlisis estadstico utilizando las medidas del coeficiente de variacin para cada mensurando en el cual al estar por debajo de un 5%, aseguran la homogeneidad del material de referencia. La Tabla No. 3 muestra los estadsticos relevantes del material de referencia donde el valor del coeficiente de variacin es crtico para la determinacin de la homogeneidad.

Estadstico

Protena

Grasa

Slidos Totales 81 12,65 0,03 0,27

Datos Media Desv. Estndar C.V. (%)

81 3,26 0,004 0,14

81 3,98 0,04 0,92

Tabla 3: Anlisis estadstico para determinar homogeneidad de la muestra de referencia calidad composicional.

Para la prueba de estabilidad se emplea el test de Kruskall-Wallis usando el estadstico corregido H* debido a que existen empates, es decir observaciones con el mismo valor de medicin, los datos fueron obtenidos sobre muestras mantenidas en refrigeracin durante 7 dias: PRUEBA PARA LA MEDICIN DE GRASA El p-valor para la prueba es 0.02 mayor a 0.01 correspondiente a un nivel de significancia del 1%, por esta razn se acepta la hiptesis de que las mediciones de grasa son iguales entre das. PRUEBA PARA LA MEDICION DE PROTEINA El p-valor para la prueba es 0.013 mayor a 0.01 correspondiente a un nivel de significancia del 5%, por esta razn se acepta la hiptesis de que las mediciones de protena son iguales entre das. PRUEBA PARA LA MEDICION DE SOLIDOS TOTALES El p-valor para la prueba es 0.04 menor a 0.01 correspondiente a un nivel de significancia del 1%, por esta razn se acepta la hiptesis de que las mediciones de TS son iguales entre das. En consecuencia los parmetros son estables en las condiciones de la prueba.

11

3. VALOR ASIGNADO Los valores asignados para bacterias mesfilas aerobias, grasa, protena y slidos totales fueron considerados a partir de la media robusta de los LABORATORIOS PARTICIPANTES. En la siguiente tabla se contrastan los valores de CORPOICA con los valores de los laboratorios participantes. Ntese que los valores de incertidumbre de los laboratorios participantes son mayores que los registrados por CORPOICA:
Valores CORPOICA Bacterias Mesofilas aerobias (UFC/ml) 60,59 0,06 Valores Laboratorios participantes Bacterias Mesofilas aerobias (UFC/ml) 246 77

Estadstico

Protena

Grasa

Slidos Totales 12,65

Protena

Grasa

Slidos Totales 12,71 0,03

Valor Incertidumbre

3,26

3,98

3,17 0,02

4,15 0,02

3,704E-05 3,426E-04 3,148E-04

Tabla 4: Comparacin de los valores obtenidos por CORPOICA y los Laboratorios Participantes de los materiales de referencia.

4. RESULTADOS Para evaluar los 107 laboratorios participantes con base en la metodologa Z-score, se tuvieron en cuenta los datos reportados de los cuatro mensurandos. En total se recibieron 107 reportes de anlisis para los 4 parmetros evaluados. En las tablas 5 y 6 se describe de forma general, la cantidad de laboratorios habilitados, no habilitados y que no reportaron datos y la distribucin del comportamiento de los laboratorios por mensurando en porcentaje.

12

Numero de Laboratorios

Bacterias Mesofilas Protena aerobias (UFC/ml) 93 14 0 107 106 1 0 107

Grasa

Slidos Totales

Habilitados No habilitados No reportaron TOTAL

91 16 0 107

104 3 0 107

107 0 0 107

Tabla 5: Distribucin de la conformidad por nmero de laboratorios.

Bacterias Porcentaje de Mesofilas Protena Laboratorios aerobias (UFC/ml) Habilitados No habilitados No reportaron TOTAL % 85 15 0 100 87 13 0 100 99 1 0 100

Grasa

Slidos Totales

97 3 0 100

100 0 0 100

Tabla 6: Distribucin de la conformidad por mensurando en porcentaje.

13

4.1 VALORES DE Z-SCORE OBTENIDO POR LOS LABORATORIOS PARTICIPANTES CON RESPECTO AL VALOR ASIGNADO OBTENIDO CON LA MEDIA ROBUSTA DE LOS LABORATORIOS. 4.1.1 Evaluacin de Calidad Higinica Recuento de Bacterias Mesfilas Aerobias.

14

4.1.2 Evaluacin de Calidad Composicional. Anlisis de Protena.

15

4.1.3 Evaluacin de Calidad Composicional. Anlisis de Slidos Totales.

16

4.1.4 Evaluacin de Calidad Composicional. Anlisis de Grasa.

17

4.2 DESEMPEO DE LOS LABORATORIOS POR MENSURANDO. Las unidades Z-score permiten agrupar los laboratorios usando unidades de desviacin estndar, esta prueba identifica cuntos laboratorios fueron los de mejor desempeo, de acuerdo a la siguiente clasificacin: - Grupo 1. Laboratorios que reportaron datos iguales o muy cercanos al valor asignado: Si 0| Zi|< 1 - Grupo 2. Laboratorios que reportaron datos medianamente cercanos al valor asignado: Si 1| Zi|<2 - Grupo 3. Laboratorios que reportaron datos medianamente alejados al valor asignado: Si 2| Zi|<3 - Grupo 4. Por ltimo esta los laboratorios que reportaron datos alejados al valor asignado y por ende su desempeo en el mensurando evaluado fue no conforme: Si 3| Zi|

Los resultados en conjunto segn el criterio de evaluacin y clasificacin se resumen en la siguiente tabla. Grupo 1 0<lZil<1 Grupo 2 1<lZil<2 Grupo 3 2<lZil<3 Grupo 4 3<lZil No reporta

Valores Z- Score

Total

CANTIDAD DE LABORATORIOS Mensurando Bacterias Mesfilas Protena Grasa Slidos Totales 90 92 90 74 3 14 10 29 0 0 4 4 14 1 3 0 0 0 0 0 107 107 107 107

Tabla 7: Resultados globales por desempeo.

18

En la siguiente grfica se resume en trminos porcentuales, el promedio por cada grupo teniendo en cuenta los resultados de los cuatro anlisis.

Grfica 6: Porcentaje de los laboratorios participantes y su desempeo global.

4.3 DESEMPEO DE LOS LABORATORIOS POR DEPARTAMENTO. La distribucin de los laboratorios habilitados en todo el territorio colombiano teniendo en cuenta los laboratorios inscritos se indica en la tabla 8. El departamento con mayor cantidad de laboratorios inscritos y habilitados es Cundinamarca. En este departamento se inscribieron 39 laboratorios de estos 32 laboratorios fueron habilitados.

19

Departamento Antioquia Atlntico Boyac Caldas Caquet Cauca Cesar Crdoba Cundinamarca Huila Meta Nario Norte de Santander Risaralda Santander Sucre Valle

Inscritos 19 2 7 4 2 2 6 3 39 2 1 9 1 2 3 1 4

Habilitados 17 2 6 4 2 2 5 3 32 2 1 8 1 1 2 1 3

No Habilitados 2 0 1 0 0 0 1 0 7 0 0 1 0 1 1 0 1

Tabla 8: Distribucin de los laboratorios inscritos y habilitados por departamento

20

5. ANLISIS DE LOS Z-SCORE DE LAS MEDICIONES DE MICROBIOLOGA Y CALIDAD COMPOSICIONAL EN LOS TRES ENSAYOS INTERLABORATORIOS 5.1 Microbiologa Se presenta el box-plot en de los Z-score para las mediciones de microbiologa en los tres ensayos interlaboratorio, en donde se observa que la menor variabilidad se present en el primer ensayo y la mayor en el tercer, sin embargo este ltimo es el que menos datos atpicos tiene indicando una mayor exactitud en contraste con el primero que tiene la mayor cantidad de mediciones extremas. Es destacable que la mediana de los Z-score en el tercer ensayo es la mayor siendo cercana a 20 mientras en los dos primeros se mantiene cercana a cero.

Grfica 7: Comparacin de los valores de Z-score para microbiologa.

21

5.2 Protena En el caso de la protena la variabilidad es similar en los tres ensayos interlaboratorio, teniendo los dos primeros mayor cantidad de valores atpicos, indicando que las mediciones del tercer ensayo son ms exactas. Las medianas son las mismas en los tres ensayos.

Grfica 8: Comparacin de los valores de Z-score para protena.

Los laboratorios considerados como atpicos ( son: IL1 IL2

) para los inter laboratorios

IL3

LB002,LB014,LB017,LB064, LB014,LB055, LB062, LB080, LB081, LB158 LB065, LB101 LB095, LB098, LB126 De los datos atpicos en el primer ensayo 3 laboratorios se presentaron nuevamente en el segundo ensayo. De los atpicos del primero y segundo 9 se presentaron en el tercero, es decir que la disminucin de los datos atpicos para el ltimo ensayo interlaboratorios se debe a una mejora en la exactitud de las mediciones y no a la ausencia de aquellos que presentaron mediciones alejadas de la medida central para protena.

22

5.3 Slidos Totales El primer ensayo interlaboratorio presenta menos variabilidad en los Z-score de slidos totales pese a ser el menos exacto (tiene mayor presencia de valores atpicos), mientras en el segundo y tercero la variabilidad es similar y las mediciones irregulares son pocas o ningunas. Las medianas se mantienen cercanas a cero para los tres casos.

Grfica 9: Comparacin de los valores de Z-score para solidos totales.

Los atpicos por medicin de solidos totales ( IL1 LB085, LB093, LB115 IL2

) son: IL3

LB014, LB051, LB090, LB094, LB117, LB126

De los atpicos en el primer ensayo ninguno fue incluido en el segundo es decir que la disminucin de medidas lejanas del valor central no se debe a mejoras en la exactitud de los laboratorios que presentaron problemas, por el contrario de los 6 atpicos en el segundo ensayo 4 estn incluidos en la ltima ronda, esto indica que la disminucin a cero medidas extremas si est relacionado con la mejora en la exactitud de las mediciones de slidos totales.

23

5.4 Grasa Las mediciones de grasa del tercer interlaboratorio resultan ms precisas al presentar una menor variabilidad en los z-score, pese a esto son menos exactas ya que presenta la mayor cantidad de datos atpicos con los valores ms grandes. Las medianas se mantienen estables alrededor de cero.

Grfica 10: Comparacin de los valores de Z-score para grasa.

Para (

los

tres

interlaboratorios se presentaron ) para la medicion de grasa: IL2

los

siguientes

datos

atipicos

IL1 LB006, LB065, LB127 LB024, LB090,

IL3 LB010, LB098, LB086, LB102,

LB046, LB001, LB010, LB017, LB001, LB125, LB051, LB090, LB094, LB092, LB117, LB126, LB154 LB158

De los laboratorios atipicos en el primer ensayo solo 2 fueron incluidos para el segundo, luego el aumento de mediciones extremas es debida a la inclusion de nuevos laboratorios con mediciones desviadas del valor central. En el lltimo ensayo interlaboratorio se incluyen 7 de los nueve que presentaron valores atipicos en el segundo, aunque solo 2 repiten en esa calificacin, esto indica que la deficiencia en las medidas radica en la desmejora de aquellos que habian obtenido medidas cercanas al valor central.

24

5.5 Porcentaje de Habilitados y No Habilitados El porcentaje de laboratorios No Habilitados alcanza su pico con un 27,70% correspondiene a 41 laboratorios en el primer ensayo inerlaboratorios, en el segundo se reduce al valor minimo con un 7,08% que conincide con 8 laboratorios y luego para el tercero vuelve a aumentar a 14,95% que corresponde con 16 laboratorios. De acuero a esto se puede inferir que el mejor desempeo general se obtiene para los ltimos dos ensayos.

Grfica 11: Comparacin de los porcentajes de laboratorios habilitados y no habilitados.

25