Вы находитесь на странице: 1из 14

Disponible en lnea en

www.sciencedirect.com

Journal of Cleaner Production 16 (2008) 517e530 www.elsevier.com/locate/jclepro

Desempeo ambiental, indicadores de medicin y la incertidumbre en


el contexto de SEMA: un estudio de caso
Eleonora Perottoa,*, Roberto Canzianib, Renzo Marchesic, Paola Butellid
Universidad Politcnica de Miln, CQA, DIIAR, P.za Leonardo da Vinci 32, 20133 Miln, Italia
o
Universidad Politcnica de Miln, DIIAR, P.za Leonardo da Vinci 32, 20133 Miln, Italia
do
Universidad Politcnica de Miln, CQA, Departamento de Energtica, P.za Leonardo da Vinci 32, 20133 Miln, Italia
re
Universidad Politcnica de Miln, TTO, P.za Leonardo da Vinci 32, 20133 Miln, Italia
Recibido el 2 de noviembre de 2006; aceptado el 20 de enero de de
2007
AVailable en lnea el 23 de marzo de de 2007

Abstracto

EMS es una herramienta para la gestin de la interaccin entre la organizacin y el medio ambiente. El objetivo de un SGA es mejorar el
comportamiento medioambiental de la organizacin. El rendimiento debe ser monitoreado a travs de mediciones, y est gestionado por
indicadores. son variables que resumen o de otra manera simplifican la informacin relevante sobre el estado de un sistema complejo. Una correcta
evaluacin de desempeo ambiental surge de la eleccin de los 'datos 'en bruto' adecuados' y de las relaciones entre 'datos 'en bruto''.
En este trabajo, despus de un breve discurso en relacin con el estado de los indicadores de evaluacin del desempeo ambiental y la media
de incertidumbre, propone un enfoque para el estudio y la evaluacin, a travs de indicadores e ndices, del aspecto ambiental '' descargas de aguas
residuales '' de un local autoridad que est involucrado en la implementacin del EMS. En particular, se informa que el anlisis crtico de uno de
los ndices que se ha utilizado. El papel de la incertidumbre de las mediciones se ha subrayado. Los resultados mostraron que la incertidumbre de
la medicin es esencial para una comparacin de datos eficiente y para una correcta evaluacin de desempeo ambiental, lo que, a su vez, es
esencial para garantizar la eficacia de la aplicacin de EMS.
2007 Elsevier Ltd. Todos los derechos reservados.

Palabras clave: Sistema de Gestin Ambiental; Rendimiento ambiental; indicadores; ISO 14001; La incertidumbre de las mediciones

1. Introduccin organizaciones en el proceso de medicin del desempeo, In-


ternacional Standard Organization (ISO) ha desarrollado el
Un Sistema de Gestin Ambiental (SGA) es una parte del estndar ISO 14031 especfica: 00[2]. Los indicadores son las
sistema de gestin de una organizacin (incluyendo todos los principales herramientas de esta norma, y se definen como el ''
activos de infraestructura humana, econmica y) que tiene expresin especfica que proporcionan informacin sobre el
como objetivo gestionar los aspectos medioambientales desempeo ambiental de una organizacin ''. Su mbito
relacionados con sus actividades, productos y servicios. Su principal es hacer que la medicin del comportamiento
mbito principal y final es mejorar la medioambiental de las organizaciones. Por desgracia, el ''
Desempeo ambiental '' de las organizaciones. La nueva norma medicin '' del medio ambiente DESEMPEO sigue siendo una
ISO 14001: 2004[1] define el rendimiento medioambiental en de las mayores dificultades para las organiza- ciones y para la
el '' Resultados medibles de la gestin de una organizacin de certificacin de los rganos competentes /[3E6].En particular,
sus aspectos ambientales ''. Para ayudar al un factor que a menudo se descuida es la incertidumbre de las
mediciones relacionadas con los indicadores e ndices. Por el
contrario, la incertidumbre que afecta a los datos en bruto es un
* Autor correspondiente. Tel .: 02 23996433/6522 39; Fax: 02 23996499 39.
tema crucial, ya que un indicador puede producir una imagen
Direccin de correo electrnico:eleonora.perotto@polimi.it(MI. Perotto). fiable de los aspectos ambien- tales o rendimiento slo si se basa
en datos de buena calidad[7].
0959-6526 / $ - see front matter 2007 Elsevier Ltd. Todos los derechos
reservados. doi: 10.1016 / j.jclepro.2007.01.004
2 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

2. Sistema de Gestin Ambiental


Organizacin con un SGA debe evaluar su desempeo
Sistema de Gestin Ambiental (SGA) es una herramienta de ambiental en contra de su poltica ambiental, objetivos, metas y
identificacin y solucin de problemas de problemas, basado otros criterios de desempeo ambiental. De hecho, un SGA da
en el concepto de mejora continua, que se puede implementar un esquema organizado y coherente para tratar adecuadamente
en una organizacin de muchas maneras diferentes, las cuestiones medioambientales en las organizaciones, con el
dependiendo del sector de actividad y las necesidades objetivo principal de mejorar su comportamiento
percibidas por la administracin[8]. En par- ticular, las normas medioambiental.
de sistemas de gestin ambiental han sido desarrollados por la Muchos autores se refieren rendimiento y blemas blemas
Organizacin Inter- nacional de Normalizacin (ISO 14001) y ambientales relacionados con su evaluacin (por
por la Comisin Europea e de gestin y auditora ejemplo,[14e19]). Por lo tanto, en 1999, ISO public la norma
medioambientales (Reglamento EMAS)[9]. ISO 14031 que da guidAnce en el diseo y uso de la evaluacin
La norma ISO 14001: 04 (e igualmente la Re- lacin EMAS del desempeo ambiental de una organizacin. Sin embargo,
761/2001) define el SME '' una parte del sistema de gestin de este problema est siendo tema de discusin, como se informa
una organizacin utiliza para desarrollar e implementar su en muchos documentos[4e6,20,21].
poltica ambiental y gestionar sus aspectos ambientales '', Existen varias definiciones para el rendimiento
donde el aspectos ambientales son '' elemento de las medioambiental expresin, por ejemplo:
actividades, productos o servicios de una organiza- cin que
puede interactuar con el medio ambiente ''. Por lo tanto, un
sistema de gestin ambiental es un mtodo de incorporacin resultados medibles de gestin de una
de cuidado del medio ambiente en toda la estructura organizacin de sus aspectos
corporativa. Es una herramienta til para mejorar el medioambientales (los resultados pueden ser
cumplimiento de la legislacin, la direccin de la presin de los medidos contra de la poltica de la organizacin
grupos de inters, tasa de mejorar la imagen Corpora- y del medio ambiente, objeti- vos ambientales,
aumentar la conciencia de los problemas ambientales dentro objetivos medioambientales y otros requisitos
de la organizacin. La mayora de los SMA se basan en el Formance per- ambientales[1]); y
'Plan, Do, Check, Act '' modelo'. Por lo tanto, un EMS es un resultados de la gestin de una organizacin de
ciclo continuo de planificacin, implementacin, revisin y sus aspectos medioambientales (los resultados
mejora de los procesos y acciones que una organizacin se pueden ser medidos contra de poltica
compromete a cumplir con sus obligaciones ambiental, objetivos y metas de la
medioambientales[10]y permitir la mejora continua del organizacin)[2,9].
desempeo ambiental global. Siguiendo el modelo, la
organizacin que correctamente han aplicado los principios de En cualquier caso, con el fin de evaluar la perfor- mance
la norma llegar a estar en un escaln superior de la espiral del medio ambiente, es necesario evaluar los aspectos
virtual en comparacin con el ciclo precedente. La norma ISO ambientales (elemento de las actividades, productos o
14001 (y del mismo modo el Reglamento EMAS) de-
servicios de una organizacin que puede interactuar con el
velopments la ruta de acuerdo con las fases que se muestran
medio ambiente[1]). Los cambios en el entorno de en-, ya
en TABLA 1 (enfoque basado en procesos). Para ms detalles
sea adverso o beneficioso, resultantes total o parcialmente
ver Refs.[1,9,11e13].
de los aspectos ambientales, se definen como '' impactos
3. El desempeo ambiental ambientales ''. La relacin entre los aspectos ambientales
y los impactos es uno de causa y efecto.
Adems, un aspecto ambiental significativo es un
Muchas organizaciones estn buscando maneras de
aspecto medioambiental que tiene o puede tener un
entender, demostrar y mejorar su comportamiento
impacto ambiental significativo[1]. ]. La organizacin debe
medioambiental.
asegurarse de que se toman en cuenta los aspectos
ambientales significativos en el establecimiento,
TABLA 1 . EMS PROCESO ISO 14001:04
implementacin y mantenimiento de su sistema de gestin:
la identificacin de los aspectos ambientales significativos,
los impactos asociados es necesaria con el fin de
determinar si y donde se necesita el control o la mejora y
establecer prioridades para acciones de gestin . Em
particular es necesrio definir algunos critrios de
importncia que deberea ser integral, adecuadoo
para la comprencion independiente reproducible y
verificable con el fin de identificar los aspectos
ambientales significativos de las actividades
productos y servicios de la organzacion El papel de los
aspectos significativos y la relacionados con los problemas
se ilustran en las directrices problemas se ilustran en las
directrices de la ISO (ISO 14004: 04[22]) Y las del
Reglamento EMAS (Recomendacin 680 /
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 3

Asociar uno o ms indicadores para cada aspecto ambiental. En 1. los valores de los indicadores deben ser mensurables (o al
particular, los indicadores permiten clasificar y resumir los datos menos observable);
relativos a los aspectos ambientales, devolver un inme- comi y 2. Los datos deben ser, o bien ya disponible o que deberan
una imagen representativa de la situacin de la empresa en re- ser obtenibles (a travs de medicin especial o las
lacin a su situacin ambiental, comparable con el contexto actividades de supervisin);
territorial de la organizacin y con los objetivos que han sido 3. la metodologa para la recopilacin de datos, procesamiento
establecidos . Los indicadores deben abordar esos impactos de datos, y
medioambientales que son ms significativos y que la com- paa construccin de indicadores debe ser clara, transparente y
puede influir directamente por sus operaciones, gestin, estandarizada;
actividades, productos y servicios. Tambin deben ser lo 4. Medios para la construccin y el seguimiento de los
suficientemente sensible como para reflejar cambios indicadores deben estar disponibles;
significativos en pactos im- ambientales. Estos valores son 5. los indicadores o conjuntos de indicadores deben ser
esenciales, ya que representan el trmino de referencia para rentables, un problema menudo pasado por alto;
todas las futuras evaluaciones de desempeo ambiental. 6. aceptabilidad poltica en el nivel apropiado (, na- cional local
e internacional) debe ser fomentada (indicadores que no
4. Los indicadores e ndices son aceptables por los decisores tienen pocas
probabilidades de influir en las decisiones); y
7. La participacin de, y el apoyo de, al pblico en el uso de in-
4.1. Indicadores, indicadores ambientales e
dicators es muy deseable, como un elemento de la
indicadores de desempeo ambiental
exigencia general de la participacin de la sociedad en
general en la bsqueda del desarrollo sostenible.
Las definiciones de los indicadores son particularmente
confuso[36]. Algunas definiciones especficas de indicador en la
En cuanto a los indicadores ambientales se han propuesto
literatura son:
muchas definiciones. En el Informe de la EPA sobre el Medio
''medida del comportamiento del sistema en trminos de
Ambiente (2003), un indicador ambiental es '' un valor numrico
suscepti- significativa y per- atributos ''[37]; '' Medida que
de- Rived a partir de mediciones reales de una presin, estado
resume informa- cin correspondiente a determinado
o condicin ambiental, la exposicin o la salud humana o
fenmeno, o para aproximacin razonable a tales medir ''[38]; ''
condicin ecolgica durante un dominio geogrfico
Parmetro o valor derivado de parmetros, que apunta a /
determinado, cuyas tendencias a lo largo tiempo de representar
proporciona informacin sobre / describe el fenmeno / medio
o llamar la atencin sobre las tendencias subyacentes en el
ambiente / rea con significado que se extiende ms all de eso
condi- cin del medio ambiente ''[43]. El Banco Asitico de
directamente asociado con el parmetro (propiedad que se mide
Desarrollo (1999) dice que los indicadores ambientales ''
o se observa) valor ''[39]; y '' variable que describe el sistema,
representan una manera de medir ciente EF- las cuestiones del
dnde variable es una representacin fun- cional de un atributo
medio ambiente en un pas: potencialmente, los indicadores
(calidad, caracterstica, propiedad) del sistema y representa
pueden sealar la salud del medio ambiente y pueden ayudar
nuestra imagen de un atributo se define en trminos de la
en la formulacin de acciones para servir a la larga necesidades
medicin especfica o procedimientos de la observacin ''[40].
a largo plazo del medio ambiente y la comunidad ''[44]. El
En general, los indicadores deben ser capaces de[41]: (I)
PNUMA (2004) define los indicadores ambientales como '' una
evaluar diciones y tendencias con-; (Ii) comparar entre los
forma de mejorar la entrega de informacin para la toma de
lugares y situaciones; (Iii) evaluar las condiciones y tendencias
decisiones ''[8], Mientras que la OCDE (2004) los define como ''
en relacin con las metas y ob- jetivos; (Iv) proporcionar
una herramienta esencial para el seguimiento del progreso del
informacin de alerta temprana; y (v) anticipar las condiciones y
medio ambiente, el apoyo a la evaluacin de polticas e informar
tendencias futuras. Por lo tanto, es posible decir que de-
al pblico ''[45].
indicadores sirable son variables que resumen o de otra manera
En cuanto a los indicadores de rendimiento, que pueden
simplificar la informacin relevante, que los fenmenos de
representar un conjunto finito de cantidades elegidas para
inters visible o perceptible para el personal de gestin, y son
reflejar ciertos aspectos de una organizacin. Una posible
capaces de cuantificar, medir y comunicar la informacin
definicin de este tipo de indicadores es '' un nmero, absoluta
pertinente. Algunas de estas propiedades no son universales
o relativa, que facilita la gestin, comunicacin y seguimiento de
requisitos (por ejemplo, indicadores cualitativos se pueden usar
de una organizacin DESEMPEO ''[46]. Bartolom (1995)
en algunas situaciones), pero una cuestin de conveniencia[41].
define los indicadores ambientales per- formance como '' la
La mayora de las definiciones de los indicadores ambien-
informacin cuantitativa y cualitativa que permita la evaluacin,
descartan la posibilidad de que los indicadores cualitativos, al
desde el punto de vista del medio ambiente, de la eficacia de la
restringir el concepto de variables numricas, ya sea explic-
empresa y la eficiencia en el consumo de recursos ''[47]. La ISO
tamente o implcitamente[32,36,37,39,42]. De hecho, se
14031[2]define los indicadores de desempeo ambiental como
sostiene que una de las funciones esenciales de los indicadores
'' expre- sin especfica que proporcionan informacin sobre el
es cuantificar un elemento. Los indicadores cualitativos pueden
desempeo ambiental de una organizacin '' y su alcance es
ser preferidos a los indicadores cuantitativos en al menos tres
hacer la medicin del comportamiento medioambiental de las
casos: (i) cuando informa- cin cuantitativa no est disponible;
organizaciones. Ac cording a la norma ISO 14031 indicadores
(Ii) cuando el atributo de inters es inherentemente no
deben ser divididos de la siguiente manera.
cuantificables; y (iii) cuando el costo es un tema crucial,
venciendo todas las otras consideraciones. En algunos casos,
las evaluaciones cualitativas pueden traducirse en notacin
cuantitativa.
Slo se enumeran a continuacin los requisitos ms generales
o propiedades deseables[41]:
4 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

1. Indicadores de Desempeo Ambiental (EPI): ex- presin Indicadores son variables que representan funciones
especfica que proporciona informacin sobre el desempeo complicadas de los datos primarios, mientras que los ndices son
ambiental de una organizacin, que se dividen en: funciones simples de las variables de nivel inferior (a veces
Indicadores de desempeo de gestin (MPI): que la llamados subndices). Para el Banco Asitico de Desarrollo
informacin pro-vide acerca de los esfuerzos de gestin [44], Un ndice combina un nmero de variables en un solo
de in- fluencia del comportamiento medioambiental de valor. La capacidad de un ndice de pro- vide informacin a un
una organizacin; y nivel que abarca informacin sobre una serie de variables en la
Los indicadores de rendimiento operativo (OPI): forma de un nico valor hace que el concepto de un ndice
indicador de desempeo ambiental que proporciona atractiva para un nmero de funciones. Un ndice ambiental es
infor- macin sobre el desempeo ambiental de las necesario:
operaciones de una organizacin;
(I) para reflejar el estado de un recurso ambiental con el fin
2. Indicadores Ambientales Estado (ECI): expresin especfica de entender la dinmica de un sistema ambiental o la
que proporciona informacin sobre el gional locales, re-, las relacin entre los diferentes componentes del medio
condiciones nacionales o mundiales del medio ambiente. ambiente;
(Ii) para facilitar el anlisis de las compensaciones entre
Los ECLS proporcionan informacin sobre el estado del objeti- vos (desarrollo y proteccin del medio ambiente,
entorno de. Esta informacin puede ayudar a una organizacin etc.); y
a entender mejor el impacto real o potencial impacto de sus (Iii) para ayudar en la toma de asignacin de recursos y las
aspectos medioambientales, y por lo tanto ayudar en la decisiones de poltica.
planificacin y tacin en prctica de EMS.
En general, es difcil elegir los indicadores de rendimiento Una vez que se han elegido indicadores, que pueden ser
adecuados, as como para definir su nmero adecuado que incluidas en ndices, lo cual puede retornar informacin estable
puede describir a fondo lo que se quiere saber. Adems, cuando muy concisa y fcilmente sub. Esto, a su vez, puede ser utilizado
las diferentes necesidades especficas de informacin han de ser para comparar la evolucin de una situacin en el tiempo, sino
llenado Fulbright, a continuacin, diferentes indicadores deben tambin para comparar situaciones diferentes. Tpicamente, la
ser elegidos o construidos. agregacin implica indicadores que se refieren a la misma zona
En el EMS, la clasificacin de los indicadores recomendados (por ejemplo, tal econmica y ambien-) o compartimentos (en
por la norma ISO 14031 y los ejemplos de indicadores el caso de ambiente: aire, agua, suelo, y el ruido). La agregacin
proporcionados deben considerarse en primer lugar, a pesar de de datos y los indicadores y el proceso de pesaje es un punto
que no estn completos o integral[7,21,48,49]. En particular, muy crtico. Pesa debe ser proporcional a la importancia
una organizacin debe hacer una lista de indicadores siguiendo asignada a cada indicador nico. Es evidente que la subjetividad
las directrices generales de la norma ISO 14031 estndar y su juega un papel muy importante en la asignacin de pesos. Por
vinculacin a los aspectos ambientales correspondientes. Tabla lo tanto, es crucial que la seleccin de los pesos debe ser
2 muestra un ejem- plo de una tabla que puede ser llenado para altamente transparente y pesa debe ser definido de acuerdo con
que sea ms fcil la cin conexin entre un aspecto criterios medibles. Durante el proceso de elaboracin de los
medioambiental y los indicadores correspondientes. datos en bruto para producir indicadores e ndices, informacin
se puede perder en parte, ya que se transforma en una forma ms
4.2. ndices concisa; Sin embargo, se gana en facilidad de comunicacin
como se debe entender incluso por los no expertos[53]. En
La distincin entre los ndices e indicadores an no est cuanto a la cuestin de la '' agregacin '' Wall y otros [54] en
claro. Respecto a este tema, hay dos opiniones diferentes. cuenta que: '' .El desarrollo de indicadores altamente agregados
muchos autores[32,50,51]poner ndices en un nivel ms alto de se enfrenta con el dilema de que, si bien es necesario un alto
Ag gregation de indicadores (Informacin de la pirmide). nivel de Agregacin con el fin de intensificar el conocimiento
Otros thors au-[41] informan que los ndices e indicadores de los problemas, la existencia de valores desagregados es
difieren debido a las diferentes complejidades de la funcin por esencial con el fin de sacar conclusiones los posibles cursos de
la que son OBTENIDAS, no debido a su nivel jerrquico. En la accin. Este dilema afecta particularmente a los enfoques
mayora de los casos, altamente agregados

Tabla 2
Ejemplo de una tabla para vincular las actividades (productos o servicios) y sus aspectos ambientales a los indicadores correspondientes
Actividad / producto / aspecto ambiental Condicin indicadores
servicio
OPI MPI ECI
Combustin Emisin a la atmsfera N, A, E emisin de NOx/ Unidad Nmero de llamadas para NOx
de producto el mantenimiento por ao concentracin en
. . . . .
el aire
. . . . .
N = condiciones normales de funcionamiento, condiciones anormales de , E situaciones de emergencia y accidentes.
OPI de indicadores de performance operacional; MPI Indicadores de gestin del rendimiento, ECI: Indicadores de estado medioambiental.
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 5
IF FI FI
Que no tienen una subestructura desagregada. Por otra parte, tomados de una poblacin est dada por: Sx S = pnorte .
los sistemas altamente agregados todava tienen problemas Hay dos tipos de incertidumbre: la incertidumbre estndar y
conceptuales sustanciales. En los enfoques que prevn una Incertidumbre
agregacin de elementos viduales constituye una barrera expandida.
metodolgica. Mtodos Desventaja objetivo slo aparecen para La incertidumbre estndar, sin embargo, evaluada, est
eludir los problemas de valoracin; Adems, a menudo representada por una desviacin estndar estimada,
dependen de la existencia de valores objetivo. ''. denominado incertidumbre estndar con el smbolo sugerido
Se debe dar una gran atencin a la eleccin de las relaciones uyo, E igual a la raz cuadrada positiva de la varianza estimada.
entre los datos: la agregacin debe hacerse de acuerdo a los La Gua ISO[55]fiere re- que la incertidumbre puede ser
mtodos que deben ser lo ms objetiva posible, y el evaluada por Tipo A o Tipo B: Evaluacin
procedimiento debe ser repetible. En particular, para la creacin
de la '' escala de puntos '' y de la eleccin de los pesos de los Tipo A: Este componente de incertidumbre est representada
indicadores, es esencial ser capaz de garantizar la objetividad y por un agrupadas estadsticamente estimado
la transparencia. Por esta razn, es importante tener en cuenta desviacin estndar syo, Igual a la raz cuadrada
[7]: positiva de la iance Var- estadsticamente estimado S2
y
Y el nmero
o asociado de grados de libertad vyo. Para
- datos de la organizacin en un tiempo tal componente de la incertidumbre estndar es de
definido; Uyo syo.
- valores de la
Tipo B: Este componente de incertidumbre est representada
literatura;
por una cantidad uj, Que puede considerarse una aproximacin
- los valores que se refieren a casos
similares; y a la desviacin estndar correspondiente; es igual a la raz
j
- las tcnicas de anlisis cuadrada positiva de u2 , Que puede ser considerada una
estadstico. aproximacin a la varianza correspondiente y que se obtiene a
partir de una distribucin de probabilidad asumido en base a
Otra cuestin importante se relaciona con el ltimo punto: la toda la informacin disponible. Dado que la cantidad de u2 es
Ance assur- de calidad de datos principal, prestando especial tratado como una varianza yujj como una desviacin estndar,
atencin a la eleccin ya la calidad metrolgica de los datos en para un componente tal la incertidumbre estndar es
bruto [44,52,53]. simplemente uj.

La incertidumbre expandida es una cantidad que define un


5. La incertidumbre de la medicin intervalo del resultado de una medicin que se puede esperar
que ES- comps una gran fraccin de la distribucin de valores
que razonablemente podra atribuirse a una magnitud.
''Cuando se puede medir lo que est hablando, y expresarlo Debe tenerse en cuenta que:
en nmeros, sabes algo al respecto; pero cuando no se
puede expresar en nmeros, su conocimiento es de un
(I) la fraccin de la distribucin de los valores que podran
escaso e insatisfactorio. Puede ser el COMIENZO del
sonably rea- ser atribuido al mensurando puede ser vista
conocimiento, sino que apenas tienen, en sus pensamientos,
como la probabilidad de cobertura o nivel de confianza
avanz a la etapa de la ciencia ''
del intervalo; y
(Lord Kelvin) (Ii) uno debe definir que es la distribucin de probabilidad de
los resultados de medicin, cuando un nivel de confianza
El conocimiento de la incertidumbre es muy importante especfico tiene que estar asociado con el intervalo
definido por la incertidumbre expandida y su
porque que supondr una mayor confianza en la validez del
incertidumbre estndar combinada; el nivel de confianza
resultado de una medida. que se pueden atribuir a este intervalo puede ser
La incertidumbre, tal como se definen en la Gua para la conocido slo en la medida en que puede estar justificada
expresin de la incertidumbre de medida (GUM correo[55]) Y en la suposicin de la distribucin de probabilidad.
VIM (Vocabulario Internacional de Trminos Bsicos y
Generales de Metrologa e[56]), Es un '' parmetro, asociado al El factor de cobertura es un factor numrico que se utiliza
resultado de una medicin, que caracteriza la dispersin de los como un multiplicador de la incertidumbre estndar combinada
valores que razonablemente podra atribuirse a una magnitud '' a fin de obtener una incertidumbre expandida.
1 Si el propsito de la declaracin de incertidumbre es
El parmetro puede ser, por ejemplo, una desviacin estndar, proporcionar cobertura con un alto nivel de confianza, una
o la anchura de un intervalo de confianza; mientras que la incertidumbre expandida se calcula como
magnitud a medir es una cantidad particular, se someti a
medicin que es un conjunto de operaciones que tienen por
Donde se elige k ser el a / 2 valor crtico de la tabla t (distribucin
objeto de determinar un valor de una magnitud[56].
t de Student) para v grados de libertad. Para grandes grados de
La ciencia de la medicin, abrazando determinaciones tanto
libertad, se sugiere utilizar k 2 para aproximar
experimentales y tericos en cualquier nivel de incertidumbre en
Cobertura del 95%.
cualquier campo de la ciencia y la tecnologa, es la metrologa
(Inter- nacional Oficina de Pesos y Medidas e IBPM e [57]).

1 La desviacin estndar de los X Media de n valores


6 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

La incertidumbre expandida se ha definido anteriormente se [Sesenta y cinco], A nivel nacional [66] as como las
supone que proporcionar un alto nivel de cobertura para el administraciones municipales gobierno local Nivel E [67,68].
verdadero valor desconocido de la medicin de inters, de modo En Italia, las autoridades locales que se aplican con mayor
que para cualquier resultado de la medicin, Y: frecuencia para los EMS son municipios (Sincert sitio [69]).
Desde un SGA debe garantizar la gestin de los aspectos
ambientales de la organizacin que estn bajo su control directo
YU valor verdadero Y U y la influencia, a continuacin, un EMS para una autoridad local
Ms informacin, vase las referencias [55,56,58e60]. puede ayudar en aprovechar, el objetivo del desarrollo
La evaluacin de la incertidumbre de medicin es esencial sostenible de todo el territorio. Por lo tanto, para un municipio
para la calidad metrolgica de los resultados. Sin tal evaluacin del Anlisis Ambiental (EA) es a menudo muy importante, ya que
de los resultados de las mediciones no pueden compararse ni debe cubrir no slo los aspectos ambientales relacionados con
entre s ni con la literatura o valores estndar. sus actividades especficas, productos y servicios, sino tambin
Otra aplicacin importante de la evaluacin de la los aspectos ambientales AF fecting el territorio. Para este
propsito, es crucial para definir indicadores e ndices que son
La incertidumbre es para la evaluacin comparativa. La
capaces de representar con eficacia tanto las condiciones
evaluacin comparativa debe estar en la base de los SMA. De
ambientales del territorio y los aspectos ambientales relevantes
hecho, no slo es una herramienta importante para impulsar
que pueden ejercer efectos negativos sobre el medio ambiente.
mejoras, ya que permite comparar y actuaciones
En este trabajo se propone el uso de indicadores e ndices
organizaciones de base, pero tambin va ms all del
para el estudio y la evaluacin de un aspecto especfico del
establecimiento de puntos de referencia, estndares y normas,
medio ambiente (vertidos de aguas residuales) de una autoridad
ya que investiga las prcticas que apoyan el punto de referencia
local que participa en la implementacin del EMS. Los
en s ( p.ej[61e64]).
resultados del anlisis ambiental mostraron que descargas de
A veces, la palabra '' incertidumbre '' se intercambia con
aguas residuales afectados negativamente la calidad del agua
''Exactitud'', pero en realidad son diferentes. De hecho, el ''
del cuerpo de agua receptor, y que este aspecto fue significativa.
picante Accu de medida es el grado de concordancia entre el
Por lo tanto, se decidi informar de la evaluacin del desempeo
resultado de una medicin y un valor verdadero del
ambiental de las descargas de aguas residuales.
mensurables y '' y se refiere nicamente a un error sistemtico
Se presenta un listado de algunos posibles indicadores que
[56]. Por lo tanto, la palabra '' exactitud '' no debe ser utilizado
se han utilizado Duran- el paso inicial de la implementacin del
para cuantitativamente la describa las caractersticas de los
EMS (Environmental Analysis e EA). Indicadores e ndices se
instrumentos de medicin u otras entidades. Incluso haciendo
han elegido teniendo en cuenta la importancia de supervisar
caso omiso de este punto, el trmino '' exactitud '' es un par- cial
formantes en un contexto EMS. Asimismo, se ha considerado
contribuyen del trmino metrolgica '' incertidumbre '', que se
que las herramientas de gestin de la sostenibilidad como la
refiere tanto a los errores sistemticos y aleatorios.
evaluacin comparativa [63] estn fuertemente recomendado en
la Carta de Aalborg (1994) [70] para el intercambio de
6. Estudio de caso: el papel de la incertidumbre de la experiencias y mejores prcticas entre las autoridades locales.
medicin en la evaluacin del desempeo ambiental de las Este problema ha sido considerado como fundamental, ya que
descargas de aguas residuales municipales las acciones de las autoridades locales desempean un papel
esencial.
Despus de la tendencia en el sector privado, los SMA se
han introducido en varias autoridades locales de todo el mundo

TABLA 3
Los indicadores que se han utilizado para describir (i) la calidad ambiental del compartimiento ambiental '' hidrosfera '' y (ii) la
forma en que es administrado por una organizacin [76]
Indicador ECI MPI
Hidrosfera Administracin del Agua
Watershed de rea (km2)
los cuerpos de agua principales (N, km 2)
Tasa media en los ros principales (m fluir3s 1)
cuencas de agua artificiales y capacidad de los ones
Rivera reas de preservacin de los bancos (No.,%
Indicador
del delalacuenca,
rea de km2) de las reas de preservacin con el Plan Director Provincial
congruencia
(%)
Nmero de trabajos realizados en los embalses artificiales sobre una base anual
No. de abstracciones y desviaciones de caudal (L s 1)
Calidad del medio ambiente
ndice extendida bitico (EBI)
Estado ecolgico de la masa de agua (segn la ley italiana n. 152/06, Parte 3, Anexo 1)
concentracin de nitrgeno de
amonio (mg L 1) Oxgeno Disuelto
E.
(mgcola 1)
L (UFC en 100 ml)
Conformidad con regulaciones para baarse y nadar (%)
Nmero de quejas por ao
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 7

La mejora de la situacin del medio ambiente, no slo como una La tierra a lo largo de los principales cuerpos de agua en
cuestin de poltica general, sino tambin para la planificacin comparacin con las exigencias reportadas en el Plan Maestro.
de los objetivos de calidad del agua y la prestacin de servicios Muchos indicadores, en cambio, se han obtenido mediante
de alta calidad al pblico. mediciones reales, tales como la concentracin de elementos y
Por ltimo, se presenta el anlisis crtico de uno de los los contaminantes especficos en el cuerpo de agua (por
ndices que se han adoptado. El papel de la incertidumbre de ejemplo: las concentraciones de oxgeno disuelto y de nitrgeno
medidas se ha subrayado, ya que en el contexto es esencial de amonio). En realidad, la mayora de los indicadores que se
para evaluar la incertidumbre de los datos sin procesar e utilizan comnmente para la caracterizacin de este aspecto
interpretar correctamente la informacin proporcionada por los ambien- tal se han obtenido a travs de las mediciones directas.
ndices. En la TABLA 4 se reportan algunos ejemplos de indicadores de
rendimiento que se refiere a la actividad '' la gestin de un
sistema de alcantarillado y la planta de tratamiento de aguas
6.1. Indicadores para '' de descarga de aguas
residuales relacionadas ''. Se clasifican segn la norma ISO
residuales '' como un aspecto medioambiental
14031 como sigue:
''De descarga de aguas residuales'' es un aspecto
- indicadores de rendimiento operativo (OPI) dar informacin
medioambiental que ejerce su efecto final sobre el cuerpo de
acerca de la eficiencia del sistema de alcantarillado y la
agua receptor, como descargas de aguas residuales pueden
planta de tratamiento ter wastewa- con especial atencin a
afectar en gran medida la calidad de las aguas naturales. Con
los impactos del Medio Ambiente de afines;
el fin de comprender adecuadamente este aspecto, es preciso
- Indicadores de Desempeo de Gestin (MPI) dan
proceder a evaluar qu actividades / productos / servicios estn
informacin sobre las prcticas de gestin de la red de
involucrados en la produccin y tratamiento de aguas residuales
alcantarillado y la planta de tratamiento de aguas residuales.
y para evaluar el entorno de en- donde este aspecto se lleva a
cabo.
A continuacin, se presentan algunos ejemplos de Mediante la aplicacin y la evaluacin de los indicadores
indicadores que se utilizan para evaluar este aspecto, de propuestos al caso especfico de un municipio, pareca muy
acuerdo con la clasificacin 14031 ISO. La eleccin de los claramente que el compartimiento '' agua '' presenta algunos
indicadores refleja algunas pautas de la literatura: [71e73]. elementos crticos, principalmente relacionados con el aspecto
Particularmente, TABLA 3 muestra algunos posibles indicadores ambiental '' descargas de aguas residuales ''.
para la evaluacin de la hidrosfera, es decir, el compartimento Particularmente, los indicadores han demostrado la
ambiental donde el impacto '' de descarga de aguas residuales existencia de una contaminacin microbiolgica de la masa de
'' se lleva a cabo. En este caso: agua, lo que muy probablemente estaba vinculado a la descarga
de la planta de tratamiento de aguas residuales. De hecho:
- ECI son indicadores de estado medioambiental que dan una
imagen de la calidad y el estado de la hidrosfera; y - Indicador '' La concentracin de Escherichia coli en el ro ''
- MPI describir cmo la hidrosfera es administrado por la (ECI e UFC / 100 ml) (FIG. 1) Muestra que la contaminacin
autoridad local, municipio en primas. microbiolgica del ro est creciendo entre 1999 y 2000: el
lmite establecido por la ley (700) se supera en gran medida
(1300). Escherichia coli (por lo general abreviado como E.
Algunos de los indicadores propuestos son el resultado de
coli), de hecho, es una de las principales especies de
elaboraciones grficas de mapas digitales cartogrficas
bacterias que viven en los intestinos inferiores de animales
basadas en Sistemas de Informacin Geogrfica (GIS). A modo
de sangre caliente, incluyendo mamfero
de ejemplo, el '' Indicador de congruencia de las reas de
preservacin con el Plan Director Provincial '' se expresa en
trminos de porcentaje realmente protegidos

TABLA 4
Ejemplos de indicadores que pueden ser considerados para el aspecto ambiental se define como '' descargas de aguas residuales '' para la
actividad / servicio definido como '' gestin de alcantarillas y la planta de tratamiento de aguas residuales ''[76]
Aspecto ambiental: descargas de aguas residuales
Actividad Indicador OPI MPI
Gestin de alcantarillas y Por descarga de aguas residuales cpita en el alcantarillado (L per cpita y da)
planta de tratamiento de
aguas residuales BACALAO concentracin a la entrada / salida de PTAR (mg L 1) (PTAR)
1
BOre5 concentracin a la entrada / salida de PTAR (mg L )
1
concentracin SST en la entrada / salida de PTAR (mg L )
1
Ntrico / concentracin de nitrgeno nitroso en la entrada / salida de PTAR (mg L ) concentracin de
1
nitrgeno amnico en la entrada / salida de PTAR (mg L ) La concentracin de fsforo en la entrada /
1
salida de PTAR (mg L )
Masa de bioslidos que estn dispuestos fuera anual (t por ao) Relacin
de equivalente de poblacin sirve a la poblacin total (%)
El cumplimiento de los lmites en los puntos de muestreo (%)
Proporcin de No. de acciones para No. de muestreo (base anual, %)
Playas donde el bao fue declarado prohibido por la ordenanza N (por ao) Las acciones de
mantenimiento (No. por ao)
Las reclamaciones relativas a averas o molestias originadas por las alcantarillas / PTAR (No. por ao)
8 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

Escherichia coli
1600

1400 1999
2000
1200
2001
1000
ufc / 100
800
Lmite de la ley
ml

600

400

200

0
Municipios

FIG. 1. Indicador '' E. coli '' para el Municipio considerado (mostrada por la flecha slida).

Y su presencia en el agua y las aguas subterrneas es un Diciembre de 2005, las aguas residuales urbanas que entren en
indicador comn de contaminacin fecal. los sistemas colectores sean antes del alta sometidos a un
- Indicador '' Conformidad con regulaciones para baarse y tratamiento adecuado en los casos siguientes:
nadar '' (MPI e expresada como porcentajes) que Sliders
con los resultados de conformidad para el bao y la Para los vertidos en aguas dulces y estuarios de acciones
natacin, confirm que la contaminacin microbiolgica en aglomerados de menos de 2.000 PE (equivalente
el cuerpo de agua receptor era real: de hecho , el promedio poblacin),
de los ltimos 5 aos fue tan baja como 50% y esto se debi Para los vertidos en las aguas costeras de las
al hecho de que la conformidad (ex DPR 470/82 correo ley aglomeraciones de menos de 10.000 PE '',
italiana) no se cumple para los tres parmetros, todos ellos
indicadores de contaminacin fecal, que son: bacterias Mientras que para todos los vertidos procedentes de
coliformes fecales, bacterias coliformes totales y aglomeraciones de ms de
Streptococcus fecalis. La presencia de esas bacterias en 2000 PE, '' Estados miembros se asegurarn de que las aguas
ambientes acuticos muestra que el agua ha sido residuales urbanas que entren en los sistemas colectores sean
contaminada por el material fecal. antes del alta sometidos a un tratamiento secundario o un
tratamiento equivalente ''.
Por otra parte, la legislacin europea define un '' tratamiento
6.2. Definicin de SWTI (ndice de Estado de Tratamiento apropiado '' como '' cualquier proceso y / o sistema de
de Aguas Residuales) y su aplicacin como un posible eliminacin que permite a las aguas que reciben las descargas
descriptor del aspecto ambiental '' '' descargas de aguas para cumplir con los objetivos de calidad especificados y para
residuales cumplir con las disposiciones pertinentes de la Directiva 91 / 271
/ CE y otras directivas comunitarias ''.
Despus de descubrir que el aspecto ambiental '' descargas Una regulacin italiana especfica establece que '' el
de aguas residuales '' fue la principal causa de la mala calidad tratamiento adecuado '' es cualquier tratamiento biolgico
microbiolgica del agua del ro, que fue ideado para desarrollar simple tal como simplificarse activan procesos de lodos (como
un ndice para monitorear el estado de tratamiento de aguas aireacin extendida), trick- filtros Ling, contactores biolgicos
residuales, lo que podra rastrear la tendencia del rendimiento rotatorios, lagunaje y sistemas de Fito depuracin, siempre que
de la planta de tratamiento de aguas residuales municipales con permitan a cumplir con los estndares de calidad del efluente
el tiempo y, en consecuencia, para permitir su mejor gestin. requeridos establecidos por la autoridad competente Por lo
Este ndice fue nombrado '' Estado de ndice de Tratamiento de tanto, una definicin de '' un tratamiento inadecuado '' tambin
Aguas Residuales '' (SWTI) y se ha aplicado a la ipality se debe dar. A raz de la legislacin europea, '' tratamiento
Municipal considerado. inadecuado '' significa un tratamiento que no permite cumplir con
los lmites de descarga requerida. Por ejemplo, las EDARs
6.2.1. El ndice de SWTI inapropiadas pueden ser todos aquellos que han sido
sancionados por la autoridad competente. Sin embargo, al
El ndice ha sido desarrollado con el objetivo de una mejor hacerlo, se hace una aproximacin, como es el caso de que los
comprensin del funcionamiento de una planta de tratamiento lmites de efluentes finales no sean rebasados porque la planta
de aguas residuales de todos los interesados. De hecho, es no est diseado ni construido adecuadamente, pero debido a
importante que la informacin dada por este indicador es las prcticas de eliminacin inadecuadas (por ejemplo, vertido
comprensible no slo para los tcnicos, sino tambin a los de sustancias txicas en las alcantarillas en lugar de su
tomadores de decisiones, de manera que puedan tomar eliminacin adecuada como residuos lquidos especiales). En
fcilmente medidas para hacer frente al problema. En particular, este caso, la descarga es '' inapropiado '', no la planta. Sin
el alcance de tal indicador debe ser hacer ms evidente si el embargo, el personal de gestin de la EDAR debe rastrear la
alcantarillado y tratamiento de aguas residuales son apropiados. fuente de la descarga inadecuada y tomar tcnica y / o
Directiva 91/271 / CEE del Consejo [71], Modificada por la anuncio metro instructivos comportamiento a
Directiva 98/15 / CE [72], Establece que "los Estados miembros unvOID otro sin ocurrencias lar.
garantizarn que, antes del 31 de
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 9

TABLA 6
TABLA 5
Valores del '' Estado de ndice de Tratamiento '' (SWTI) refirindose a los datos
Poblacin equivalente (PE) en cinco municipios que pertenecen a la misma
reportados en
cuenca
TABLA 5
Municipio sewered PAG.MI. PAG.MI. Municipio PAG.MI. servido
PAG.MI. SWTI (%)
PAG. servido
por PTAR servido por
inapropiado por / sewered
PTAR servido por
MI. PTAR PAG.MI. (%) inapropiado
A 9073 8478 227 PTAR / PE
servido por
B 452 452 0 PTAR (%)
C 1355 186 0 A 93.4 20.7 90.8
D 997 997 686 B 100,0 00.0 100,0
E (la implementacin de un SGA) 3764 3205 1100 C 13.7 00.0 13.7
D 100,0 68.8 31.2
E (la implementacin de un 85.1 34.3 50.8
SGA)
El ndice SWTI se define como [73]:
Ejemplo, la cartografa del ndice en un mapa de cuencas con
Tot P: E: servido por PTAR el tiempo puede ser muy interesante para el seguimiento del
progreso de aplicacin
SWTI De los planes de conservacin de los recursos Waters.
Tot P: E: servicios de alcantarillado
Equivalente de poblacin y los dems datos que se utilizan
PAG:E: servido por PTAR inapropriada para calcular SWTI se presentan en TABLA 5. Todos los datos
Tot P: E: servido por PTAR 100 D2
se han encontrado en el Informe sobre la Calidad Provincial
superficie del agua.
SWTI se calcula como la diferencia entre la relacin del total Los valores calculados de SWTI para Municipio E y para los
equivalente de poblacin (PE) servido por plantas de vecinos (que se han nombrado AED) se muestran en la TABLA
tratamiento de aguas residuales (EDARs) a PE total atendida 6 y FIG. 2.
por el sistema de alcantarillado y la relacin de PE que son AED municipios han sido considerados como '' Neighbour ing
inadecuadamente servido por un PTAR total PE servido por '', ya que pertenecen a la misma cuenca. Los municipios vecinos
PTAR (el PE representa la unidad de medida se utiliza para tienen las mismas caractersticas esenciales ambientales,
describir el tamao de una descarga de aguas residuales). econmicos y de Municipio bajo investigacin, pero no estn
Si las puntuaciones SWTI alta y agua de calidad sigue siendo poniendo en prctica un SGA.
pobre, a continuacin, provoca distintos de los sistemas de Como se puede ver, el ndice SWTI ha evidenciado
alcantarillado municipales inadecuados y tratamiento de aguas inmediatamente (para los no expertos, tambin) que los
residuales deben ser investigados (por ejemplo difusa municipios podran ser responsable por la mala calidad del
contaminacin tales como escorrenta superficial, pobres cuerpo de agua receptor. Como cuestin de hecho, SWTI ha
tcnicas de cra de ganado). permitido la clasificacin de tipos de tratamiento en cinco
Por otra parte, este ndice expresa la eficacia global municipios, y se deja que sealar la
combinada del sistema de alcantarillado y el servicio PTAR y se ''Referencia'' en esa zona, representada por Municipio B. En
puede utilizar para comparar la situacin de cada municipio con segundo lugar ocupa el Municipio A, mientras que otros
otros en la misma cuenca. Esto es extremadamente importante municipios mala puntuacin para los valores del ndice muy
porque la contaminacin de la masa de agua no slo podra ser pobres.
causada por el municipio bajo investigacin (la implementacin En particular, para el Municipio SWTI E muestra que la
de un SGA; de ahora en adelante, llamado '' E ''), sino tambin recogida y el tratamiento no es comparable a los estndares de
de los municipios que se encuentran en la misma cuenca. Por los municipios vecinos. Por lo tanto, sus servicios de trata-
lo tanto, la escala geogrfica debe ser ms ancha que el nivel miento de alcantarillado / deben mejorarse y acciones
del municipio con el fin de identificar y planificar las acciones especficas deben ser planificadas. Sin embargo, la calidad
ms apropiadas, y tambin para determinar la funcin de cada microbiolgica del ro no es probable que mejore hasta
rgano administrativo, desde el nivel municipal individual (bajo) municipios C y D en gran medida mejorar sus actuaciones.
a nivel regional (alta). Por

municipio E

municipio D

municipio C

municipio B

Un municipio

0 10 20 30 40 50 60 70 80 90 100 110

FIG. 2. SWTI de Municipio E (la implementacin de un SGA) y para otros municipios en la misma cuenca.
10 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

6.2.2. Observaciones crticas sobre SWTI de masa de contaminantes.


El ndice no directamente no puede proporcionar ninguna Licenciado en Derecho
sugerencia precisa sobre cules son las mejores acciones a ser P: E: 0:06 3
adoptadas, ya que el que proporciona una informacin
Donde BL DBO total de5 carga, expresado como kgBOD5 por
agregada. Slo un anlisis de los datos desglosados (en este
caso: la ausencia de plantas o la presencia de plantas
da, que se alimenta a la planta de tratamiento; 0.06 kg de
inapropiadas) puede explicar que es el problema que causa DBO5producida diariamente por una persona (kg per cpita y
puntuaciones del ndice bajos. Una de las primeras acciones da).
que se pueden concebir como sea necesario puede ser estudios
Variable: Municipio E, wdo (BL) = 5%, PDF: Largo
en profundidad sobre la calidad del servicio. Por ejemplo, se Prueba de ji cuadrado = 16,81930, gl = 8 (adgiust.), P =
puede encontrar conveniente investigar cuales son las causas 0,06205
de la PTAR inade-equacy, mediante la elaboracin de balances
Otros aspectos que intervienen en la definicin de SWTI deben
estar analizada con mayor profundidad, con el fin de prevenir su 2500
uso indebido.
En primer lugar debemos definir el grado de fiabilidad es una 2000
medida. La exactitud y la precisin son fundamentales para el
clculo de indicadores fiables e ndices que dan una descripcin 1500
correcta de la realidad. Basta con echar la definicin de ''

No. de
poblacin equivalente '', ya que es en la Directiva Europea 1000

obs
91/271 / CE [71]. Es una unidad de medida de la contaminacin
orgnica biodegradable representar una carga de 60 g 500
DBO5producido en promedio por persona y da. El tamao de
la aglomeracin, expresada en PE, corresponde a la carga 0
32 34 36 38 40 42 44 46 48 50 52 54 56 58 60 62 64 66 68
orgnica producida en la aglomeracin durante un da promedio
durante la semana del ao con una produccin imum max-. Se SWTI (%)
calcula a partir de la suma de la carga orgnica producida por
Variable: Municipio E, wdo(BL) = 10%, PDF: Largo
permanentes y estacionales establecimientos y servicios
Prueba de ji cuadrado = 44,51302, gl = 8 (adgiust.), P =
residenciales y la carga orgnica producida en el mismo da por 0,0586
el agua residual industrial que debe ser recogida por un sistema 3000
de recogida (Comisin Europea, 2001 e[74]). DBO medir5 con
precisin y exactitud es un reto. BOD5es una medida muy 2500

variable relacionada con actividad biolgica, que es difcil de


2000
estandarizar, ya que depende de la siembra bacteriana (vase
el mtodo oficial para la DBO5 [75]), Que puede variar mucho
No. de obs

1500
para diferentes aguas residuales. SWTI se ve afectado por la
incertidumbre con la DBO5 mediciones para evaluar la carga
1000
orgnica de una planta y el correspondiente equivalente de
poblacin y esto debe ser considerado. 500
3000

0
6.2.3. La evaluacin de la incertidumbre asociada con el ndice 5 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85
Se decidi evaluar el efecto de la incertidumbre asociada SWTI (%)
Con la medicin biolgico (BOD5) En valores numricos
Variable: Municipio E, wdo(BL) = 20%, PDF: Largo
SWTI.
Chi-squareTest = 15,45378, gl = 8 (adgiust.), P = 0,0592
En este caso especfico, para la evaluacin de la 3000
incertidumbre de SWTI, partimos de la definicin de poblacin
equivalente (PE): 2500

TABLA 7 2000
No. de obs

Caractersticas de las EDARs que estn presentes en el Municipio '' E ''


1500

PAG.
PTAR Tipo BOre5 Carga
MI.
(BL, kg d 1) 1000

1 UN 66.00 1100
2 UN 60,30 1005 500

3 nort 32.40 540


4 eU
nort 18.00 300 0
5 N
eU
nort 12.00 200
N
eU 10 15 20 25 30 35 40 45 50 55 60 65 70 75 80 85
6 nort 3.60 60
N
eU SWTI (%)
N Higo. Distribucin de frecuencias 3. SWTI en municipio '' E '' de acuerdo con
TPE total servido por EDARs 3764 diferencias incertidumbres en estndar relativa combinados wdo (BL) 5%, 10%
A apropriado; NA no apropriado. y 20%.
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 11

Donde k es el factor de cobertura; w es la incertidumbre relativa


La DBO5 carga (BL, kg por da), que es el dato en bruto
Normaliza- combinado.
punto de partida utilizado para calcular PE, se obtiene a partir
La eleccin del factor '' k '' se basa en el nivel de confidencia
de: deseada. Para un nivel aproximado de confianza de
BL BQ 4 95%, k es 2. Los resultados se muestran en la
FIG. 4.
Como se puede ver claramente a partir FIG. 4, La
Donde BOD B 5 concentracin en las aguas residuales (kg
3 clasificacin de los cinco municipios no es tan cierto como que
m ); era sin tener en cuenta la incertidumbre que afecta el ndice,
3
Q caudal de aguas residuales (m por da). especialmente teniendo en cuenta caso '' C '', que se refiere a
Ambos son medidas experimentales. una incertidumbre estndar combinada relativa asociada a [ew
En cada municipio el nmero de plantas, la DBO total de5 BLdo(LICENCIADO EN DERECHO)] igual a 20%.
carga y el PE correspondiente han sido considerados. Para De hecho, si la incertidumbre estndar relativa combinada
Municipio '' E '', los datos pertinentes correspondientes son los Wdo(BL) es igual a 5%, la clasificacin basada en el valor medio
siguientes (se informaron detalles en TABLA 7): como en FIG. 2 an mantiene. Sin embargo, si wdo (BL) se
establece en 20%, la clasificacin no poda ser tomada como
3764 Total PE sewered; aparece: por ejemplo, no es seguro si Municipio E es mejor que
3205 PE servido por WWTPs (tanto apropiado y no D, ya que los resultados pueden ser mutuamente compatibles.
apropiado); y Municipios A y B tambin estn en una situacin muy similar.
1100 PE servido por WWTPs que no son apropiadas. Finalmente, comparando Municipio B (ptimo) con el municipio
de E (en wdo (BL) 20%), est claro que este es otro caso de
El estudio de la incertidumbre asociada a STI se ha realizado medidas compatibles.
con el mtodo de Monte Carlo (n = 10 000; para ms Por lo tanto, parece que es necesario que Municipio C debe
informacin: [76e78]), suponiendo las siguientes hiptesis: planear y tomar acciones para mejorar sus aguas residuales
actuaciones trata- miento, mientras que para los municipios E y
BL se distribuye normalmente, ya que de costumbre en lo D que viene ser- difcil establecer alguna prioridad para la
que experimentamos mediciones Tal son preocupantes, intervencin.
valores de 5%, 10% y 20% han sido probados como relativa Por ltimo, el uso de un ndice como un instrumento para la
incertidumbre estndar combinada asociada a BL e es decir, planificacin
wdo(LICENCIADO EN DERECHO); estos valores son Y / o la evaluacin comparativa parece bastante ineficaz cuando
bastante comunes en este campo, con el apoyo de algunas la incertidumbre es alta (terceros escenarios, wdo (LICENCIADO
referencias (entre alii:[79]). EN DERECHO) 20%), mientras que el mismo ndice podra ser
un buen descriptor de la realidad si se basa en los datos primas
Haciendo referencia a Municipio E, los resultados se de buena calidad.
muestran en la FIG. 3 (AeC), donde los datos de simulacin Se puede concluir que un ndice no debe utilizarse con- cabo
Monte Carlo se representan como histogramas, sobrepuesto teniendo en cuenta la incertidumbre de los datos primarios
con la curva de mejor ajuste normal (pdf, Chi-cuadrado de utilizados y la incertidumbre de los valores del ndice
ensayo, p> 0,05). Las tres diferentes imgenes estn resultantes.
relacionadas con el valor de relacin estndar combinada
incertidumbre asociada a BL (wdo (BL)), respectivamente, igual 7. Conclusiones
al 5%,
10% y 20% para cada caso A, B, y C. En el estudio de caso descrito anteriormente, el nmero de
Por ltimo, la incertidumbre expandida (U) asociado a SWTI equivalente de poblacin servida de los diferentes municipios
Se ha calculado de acuerdo con la siguiente expresin: que han sido evaluados, puede ser muy afectada por la
incertidumbre cuando se basa en BOD5 mediciones, mientras
T kW D5 que es a menudo y

Municipio E

wc (BL) = 5%
Municipio D
wc (BL) = 10%

wc (BL) = 20%
municipio C

municipio B

Un municipio

0 10 20 30 40 50 60 70 80 90 100 110
ITS U

FIG. 4. Representacin de SWTI U, donde U es la incertidumbre expandida que afecta SWTI, segn tres escenarios sobre la incertidumbre wdo(BL) que puede
afectar a BOD5 mediciones (5%, 10% o 20%).
12 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530
[8] Programa de Medio Ambiente PNUMA / FIDIC / ICC Naciones Unidas e
Indebidamente considerarse como un 'valor '' absoluto' no PNUMA.
afectado por la incertidumbre. Kit de recursos de formacin sobre el sistema de gestin ambiental,http: //
De los datos descritos antes, municipios no pueden tierra watch.unep.net/about/docs/indicat.htm; 2001.
[9] Comunidad Europea. Reglamento (CE) no 761/2001 del Parla- mento
compararse significativamente a travs de la evaluacin de
Europeo y del Consejo, de 19 de marzo de 2001 que permite partici- cin
SWTI, ya que la incertidumbre de las mediciones es alta. voluntaria de organizaciones en un sistema de gestin y auditora
Cualquier decisin acerca de ING o no acciones correctivas y medioambientales (EMAS). Bruselas: Comunidad Europea; 2001 (DOCE,
sobre los que se necesitan medidas correctivas se vuelve ms 24-04-2001, L 114/1).
y ms susceptible de crtica a medida que aumenta la [10] Stapleton PJ, Glover MA, Davis SP. sis- gestin ambiental
TEMS: una gua de implementacin para organiza- ciones pequeas y
incertidumbre. medianas. En: NSF International, editor. Glover-Stapleton Associates,
La importancia de los datos en el campo del Medio Inc.,http://www.nsf.org/NSF-ISR/; 2001.
Ambiente manual del sistema al medio ambiente [11] Whitelaw K. ISO 14001. Oxford: Pero-
Sistemas de gestin es clara: el desempeo ambiental puede Butterworth-Heinemann;
1997.
ser fuertemente afectado por la incertidumbre de los datos en [12] Agencia de Proteccin Ambiental de Estados Unidos E. EPA. manual del
bruto hasta el punto de que los resultados podran ser sin sistema de gestin medioam- cin. Versin EM-01, Control No. ESC EM-01.
sentido, o incluso lder mis-. Por lo tanto los datos en bruto La Junta de Centro de En- ambientales pertinentes,
deben ser seleccionados de acuerdo con las siguientes reglas: Ciencia,http://www.epa.gov/; 2002.
[13] Caropreso G, Catto EG, Pernigotti D. La nuova UNI EN ISO 14001: Guida
practica allo sviluppo e all'applicazione di un Sistema di gestione ambientale
(1) En cuanto a los indicadores: (i) elegir el menor nmero [UNI-Il Sole 24 Ore Ed]; 2006.
posible de indicadores que pueden describir [14] Wehrmeyer W. Medir el rendimiento del negocio del medio ambiente: una gua
adecuadamente la investigacin de bajo situacin; (Ii) evitar y completos. En: Hillary, editor. el medio ambiente prc- serie titioner negocio
y. Cheltenham; 1995. p. 1e110.
la informacin redundante;
[15] Ditz D, Ranganathan J. medicin hasta E hacia un marco comn
(2) Como para la trazabilidad metrolgica: (i) especificar para el seguimiento de desempeo ambiental. Instituto de Recursos
claramente las condiciones de referencia, mtodos Mundiales;
analticos y la calibracin adecuada de la instrumentacin; 1997.
[16] Ilinitch AY, Soderstrom NS, Thomas TE. Medir el rendimiento
(Ii) evaluar la incertidumbre de las mediciones.
medioambientales corporativa. Revista de Contabilidad y Poltica Pblica
1998; 17:
Es esencial para evaluar la incertidumbre de los datos en 383e408.
bruto en orden interpretar correctamente la informacin [17] Skillius A, Wennberg U. Continuidad, credibilidad y comparabilidad: desafos
clave para la medicin del rendimiento medioambiental de la empresa y la
proporcionada por los indicadores e ndices en el contexto EMS. comunicacin. IIIEE; 1998.
De tal manera, los ndices pueden ser muy tiles para los herramienta de evaluacin EA [18] Thoresen J. Desempeo ambiental para la
tomadores de decisiones, siempre que la incertidumbre mejora industrial. Journal of Cleaner Production 1999; 7: 365e70.
relacionada con los valores del ndice se establece claramente [19] CW Young, Welford R. Una medida del rendimiento ambiental
y representaron. marco para el negocio. En: Bennett M, James P, Klinkers L, editores. tenible
medidas suspensiones: evaluacin y presentacin de informes de
Por lo tanto, en general, datos e informacin ambientales desempeo ambiental y social. Sheffield: Greenleaf; 1999. p. 98e116.
pueden ser comparable slo si se obtienen siguiendo estrictas [20] Bennett M, James P. ISO 14031 y el futuro de perfor- ambiental
especificaciones metrolgicas sobre tanto la medicin de la Evaluacin Mance. En: Bennett M, James P, Klinkers L, editores.
metodologa y la instrumentacin. Adems, la naturaleza y Sostenibilidad medidas capaces: evaluacin y presentacin de informes de
caractersticas de los datos brutos deben considerarse desempeo ambiental y social. Sheffield: Greenleaf; 1999. p. 76e97.
[21] O'Reilly M, Wathey D, Gelber M. ISO 14031: mecanismo eficaz para
claramente cuando la estimacin de su incertidumbre. En otras
evaluacin del desempeo ambiental. Corporativa es- trategia del Medio
palabras, la calidad metrolgica de los datos en bruto debe ser Ambiente 2000; 7 (3): 267e75.
siempre considerado como un requisito bsico para poder [22] Organizacin Internacional de Normalizacin. ISO 14004. gestin medioam-
utilizar los datos sin procesar de forma racional para directrices generales sistemas ment e en principios, sistemas y tcnicas de
elaboraciones adicionales en cualquier rea [7,80]. apoyo. Organizacin Internacional de Normalizacin; 2004.
[23] Comunidad Europea. Recomendacin de la Comisin 2001/680 / CE, de 7
Septiembre de 2001 sobre orientaciones para la aplicacin del Reglamento
(CE) n 761/2001 del Parlamento Europeo y del Consejo, permi- ing
Referencias participacin voluntaria de organizaciones en una comunidad ecomanage-
cin y auditora medioambientales (EMAS). Comunidad Europea; 2001
[DOCE,
[1] Organizacin Internacional de Normalizacin. ISO 14001 e-hombre ambiental 17-09-2001, L 247/1].
agement requisitos de los sistemas electrnicos con orientacin para su uso. [24] Comunidad Europea. Recomendacin de la Comisin 2003/532 / CE del
Organizacin Internacional de Normalizacin; 2004. Consejo de 10
[2] Organizacin Internacional de Normalizacin. ISO hombre-ambiental 14031e Julio de 2003 sobre orientaciones para la aplicacin del Reglamento (CE) n
agement e Evaluacin de desempeo ambiental e directrices. Standard 761/2001 del Parlamento Europeo y del Consejo, que permite la participacin
Organization interna- cional; 1999. voluntaria de organizaciones en un sistema comunitario de gestin
[3] Johnston A, Hutchison J, Smith A. impacto ambiental significativo eva- nente: comunitaria y auditora medioambientales (EMAS), relativa a la seleccin y
una metodologa propuesta. Sistema de Gestin y Auditora 2000; uso de indicadores de desempeo ambiental. Comunidad Europea; 2003
7: 186e95. [DOCE, 23-07-
[4] Pojasek RB. Cmo se mide el desempeo ambiental? Entornos de gestin 2003 L 184/19].
de calidad mental de 2001; 79e88. Peridicos, Wiley. [25] Brown DJA. La evaluacin de los efectos ambientales como parte de un
[5] Dias-Sardinha I, Reijnders L. Evaluacin del desempeo ambiental y el sistema de gestin ambiental. Aire Limpio de 1995; 25: 108e15.
desempeo de la sostenibilidad Evaluacin de las organizaciones: un marco [26] Smith M. Metodologas para la evaluacin de los efectos ambientales. Boletn
evolutivo. Sistema de Gestin y Auditora 2001; 8: 71e9. IChemE Proteccin del Medio Ambiente 1996; 41: 12e22.
[6] Ammenberg J, Wik G, Hjelm O. Auditora Audi- ambiental externa [27] IRALDO F. valutare e gestire gli aspetti ambientali indiretti: un possibile proccio
tores e investigar cmo la ISO 14001 se interpreta y aplica en la realidad. AP-. Atti del Seminario: '' Il Nuovo Regolamento Emas: oltre i confini aziendali
Sistema de Gestin y Auditora 2001; 8 (4): 183e92. ''. Milano: Universita` Bocconi; 2001.
[7] Butelli P, Marchesi R, Perotto E. Certificazione ambientale e riferibilita`
misure delle. En: Maggioli, editor. Atti dei Seminari di '' de Ricicla 2001 '',
Rimini Fiera, 26e29 Settembre 2001; 2001. p. 126e33.
E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530 13

desempeo en el contexto del desarrollo sostenible. Washington, DC: WRI;


[28] Zobel T, Almroth C, Bresky J, Burman JO. Identificacin y evaluacin de
1995.
aspectos ambientales en un contexto SEMA: una aproximacin a un nuevo
[52] Centro de Monitoreo de la Conservacin Mundial e WCMC. En: Reynolds JH,
mtodo reproducible basado en metodologa del ACV. Journal of Cleaner La
ED-itor. El diseo de informacin de productos, serie, vol. 3. Commonwealth
produccin se 2002; 10: 381e96.
Secretar- IAT; 1998.
[29] Zobel T, Burman JO. Los factores de importancia en la identificacin y
Assessment de los aspectos ambientales en un contexto ccsme: [53] E Perotto, Marchesi R, R Canziani, Butelli P. Indici di per un valutazione
experiencias en organizaciones ish Swed-. Journal of Cleaner Production Sistema di gestione Ambientale. Qualita` 2005; 6: 26e30.
2004; 12: 13e27. [54] R Pared, Ostertag K, Bloque N. Sinopsis de sistemas de indicadores
[30] Perotto E. Una proposta METODOLOGICA per l'identificazione e la valuta- seleccionados para el desarrollo sostenible. Informe para el proyecto de
zione degli aspetti ambientali en SGA ambito. En: CIPA, editor. IA Ingeg- investigacin, 'Adems desa- rrollo de sistemas de indicadores para informar
Neria Ambientale; 2006. p. 245e55. no. 5. sobre el medio ambiente' del Ministerio Federal de Medio Ambiente.
[31] Azzone G, Manzini R. La medicin del desempeo ambiental estratgica. Karlsruhe: Instituto nhofer Frau Investigacin sobre Sistemas e Innovacin;
1995.
Estrategia de Negocios y Medio Ambiente de 1994; 3 (1):
1E14. [55] Organizacin Internacional de Normalizacin e ISO. Gua para la expresin
[32] Un Hammond, Adriaanse A, E Rodenburg, Bryant D, indicadores ronmental de la incertidumbre de la medicin. ISO, ISBN 92-67-10188-9; 1993. Papel.
Woodward R. bientes: un enfoque sistemtico para medir e informar sobre pag. 110.
el rendimiento de la poltica ambiental en el contexto del desa- rrollo [56] Organizacin Internacional de Normalizacin e ISO. Vocabulario internacional
sostenible. Washington: WR Instituto; 1995. de trminos bsicos y generales de metrologa. 2 ed. ISO; 1993. p. 59.
[57] Oficina Internacional de Pesos y Medidas e IBPM,http: // www.
[33] Azzone G, Manzini R, Noci G, Welford R, CW Young. definir ENTORNO
bipm.org/en/bipm/metrology/.
indicadores de rendimiento mental: un marco integrado. Negocios Stratego
EGY y el Medio Ambiente de 1996; 5 (2): 69e80. [58] Instituto Nacional de Estndares y Tecnologa NIST correo de. E-manual de
mtodos de estadstica,<http: //www.nist.gov />; 2005.
[34] Eagan P, Joeres E. Desarrollo de un perfor- ambiental basada en las
[59] Ellison SRL, Rsslein M, Williams A. La cuantificacin de la incertidumbre en
instalaciones
la medicin analyt- ical, Gua Eurachem Citac e QUAN. 2 ed .. P1, Eura-
Mance indicadores relacionados con el desarrollo sostenible. Journal of
Chem, Citac de 2000,http://www.measurementuncertainty.org/index.html;
Cleaner
2000.
Produccin 1997; 5 (4): 269e78.
[60] Cox M, Harris P. Hasta un rbol de goma? tratar el pleno Monte! Teddington,
[35] Olsthoorn X, Tyteca D, Wehrmeyer W, cadores Wagner M. ambientales indi-
Middlesex: Centro de Matemticas y Computacin Cientfica, Laboratorio
para el negocio: una revisin de los mtodos de la bibliografa y de
Nacional de Fsica (NPL). TW11 0LW,http://www.npl.co.uk/; 2003.
normalizacin. Journal of Cleaner Production 2001; 9: 453e63.
[61] Andersen B, Pettersen PG. El manual de evaluacin comparativa: paso a paso
[36] Bakkes JA, Van den Born GJ, Helder JC, Swart RJ, Hope CW, Parker JDE.
in- trucciones. Londres: Chapman & Hall; 1996.
Una visin general de los indicadores ambientales: estado del arte y
perspectivas. UNEP / EATR.94-01; RIVM / 402001001. En: sub-programa [62] Szekely F, Vollmann T, Ebbinghaus A. Benchmarking ambiental.
de evaluacin medioambientales. Nairobi: UNEP; 1994. Convertirse en verde y competitiva. En: Negocios y el entorno de correo
[37] Holling CS. evaluacin ambiental y la gestin adaptativa. John serie practicante. Cheltenham: Stanley Thornes Ltd; 1996.
Wiley & Sons; 1978. Inglaterra. [63] Un Bolli, Emtairah T. Benchmarking ambiental para las autoridades locales:
[38] McQueen D, Noak H. indicadores de promocin de salud: situacin actual, del concepto a la prctica. cuestiones del medio ambiente no reportan.
problemas y problemas. Promocin de la Salud 1988; 3: 117e25. 20,http: // temas. eea.eu.int/indicators/all_indicators_box?sort_byFPEIR;
[39] Organizacin para la Cooperacin y el Desarrollo e OCDE. 2001.
conjunto bsico de indicadores para las revisiones de desempeo ambiental. [64] Dattakumar R, Jagadeesh R. Una revisin de la literatura en la evaluacin
Un informe sis sintetiza por el grupo sobre el estado del medio ambiente,http: comparativa.
// www. oecd.org/; 1993. Anlisis comparativo: Una Revista Internacional de 2003; 10 (3): 176e209.
[65] Nore'n H, von Malmoborg F. estn estandarizados til en au- toridades locales
[40] R. Walz Desarrollo del sistema de indicadores ambientales: la experiencia de
SAA? Un estudio de cmo una herramienta del sector privado en el utilizado
Alemania. Gestin Ambiental 2000; 25 (6): 613e23.
en el sector pblico. Estrategia de Negocios y Medio Ambiente 2004; 13:
[41] Gallop'n GC. Indicadores y su uso: informacin para la toma de decisiones e
87e197.
Introduccin. En: Los indicadores de sostenibilidad: informe del proyecto de
[66] Sistemas de gestin ambiental Honkasalo A. En el plano nacional.
indicadores de desarrollo sostenible. Comit Wiley / Cientfico sobre
Sistema de Gestin y Auditora 1999; 6 (4): 170e3.
Problemas del Medio Ambiente (SCOPE); 1997.
[67] Sistemas de gestin ambiental von F. Malmborg: lo que est en l para las
[42] A. Adriaanse indicadores de rendimiento de poltica ambiental. lishers SDV
autoridades locales? Revista de Poltica y Planificacin Ambiental 2003;
pub-; 1993.
5 (1): 3e21.
[43] EPA. Proyecto de informe sobre el medio ambiente. Publicacin No. EPA
[68] Emilsson S, sistema de gestin ambiental Hjelm O. Asignacin de inicia- tivas
260-R-02-
de las autoridades locales suecas ea encuesta nacional. Responsabilidad
006. EPA; 2003. Social y Gestin Ambiental 2002; 9 (2): 107e15.
[44] Banco Asitico de Desarrollo. El desarrollo de las estadsticas ambientales en
[69] SINCERT,<http: // www.sincert.it />.
la despolarizacin pases asiticos y del Pacfico veloping. ADB; 1998.
[70] Carta de Aalborg. Carta de las ciudades europeas y pueblos hacia sustainabil-
[45] Organizacin para la Cooperacin y el Desarrollo e OCDE.
dad e aprobado por los participantes en la conferencia europea sobre
Key indicadores ambientales. Pars: Direccin de Medio Ambiente de la
ciudades suspensiones tenible y ciudades de Aalborg. Dinamarca: Carta de
OCDE,http://www.oecd.org/; 2004. Aalborg; 1994.
[46] Ross H. El desarrollo de indicadores de comportamiento medioambiental
[71] Consejo Europeo. Directiva 91/271 / CEE: Directiva del Consejo, de 21
para los negocios.
DNV; 1996. De mayo de 1991 sobre el tratamiento de las aguas residuales urbanas [DO
L 135 de
[47] M. Bartolomeo indicadores de desempeo ambiental en la industria. lano Mi-
05.30.1991].
: FEEM; 1995.
[72] Comisin Europea. La Directiva 98/15 / CE del 27 de febrero de 1998 modifica-
[48] indicadores Marsanich A. ambientales en EMAS por el estado ambiental
cin la Directiva 91/271 / CEE del Consejo en relacin con determinados
mentos. FEEM e ENEA 2000. Italia. requisitos establecidos en el anexo I [DO L 67 de 03.07.1998].
[49] Jasch C. Evaluacin del desempeo ambiental e indicadores. Journal of
[73] E. Perotto Metodologie e tecniche per i Sistemi di gestione Ambientale
Cleaner Production 2000; 8: 79e88. (Metodologas y tcnicas para TEMS Gestin Ambiental Systematic). Doctor
[50] desarrollo sostenible de la comunidad cientfica sobre los problemas de en Filosofa. Tesis, Politcnico de Miln; 2005 [en italiano].
el medio ambiente e SCOPE. Indicadores ambientales: proach AP- [74] Comisin Europea. Aplicacin de la Directiva 91/271 / CEE del Consejo
sistemtico para medir e informar sobre el medio ambiente en el contexto 21 de mayo de 1991 las aguas residuales urbanas, modificada por la
del desarrollo sostenible. En: Taller internacional sobre indicadores de Directiva misin Com- 98/15 / CE del 27 de febrero de 1998 e situacin al
desarrollo sostenible para la toma de decisiones, 9E11 enero de Gante, 31 de diciembre
Blgica; 1995. 1998 [sitio web de la Comisin Europea]. Comisin Europea; 2001.
[51] Instituto de Recursos Mundiales e IRG. Indicadores ambientales: un enfoque [75] APHA. Mtodo 5210 B, prueba de DBO de 5 das, los mtodos estndar para
sistemtico para medir e informar sobre la poltica medioambiental materia de examen de agua y aguas residuales. 20a ed. APHA; 1998.
14 E. Perotto et al. / Diario de Produccin ms Limpia 16 (2008) 517e530

[76] Manly BFJ. mtodos de aleatorizacin y de Monte Carlo en la biologa. En: [79] Butelli P, Menegozzi S. La valutazione dei Carichi Inquinanti addotti dai
Serie de Ciencias Estadsticas. Chapman & Hall Textos; 1998. collet- Tori fognari: caratterizzazione delle acque reflue ed incertezza di
[77] Saltelli A, Chan KP, anlisis Scott M. Sensibilidad. En: Probabilidad y misura. En: Atti del IV Congreso '' Metrologa y Qualita` '', Torino; 2005.
estadstica de la serie. John Wiley & Sons Publishers; 2000. vol. 1. p. 48e52.
[78] Cox M, Harris P. La GUM y sus guas suplementarias previstas. [80] Bottazzini N, Butelli P. Qualita` del dato analitico, Atti del 55 Corso di
Acreditacin y Aseguramiento de la Calidad 2003; 8: 375e9. Aggiornamento en Ingegneria Sanitaria, Il nuovo laboratorio am- biente
per l'. Politcnico de Miln: DIIAR; 2001.

Вам также может понравиться