Dinâmica de um

Provedor de
Ensaio de
Proficiência
Everton Gomes Vascouto
Desenvolvimento das atividades
de gerenciamento de PEP

 Necessidade de mercado
 Requisito 5.9 da norma ABNT NBR ISO/IEC 17025:2005;
 NIT-DICLA-026: Requisitos para a participação de
laboratórios em ensaios de proficiência

 Atividades recentes no âmbito da metrologia

 Compreensão parcial ou equivocada sobre as atividades

de um provedor

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 2

 Objetivos do
PEP
Requisitos Equipe de
normativos PEP

Logística do
Calibrações
Item de PEP
programa

ou ensaios
Estudos Caracterização
estatísticos

Subcontratados Participantes

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 3

Requisitos Normativos

 Requisito 5.9 da norma ABNT NBR ISO/IEC 17025:2005

“O laboratório deve ter procedimentos de controle da
qualidade para monitorar a validade dos ensaios e
calibrações realizados. Os dados resultantes devem ser
registrados de forma que as tendências sejam detectáveis
e, quando praticável, devem ser aplicadas técnicas
estatísticas para a análise crítica dos resultados. Este
monitoramento deve ser planejado e analisado criticamente
e pode incluir, mas não estar limitado, ao seguinte:
(...) b) participação em programas de comparação
interlaboratorial ou ensaios de proficiência.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 4

Requisitos Normativos

 Comparações interlaboratoriais ≠ Ensaio de Proficiência

Ensaios de
Proficiência

Comparações
Interlaboratoriais

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 5

Requisitos Normativos

 NIT-DICLA-026

 “A participação satisfatória em atividades de EP compreende uma

forma dos laboratórios demonstrarem sua competência na
realização das suas medições, constituindo uma importante
ferramenta para monitoramento contínuo de seu desempenho e da
manutenção da confiança de todas as partes interessadas nesses
processos.”

 Laboratórios postulantes: uma atividade de EP antes de solicitar a

acreditação.

 Laboratórios acreditados: uma atividade de EP a cada quatro anos.

Em cada parte significativa de seu escopo.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 6
Requisitos Normativos

 O número de laboratórios de calibração e ensaios

acreditados e postulantes não é acompanhado pelo
número de PEP disponíveis.

 Falhas nos planejamentos das atividades de EP dos

laboratórios.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 7

Requisitos Normativos

 Norma ABNT NBR ISO/IEC17043:2011: Avaliação da

conformidade – Requisitos gerais para ensaios de
proficiência

Atividades de gerenciamento de PEP compreendem:

 a seleção apropriada de itens de EP,
planejamento dos ensaios,
 condução das medições de estabilidade e
homogeneidade, preparação,
 manuseio e distribuição dos itens do programa,
 realização de análise estatística e
 avaliação de desempenho de participantes.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 8

Planejamento do PEP

 O planejamento é a atividade de maior complexidade

no gerenciamento de um PEP.

“(...)o provedor deve identificar e planejar todos

os processos que afetem diretamente a
qualidade do PEP. O planejamento deve abordar
os objetivos, finalidade e o projeto básico do
PEP.”

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 9

Objetivos do programa

 Podem ser: comparação de métodos, comparação de

incertezas, avaliação de desempenho e comprovação de
proficiência de calibrações e ensaios, entre outros.

 As demais atividades devem ser planejadas para que

sejam atendidos.

 Em PEP de calibração, geralmente os objetivos do PEP

visam avaliar a qualidade de todo o processo de
medição do participante, no entanto, podem, por
exemplo, avaliar especificamente as incertezas ou
comparar métodos diferentes.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 10

Coordenação e operação do
PEP
 Pessoal especializado na área do PEP: conhecimento não
somente nas atividades de gerenciamento, mas também
nas análises estatísticas e conhecimento técnico
específico nas calibrações ou ensaios abordados no
programa.

 Dificuldade: dispor de equipes suficientemente

especializadas.

 Soluções: treinar a equipe de PEP na medida do

necessário, contratar consultores especialistas, etc.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 11

Itens de ensaio

 Seleção de itens:
 Encontrados em calibrações ou ensaios de rotina;
 Suficientemente confiáveis.

 Aquisição de itens:
 Custos do artefato;
 Disposição pós-programa.
“(...)os participantes de um PEP não podem ser favorecidos
pela divulgação antecipada de resultados (...)”

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 12

Caracterização dos artefatos

 Considerar:
 Os objetivos;
 As características do item;
 As características da calibração ou ensaio.

 Valor conhecido, valor de referência, consenso de

participantes especialistas, consenso de participantes.

 Requisitos da NIT-DICLA-059: Aplicação dos requisitos da

Norma ABNT NBR/IEC 17043
 Seleção dos laboratórios que fornecem os valores de
composição do valor designado

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 13

Caracterização dos artefatos

 Devem ser selecionados laboratórios com reconhecida e

confirmada proficiência.

 Determinar a quantidade de medições a serem

realizadas, o método de medição e o método de estudo
para determinação do valor designado

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 14

Participantes

 Considerar a influência que os participantes terão nos

resultados do programa:
 Experiência;
 Conhecimento;
 Competência;
 Comprometimento.

 Definir:
 Números mínimo e máximo;
 Tipo de participantes.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 15

Atividades subcontratadas

 ISO 17043: não podem ser subcontratadas as atividades

de planejamento, avaliação de desempenho e
autorização do relatório.

 As atividades dos subcontratados devem ser

especificadas tanto quanto necessário para não
comprometer os objetivos do programa.
 Nem sempre correspondem às atividades rotineiras do
subcontratado;
 As calibrações ou ensaios são o cerne dos PEP;
 Custos.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 16

Principais potenciais fontes
de erro
 Não é a identificação das fontes de incerteza, mas sim
os fatores que possam comprometer a comparação dos
resultados.

 Exemplo: um PEP de calibração de uma

termorresistência.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 17

Método de avaliação da
homogeneidade e estabilidade

 Considerar o efeito que a não homogeneidade e a

instabilidade terão na avaliação do desempenho.

 Avaliação da estabilidade: quantificar e expressar a

manutenção das características medidas no artefato
durante todo o PEP
 Ações para manter tais características: embalagem,
transporte, orientações àqueles que vão manusear e
realizar medições nos artefatos (em momentos distintos do
programa).

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 18

Método de avaliação da
homogeneidade e estabilidade

 Avaliação da homogeneidade: dependente da

determinação das principais potenciais fontes de erro.

 Tem de considerar as características do instrumento, da

calibração e dos objetivos do programa.

 Exemplo: PEP de calibração de uma termorresistência.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 19

Análise estatística de resultados e análise
de desempenho dos participantes

 Erro normalizado, Z-Score, diferença simples, diferença

percentual, etc.

 Considerar as características das calibrações e os

objetivos do PEP.

 Deve tentar auxiliar o participante na melhoria de seus

processos

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 20

Análise estatística de resultados e análise
de desempenho dos participantes

Análise estatística

Análise de
desempenho

Análise
metrológica

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 21

Análise estatística de resultados e análise
de desempenho dos participantes

 Deve, na medida do possível, considerar o seguinte:

 Metodologias aplicadas;
 Os padrões utilizados;
 Participantes e laboratório de referência;
 Identificar os potenciais problemas;
 Fatores excepcionais ocorridos no PEP;
 Orientações para resultados satisfatórios que possam ser
enganosos

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 22

Análise estatística de resultados e análise
de desempenho dos participantes

6
5
Erros relativos (%)

4
3
2
1
0
-1
-2
-3
-4
Valor 01 02 03 04
Designado
Participantes

Valor designado (erro relativo) Incerteza do valor designado (%)

Resultado Participantes (erro relativo)

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 23

Local das medições e
logística de envio
 Instalações do provedor, do participante ou de um
terceiro.

 Fornecer ou informar as condições de modo que não

comprometam a qualidade dos resultados das medições.

 Considerar as questões de confidencialidade:

 Colaboradores do processo;
 Participantes;
 Subcontratados;
 Precauções razoáveis para prevenir conluio.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 24

Local das medições e
logística de envio
 Definição de transporte de itens:
 Cases para proteção e correto envio;
 Custos de envio;
 Responsabilidades pelo transporte.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 25

Cronograma de atividades

 Pode variar de acordo com o tipo de programa, os

objetivos, e as questões tratadas anteriormente.

 No entanto, o processo pode ser o contrário se for um

PEP sob demanda.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 26

Monitoramento

 Seguem um planejamento bem elaborado e consistente,

compreendendo:
 Elaboração e acompanhamento do cronograma e envio
dos itens;
 Realização das inspeções e medições intermediárias;
 Acompanhamento do envio de resultados pelos
participantes;
 Atenção a quaisquer desvios em relação ao
planejamento do PEP, agindo, sempre que necessário,
de maneira ágil e precisa.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 27

Monitoramento

 Desvios mais comuns são os provocados por atrasos no

cronograma:
 Atrasos dos participantes;
 Dificuldades de logística de envio;
 Serviços prestados por transportadoras;
 Problemas com artefatos detectados nas inspeções ou
verificações intermediárias;

 Requerem investigação e ação do provedor de modo a

não comprometer o programa e ser utilizado como
informação na elaboração de um próximo.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 28

Finalização do PEP

 Realização da análise de desempenho com:

 Análise estatístico-metrológicas;
 Interpretações;
 Gráficos;
 Informações pertinentes

 Devem subsidiar uma autoanálise pelo participante em

relação aos objetivos do PEP

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 29

Finalização do PEP

 Relatórios: requisitos definidos na ISO 17043.

 Maturidade dos participantes para uma autoanálise.

 Equipe técnica especializada deve estar disponível.

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 30

 Obrigado!

Dinâmica de um Provedor de Ensaio de Proficiência - XII SEMETRA - Julho/2017 31