Você está na página 1de 16

1201

Monitoring of performance of health surveillance management:


tools and strategies of use

Juliana Martins Barbosa da Silva Costa 1


Eronildo Felisberto 1
Luciana Caroline de Albuquerque Bezerra 1
Eduarda ngela Pessoa Cesse 2
Isabella Chagas Samico 1

Abstract A tool is proposed to monitor the performance of Health Surveillance at state level and
strategies for broadening its use. The use of participatory methodologies in all stages of monitoring
is recommended, from designing the tool to the
analysis and interpretation of indicators. This can
be a way of involving stakeholders and improving
their joint responsibilities in decision-making,
thus increasing the use of the monitoring tool.
The monitoring instrument was built after the
design of the logical model of the management of
health surveillance and indicators of each component of management were submitted to a validation process. Monitoring is understood as a reflexive practice that promotes personal and institutional learning, continuous enhancement of management processes, greater transparency and accountability, besides its operational use for decision making.
Key words Monitoring, Health Management,
Surveillance, Health Evaluation
1

Grupo de Estudos de
Gesto e Avaliao em
Sade, Instituto de
Medicina Integral Prof.
Fernando Figueira, IMIP.
R. dos Coelhos 300, Boa
Vista. 50070-550 Recife
PE. julimartins.costa
@gmail.com
2
Centro de Pesquisas
Aggeu Magalhes, Fiocruz.

Resumo Prope-se um instrumento para monitorar o desempenho da Vigilncia em Sade no


mbito estadual e estratgias para ampliar seu
uso. Advoga-se o emprego de metodologias participativas em todas as etapas do monitoramento,
desde a elaborao do instrumento at a anlise e
interpretao dos indicadores, como forma de
envolver os interessados e (co)responsabiliz-los
nas decises tomadas, aumentando sua utilizao. O instrumento de monitoramento foi construdo aps o delineamento do modelo lgico da
gesto da vigilncia em sade e os indicadores
representativos de cada componente da gesto
passaram por processo de validao. Alm de subsidiar a tomada de deciso, o monitoramento
entendido enquanto prtica reflexiva capaz de
promover o aprendizado pessoal e institucional,
melhoria contnua dos processos de gesto, maior
transparncia e responsabilizao.
Palavras-chave Monitoramento, Gesto em sade, Vigilncia, Avaliao em sade

DEBATE DEBATE

Monitoramento do desempenho da gesto da vigilncia


em sade: instrumento e estratgias de uso

Costa JMBS et al

1202

Introduo
A implementao do Sistema nico de Sade
(SUS) tem contemplado um conjunto de aes
que envolvem o financiamento, a gesto e a organizao da produo de servios. A qualificao destas aes, e do prprio sistema, passa,
dentre outras estratgias, pela definio e clareza
dos objetivos institucionais, pelo acompanhamento sistemtico do cumprimento das metas
estabelecidas para o seu alcance, bem como pela
capacidade de adaptao do sistema s necessidades e demandas sociais. Alm disso, o processo de institucionalizao do SUS, enquanto poltica de carter interfederativo e intergovernamental, estabelece paulatinamente novas competncias e responsabilidades para os entes federados
que exigem uma intensa negociao e pactuao
com influncia no exerccio da gesto setorial1,2.
Neste contexto, as aes de vigilncia em sade (VS) vm passando por profunda reorganizao normativa e operacional para adequar-se
aos princpios e diretrizes constitucionais do SUS
de descentralizao e integralidade. No que tange
ao financiamento, observa-se a passagem da
modalidade de convnios para formas de repasse fundo a fundo a partir de critrios epidemiolgicos e populacionais. Do ponto de vista organizacional, foram definidas atribuies e competncias para cada esfera de gesto evitando-se a
descontinuidade e a superposio de aes3,4.
As atribuies do nvel estadual da VS incluem a formulao de polticas, a cooperao tcnica, o planejamento e programao, o cofinanciamento, o desenvolvimento de recursos humanos, o monitoramento e a avaliao, alm de execuo de aes de vigilncia de forma suplementar quando constatada insuficincia dos municpios4. Assim, torna-se fundamental o fortalecimento deste nvel de gesto. As aes estratgicas
executadas no mbito do estado atuam como
um mecanismo indutor da descentralizao e
qualificao das aes de VS no nvel local.
inegvel o avano na execuo das atividades de VS com a descentralizao de responsabilidades e recursos para as Secretarias Estaduais e
Municipais. Apesar da contemporaneidade deste
processo, houve relativo atraso em relao s
aes de assistncia sade, uma vez que a formalizao da criao e operacionalizao dos sistemas locais de vigilncia ocorreu a partir da promulgao da Norma Operacional Bsica (NOB)
de 19965,6. Alm disso, apenas em 2003 que foi
criada, no mbito do Ministrio da Sade, a Secretaria de Vigilncia em Sade, o que provocou

um profundo reordenamento poltico e gerencial na rea da VS4.


A despeito dos avanos observados, a eficincia e a qualidade das aes ainda persistem como
desafios. Neste sentido, o gerenciamento do desempenho da gesto da VS apresenta-se como
uma estratgia fundamental para superar algumas das dificuldades anteriormente apontadas.
Para tanto, faz-se necessrio estabelecer estratgias de mensurao do desempenho e investir
na qualificao e mobilizao do corpo tcnico e
gerencial da VS, bem como na melhoria da informao 7.
Dentre as estratgias citadas na literatura, o
monitoramento e a avaliao do desempenho
apresentam papel de destaque. Estes so entendidos como estratgias complementares que permitem dotar a gesto de maior responsabilidade, transparncia e qualidade8.
Contudo, medir o desempenho uma tarefa
complexa e mutidimensional por existir vrios estilos de gesto e diversas definies e modelos de
monitoramento e avaliao de desempenho7-10.
Como afirma Pernelle9 existe uma estreita relao entre o estilo de gesto adotado e o conceito
de desempenho seguido por cada organizao.
Esta relao caracterizada pelo autor como
hologramtica na medida em que uma o reflexo da outra. Entretanto, por meio dos sistemas
de gerenciamento de desempenho as concepes
tanto do estilo de gesto quanto de desempenho
podem modificar-se, devido s mltiplas interrelaes e influncias que existem entre eles.
Os sistemas de gerenciamento de desempenho, de forma geral, requerem articulao entre
as atividades de monitoramento e de avaliao,
de forma que permitam melhorar a governana
e as prticas administrativas8. O monitoramento do desempenho recebe papel de destaque enquanto atividade inerente ao processo gerencial e
entendido como prtica reflexiva de acompanhamento das intervenes, que permite uma
apreciao continuada dos programas governamentais de modo a prover a administrao de
informaes sintticas que subsidiem o processo
de tomada de deciso2,11. Esta estratgia vem sendo utilizada por agncias internacionais, como a
dos Estados Unidos para o Desenvolvimento Internacional12 e por governos de todo o mundo, a
exemplo do Canadense8, como uma importante
ferramenta indutora de mudanas.
Na literatura, pouco se discute sobre a prtica e o uso do monitoramento. A maioria dos
trabalhos est relacionada avaliao de programas, servios e sistemas de sade. O monito-

1203

Os painis de monitoramento
do desempenho da gesto
da vigilncia em sade
A elaborao dos painis de monitoramento
do desempenho da gesto da VS no mbito estadual foi realizada de forma participativa com o
envolvimento de tcnicos e gestores que compem
a Secretaria Executiva de Vigilncia em Sade de
Pernambuco (SEVS/PE), e de pesquisadores que
atuam na rea de avaliao ou gesto em sade,
denominado grupo de experts, no perodo de
maio a dezembro de 2011. Este grupo foi composto por: oito tcnicos que atuam nas reas de
vigilncia epidemiolgica de doenas transmissveis e no transmissveis, vigilncia ambiental e
gerenciamento dos sistemas de informaes; sete
gestores (gerentes e diretores) da rea da VS; e
trs pesquisadores.
Inicialmente, foi elaborado o modelo lgico
da gesto da VS no mbito estadual com o intuito de entender como cada componente da gesto
contribui para o resultado final da VS. Esta etapa considerada essencial na composio da arquitetura de sistemas de desempenho e ir ajudar na etapa posterior de seleo de indicadores8. Para isso, foi realizada anlise documental
dos instrumentos normativos que regem a rea:
Lei 8080/199013, Portaria 3252/200914, Decreto
7508/201115; realizada consulta a textos sobre a
vigilncia em sade3,4,6,16 bem como sobre o desempenho10,11,17,18. Optou-se pela definio de
desempenho proposta pela escola racional que
afirma que uma organizao apresenta um bom
desempenho na medida em que atinge seus objetivos e metas10, por ser a mais utilizada na literatura, bem como por responder s expectativas
dos envolvidos (tcnicos e gestores).
A partir deste material foram identificados
os componentes e subcomponentes da VS e descritos os recursos (humanos, materiais, financeiros e organizacionais), as atividades e os resultados esperados. Aps este desenho inicial, o

modelo foi submetido ao grupo de experts, para


correes e validao de seu contedo. Com os
ajustes propostos o modelo lgico ficou composto por cinco componentes ou macrofunes
e dezessete subcomponentes, assim distribudos:
(i) gesto financeira (alocao e execuo): visa
dotar a VS de uma maior eficincia; (ii) desenvolvimento da capacidade institucional (gesto
de pessoas, assessoria tcnica, monitoramento e
avaliao): tem por objetivo promover os meios
para dar respostas satisfatrias frente s demandas sociais; (iii) articulao (entre os componentes da vigilncia, entre a vigilncia e a ateno
sade e intersetorial): tem por finalidade fortalecer o intercmbio de prticas e saberes para atuao de forma integrada; (iv) informao e comunicao (estudos epidemiolgicos, coleta,
processamento, anlise e disseminao): visa
analisar todas as etapas do processo de produo/disseminao da informao, base para todo
sistema de vigilncia e (v) situao de sade (doenas transmissveis, doenas e agravos no
transmissveis, sade ambiental e sade do trabalhador): objetiva acompanhar a situao de
agravos prioritrios para o Estado (Figura 1).
Espera-se que com o desenvolvimento dessas macrofunes da gesto, somadas a uma estrutura fsica e organizacional adequada, recursos humanos capacitados e em quantidade adequada, um arcabouo normativo e legal que d
suporte s aes, bem como recursos financeiros suficientes, a gesto da VS consiga promover
o aprimoramento institucional, um maior apoio
aos municpios, o fortalecimento da gesto estadual, das aes intersetoriais, e qualificar a preveno e o controle de agravos sade. Alm
disso, deve-se considerar que a gesto da VS estadual est inserida no contexto da Poltica Nacional de Sade, da Poltica de Vigilncia em Sade, do Projeto de Governo do Estado e da Poltica Estadual de Sade. Estas caractersticas contextuais trazem elementos que podem dificultar
e/ou facilitar o desenvolvimento das aes da VS
(Figura 1).
Ao trmino do delineamento da interveno
foi definida a periodicidade trimestral para o
monitoramento. Esta foi baseada no entendimento do grupo de experts de que o monitoramento deve ser um instrumento de apoio gesto devendo, assim, orientar a tomada de decises e, neste caso, permitir que estas possam ser
implementadas e continuamente (re)avaliadas.
Assim, pretende-se atuar em uma perspectiva
formativa que facilite o aprendizado pessoal e
institucional.

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

ramento, por vezes, fica restrito a uma etapa anterior ou de subsdio avaliao, sendo pouco
exploradas suas potencialidades e perspectivas
de uso na gesto em sade.
Desta forma, este artigo apresenta um instrumento desenvolvido para monitorar o desempenho da gesto da VS no mbito estadual e prope estratgias de uso. Pretende-se, potencializar
a prtica do monitoramento, aumentar sua eficcia e contribuir para a melhoria da qualidade
da gesto pblica.

Costa JMBS et al

1204

PROCESSO

RESULTADOS

Fsica, Normativa, RH,


Financeira, Organizacional

GESTO FINANCEIRA
(alocao e execuo)
FORTALECIMENTO DA
CAPACIDADE INSTITUCIONAL
(gesto de pessoas, M&A,
assessoria tcnica)
ARTICULAO
(componentes da VS, ateno
sade e intersetorial)

SITUAO DE SADE
(doenas transmissveis,
doenas e agravos no
transmissveis, sade
ambiental e sade do
trabalhador)

INFORMAO E COMUNICAO
(estudos epidemiolgicos, coleta,
processamento, anlise, disseminao)

Aprimoramento institucional
Fortalecimento da gesto estadual
Maior apoio aos municpios
Fortalecimento das aes
intersetoriais
Preveno e controle de agravos

ESTRUTURA

CONTEXTO
PROJETO DE GOVERNO ESTADO
POLTICA DE VIGILNCIA EM SADE
POLTICA NACIONAL DE SADE
Figura 1. Modelo lgico da gesto da vigilncia em sade estadual

De posse do modelo lgico e definida a periodicidade do monitoramento foram elaborados


dois painis. O primeiro denominado nvel central permite monitorar o desempenho estadual
de forma global, e outro, denominado nvel local, permite verificar o desempenho a partir de
suas unidades constituintes os municpios. Cada
painel foi elaborado com a seguinte estrutura: critrios (atributo utilizado para mensurar os componentes), indicadores (medida ou fator quantitativo ou qualitativo utilizado para representar o
critrio a ele relacionado), padres (valor de referncia para cada indicador), fonte de informao
(local onde os dados sero coletados).
No processo de seleo dos indicadores foi
utilizado o conceito de condio traadora proposto por Kessner et al.19 e adaptado aos objetivos deste estudo. Alm disso, os indicadores foram selecionados de forma a constituir um instrumento simples, gil e til que facilite a comunicao entre os envolvidos na tomada de deciso,
seguindo as recomendaes de Tamaki et al.20.
Aps a seleo dos indicadores, procedeu-se a
validao em trs etapas. Na primeira foram analisadas a disponibilidade dos dados, a confiabilidade e a validade terica e o constructo dos indicadores. A confiabilidade entendida enquanto a
capacidade do indicador em medir fielmente um

fenmeno. A validade terica se os elementos selecionados para medir uma construo terica
representam realmente todas as facetas importantes do conceito a ser medido, e a validade de
construo que procura verificar a relao entre
os conceitos tericos e sua operacionalizao10.
Seguindo o processo de validao (etapa 2),
os critrios, os indicadores, os padres e as fontes de informao foram discutidos, em uma oficina, com o grupo de experts (tcnicos, gestores e
pesquisadores) que sugeriu a retirada de alguns
indicadores e a incluso de outros. Nesta oficina,
os experts foram divididos em trs grupos de discusso para anlise dos painis.
A terceira etapa de validao consistiu na realizao do estudo piloto com dados referentes ao
ano de 2011 (ltimo ano com banco de dados
fechados). Este serviu para testar a operacionalidade do instrumento, a criao de fluxos internos e a estruturao de processos de trabalho.
Alm disso, foi identificada a necessidade de ajuste
em quatro indicadores, para facilitar o entendimento dos tcnicos, a realocao de um indicador entre os componentes e a excluso de dois
indicadores.
De posse dos indicadores partiu-se para a definio dos padres/metas, considerado um aspecto crtico no monitoramento do desempe-

1205

mao sobre Mortalidade Sim, Sistema de Informao sobre Nascidos Vivos Sinasc e Sistema de Informao de Agravos de Notificao
Sinan), bem como outras fontes complementares de informao como atas das reunies dos
Conselhos Estadual e Municipais de Sade e dos
Colegiados Intergestores Bipartite (CIB) e Intergestores Regionais (CIR), setor de finanas e de
gesto de pessoas.
Os painis de monitoramento do desempenho da gesto da VS no mbito estadual nvel
central e nvel local podem ser visualizados nos
Quadros 1 e 2, respectivamente. No total, encontra-se um rol de 44 indicadores (24 do nvel central e 20 do nvel local) que contemplam informaes sobre a gesto financeira, a gesto de
pessoas, a articulao intra e intersetorial, a gesto da informao e a comunicao social, bem
como indicadores de situao de sade que expressam o resultado final das aes de VS.
As estratgias de uso dos instrumentos
de monitoramento do desempenho
da gesto da vigilncia em sade
A disponibilidade dos instrumentos de monitoramento do desempenho da gesto no garante seu uso, bem como a realizao de avaliaes no garantem que seus resultados sejam
utilizados8. O uso no ocorre naturalmente, ele
necessita ser facilitado23, interagir com os processos e os procedimentos organizacionais24 e fazer parte da cultura das lideranas e dos canais
de comunicao25. Desta forma, as reflexes sobre a natureza, as causas e os determinantes do
uso das avaliaes23,26 serviram de subsdio para
a proposio de estratgias de uso dos instrumentos de monitoramento no cotidiano da prtica gerencial da VS.
Alm disso, foram utilizados os trabalhos
realizados por Preskill e Caracelli24 e Fleisher e
Christie27 que identificaram os fatores que mais
influenciam no uso das avaliaes com destaque
para a participao dos interessados no processo avaliativo e o papel do avaliador enquanto
facilitador, comprometido com a promoo da
aprendizagem organizacional. Tambm a ponderao avaliativa proposta por Patton23, que se
caracteriza por uma forma de pensar as conexes entre a ao e a reflexo, mediante a qual os
envolvidos: (i) ponderam a evidncia, (ii) consideram as contradies, inconsistncias e os valores articulados, (iii) interpretam descobertas e
(iv) examinam suposies para analisar a realidade e reconstru-la.

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

nho17,21. Diante da variedade de indicadores selecionados adotou-se um modelo misto, para o


qual foram consideradas as perspectivas: absoluta, onde os padres/metas estabelecidas so consideradas como o padro a ser alcanado; histrica, onde se compara os resultados alcanados ao
longo do perodo; e a negociada ou de compromissos, que se baseia em algum procedimento
especfico para sua fixao, normalmente decorrente de consensos entre as partes envolvidas21.
Desta forma, para alguns indicadores foram
utilizados os instrumentos de planejamento (Plano Estadual de Sade, Programao Anual de
Sade, Plano de Ao da SEVS/PE e Agenda Estratgica da Secretaria de Vigilncia em Sade do
Ministrio da Sade) para estabelecimento dos
padres/metas. Para outros, que no estavam
contemplados nestes instrumentos e possuam
banco de dados de qualidade, foi realizado estudo da srie histrica e pactuado junto rea tcnica o padro/meta para o ano de 2012. E, para
os demais, foi definido empiricamente junto ao
grupo de experts.
Os padres/metas anuais foram escalonados
por trimestre para os indicadores que tratassem
de cobertura ou alguma outra atividade que necessitassem do perodo anual para o seu alcance.
Como exemplo, tem-se o indicador percentual
de realizao de anlises da vigilncia da qualidade da gua referente ao parmetro coliformes
totais, para o qual a meta do ano de 2012 foi de
35% do preconizado pela Diretriz Nacional. Assim, as metas escalonadas por trimestre foram
de 5% no primeiro, 15% no segundo, 25% no
terceiro e 35% no quarto trimestre, de forma que
se possa acompanhar a tendncia do alcance da
meta para o perodo.
Desta forma, seu desempenho verificado em
relao ao parmetro estabelecido para o trimestre e sua evoluo temporal. J para o conjunto
de indicadores que possuem um parmetro fixo,
que no necessitem de anlise cumulativas, a anlise realizada no trimestre e seu desempenho
considerado tanto em relao ao parmetro
quanto ao resultado do trimestre anterior. Como
valores de referncia propem-se os pontos de
corte utilizados na Programao de Aes da
Vigilncia em Sade (PAVS)22 por ser uma sistemtica j consolidada em nosso pas. Assim, o
padro/meta considerado alcanado quando
atinge 100%; de 79,9 a 75,0% parcialmente alcanado, e menor do que 75,0% no alcanado.
Como fonte de informao para preenchimento dos painis priorizou-se o uso dos sistemas de informao em sade (Sistema de infor-

Costa JMBS et al

1206

Quadro 1. Painel de monitoramento do desempenho da gesto no mbito estadual Nvel Central


Indicador

Objetivo

Fonte de
Informao

Forma de Clculo

Padro/Meta

Componente: Gesto financeira


Subcomponente: Execuo financeira
% de execuo dos
recursos do piso fixo
e varivel da vigilncia
e promoo da sade
(PFVVPS)

Identificar a
capacidade de
execuo
oramentrias dos
recursos da Vigilncia
em Sade pela
Secretaria Estadual
de Sade

Setor de
finanas da
Secretaria
Executiva de
Vigilncia em
Sade (SEVS)

Recursos dos (PFVVPS)


executados (em R$) at o
trimestre avaliado/total de
recursos do PFVVPS (em R$)
no ano corrente x 100

> 80% anual (20% at


o 2 trimestre, 40% at
o 3 trimestre e 80%
ao final do exerccio)
OBS: 1 trimestre no
avaliado devido a 1
parcela ser transferida
no ms de abril

N de gerentes e coordenadores
com especializao em sua rea
de atuao / total de gerentes e
coordenadores x 100

> 80%

Componente: Fortalecimento da Capacidade Institucional


Subcomponente: Gesto de pessoas
% de gerentes e
coordenadores com
especializao em
sua rea de atuao

Verificar a
qualificao dos
gestores da vigilncia
do nvel central

Diretorias da
SEVS

Componente: Articulao
Subcomponente: Articulao entre os componentes de Vigilncia em Sade
% de reunies da
Comisso Intergestores
Bipartite (CIB) com
discusses de temas
da Vigilncia

Fomentar a
integrao e
articulao da
vigilncia no
mbito estadual

> 30%
Ata das reunies N de reunies da CIB com
da CIB
discusso de temas da VS no
trimestre / Total de reunies no
trimestre x 100

Nmero de reunies
entre as reas da
Vigilncia em Sade
(Diretorias)

Verificar a
continuidade dos
processos de
integrao e
articulao internas

Ata das reunies Nmero absoluto

3 no trimestre

Subcomponente: Articulao entre a Vigilncia e Ateno Sade


% de Regionais de
Sade com grupo
tcnico de estudos
da mortalidade
materna em
funcionamento

Estabelecer estratgias Diretoria Geral


de atuao conjunta
de Informaes
entre a Ateno e
e Aes
vigilncia em sade
Estratgicas em
Vigilncia
epidemiolgica
(DG-IAEVE)

N de regionais com comits


de estudos da mortalidade
materna em funcionamento no
trimestre/total de Regionais x
100

> 40% Obs: GT em


funcionamento
realizao de reunies
sistemticas a partir da
ocorrncia do bito

continua

Espera-se superar o uso instrumental26 que


visa exclusivamente orientao para a tomada
de deciso, por uma perspectiva emancipatria.
Por meio do compromisso com um processo ativo de aprendizagem no qual no apenas os produtos so valorizados, mas todo o processo de
produo, pretende-se permear a prtica da gesto da VS estadual, favorecendo mudanas institucionais por meio de um processo conjunto
de anlises, interpretaes e atribuio de novos
significados s rotinas25,28.

Assim, as bases para a utilizao dos painis


de monitoramento esto ancoradas no: (i) envolvimento dos interessados, (ii) dilogo permanente, (iii) comprometimento, (iv) engajamento, (v) responsabilizao, (vi) transparncia e (vii)
prestao de contas.
A utilizao de metodologias participativas
deve permear todo o processo, desde a elaborao dos instrumentos at a anlise e interpretao dos indicadores, realizados em conjunto em
reunies/sesses trimestrais de monitoramento.

1207

Indicador

Objetivo

Fonte de
Informao

Forma de Clculo

Padro/Meta

N de casos de hansenase
detectados at o trimestre/total
de casos esperados de hansenase
at o trimestre x 100

> 90% Obs: total de


casos esperados no
trimestre - N de casos
detectados no ano
anterior acrescido de
5% / 4 x N do
trimestre (1, 2, 3 ou 4)

Componente: Informao e Comunicao


Subcomponente: Coleta
% de casos detectados
de hansenase em
relao aos esperados

Verificar a
subnotificao de
agravos prioritrios

Cobertura do Sistema
de Informaes sobre
Mortalidade (SIM)
estadual

Verificar a captao de
bitos (coleta das
declaraes de bito)

SIM

N de bitos captados pelo SIM > 90% Obs: 1) Para o


clculo dos casos
at o trimestre/Total de bitos
esperados at o trimestre x 100 esperados foi utilizado
o fator de correo
estabelecido pelo MS
2) casos esperados at
o trimestre - N de
bitos esperados/4 x
N do trimestre (1, 2,
3 ou 4)

Cobertura do Sistema
de Informaes sobre
Nascidos Vivos (Sinasc)

Verificar a captao de
nascidos vivos (NV)
(coleta das declaraes
de nascido vivo)

Sinasc

N NV captados pelo Sinasc at > 95% Obs: 1) Para o


clculo dos NV
o trimestre/Total de nascidos
esperados foi utilizado
vivos esperados at o trimestre
o fator de correo
avaliado x 100
estabelecido pelo MS
2) NV esperados at o
trimestre - N de NV
esperados / 4 x N do
trimestre (1, 2, 3 ou 4)

Sinan

Subcomponetente: Processamento
% de investigao de
bitos maternos
declarados em tempo
oportuno

Verificar o
processamento das
informaes de
eventos prioritrios

SIM

N de bitos maternos
declarados investigados em
tempo oportuno at o trimestre
avaliado / Total de bitos
maternos declarados notificados
at o trimestre x 100

100%
Obs: Tempo
oportuno: at 120
dias da ocorrncia do
bito

% de investigao de
bitos infantis em
tempo
oportuno

Verificar o
processamento das
informaes de
eventos
prioritrios

SIM

N de bitos em menores de
um ano investigados em
tempo oportuno at o trimestre
avaliado / Total de bitos em
menores de um ano notificados
at o trimestre x 100

50% Obs: 1) Tempo


oportuno: at 120
dias da ocorrncia do
bito 2) Exclui os
bitos fetais

% de encerramento
oportuno das doenas
agudas de notificao
compulsria

Verificar a qualidade
da informao

Sinan

> 80%
N de casos de doenas agudas
de notificao compulsria
encerradas em tempo oportuno
at o trimestre / Total de casos
de doenas agudas de
notificao compulsria

% de bitos com causa


definida

Verificar a qualidade
da informao

SIM

N de bitos com causa definida > 95%


at o trimestre / Total de bitos
at o trimestre x 100

Subcomponente: Anlise

continua

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

Quadro 1. continuao

Costa JMBS et al

1208

Quadro 1. continuao
Indicador

Objetivo

Fonte de
Informao

Forma de Clculo

Padro/Meta

Componente: Informao e Comunicao


Subcomponente: Disseminao
N de Boletins (ou
similar) produzidos e
encaminhados aos
municpios, sociedade
civil ou imprensa

Verificar a
disseminao de
informaes

% de Reunies do
Conselho Estadual de
Sade (CES) com
discusso de temas da
Vigilncia em Sade

Alimentar o controle
social, aumentar a
autonomia do cidado

Diretorias
das SEVS

N absoluto

33/ano (8 no 1, 16
at o 2; 24 at o 3 e
33 at o 4 trimestre)

Ata do
CMS

N de reunies do CES com


discusses de temas da VS
no trimestre/Total de
reunies do CES no trimestre

> 30%

N de bitos por dengue Verificar a gravidade


dos casos

Sinan

Nmero absoluto at o trimestre

< 49 (<12 no 1,
< 24 at o 2, < 36
at o 3 e < 49 at o
4) Obs: para
definio do padro
utilizou-se a
recomendao do MS
em diminuir em 10%
os bitos em relao
ao ano anterior

% de encerramento
por cura de casos novos
de tuberculose
pulmonar bacilfero
(TB)

Verificar o xito
do programa de
controle da
tuberculose

Sinan

N de casos novos de TB que


apresentaram situao de
encerramento com cura at o
trimestre/Total de casos de TB
notificados at o trimestre x 100

> 75%

% de realizao de
cultura entre casos
de retratamento
de Tuberculose

Verificar a qualidade
na ateno aos
pacientes com
Tuberculose

Sinan

> 35%
N de casos de retratamento de
tuberculose com cultura realizada
at o trimestre/Total de casos de
retratamento de tuberculose at
o trimestre x 100

% de cura dos casos


novos de hansenase
diagnosticados nos anos
das coortes.

Medir a qualidade do
atendimento dos
servios de sade,
expressando sua
efetividade em
assegurar a adeso ao
tratamento at a alta,
reduzindo assim, os
focos de contgio da
doena e contribuindo
para prevenir
incapacidades fsicas

Sinan

Nmero de casos novos de


hansenase residentes em
Pernambuco, diagnosticados nos
anos das coortes e curados at o
trimestre/Total de casos novos de
hansenase residentes em
Pernambuco e diagnosticados
nos anos das coortes x 100

> 85% OBS: ano das


coortes 1) 2011 para
os paucibacilares 2)
2010 e 2011 para os
multibacilares

% de contatos
intradomicialiares de
casos novos de
hansenase examinados.

Captar casos novos


de hansenase em
etapas iniciais da
doena

Sinan

N de contatos intradomiciliares
examinados referente aos casos
novos de hansenase residentes
em Pernambuco diagnosticados
at o trimestre/n total de
contatos intradomiciliares
registrados referente aos casos
novos de hansenase residentes
em Pernambuco diagnosticados
at o trimestre x 100

> 60%

Componente: Situao de Sade


Subcomponente: Doenas transmissveis

continua

1209

Indicador

Objetivo

Fonte de
Informao

Padro/Meta

Forma de Clculo

Componente: Situao de Sade


Subcomponente: Doenas transmissveis
N de casos de Aids em
menores de 5 anos

Verificar a ocorrncia
da transmisso vertical
de HIV

Sinan

N absoluto at o trimestre

15/ano (3 no 1
trimestre, 7 at o 2
trimestre; 11 at o 3
e 15 no ano)

N de casos de sfilis
congnita

Verificar a ocorrncia
da transmisso vertical
da sfilis

Sinan

N absoluto at o trimestre

650/ano (163 no 1
trimestre, 326 at o
2 trimestre; 488 at
o 3 e 650 no ano)

% de casos de
meningites bacterianas
encerradas por
diagnstico laboratorial
especfico

Identificar a etiologia
das meningites
bacterianas

Sinan

N de casos de meningites
bacterianas encerradas por
diagnstico laboratorial at o
trimestre/Total de casos de
meningites bacterianas
confirmadas at o trimestre x
100

> 56%

Coeficiente de letalidade Verificar a efetividade


por leishmaniose visceral do programa de
controle da
leishmaniose visceral

Sinan

N de bitos por leishmaniose


visceral at o trimestre/Total de
casos de leishmaniose visceral
notificados at o trimestre x 100

< 5,6%

Subcomponente: Doenas e agravos no transmissveis


% de Unidades sentinela
de informaes de
acidente de transporte
terrestre (USIATT) com
envio regular do banco
de dado

Verificar a regularidade Diretoria Geral N de USIATT com envio regular


no envio de
de Promoo, do banco de dados no trimestre/
informao pelas
monitoramento Total de USIATT x 100
USIATT
e avaliao da
Vigilncia em
Sade
(DG-PMAVS)

100% OBS: envio


regular at o dia 10 de
cada ms (pelo menos
2 meses no trimestre)

Subcomponente: Vigilncia ambiental


% de realizao das
analises de vigilncia da
qualidade da gua,
referente aos parmetros
coliformes totais.

Monitorar a qualidade
da gua, para o
parmetro coliforme
total, de acordo com a
Diretriz Nacional do
Plano de Amostragem
da Vigilncia em
Sade Ambiental
relacionada
qualidade da gua para
consumo humano

Todo o corpo gestor (Secretrio, Diretores, Gerentes e Coordenadores) deve estar envolvido
com o intuito de: (i) identificar as estratgias de
intervenes mais adequadas, (ii) avaliar as estratgias traadas, (iv) responsabilizar os envolvidos e (v) socializar as informaes. Alm disso,
a literatura tem apontado vantagens na anlise
de informaes em equipe, uma vez que o grupo

SISgua

N de amostras de coliformes
totais realizadas pela vigilncia
at o trimestre/total de amostras
de coliformes totais preconizadas
pela Portaria n 2914/201129
x 100

>35% / ano (5% no


1 trimestre, 15% at
o 2 trimestre; 25%
at o 3 e 35% no
ano)

apresenta uma maior capacidade de processamento da informao do que a soma das capacidades individuais de seus integrantes trabalhando isoladamente30,31.
Destaca-se a importncia do papel desenvolvido pelo gestor enquanto um facilitador do
aprendizado24 que deve mobilizar a equipe e estimular que as discusses ocorram de forma de-

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

Quadro 1. continuao

Costa JMBS et al

1210

Quadro 2. Painel de monitoramento do desempenho da gesto no mbito estadual Nvel Local


Fonte de
Informao
Indicador
Objetivo
Forma de Clculo

Padro/Meta

Componente: Gesto financeira


Subcomponente: Execuo financeira
% de municpios com
envio irregular do SIM,
Sinasc e Sinan

Diretoria Geral
Monitorar a
regularidade do banco de Informaes
e Aes
de dados do Sim,
Estratgicas em
Sinasc e Sinan para
Vigilncia
evitar o bloqueio no
repasse de recursos do epidemiolgica
(DG-IAEVE)
Piso da Vigilncia e
Promoo da Sade

N de municpios com envio


irregular do Sim, Sinasc ou
Sinan no trimestre/Total de
municpios x 100

0%

Componente: Fortalecimento da Capacidade Institucional


Subcomponente: Gesto de pessoas
% de municpios com o
gestor da vigilncia em
sade com especializao
(*Latu ou Stricto Sensu
em vigilncia em sade,
epidemiologia, sade
pblica / coletiva, ou
rea afim)

Verificar a
qualificao dos
gestores da vigilncia
no mbito municipal

Gerncia
N de gestores da vigilncia em
Regional de
sade dos municpios com
Sade (GERES) especializao* no trimestre/
total de municpios x 100

> 60%

Componente: Articulao
Subcomponente: Articulao entre os componentes de Vigilncia em Sade
% de reunies das
Comisses Intergestoras
Regionais (CIR) com
discusses de temas da
Vigilncia em Sade

Fomentar o processo
de discusso da
Vigilncia em sade
nas CIR

Ata das
reunies

N de reunies da CIR com


discusso de temas da VS/total
de reunies x 100

> 30%

N de municpios > 50 mil hab


com GT de discusso de bitos
maternos em funcionamento/
total de municpios > 50 mil
hab. x 100

100%

Subcomponente: Articulao entre a Vigilncia e Ateno Sade


% de municpios > 50
mil hab. com grupo
tcnico (GT) para
discusso de bitos
maternos em
funcionamento

Fortalecer estratgias
de atuao conjunta
entre a Ateno
sade e a VS

Diretoria Geral
de Informaes
e Aes
Estratgicas em
Vigilncia
epidemiolgica
(DG-IAEVE)

continua

mocrtica e participativa, aumentando o envolvimento, a sensao de pertencimento e a corresponsabilizao dos envolvidos, o que contribui
para a qualificao das aes e o fortalecimento
da capacidade de gesto da VS.
Para tanto, os dados devem ser organizados
e sistematizados de forma a facilitar o dilogo e o
acompanhamento dos indicadores e dos encaminhamentos realizados. Esta questo considerada um aspecto crtico no uso das avaliaes8.
Na Figura 2 observa-se o layout da apresentao
utilizada nas reunies de monitoramento. Nela

pode-se observar: (a) o componente e o subcomponente; (b) o indicador e a meta/padro;


(c) os resultados e respectivo status (padro/meta
alcanada, no alcanada e parcialmente alcanada) por trimestre; e (d) espao denominado
de nota tcnica, no qual so redigidas particularidades tcnicas e um maior detalhamento do
indicador, bem como as estratgias de superao
dos problemas identificados.
Outro aspecto que facilita a operacionalidade e aumenta a adeso o registro em ata, na
qual explicitado o assunto discutido, os enca-

1211

Indicador

Objetivo

Componente: Informao e Comunicao


Subcomponente: Coleta
% de municpios com
Verificar a
pelo menos 90% do
subnotificao de
nmero de casos
agravos prioritrios
notificados de
hansenase ao esperado

Fonte de
Informao

Sinan

% de municpios com
Verificar a captao de
cobertura do Sistema de bitos
Informaes sobre
Mortalidade (SIM)
> 90%

SIM

Verificar a captao de
% de municpios com
cobertura do Sistema de nascidos vivos
Informaes sobre
Nascidos Vivos
(SINASC) > 95%

Sinasc

Forma de Clculo

Padro/Meta

N de municpios com pelo


menos 90% do nmero de
casos notificados de hansenase
igual ao esperado at o
trimestre/total de municpios
x 100

75% Obs: total de


casos esperados no
trimestre. N de casos
detectados no ano
anterior acrescido de
5%/4 x N do
trimestre (1, 2, 3 ou 4)

n de municpios com
cobertura do SIM > 90%
at o trimestre/total de
municpios x 100

> 90% Obs: total de


casos esperados no
trimestre N de casos
detectados no ano
anterior acrescido de
5% / 4 x N do
trimestre (1, 2, 3 ou 4)

N de municpios com
cobertura do Sinasc > 95%
at o trimestre/total de
municpios x 100

> 90% Obs: total de


casos esperados no
trimestre N de casos
detectados no ano
anterior acrescido de
5% / 4 x N do
trimestre (1, 2, 3 ou 4)

Subcomponetente: Processamento
% de municpios que
investigaram 100% dos
bitos maternos
declarados em tempo
oprtuno

Identificar fatores
determinantes e
subsidiar a adoo de
medidas que possam
evitar a ocorrncia de
eventos semelhantes

SIM

N de municpios com 100%


dos bitos maternos declarados
investigados em tempo
oportuno at o trimestre/total
de municpios que tiveram
bitos maternos at o
trimestre x 100

100% OBS: tempo


oportuno -120 dias da
ocorrncia do bito

% de municpios com
pelo menos 50% dos
bitos infantis
investigados em tempo
oportuno

Identificar fatores
determinantes e
subsidiar a adoo de
medidas que possam
evitar a ocorrncia de
eventos semelhantes

SIM

N de municpios com pelo


menos 50% dos bitos infantis
investigados em tempo
oportuno at o trimestre/total
de municpios que tiveram
bitos infantis notificados at
o trimestre x 100

100% OBS: 1) tempo


oportuno - 120 dias
da ocorrncia do
bito 2) exclui os
bitos fetais

Subcomponente: Anlise
% de municpios com
encerramento oportuno
> 80% doenas agudas
de notificao
compulsria (DANC)

Verificar a agilidade
do sistema de
Vigilncia
epidemiolgica

Sinan

% de municpios com
pelo menos 90% de
causa de bito definida

Verificar a qualidade
da informao e a
qualidade /acesso
assistncia

SIM

N de municpios com pelo


menos 90% de causa de bito
definida no trimestre/total de
municpios x 100

100%

Ata do CMS

N de municpios que
discutiram pelo menos uma
pauta da VS no CMS no
trimestre/total de municpios
x 100

> 80%

N de municpios com
> 45%
encerramento oportuno > 80%
de DANC at o trimestre/Total
de municpios com DANC
notificadas at o trimestre x 100

Subcomponente: Disseminao
Alimentar o controle
% de municpios que
social, aumentar a
discutiram pelo menos
uma pauta de Vigilncia autonomia do cidado
em Sade no Conselho
Municipal de Sade
(CMS) no trimestre

continua

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

Quadro 2. continuao

Costa JMBS et al

1212

Quadro 2. continuao
Indicador

Objetivo

Componente: Situao de Sade


Subcomponente: Doenas transmissveis
% de municpios que
Verificar o xito do
obtiveram > 75% de
Programa de Controle
cura dos casos novos de da Tuberculose
tuberculose pulmonar
bacilfero

Fonte de
Informao

Forma de Clculo

Sinan

N de municpios que
obtiveram > 75% de cura dos
casos novos de TB at o
trimestre/total de municpios
que tiveram casos
diagnosticados de tuberculose
at o trimestre x 100

Padro/Meta

> 50%

% de municpios que
obtiveram > 25, 50, 75,
85% (por trimestre,
respectivamente) de cura
dos casos novos de
hansenase
diagnosticados nos anos
das coortes

Medir a qualidade do
atendimento dos
servios de sade,
expressando sua
efetividade em
assegurar a adeso ao
tratamento at a alta,
reduzindo assim, os
focos de contgio da
doena e
contribuindo para
prevenir
incapacidades fsicas

Sinan

N de municpios que
obtiveram > 25, 50, 75, 85%
> 75%
(por trimestre,
respectivamente) de cura dos
casos novos de hansenase at o
trimestre avaliado/Total de
municpios com casos de
hansenase diagnosticados nos
anos das coortes x 100

% de municpios que
tiveram casos notificados
e examinaram > 60%
dos contatos
intradomiciliares de
hansenase no perodo
avaliado

Verificar a captao de
casos novos de
hansenase em
estgios iniciais

Sinan

N de municpios que tiveram


casos notificados e
examinaram > 60% dos
contatos intradomiciliares de
hansenase at o trimestre/
Total de municpios que
tiveram casos novos at o
trimestre x 100

> 50%

% de municpios que
notificaram pelo menos
um caso de hepatite B
ou C

Estimular a
notificao de casos
de hepatites virais (B
ou C)

Sinan

N de municpios que
notificaram pelo menos um
caso suspeito de hepatites virais
(B ou C) at o trimestre/total
de municpios x 100

> 90%/ano (45% no


1 trimestre, 60% at
o 2 trimestre; 75%
at o 3 e 90% no
ano)

Estimular a
% de municpios que
notificaram pelo menos notificao dos casos
um caso de sfilis
de sfilis congnita
congnita

Sinan

N de municpios que
notificaram pelo menos um
caso de sfilis congnita at o
trimestre/total de municpios
x 100

> 90%/ano (45% no


1 trimestre, 60% at
o 2 trimestre; 75%
at o 3 e 90% no
ano)
continua

minhamentos, os prazos e os responsveis. Alm


disso, necessrio que a execuo dos aspectos
registrados em ata sejam monitorados para que
os objetivos traados sejam alcanados.

Consideraes Finais
A Vigilncia em Sade pode ser entendida como
um subsistema do Sistema Nacional de Sade e
como tal as preocupaes em torno da qualifica-

o dos processos de gesto se fazem presentes.


Contudo, considerando as especificidades e as
peculiaridades das Secretarias Estaduais de Sade e os graus variados de implantao e descentralizao das aes de VS, no se pretende que o
instrumento apresentado seja rgido, reproduzvel em todos os estados. Pretende-se, sobretudo,
contribuir com a concepo terica na construo e elaborao deste tipo de instrumento e fomentar o debate acerca de sua aplicabilidade e
utilizao. Os painis podem e devem ser adap-

1213

Indicador

Fonte de
Informao

Objetivo

Forma de Clculo

Componente: Situao de Sade


Subcomponente: Doenas e agravos no transmissveis
Verificar a cobertura
N de municpios com
Sinan
notificao de violncia da notificao da
violncia domstica,
domstica, sexual e/
sexual e/outras
outras violncias
implantadas
violncias
Verificar a cobertura
da notificao da
violncia domstica,
sexual e/outras
violncias

N de municpios com
notificao da
intoxicao exgena
implantada

Subcomponente: Vigilncia ambiental


Monitorar a qualidade
da gua, para o
% de municpios que
realizaram pelo menos 5, parmetro coliforme
total, de acordo com a
15, 25, 35% (no
Diretriz Nacional do
trimestre,
Plano de Amostragem
respectivamente) das
anlises da qualidade da da Vigilncia em
gua para o parmetro de Sade Ambiental
relacionada
coliformes totais
qualidade da gua para
consumo humano

ANO

Sinan

SISgua

COMPONENTE

Padro/Meta

N absoluto

41 municpios (30 no
1 trimestre, 33 at o
2 trimestre; 37 at o
3 e 41 no ano)

N absoluto

44 municpios (32 no
1 trimestre, 36 at o
2 trimestre; 40 at o
3 e 44 no ano)

N de municpios que
realizaram pelo menos 5, 15,
25, 35% (no trimestre,
respectivamente) das anlises
da qualidade da gua para o
parmetro de coliformes totais
no trimestre/total de
municpios x 100

> 30%

SUBCOMPONENTE

Nome do Indicador

Nome do Indicador

META/PADRO: 0%
FONTE: SIM
RESULTADO TRIMESTRAL

META/PADRO: 0%
FONTE: SINAN
RESULTADO TRIMESTRAL

NOTA TCNICA

Figura 2. Modelo lgico da gesto da vigilncia em sade estadual

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

Quadro 2. continuao

Costa JMBS et al

1214

tados s necessidades e realidades locais com a


incluso (ou excluso) de indicadores ou de componentes e subcomponentes a depender do contexto loco-regional.
A escolha dos indicadores depender de quais
aspectos da gesto sero mensurados/monitorados, da disponibilidade de informao e dos recursos (financeiros e humanos) empregados para
esta atividade. Alm disso, o seu nvel de desagregao pode variar em funo de necessidades especficas e prioridade de cada ente federado.
Outra questo que merece destaque a reviso peridica do modelo lgico, no intuito de readequ-lo, para contemplar novos aspectos ou
outros no previstos que aparecem com o desenvolvimento dos processos de gesto e at mesmo
devido a caractersticas contextuais que imprimem
a necessidade de monitorar determinados aspectos no pensados/priorizados anteriormente, a
exemplo da estruturao dos Contratos Organizativos da Ao Pblica (COAP)15. Ressalta-se
tambm a necessidade de ajustes peridicos nos
padres estabelecidos, uma vez que um dos objetivos dos painis acompanhar as variaes ocorridas no decorrer do tempo e ser indutor de mudanas. Uma vez atingido determinada meta devese ajust-la com o intuito de promover melhoria
contnua dos resultados institucionais.
Os conceitos apresentados na literatura acerca
da prtica de monitoramento focam eminentemente sua funo instrumental. Considerada como um
acompanhamento sistemtico e contnuo de informaes relevantes que auxilia o processo de tomada de deciso, esta prtica torna-se muitas vezes restrita a aes repetitivas, irrefletidas e burocrticas que no permitem a interpretao das
mudanas no contexto das aes, apresentando
uma simplificao exagerada da realidade, que cega
os agentes a aspectos importantes da organizao
como um todo. Por vezes, utilizada no sentido
punitivo de identificar unicamente erros ou desvios, perdendo-se a oportunidade de fazer deste processo uma prtica formativa onde erros e falhas,

resultantes de inovaes ou experimentos com vistas a melhores resultados, tornem-se elementos


de um processo de aprendizagem pessoal e organizacional, consideradas lies aprendidas para a
qualificao do processo de gesto.
Os objetivos do monitoramento, aqui proposto, extrapolam o subsdio tomada de deciso orientada por evidncias e passam a abarcar
questes que visam o desenvolvimento pessoal
dos envolvidos e da instituio a qual se destina.
Por meio de uma discusso reflexiva, o monitoramento deixa de ser apenas um acompanhamento sistemtico das informaes... frias e distantes, e passa a ter como objeto a procura de
sentido daquelas informaes pelos que as utilizam. Desta forma, torna-se um potente instrumento de democratizao da informao sobre
os objetivos, as metas e os resultados alcanados
pelas instncias de gesto e pelos espaos de controle social, favorecendo o empoderamento e a
mobilizao social.
Por fim, salienta-se a necessidade da anlise
integrada do conjunto dos indicadores e das dimenses do desempenho da gesto da vigilncia.
O mau desempenho de uma dimenso pode afetar o de todo o sistema. Alm disso, deve-se ter
em mente que o monitoramento por ser um processo sistemtico e contnuo , portanto, bastante sensvel para captar mudanas. Assim, a definio da periodicidade do monitoramento vai
depender dos objetivos pretendidos. Numa perspectiva formativa, que permita a correo das
aes ainda durante sua execuo, a adoo de
uma periodicidade inferior a seis meses recomendada. Perodos muito longos no permitem
o acompanhamento das aes desencadeadas e a
reflexo sobre sua pertinncia, assim como perodos muito curtos no permitem observar as
mudanas desejadas. A periodicidade ideal para
cada sistema de monitoramento deve ser pensada a partir do contexto e da disponibilidade de
recursos (tempo e pessoas) para coleta e processamento das informaes.

1215

JMBS Costa trabalhou na concepo, delineamento e redao do artigo; E Felisberto; LCA


Bezerra na concepo, redao e reviso crtica;
IC Samico e EAP Cesse na redao final e reviso
crtica.

Agradecimentos
Agradecemos a todos os tcnicos e gestores que
compem a Secretaria Executiva de Vigilncia em
Sade de Pernambuco pelo empenho e preciosas
contribuies na elaborao dos painis de monitoramento.

Referncias
1. Felisberto E, Freese E, Alves CKA, Bezerra LCA,
Samico, I. Poltica de monitoramento e avaliao
da ateno bsica no Brasil de 2003 a 2006: contextualizando sua implantao e efeitos. Rev. Bras. Saude
Mater. Infant. 2009; 9(3):339-357.
2. Carvalho ALB, Souza MF, Shimizu HE, Senra IMVB,
Oliveira KC. A gesto do SUS e as prticas de monitoramento e avaliao: possibilidades e desafios para
a construo de uma agenda estratgica. Cien Saude
Colet 2012; 17(4): 901-911.
3. Silva Jnior JB. Epidemiologia em servio: uma avaliao de desempenho do Sistema Nacional de Vigilncia em Sade [tese]. Campinas: Faculdade de
Cincias Mdicas; 2004.
4. Brasil. Ministrio da Sade (MS). Secretaria de Vigilncia em Sade. Manual de Gesto da Vigilncia em Sade. Braslia: MS; 2009.
5. Brasil. Portaria N 2203, de 05 de dezembro de
1996. Aprova a Norma Operacional Bsica 1/96.
Dirio Oficial da Unio 1996; 6 dez.
6. Albuquerque MIK, Carvalho EMF, Lima LP. Vigilncia epidemiolgica: conceitos e institucionalizao. Rev Bras Sade Matern Infant 2002; 2(1):7-14.
7. McCann D. A performance management, a tool for
organization change. Infoletter 2008; 5(2):7.
8. Lahey R. The Canadian M&E System: lessons learned from 30 years of development. Washington:
World Bank; 2010. (ECD Working series, n 23).
9. Pernelle S. Performance management: a hologramatic relationship? Infoletter 2008; 5(2):1-8.
10. Champagne F, Contrandiopoulos AP. Elementos de
arquitetura dos sistemas de avaliao de desempenho dos servios de sade. In: Contandriopoulos
AP, Hartz Z, Gerhir M, Nguyn A, organizadores.
Sade e Cidadania: as experincias do Brasil e do
Quebec. Campinas: Saberes Editora; 2010. p. 297340.
11. Hartz ZMA, Ferrinho P. Avaliao de desempenho
dos sistemas de sade: um contributo para o Plano
Nacional de Sade 2011-2016. In: Hartz ZMA, Ferrinho P. A Nova Sade Pblica. A Sade Pblica da Era
do Conhecimento. Lisboa: Editora Gradiva; 2011. p.
58-79.
12. United States Agency for International Development
(USAID). Evaluation Policy. Washington: USAID;
2011.
13. Brasil. Lei 8080, de 19 de setembro de 1990. Dispe
sobre as condies para a promoo, proteo e
recuperao da sade, a organizao e funcionamento dos servios correspondentes e d outras
providncias. Dirio Oficial da Unio 1990; 20 set.
14. Brasil. Portaria N. 3252 de 22 de dezembro de 2009.
Aprova as diretrizes para execuo e financiamento das aes de Vigilncia em Sade. Dirio Oficial
da Unio 2009; 23 dez.
15. Brasil. Decreto N. 7508 de 28 de junho de 2011.
Regulamenta a Lei 8080 de 1990. Dirio Oficial da
Unio 2011; 29 jun.
16. Silva GAP, Vieira-da-Silva LGM. Health surveillance: proposal for a tool to evaluate technological arrangements in local health systems. Cad Saude Publica 2008; 24(11):2463-2475.

Cincia & Sade Coletiva, 18(5):1201-1216, 2013

Colaboradores

Costa JMBS et al

1216

17. Viacava F, Almeida C, Caetano R, Fausto M, Macinko J, Martins M, Noronha JC, Novaes HMD,
Oliveira ES, Porto SM, Silva LMV, Szwarcwald CL.
Uma metodologia de avaliao do desempenho do
sistema de sade brasileiro. Cien Saude Colet 2004;
9(3):711-724.
18. Viacava F, Ug MAD, Porto S, Laguardia J, Moreira
RS. Avaliao de desempenho de Sistemas de sade: um modelo de anlise. Cien Saude Colet 2012;
17(4):921-934.
19. Kessner DM, Kalk CE, Singer J. Assessing health
quality: the case for tracers. N Engl J Med 1973;
288(4):189-194.
20. Tamaki EM, Tanaka OY, Felisberto E, Alves CKA,
Drummond Jnior M, Bezerra LCA, Calvo MCM,
Miranda AS. Metodologia de construo de um painel de indicadores para o monitoramento e avaliao do SUS. Cien Saude Colet 2012; 17(4):839-849.
21. Costa FL, Castanhar JC. Avaliao de programas
pblicos: desafios conceituais e metodolgicos. RAP
2003; 37(5):962-969.
22. Brasil. Ministrio da Sade (MS). Secretaria de Vigilncia em Sade. Instrutivo para a programao
das aes do Sistema Nacional de Vigilncia em Sade. Braslia: MS; 2012.
23. Patton MQ. Utilization-focused evaluation. Thousand Oaks: Sage Publications; 2008.
24. Preskill H, Caracelli V. Current and developing conceptions of use: evaluation use tig survey results.
Am J Eval 1997; 18(3):209-225.
25. Figueir AC, Hartz Z, Samico I, Cesse EAP. Usos e
influncia da avaliao em sade em dois estudos
sobre o Programa Nacional de Controle da Dengue. Cad Saude Publica 2012; 28(11):2095-2105.
26. Weiss CH, Murphy-Graham E, Birkeland S. An alternative route to policy influence: how evaluation
affect DARE. Am J Eval 2005; 26(1):12-30.
27. Fleischer DN, Christie CA. Evaluation use: results
from a survey of US American Evaluation Association Members. Am J Eval 2009; 30(2):158-175.
28. Silva RR, Brando D. Os quarto elementos da avaliao. Olho Mgico Boletim da Rede Unida 2003;
10(2):59-66.
29. Brasil. Portaria MS N 2.914 de 12 de dezembro de
2011. Dispe sobre os procedimentos de controle e
de vigilncia da qualidade da gua para consumo
humano e seu padro de potabilidade. Dirio Oficial da Unio 2011; 14 dez.
30. Raoufi M. Avoiding information overload: a study
on individuals use of comunication tools. Procedings of the 36th Hawaii Conference on System Sciences
2002. [cited 2012 Dez 29]. Available from: http://
www.hicss.hawaii.edu/HICSS36/HICSSpapers/
ETEPO06.pdf
31. Falconi V. O Verdadeiro Poder: prticas de gesto que
conduzem a resultados revolucionrios. 1 Edio.
Nova Lima: INDG Tecnologia e Servios Ltda.; 2009.