Escolar Documentos
Profissional Documentos
Cultura Documentos
MONITORAMENTO
E AVALIAO NO
PLANEJAMENTO DO
SUS
2016
EM SADE
2016
EM SADE
MONITORAMENTO E AVALIAO NO
PLANEJAMENTO DO SUS
2016
SUMRIO
INTRODUO......................................................................................................... 9
MONITORAMENTO E AVALIAO....................................................................... 10
REFERNCIAS......................................................................................................... 39
UNIDADE 1
1 INTRODUO
Este curso tem como objetivo compreender o monitoramento e
avaliao como elementos fundamentais do processo de planejamento
das aes de sade pblica.
Sero abordados os conceitos e diferenciao de monitoramento e
avaliao, o contexto de surgimento dessas prticas no campo da sade,
as interfaces com os instrumentos formais de planejamento do SUS e os
aspectos metodolgicos desse processo.
Sabe-se que crescente o esforo de institucionalizar a avaliao
em sade no Brasil, porm, o desafio ainda grande. Torna-se necessrio
instrumentalizar as equipes gestoras, tcnicos e estudantes, para
que sejam capazes de capilarizar esse processo enquanto cultura
organizacional em suas esferas de atuao.
Ementa: Monitoramento e avaliao. Conceitos e contextualizao
histrica. Interfaces do monitoramento e avaliao. Monitoramento e
avaliao dos instrumentos de gesto do SUS: processo de formulao
e utilizao.
2 MONITORAMENTO E AVALIAO
10
Atualmente vasta a literatura na sade que trata de monitoramento e avaliao, mas ainda assim os conceitos so muitas vezes utilizados de maneira equivocada. comum, inclusive, que as secretarias de
sade tenham reas ou setores de monitoramento e avaliao. Porm,
nem sempre as equipes e comunidade esto esclarecidas dos conceitos
e processos que representam o que ali desenvolvido, e de que forma
esto voltados para a melhoria da qualidade da ateno sade. Em geral,
ao se falar em monitoramento e avaliao, a concepo ainda burocrtica e de julgamento focado em punio. Esclareceremos a seguir as concepes de monitoramento e avaliao que permeiam o SUS.
A atuao do gestor do SUS, nas trs esferas de governo,
consubstancia-se pelo exerccio das funes gestoras na sade, cujas
subfunes e atribuies compreendem: formulao de polticas/
planejamento; financiamento; coordenao, regulao, controle e
avaliao (do sistema/redes e dos prestadores pblicos ou privados); e
prestao direta de servios de sade (MATTA, 2007).
Aqui vamos nos deter nas funes de Monitoramento e Avaliao,
tomando-as como ferramentas em potencial para melhor orientar a
tomada de deciso, o que, por sua vez, possibilita o aprimoramento da
qualidade da gesto em sade.
Imagine a seguinte situao: no seu municpio, o Plano
de Sade, que o instrumento central de planejamento
para quatro anos, formado por objetivos, diretrizes, metas
e indicadores, previu o seguinte objetivo: fortalecer a
poltica municipal em sade mental de reduo de danos.
Suponhamos que em um dado momento do ano em curso,
a coordenao de sade mental local tenha identificado o
cenrio representado no quadro a seguir acerca de algumas
das propostas na Programao Anual de Sade (PAS).
Destaque-se que a PAS visa operacionalizar o Plano de Sade, a
partir da definio de aes para atingir os objetivos planejados.
11
REALIZADO
No iniciado.
Monitoramento
Avaliao
12
Conforme o CONASS (2016), pode-se afirmar que o monitoramento e avaliao so faces, complementares entre si, de um mesmo processo. O ato de avaliar (atribuir juzo de valor), inclusive, inerente tanto ao
processo de monitoramento quanto ao de avaliao. O monitoramento
acompanha no tempo o desenvolvimento de determinadas atividades e
formula hipteses a respeito. A avaliao aprofunda a compreenso sobre esse desenvolvimento, investigando as hipteses geradas pelo monitoramento acerca das diferenas observadas entre planejado e executado (implementao) ou alcanado (resultado ou impacto).
Dessa forma, podemos afirmar que o processo descrito na
situao hipottica da coordenao de sade mental caracteriza-se
como monitoramento, uma vez que no se utiliza de mtodos complexos
para atribuio de juzo de valor sobre as aes ou programa ou plano, nem
visa aprofundar a compreenso da situao para classificar a efetividade
das intervenes. Na situao descrita, o foco o acompanhamento
sistemtico e rotineiro de aes, metas e procedimentos relacionados ao
alcance de objetivos macro, considerada sua temporalidade rotineira.
Surgimento da avaliao e do monitoramento no campo da
sade
A avaliao uma atividade to velha quanto o mundo, banal e
inerente ao prprio processo de aprendizagem (CONTANDRIOPOULOS
et al., 1997, p. 29).
No campo da sade a avaliao surge vinculada aos avanos da
epidemiologia e da estatstica, a partir de testes de utilidade de diversas
intervenes, particularmente direcionadas ao controle das doenas
infecciosas e ao desenvolvimento dos primeiros sistemas de informao
que orientassem as polticas sanitrias nos pases desenvolvidos (Estados
Unidos, Alemanha, Inglaterra, Frana, Gr-Bretanha, Sua, entre outros)
(HARTZ, 2009).
Para delimitar as principais tendncias norteadoras da avaliao,
a trajetria organizada em geraes. O surgimento dessas geraes
marca mudanas terico-conceituais substanciais que se fizeram e
13
1910 - 1930
1 gerao
Descrio
Identificar e descrever os programas,
compreender sua estrutura, foras e
fragilidades para ver se possvel atingir os
resultados esperados e fazer as devidas
recomendaes para sua implementao.
1967 - 1980
3 gerao
Negociao
No excludente dos referenciais anteriores,
mas a avaliao torna-se ela mesma
inclusiva e participativa, um processo de
negociao entre os atores envolvidos na
interveno em que o
pesquisador-avaliador tambm se coloca
como parte e no apenas juiz.
Instrumentos de medida
Tcnico que precisa saber construir e usar
os instrumentos para medir os
fenmenos/intervenes estudados.
1930 - 1967
2 gerao
Julgamento
Apresenta como competncia
fundamental do avaliador a
institucionalizao das prticas avaliativas.
Caracterizada pela emergncia das
inciativas de profissionalizao,
evidenciadas pelo nmero crescente das
publicaes especficas, emergncia das
associaes de avaliadores internacionais e
dos padres de qualidade. apoiada no
julgamento de mrito e do valor de uma
interveno para ajudar na tomada das
melhores decises.
1980 - hoje
4 gerao
14
15
o Programa Nacional de Avaliao dos Servios de Sade (PNASS) reformulada em janeiro de 2015 pela Portaria GM/MS N. 28/2015, at
sua estratgia mais recente, o Programa de Melhoria do Acesso e da
Qualidade na Ateno Bsica (PMAQ) que, lanado em 2011, iniciou no
ano de 2015 o seu 3 ciclo, com a participao de todas as equipes de
sade da Ateno Bsica e suas vertentes.
A despeito da institucionalizao da avaliao no SUS, ainda temos
um processo incipiente. A insero da avaliao na rotina dos servios
somente se dar por meio da implantao de uma cultura avaliativa.
necessrio explicitar a perspectiva til da avaliao, que possibilite a
incluso/interferncia dos diferentes grupos envolvidos (os prestadores,
os profissionais, os usurios, os gestores), potencializando e renovando a
avaliao no cotidiano (FELISBERTO et al., 2010).
PARA SABER MAIS!
16
DEFINIO
Programao Anual
de Sade (PAS)
Relatrio Anual de
Gesto (RAG)
Fonte: Adaptado de: BRASIL. Conselho Nacional de Secretrios de Sade. A Gesto do SUS.
Braslia: CONASS, 2015. 133 p. (Para Entender a Gesto do SUS - 2015). Disponvel em:
http://www.conass.org.br/biblioteca/pdf/A-GESTAO-DO-SUS.pdf
17
1
2
3
Objetivos
Metas
Indicadores
18
REFLETINDO!
19
Fonte: Adaptado de: MINAS GERAIS. Escola de Sade Pblica do Estado de Minas Gerais.
Implantao do Plano Diretor da Ateno Primria Sade: oficina 9: monitoramento e
melhoria contnua de processos: guia do tutor/facilitador. Belo Horizonte: ESPMG, 2010.
100 p. Disponvel em: http://www.esp.mg.gov.br/wpcontent/uploads/2011/02/PDAPS_
Tutor9_160710_BAIXA.pdf.
20
ACTION
(AGIR)
Realizar o diagnstico;
Identificar o problema e suas causas;
Identificar a causa prioritria;
Elaborar o plano para a soluo da
causa prioritria;
Definir as metas a serem alcanadas;
Definir o mtodo para alcanar as
metas propostas.
PLAN
(PLANEJAR)
CHECK
(CHECAR)
DO
(FAZER)
Fonte: Adaptado de: MINAS GERAIS. Escola de Sade Pblica do Estado de Minas Gerais.
Implantao do Plano Diretor da Ateno Primria Sade: oficina 9: monitoramento e
melhoria contnua de processos: guia do tutor/facilitador. Belo Horizonte: ESPMG, 2010.
100 p. Disponvel em: http://www.esp.mg.gov.br/wpcontent/uploads/2011/02/PDAPS_
Tutor9_160710_BAIXA.pdf.
21
22
Medir
Por meio de
indicadores
Comparar
Anlise de
conformidade
Tomar
deciso
Interveno
Fonte: Adaptado de: MINAS GERAIS. Escola de Sade Pblica do Estado de Minas Gerais.
Implantao do Plano Diretor da Ateno Primria Sade: oficina 9: monitoramento e
melhoria contnua de processos: guia do tutor/facilitador. Belo Horizonte: ESPMG, 2010.
100p. Disponvel em: http://www.esp.mg.gov.br/wpcontent/uploads/2011/02/PDAPS_
Tutor9_160710_BAIXA.pdf.
23
24
25
REFLETINDO!
Ex-ante
In-curso
Ex-post
26
Confiabilidade
Simplicidade
27
b) Servios de sade
Estrutura: existncia de recursos fsicos (instalaes),
humanos (pessoal) e organizacionais (comits, protocolos
assistenciais etc.) adequados.
Processos: indicam o que realmente oferecido durante o
cuidado - processos de trabalho nas reas de gesto, servios
de apoio e servios assistenciais: organizao e documentao,
protocolos, normas e rotinas.
Resultados: refletem o quanto o usurio teve sua queixa
ou problema resolvido - impacto da assistncia prestada
na situao de sade, conhecimento e comportamento do
paciente (ANVISA, 2007).
c) Ambiente
Podem estar relacionados a atividades humanas, ambiente e
recursos naturais e agentes econmicos, sociais e ambientais.
Exs.:
o Proporo da populao com acesso a rede de
abastecimento de gua.
o Proporo da populao com acesso a rede de esgoto.
o Proporo da populao com acesso a servios de coleta de
resduos slidos.
o Proporo da populao exposta a contaminantes
ambientais (mercrio, chumbo) (BRASIL, 2011).
Formas de apresentao dos indicadores (RIPSA, 2008)
a) Nmero absoluto: total, contagem.
Ex.: nmero de bitos infantis por sfilis congnita.
Aplicao:
A cidade Morro Cinza teve 50 bitos infantis por sfilis congnita,
em 2015.
b) Proporo: quociente entre duas medidas, estando o
numerador includo no denominador.
Ex.: proporo de menores de cinco anos na populao.
Clculo:
Nmero de crianas residentes menores de cinco anos de idade x 100
Populao total residente, excluda a de idade ignorada*
28
Aplicao:
500 crianas menores de 5 anos de idade em Morro Cinza X 100= 5%
10.000 habitantes, excluda a de idade ignorada
A proporo de crianas menores que 5 anos na cidade de Morro
Cinza de 5%.
c) Razo: quociente entre duas medidas relacionadas entre si;
(o denominador no inclui o numerador, so duas entidades
separadas e distintas).
Ex.: razo de sexos.
Clculo: Nmero de residentes do sexo masculino x 100
Nmero de residentes do sexo feminino
Aplicao:
4.900 residentes do sexo masculino em Morro Cinza x 100
5.100 residentes do sexo feminino em Morro Cinza
Morro Cinza possui 96 residentes do sexo masculino para cada
grupo de 100 residentes do sexo feminino.
d) Coeficiente ou Taxa: variao de uma medida y em funo da
variao de uma medida x; referida a um determinado tempo,
estando associada com a rapidez de mudana de fenmenos.
Ex.: taxa bruta de mortalidade
Clculo: Nmero total de bitos de residentes x 1.000
Populao total residente
Aplicao:
55 bitos em Morro Cinza em 2015 x 1.000
10.000 habitantes
A taxa bruta de mortalidade em Morro Cinza em 2015 foi de 5,5
bitos a cada 1.000 habitantes.
e) Indicadores sintticos: resultantes de uma composio de
variveis.
Ex.: ndice de Desenvolvimento Humano IDH.
O IDH composto por trs polares: sade, educao e renda. Vai
de 0 (nenhum desenvolvimento humano) a 1 (desenvolvimento humano
29
30
31
mdia) encobrir as variaes entre os municpios? possvel compararse municpios de diferentes tamanhos e caractersticas?
Municpios: como se comportam os resultados nas diversas
regies/bairros do municpio? Existem variaes? O resultado do
municpio (uma mdia) mascara as variaes entre as regies do
municpio?
Ao final destas etapas temos um julgamento de valor (o programa/
projeto/rea est indo bem ou no, est indo conforme esperado ou no)
e algumas pistas das razes deste resultado. A prxima etapa consiste
em conhecer mais sobre as razes deste resultado e se este processo for
participativo, envolvendo os diversos atores, obteremos um diagnstico
mais preciso.
A ampla divulgao
monitoramento.
dos
resultados
observados
no
Tendo-se identificado razes para o(s) resultado(s) alcanados, fazse o planejamento de intervenes (quando necessrias). Prope-se o
modelo lgico a seguir para organizar as aes, o qual deve ser construdo
de forma participativa (RIO GRANDE DO SUL, 2007).
Quadro 5 - Matriz lgica utilizada pela SES/RS como plano de interveno participativo.
Programa/rea/Projeto:
Data
Resultado
do
indicador
Problema(s)
identificado(s)
para o alcance
de metas
Atividades
propostas
para melhorar/
resolver o(s)
problema(s)
Recursos
necessrios
Responsveis
Fonte: Adaptado de: RIO GRANDE DO SUL. Governo do Estado. Secretaria de Estado da Sade.
Monitoramento de indicadores de sade: uma proposta conceitual e metodolgica:
manual de orientaes tcnicas. Porto Alegre, 2007. Disponvel em: http://www1.saude.
rs.gov.br/dados/1194978734327Manual%20de%20Monitoramento%20de%20Indi
adores%20de%20Sa%FAde.pdf
32
Avaliando resultados
Como j vimos, o ato de avaliar est intrnseco ao processo de
monitoramento tambm. Entretanto, a avaliao em sade, enquanto
funo, pressupe a emisso de juzo de valor de maior complexidade sobre
o programa, projeto ou poltica que esteja sendo implementado. Assim,
alm de estabelecer claramente os mecanismos de acompanhamento,
como forma de obter um monitoramento efetivo, importante definir
como os resultados sero avaliados.
possvel classificar a avaliao em relao ao que ser avaliado, a
partir dos critrios de eficincia, eficcia e efetividade, conforme mostra
a figura a seguir.
Figura 7 - Classificao da avaliao.
AVALIAO DA EFICINCIA
(usar recursos da melhor forma possvel no tempo
CUSTOS EXECUTADOS
EFEITOS OBTIDOS
AVALIAO DA EFICCIA
(conseguir cumprir metas)
METAS ALCANADAS
CUSTOS EXECUTADOS
METAS PROPOSTAS
CUSTOS PREVISTOS
AVALIAO DA EFETIVIDADE
(alcanar as transformaes desejadas por meio de efeitos e impactos)
SITUAO DEPOIS DA
INICIATIVA (EX-POST)
SITUAO ANTES DA
INICIATIVA (EX-ANTE)
OBJETIVA
SUBSTANTIVA
SUBJETIVA
comportamental
ou de cultura
33
34
ETAPA 2
ETAPA 3
Observa RESULTADOS
Observa IMPLANTAO
DE PROCESSOS
Observa RELAES
CAUSAIS
Determina se os
resultados alcanados
foram devido interveno
realizada com a iniciativa
Verifica como a
implantao afeta o
desenvolvimento
Analisa a relao de
causalidade entre a
iniciativa e o impacto
apresentado
Verifica a validade
dos planos e os valores
definidos em relao
base de dados
Verifica se houve
planejamento adequado
35
Objetivo(s)
Metas
Atividades
propostas para ao
alcance das metas e
objetivo(s)
Indicadores de
monitoramento
Mtodo de
clculo dos
indicadores
Periodicidade de
monitoramento
Estratgia
de avaliao
36
CONSIDERAES FINAIS
REFERNCIAS
ANVISA. Ministrio da Sade. PNASS - Programa Nacional de Avaliao
de Servios de Sade: resultado do processo avaliativo 2004-2006.
Braslia: Ministrio da Sade, 2007. 84f. Disponvel em: http://www.
anvisa.gov.br/servicosaude/manuais/pnass.pdf. Acesso em: 12 jul. 2016.
BAHIA. Secretaria de Sade do Estado. Manual prtico de apoio a
elaborao de planos municipais de sade. Salvador: SESAB, 2009. 44 p.
Disponvel em: http://www2.saude.ba.gov.br/arquivos/MANUAL_PARA_
ELABORA%C3%87%C3%83O_DE_PMS.pdf. Acesso em: 13 jul. 2016.
BRASIL. Conselho Nacional de Secretrios de Sade. A Gesto do SUS.
Braslia: CONASS, 2015. 133 p. (Para Entender a Gesto do SUS - 2015).
Disponvel em: http://www.conass.org.br/biblioteca/pdf/A-GESTAODO-SUS.pdf. Acesso em: 11 jul. 2016.
_____. Ministrio da Sade. Portaria N 2.135, de 25 de setembro
de 2013. Estabelece diretrizes para o processo de planejamento no
mbito do Sistema nico de Sade (SUS). Dirio Oficial [da] Repblica
Federativa do Brasil, Braslia, 25 set. 2013. Disponvel em: http://bvsms.
saude.gov.br/bvs/saudelegis/gm/2013/prt2135_25_09_2013.html.
Acesso em: 11 jul. 2016.
_____. _____. Secretaria de Ateno Sade. Avaliao na Ateno
Bsica em Sade: caminhos da institucionalizao. Braslia, DF:
Ministrio da Sade, 2005. 36 p. Disponvel em: http://189.28.128.100/
dab/docs/publicacoes/geral/avaliacao_ab_portugues.pdf. Acesso em:
11 jul. 2016.
_____. _____. _____. Monitoramento na ateno bsica de sade:
roteiros para reflexo e ao. Braslia: Ministrio da Sade, 2004. 72 p.
(Srie C. Projetos, Programas e Relatrios). Disponvel em: http://bvsms.
saude.gov.br/bvs/publicacoes/Roteiros.pdf. Acesso em: 12 jul. 2016.
39
40
41
42
43
44
EM SADE
45