Você está na página 1de 80

MINISTRIO DA SADE

SRIE

PLANEJAMENTO

CADERNOS DE

Sistema de Planejamento do SUS


Uma construo coletiva

Monitoramento e avaliao: processo de formulao, contedo e uso dos instrumentos do PlanejaSUS

Braslia - DF 2010

VOLUME 8

MINISTRIO DA SADE

SRIE

PLANEJAMENTO

CADERNOS DE

Sistema de Planejamento do SUS


Uma construo coletiva

Monitoramento e avaliao: processo de formulao, contedo e uso dos instrumentos do PlanejaSUS

Braslia - DF 2010

VOLUME 8

MINISTRIO DA SADE
Secretaria-Executiva Subsecretaria de Planejamento e Oramento

Sistema de Planejamento do SUS


Uma construo coletiva
Monitoramento e avaliao: processo de formulao, contedo e uso dos instrumentos do PlanejaSUS

Srie B. Textos Bsicos de Sade Srie Cadernos de Planejamento, v. 8

Braslia - DF 2010

2010 Ministrio da Sade. Todos os direitos reservados. permitida a reproduo parcial ou total desta obra, desde que citada a fonte e que no seja para venda ou qualquer fim comercial. A responsabilidade pelos direitos autorais de textos e imagens desta obra da rea tcnica. A coleo institucional do Ministrio da Sade pode ser acessada, na ntegra, na Biblioteca Virtual em Sade do Ministrio da Sade: http://www.saude.gov.br/bvs Srie B. Textos Bsicos de Sade. Srie Cadernos de Planejamento - Volume 8 Tiragem: 1 edio 2010 15.000 exemplares Elaborao, distribuio e informaes: MINISTRIO DA SADE Secretaria-Executiva Subsecretaria de Planejamento e Oramento Coordenao Geral de Planejamento Esplanada dos Ministrios, Bloco G, Edifcio-Sede, 3 andar CEP: 70.058-900, BrasliaDF Tel.: (61) 3315-2677 Fax: (61) 3315-3935 E-mail: cgpl@saude.gov.br ou planejasus@saude.gov.br Edio: Cristina Maria Vieira da Rocha Ayrton Galiciani Martinello Aristel Gomes Bordini Fagundes Capa e editorao: Eduardo da Costa Martins Marcelo Tadeu Ferreira Farago Garcia Impresso no Brasil / Printed in Brazil

Ficha Catalogrfica Brasil. Ministrio da Sade. Secretaria-Executiva. Subsecretaria de Planejamento e Oramento. Sistema de Planejamento do SUS : uma construo coletiva : monitoramento e avaliao : processo de formulao, contedo e uso dos instrumentos do PlanejaSUS / Ministrio da Sade, Secretaria-Executiva, Subsecretaria de Planejamento e Oramento. Braslia : Ministrio da Sade, 2010. 76 p. : il. (Srie B. Textos Bsicos de Sade) (Srie Cadernos de Planejamento, v. 8) ISBN 978-85-334-1656-7 1. Planejamento em sade. 2. Diretrizes para o planejamento em sade. 3. Sistema nico de Sade. I. Ttulo. II. Srie. CDU 617.78
Catalogao na fonte Coordenao Geral de Documentao e Informao Editora MS OS 2010/0110

Ttulos para indexao: Em ingls: Planning System of the Unified Health System (SUS Brazil): a collective construction: formulation process, subject and use of the PlanejaSUS instruments Em espanhol: Sistema de Planificacin del Sistema nico de Salud (SUS Brasil): una construccin colectiva: proceso de formulacin, contenido y uso de los instrumentos del PlanejaSUS

Sumrio
Apresentao . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7 1 Introduo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9 2 Conceitos e premissas bsicas . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13
2.1 Sobre o monitoramento e avaliao . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13 2.2 Sobre a metodologia . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 2.3 Observaes complementares . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 16

3 Proposta de monitoramento e avaliao . . . . . . . . . . . . . . . . . . . . . . . . . 17


3.1 Processo de planejamento (mdulo 1) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 18 3.2 Processo de formulao dos instrumentos (mdulo 2) . . . . . . . . . . . . . . . . . . . . . 19 3.3 Contedo dos instrumentos (mdulo 3). . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20 3.4 Uso dos instrumentos (mdulo 4) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21

4 Implementao do processo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23
4.1 Deciso e formalizao do processo (1 momento) . . . . . . . . . . . . . . . . . . . . . . . 23 4.2 Definio do processo (2 momento). . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23 4.3 Consolidao e sistematizao dos dados . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

5 Aplicao do instrumento . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27
5.1 Seleo da alternativa sim . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27 5.2 Seleo da alternativa no ou em parte . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 29 5.3 Definio da mdia da pontuao atribuda alternativa sim . . . . . . . . . . . . . . . 31 5.4 Consolidao das justificativas (alternativas no e em parte) . . . . . . . . . . . . . . 32 5.5 Identificao de dificuldades e medidas de superao . . . . . . . . . . . . . . . . . . . . . 32 5.6 Definio da sntese do monitoramento e avaliao . . . . . . . . . . . . . . . . . . . . . . . 33 5.7 Definio de consolidado. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36

Referncias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 39 Anexo Instrumento para o monitoramento e avaliao do processo de formulao, do contedo e do uso dos instrumentos do PlanejaSUS . . . . 41

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

Apresentao
Este volume 8 da srie Cadernos de Planejamento que trata de monitoramento e avaliao busca atender demanda dos profissionais que direta ou indiretamente esto envolvidos na construo do PlanejaSUS (Sistema de Planejamento do SUS). Desde o incio dessa construo, quando ainda se discutia as bases de organizao e funcionamento desse Sistema, monitoramento e avaliao foram questes presentes, entendendo-se que integram e so partes indissociveis do processo de planejamento. Nos ltimos dois anos, essas discusses intensificaram-se e focaram a necessidade de formulao de propostas voltadas ao monitoramento e avaliao no mbito do PlanejaSUS. As discusses indicaram a necessidade de propostas tanto em relao a processos, quanto a contedo e utilizao dos instrumentos bsicos do PlanejaSUS: Plano de Sade (PS), Programao Anual de Sade (PAS) e Relatrio Anual de Gesto (RAG). A apresentao de uma proposta de monitoramento e avaliao, no atual momento, especialmente oportuna, tendo em conta a importante apropriao e prtica dos conceitos, estruturas e processos de formulao dos instrumentos bsicos, verificadas nesses quatro anos de implementao do PlanejaSUS. A perspectiva que a presente proposio contribua para o avano do processo de operacionalizao e capilaridade do PlanejaSUS, na medida em que est voltada sobretudo s reas ou responsveis pelo planejamento nas diferentes esferas de gesto. Rene, todavia, condies reais de aplicao em outro contexto, rea tcnica ou tema, a partir de adaptao ao objeto respectivo, principalmente no que se refere ao instrumental especfico aqui constante. Na definio desta proposta, procurou-se, mais uma vez, obter um produto resultante da contribuio de interlocutores e parceiros de diferentes origens. Considera-se, no entanto, que a proposta ir se consolidar 7

Ministrio da Sade

e ser aperfeioada no exerccio da sua aplicao frente a realidades e contextos, com os esperados ajustes e adequaes. mais um grande desafio para a construo e consolidao de uma cultura de planejamento que incorpore o indispensvel processo de monitoramento e a avaliao.

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

1 Introduo
A funo planejamento neste compreendido o monitoramento e a avaliao inerente a todos profissionais, independentemente de onde atuem. O planejamento detm enorme potencial para viabilizar o alcance de oportuna resolubilidade das medidas estabelecidas e implementadas. Essa uma das principais potencialidades que conferem ao planejamento o carter estratgico para a qualificao da gesto. Nos mbitos federal e estadual assim como em muitos municpios , existem reas formais ou informais incumbidas de cuidar do processo de planejamento na respectiva esfera de gesto do SUS. Em muitos municpios, o processo conduzido por outras reas ou profissionais. Sob a orientao do gestor, cabe a todos esses conduzir o processo de formulao, monitoramento e avaliao do Plano de Sade (PS), da Programao Anual de Sade (PAS) e do Relatrio Anual de Gesto (RAG) na conformidade da regulamentao do PlanejaSUS. Devem igualmente apoiar todas as reas nos seus respectivos processos de planejamento, assim como as outras esferas de gesto na operacionalizao do PlanejaSUS. Particularmente no tocante a monitoramento e avaliao no setor sade, o investimento vem se expandido muito, com vrias iniciativas que analisam aes e servios, bem como a gesto. A gesto, as questes organizacionais, processos, produtos e no somente resultados e impactos so dimenses passveis de avaliao no mbito do SUS. Isso se torna mais evidente quando esse investimento est relacionado a iniciativas voltadas a resgatar ou construir uma cultura de planejamento no mbito do SUS, tendo como cenrio uma conjuntura de complexidades e desafios. Nessa conjuntura, esto envolvidas a formulao e a implementao das polticas de sade, pressionadas pela crescente demanda por aes e servios e pelas mudanas no perfil epidemiolgico e demogrfico da populao brasileira. A metodologia e o instrumental de monitoramento e avaliao aqui descritos tm como foco os instrumentos que do concretude ao processo 9

Ministrio da Sade

de planejamento do SUS, acima SUS, acima referidos, estabelecidos pela de planejamento do referidos, estabelecidos pela Portaria N 3.085/2006 e definidos pela Portaria pela 3.332/2006. Esses instrumentos Portaria N 3.085/2006 e definidos n. Portaria n. 3.332/2006. Esses instrumentos apresentamcaractersticas: apresentam as seguintes as seguintes caractersticas: a) o Plano de Sade (PS) aborda as intenes e os resultados a o Plano de Sade (PS) aborda as serem buscados no perodo de quatro anos, expressos em objetivos, diretrizes e metas; b) a Programao Anual de Sade (PAS) operacionaliza as intenes expressas no Plano de Sade, apontando o conjunto de aes voltadas promoo, proteo e recuperao da sade, bem como gesto do SUS; e c) o Relatrio Anual de Gesto (RAG) registra os resultados o alcanados com a execuo da PAS e orienta eventuais redirecionamentos que se fizerem necessrios. Como se depreende, o PS, a PAS e o RAG so instrumentos interdependentes, indissociveis, que viabilizam a dinamicidade e constncia do completo processo de planejamento. Nesse processo contnuo, portanto, no h momentos estanques. A presente proposta no um monitoramento e/ou avaliao pura e simples de documentos prontos (plano, programao, relatrio), embora tambm seja um propsito. No constitui, do mesmo modo, proposta de pesquisa ou de diagnstico quanto formulao e ao uso dos instrumentos de planejamento do SUS pelas esferas de gesto. Abrange sim, de forma bastante especfica e direta, o monitoramento e a avaliao do processo de formulao, do contedo e do uso desses instrumentos bsicos do PlanejaSUS. Ou seja: a proposta aqui apresentada no tem por finalidade monitorar e avaliar resultados ou impactos do plano ou da programao, visto que metodologias e instrumentais com este propsito vm, paralelamente, sendo trabalhados e disponibilizados no SUS. importante assinalar, contudo, que esses resultados ou impactos devem ser objeto de acompanhamento das reas ou profissionais responsveis pela conduo do planejamento em cada esfera, de modo a assegurar a dinamicidade e continuidade do processo por conseguinte dos instrumentos dele resultantes , assim como subsidiar o gestor na tomada de deciso. 10

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

No mbito federal, um exemplo a Sala de Situao em Sade, que rene um amplo, atualizado e diversificado conjunto de informaes capazes no s de apoiar a deciso do gestor, mas tambm o processo de planejamento. Cabe enfatizar tambm que as referidas reas ou profissionais incumbidos da funo planejamento precisam dispor de informaes peridicas acerca do andamento da PAS, tanto para orientar eventuais redirecionamentos que se fizerem necessrios, quanto para indicar a necessidade de se ampliar ou inserir outras aes. Em outras palavras, o desenvolvimento da PAS precisa ser acompanhado, pelo menos a cada seis meses, pelas referidas reas e profissionais que tm o planejamento como o seu objeto de trabalho cotidiano, evitando-se assim a sua avaliao apenas por ocasio da formulao do RAG. Com isso, reafirma-se o carter estratgico e dinmico dos instrumentos bsicos (PS, PAS e RAG). Assim, ao colocar esta proposta disposio, busca-se, essencialmente, induzir a adoo do monitoramento e avaliao como procedimentos de rotina, habituais e cotidianos no PlanejaSUS, com resultados que contribuam e repercutam em termos de melhoria e aperfeioamento da prpria gesto, assim como das aes e servios prestados populao.

11

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

2 Conceitos e premissas bsicas


Para o melhor entendimento e aplicao da proposta contida neste Caderno, considera-se importante a explicitao de alguns conceitos e premissas bsicas adotadas, a seguir identificados.

2.1 Sobre o monitoramento e avaliao


O campo do monitoramento e da avaliao constitui seara em que farta a disponibilidade de referencial terico, de metodologias e de instrumentos, razo porque se torna oportuno explicitar o entendimento aqui atribudo a alguns termos e expresses. a) Na proposta aqui descrita, o monitoramento o Na proposta aqui descrita, o monitoramento acompanhamento continuado de compromissos (objetivos, metas e aes), explicitados em planos, programaes ou projetos, de modo a verificar se estes esto sendo executados conforme preconizado. b) A avaliao entendida como um processo que implica julgar, emitir um julgamento de valor, tendo por base uma anlise do que foi realizado (interveno, ao, servio, procedimento etc.) ou uma anlise do resultado obtido, sempre em comparao com um referencial considerado como um ideal a ser alcanado. Entende-se, do mesmo modo, que o monitoramento tem c) Entende-se, do mesmo modo, que o monitoramento tem uma uma avaliativa, vez que acompanha (monitora) algo que algo que est em cargacarga avaliativa, vez que acompanha (monitora) est em andamento andamento (interveno, ao, servio, etc.). Assim, etc.). tambm uma (interveno, ao, servio, procedimentoprocedimento faz-se Assim, faz-se tambm uma anlise comparativa com um referencial, emitindo-se, em anlise comparativa com um referencial, emitindo-se, em consequncia, um consequncia, valor. julgamento deum julgamento de valor. d) Nos dois casos monitoramento e avaliao , busca-se identificar pontos de fragilidade que merecero a adoo de medidas ou intervenes por parte dos responsveis pelo objeto deste monitoramento e avaliao, visando superar os desafios que impedem o avano do que est proposto. 13

Ministrio da Sade

Busca-se, alm disso, explicitar avanos, e) Busca-se, alm disso, explicitar avanos, progressos, aspectos positivos e melhorias em situaes, realidades e processos objetos de interveno, no sentido da valorizao dos envolvidos e da verificao do cumprimento de propsitos e responsabilidades. Assume-se, tambm, que o processo f) Assume-se, tambm, que o processo de planejamento ocorre concomitantemente com a dinmica do PlanejaSUS. No h, portanto, um parntese ou um hiato para que as equipes interrompam as suas atividades para planejar, o que se constitui em mais uma razo para fazer do monitoramento e da avaliao processos contnuos e sistemticos que integram o planejamento.

2.2 Sobre a metodologia


A metodologia proposta para o monitoramento avaliao do a) A metodologia proposta para o monitoramento e ae a avaliao processo de de formulao, do contedo e do que vem sendo dado aos do processo formulao, do contedo e do usouso que vem sendo dado instrumentos bsicos do PlanejaSUS aos instrumentos bsicos do PlanejaSUSaproxima-se do chamado aproxima-se do chamado monitoramento e avaliao qualitativos, pois no se restringe simples inquisio por meio de perguntas objetivas e respostas numricas. A ideia, com isso, suscitar um processo b) A ideia, com isso, suscitar um processo de reflexo por parte dos que vivenciam o objeto monitorado e avaliado, captando pontos de vista e percepes diferenciadas, bem como indicativos sobre intervenes ou medidas destinadas a incrementar potencialidades e superar limitaes identificadas. Os c) Os avaliadores, portanto, sero aqueles que direta ou indiretamente esto ou estiveram envolvidos com o planejamento, a saber: (i) os responsveis por conduzir ou liderar esse processo, por fora de competncia ou delegao; (ii) os integrantes das equipes de planejamento (que tm essa funo como objeto de seu trabalho cotidiano); (iii) os integrantes das equipes tcnicas das chamadas 'reas finalsticas'; (iv) os representantes de conselhos de sade e de colegiados de gestores, entre outros. d) Sero, por conseguinte, os prprios que vivenciam ou vivenciaram o processo do planejamento e que, de alguma forma, tm envolvimento, interesse, conhecimento e familiaridade com o objeto em questo. 14

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

e) No processo aqui apresentado, os avaliadores sero tambm No processo aqui apresentado, os objeto do monitoramento e da avaliao por serem ou autores ou construtores dos instrumentos do PlanejaSUS e por fazerem uso destes instrumentos em sua prtica. Nesse sentido, esta proposta coloca-se na linha da autoavaliao. f) Esto nomeados como avaliadores, portanto, todo aquele que Esto nomeados como avaliadores, portanto, participa do processo aqui proposto independentemente de estar num momento de monitoramento ou de avaliao propriamente dita. g) A metodologia adotada caracteriza-se por induzir e estimular a A metodologia adotada caracteriza-se por induzir reflexo, a auto-aprendizagem, a autoconscientizao e a autocrtica, ao incorporar um monitoramento e uma avaliao do prprio desempenho, pois os atores estiveram envolvidos na construo do objeto avaliado e usam este objeto ou o tem como referncia na sua prtica. O avaliador colocado em contato direto com o o instrumento h) O avaliador colocado em contato direto cominstrumento de monitoramento e avaliao, impresso ou em meio magntico. O referido de monitoramento e avaliao, impresso ou em meio magntico. O instrumento auto-explicativo e o avaliador segue as instrues passo a passo, respondendo s questes a partir da sua percepo sobre o aspecto focalizado. Nesse sentido, o resultado do i) Nesse sentido, o resultado do monitoramento e da avaliao representa a percepo dos envolvidos sobre o processo de formulao, sobre o contedo e sobre o uso que vem sendo dado aos instrumentos do PlanejaSUS, sem preocupao em verificar o 'certo' ou o 'errado'. O monitoramento e a avaliao procuram j) O monitoramento e a avaliao procuram captar o conhecimento, a compreenso e os diferentes pontos de vista, os olhares diversos e as distintas formas de perceber o planejamento na esfera de gesto em que ela se processa. Tambm indica aos responsveis por essa funo necessidades de investimentos, de capacitao, de atualizao, de aperfeioamento, sempre na perspectiva de avanar na construo/consolidao da cultura do planejamento no mbito do SUS. De outro lado, k) De outro lado, o desencadeamento do processo e o envolvimento de um conjunto diferenciado de atores estabelecem condies que resultam em mais sensibilizao e responsabilizao, bem como em uma atitude mais proativa e aberta a mudanas quanto ao planejamento. A proposta no contempla entrevistadores e entrevistados, perguntadores e respondentes. 15

Ministrio da Sade

No h, de outro modo, uma hierarquizao l) No h, de outro modo, uma hierarquizao nesse monitoramento e avaliao. Ou seja: os seus resultados no sero utilizados para informar ou prestar contas a outra esfera de gesto ou a outra instituio. Os produtos sero usufrudos na prpria esfera que tomou a deciso por monitorar/avaliar, a partir de uma retroalimentao quase que imediata de pontos de fragilidade, necessidades, pontos positivos e avanos, em termos daquilo que deve ser alvo de ajustes, correes e adequaes.

2.3 Observaes complementares


importante esclarecer que o uso a) importante esclarecer que o uso em vrios pontos deste documento e do instrumento de monitoramento e avaliao da expresso rea/setor de planejamento refere-se s situaes (i) em que a rea/setor existe formalmente, consta do organograma do rgo gestor; e (ii) aquelas em que a responsabilidade pelo planejamento atribuda a uma pessoa ou a um grupo ou a outra rea tcnica, caracterstica de uma realidade ainda muito presente, em especial nos municpios de menor porte. b) Muito embora os instrumentos do PlanejaSUS, as suas diretrizes e orientaes sejam o foco monitoramento e avaliao, o instrumento aqui proposto d oportunidade de anlises relativas a diferenciais adotados pela prpria esfera de gesto.

16

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

Proposta de monitoramento e avaliao

O monitoramento e a avaliao do processo de formulao, do contedo e do uso que vem sendo dado aos instrumentos bsicos do PlanejaSUS abordaro aspectos relacionados a processos e a produtos, estando estruturada em quatro mdulos com os seguintes enfoques (Figura 1): o processo de planejamento de um modo geral Mdulo 1: o processo de planejamento de um modo geral nana esfera de gesto; de gesto; o processo de formulao Plano de de Sade (PS), Mdulo 2: o processo de formulao dodo Plano Sade (PS), da da Programao Anual de Sade (PAS) e do Relatrio Anual de Gesto (RAG); Programao Anual de Sade (PAS) e do Relatrio Anual de Gesto (RAG); o Mdulo 3: o contedo do PS, da PAS ee do RAG; e PS, da PAS do RAG; e o uso PS, da da e do e do RAG, incluindo o Mdulo 4: o uso dodo PS, PAS PAS RAG, incluindo o monitoramento e a avaliao de processos e e de resultados. e a avaliao de processos de resultados. Os mdulos dois e trs desdobram-se em unidades para dar conta da anlise de cada instrumento de forma especfica. Os quatro mdulos totalizam cerca de 140 tpicos, apresentados na forma de questes. Ao implementar o processo de monitoramento e avaliao, podero ser utilizados os quatro mdulos ou mdulos especficos. Isso depender do objeto, do momento ou da finalidade do monitoramento e da avaliao a serem empreendidos.

17

Ministrio da Sade

Figura 1 - Diagrama representativo da avaliao


O processo de planejamento desenvolvido na esfera de gesto
Unidade 2-A: Formulao dos ins trumentos, de modo geral

Mdulo 1

Mdulo 2

O processo de formulao dos instrumentos do PlanejaSUS

Unidade 2-B: Formulao do PS Unidade 2-C: Formulao da PAS Unidade 2-D: Formulao do RAG

Mdulo 3

O contedo dos instrumentos do PlanejaSUS

Unidade 3-A: Contedo dos instrumentos, de modo geral Unidade 3-B: Contedo do PS Unidade 3-C: Contedo da PAS Unidade 3-D: Contedo do RAG

Mdulo 4

O processo de aplicao/uso prtico dos instrumentos do PlanejaSUS

3.1 Processo de planejamento (mdulo 1)


O mdulo 1 trata do planejamento de um modo geral. Tem como propsito monitorar e avaliar como esse processo vem sendo desenvolvido na esfera de gesto respectiva, destacando, entre outros aspectos: (i) suas relaes com as demais esferas; (ii) a estrutura da rea; (iii) a capacidade de influenciar o processo de deciso; (iv) o exerccio das competncias/atribuies especficas da esfera em termos de planejamento; (v) uso do incentivo financeiro federal para implementao do sistema de planejamento; (vi) aplicao das diretrizes e uso da metodologia e dos instrumentos do PlanejaSUS como referencial etc. A ideia possibilitar um olhar crtico sobre a rea de planejamento, identificando aspectos de fragilidade no desenvolvimento 18

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

desse processo no mbito da esfera de gesto. Esse um mdulo que deve ser objeto de anlise sistemtica, integrando sempre o processo de monitoramento e avaliao a ser desenvolvido, independentemente de monitorar e avaliar este ou aquele instrumento.

3.2 Processo de formulao dos instrumentos (mdulo 2)


O mdulo 2 refere-se ao processo de formulao do PS, da PAS e do RAG. Ou seja: trata do trabalho desenvolvido pela esfera de gesto para a construo desses instrumentos do PlanejaSUS. Esse composto por quatro unidades, que aborda o processo como um todo e cada instrumento de forma especfica, conforme apresentado no Quadro 1. Quadro 1 - Detalhamento das unidades que conformam o mdulo 2
Unidade 2-A
Focaliza o processo de formulao como um todo, sem especificar um ou outro instrumento. Busca captar uma viso do conjunto do processo em termos da contribuio para a direcionalidade do SUS e a qualificao das prticas de gesto, bem como para consolidar a cultura do planejamento. Busca tambm monitorar e avaliar a insero do processo de formulao, sua formalizao e importncia no contexto da esfera de gesto respectiva.

Unidade 2-B

Envolve de forma especfica o processo de formulao do PS vigente na atual gesto.


monitorar e avaliar a participao dos vrios atores, a metodologia Busca

adotada, os insumos(*)/subsdios utilizados e o envolvimento dos colegiados de gesto e de participao social. Especifica o perodo dedicado ao processo de formulao. Unidade 2-C
de forma especfica o processo de formulao da PAS vigente no ano Envolve

em curso. Busca monitorar e avaliar a participao dos vrios atores, a metodologia adotada, os insumos/subsdios utilizados e o envolvimento dos colegiados de gesto e de participao social. Unidade 2-D
de forma especfica o processo de formulao do RAG do ano Envolve

anterior, mesmo que ainda no tenha sido aprovado pelo conselho respectivo.
monitorar e avaliar a participao dos vrios atores, a metodologia Busca

adotada, os insumos/subsdios utilizados e o envolvimento dos colegiados de gesto e de participao social. (*) A palavra insumo utilizada no sentido de matria prima, de material bsico. Ou seja: dos principais documentos e fontes utilizados na formulao dos instrumentos do PlanejaSUS.

19

Ministrio da Sade

3.3 Contedo dos instrumentos (mdulo 3)


O mdulo 3 tem como objeto de monitoramento e avaliao o contedo dos instrumentos de planejamento do SUS (PS, PAS e RAG). Focaliza o que explicitam, afirmam, corroboram, abrangem o texto desses instrumentos. O mdulo est tambm estruturado em quatro unidades, conforme detalhado no Quadro 2. Quadro 2 - Detalhamento das unidades que conformam o mdulo 3
Unidade 3-A Focaliza o contedo dos instrumentos de um modo geral, sem especificar o instrumento alvo. Busca captar uma viso de conjunto dos instrumentos, em termos daquilo que esses contedos explicitam, afirmam, corroboram, abrangem. Busca monitorar e avaliar a inter-relao entre os trs instrumentos, considerando que o PS se operacionaliza a partir das PAS e seus resultados se explicitam nos RAG. Busca, ainda, analisar o nvel de adeso dos formuladores s diretrizes de operacionalizao do PlanejaSUS. Questiona quanto a clareza e objetividade do texto. Unidade 3-B Envolve de forma especfica o contedo contemplado no PS vigente na atual gesto. Considera os itens essenciais para o contedo do Plano, conforme apontado nas diretrizes do PlanejaSUS. Busca monitorar e avaliar a atualidade e o foco das informaes que sustentam a anlise da situao de sade e da gesto na esfera respectiva. Focaliza a definio de objetivos, diretrizes, metas. Unidade 3-C Envolve de forma especfica o contedo contemplado na PAS vigente no ano em curso. Considera os itens essenciais para o contedo da PAS, conforme apontado nas diretrizes do PlanejaSUS. Busca monitorar e avaliar a proposio de aes e metas anuais que vo permitir o cumprimento do estabelecido no PS. Focaliza a definio de mecanismos de monitoramento e avaliao. Unidade 3-D
de forma especfica o contedo do RAG do ano anterior, mesmo que Envolve

ainda no tenha sido aprovado pelo Conselho de Sade respectivo, como resultado do conjunto de aes da PAS. Busca monitorar e avaliar aspectos relacionados ao previsto e ao executado em termos fsico, oramentrio e financeiro, bem como incluso de anlise de impacto e de recomendaes e outras informaes relativas aos Termos de Compromisso de Gesto (Portaria n 3.176/2008).

20

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

3.4 Uso dos instrumentos (mdulo 4)


O mdulo 4 refere-se ao monitoramento e avaliao do uso/aplicao dos instrumentos de planejamento, seja como referncias seja como orientadores da deciso e da formulao de outros instrumentos na respectiva esfera de gesto. O mdulo compreende tambm aspectos relativos ao monitoramento e avaliao do PS e das PAS.

21

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

4 Implementao do processo
4.1 Deciso e formalizao do processo (1 momento)
Ao decidir por realizar o monitoramento e avaliao aqui proposto, o responsvel pelo planejamento na respectiva esfera de gesto do SUS, dever, inicialmente, definir como o processo ser desenvolvido. Para coordenar e conduzir o processo, pode ser instituda uma comisso interna e permanente de monitoramento e avaliao, liderada pela rea/setor de planejamento, onde houver e, em caso contrrio, pela atribuio destas responsabilidades a uma pessoa ou setor. Caso seja criada a comisso interna e permanente, desejvel a sua formalizao, assim como processo a ser desenvolvido, por meio de portaria do gestor. A formalizao de uma comisso permanente pode ser estratgia indutora da continuidade e manuteno de processos de monitoramento e avaliao no mbito do planejamento, podendo-se estabelecer um perodo de exerccio para renovao dos seus integrantes. Alguns momentos de monitoramento e avaliao podem ser estabelecidos, com o objetivo de garantir uma periodicidade ao processo, como por exemplo: a) aps a aprovao do PS, elaborado no primeiro ano de governo, poder ser previsto um momento de avaliao, incluindo o monitoramento da PAS em operacionalizao naquele ano e do RAG do ano anterior; b) nos quatro anos de vigncia do PS, podem ser definidos momentos de monitoramento da PAS em operacionalizao e dos RAG no perodo.

4.2 Definio do processo (2 momento)


Definida a realizao dodo processo, responsveis devero a realizao processo, os os responsveis devero 23

Ministrio da Sade

estabelecer alguns aspectos fundamentais:fundamentais: (i) a ser adotada; (ii) estabelecer alguns aspectos (i) a metodologia a metodologia a ser adotada; (ii) amonitoramento do avaliao; (iii) os envolvidos; (iii) os a abrangncia do abrangncia e monitoramento e avaliao; (iv) envolvidos; (iv) osavaliados; e (v) a periodicidade. a periodicidade. mdulos a serem mdulos a serem avaliados; e (v) O monitoramento e avaliao propostos tm como perspectiva envolver todos que participaram do processo de formulao dos instrumentos do PlanejaSUS e que lidam com estes instrumentos no dia-a-dia. O PS, a PAS e a RAG devem ser ferramentas de trabalho e referencial para todos os setores no mbito da esfera de gesto. Entretanto, as condies operacionais e logsticas determinaro a abrangncia do monitoramento e avaliao: (i) um setor ou vrios setores da respectiva esfera de gesto; (ii) uma amostra ou o universo dos envolvidos no processo; (iii) atores de outras esferas de gesto do SUS envolvidos com o(s) processo(s). Dependendo tambm dessas condies operacionais e logsticas, o monitoramento e avaliao podero ser feitos mediante: a) envio do instrumento de monitoramento e avaliao impresso, envio do instrumento de monitoramento acompanhado de uma correspondncia explicativa e orientadora, bem como do manual de instrues paro o preenchimento e prazo para devoluo; b) disponibilizao do instrumento em meio magntico, onde houver condies, com mobilizao dos participantes, explicitando e orientando sobre o monitoramento e avaliao, colocando disposio um tira-dvidas (help desk) e estabelecendo prazos para devoluo; c) promoo de um evento especfico com o pblico definido e, na promoo de um evento especfico com o pblico definido e, ocasio, aplicao do instrumento de monitoramento e avaliao. na ocasio, aplicao do instrumento de monitoramento e avaliao. Os instrumentos do PlanejaSUS, conforme j referido, podem ser monitorados ou avaliados em conjunto. Do mesmo modo, podem ser feitos monitoramentos e avaliaes de um instrumento especfico, utilizando os mdulos isoladamente.

4.3 Consolidao e sistematizao dos dados


A comisso de monitoramento e avaliao responsvel pela consolidao dos dados coletados e pela sistematizao dos resultados em relatrio, em que estaro apontadas as medidas e ajustes propostos.

24

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

Devero ser criadas as condies e realizado o acompanhamento devido do processo, tendo em vista a devoluo do mximo possvel de instrumentos, definindo, igualmente, as condies para viabilizar a consolidao conforme sugerido no tpico 5.7. Definir, tambm, um fluxo da informao consolidada, a partir de anlise sobre os atores que devero tomar conhecimento dos resultados encontrados, alm do estabelecimento de como ser devolvida a informao sistematizada aos participantes do processo.

25

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

5 Aplicao do instrumento
O instrumento de monitoramento e avaliao, como j destacado, composto por quatro mdulos, sendo que o dois e o trs esto integrados por unidades. Em cada mdulo ou unidade do mdulo, o avaliador analisa cada tpico de avaliao e seleciona uma, entre as trs alternativas apresentadas: sim, em parte e no. Essa escolha exigir do avaliador anlise e reflexo crtica, a partir da experincia vivenciada com o objeto do monitoramento e avaliao, abrangendo: planejamento como um todo; a) ooplanejamento como um todo; formulao dos instrumentos de planejamento; b) aaformulao dos instrumentos de planejamento; c) oo contedo dos instrumentos de planejamento; contedo dos instrumentos de planejamento; d) oo uso desses instrumentos no dia-a-dia da gesto e do Sistema. uso desses instrumentos no dia-a-dia da gesto e do Sistema.

5.1 Seleo da alternativa sim


Ao selecionar sim, o avaliador dever atribuir um valor ao resultado da sua anlise, aplicando pontuao 1, 2 ou 3. Essa pontuao a forma de expressar o nvel de satisfao com o que est representado na questo objeto de avaliao. A guisa de parmetro para orientar o avaliador, entende-se que, ao atribuir a pontuao 3, ele considera, a partir da sua percepo, que o que est representado (descrito) na questo ocorreu de forma plenamente satisfatria. Ao atribuir a pontuao 2, significa que aquela questo avaliada ocorreu de forma parcialmente satisfatria. Ao pontuar com 1, a sua percepo de que a questo objeto de monitoramento e avaliao efetivouse de forma bem pouco satisfatria. A categorizao do nvel de satisfao, expresso pelo avaliador, em plenamente satisfatrio, parcialmente satisfatrio e bem pouco plenamente satisfatrio, parcialmente satisfatrio e bem pouco 27

Ministrio da Sade

satisfatrio, ser um importante qualificador da opinio/percepo sobre o satisfatrio, ser um importante qualificador da opinio/percepo sobre o instrumentos do PlanejaSUS, sobre o contedo e processo de formulao dos processo de formulao dos instrumentos do PlanejaSUS, sobre o contedo e sobremesmo dos mesmos, permitindo, do sobre o uso dos mesmos, permitindo, do o uso modo, identificar os aspectos mesmo mereceridentificar os aspectos que vo merecer prioridadepelo que vo modo, prioridade de interveno por parte dos responsveis de interveno por parte dos responsveis pelo processo de planejamento. processo de planejamento. Figura 2 - Diagrama representativo da alternativa SIM

SIM
pontuao/percepo

1 2 3

Plenamente satisfatrio Parcialmente satisfatrio Bem pouco satisfatrio

Exemplo: se, ao proceder o monitoramento e avaliao do tpico, A gesto estadual adotou iniciativas para sensibilizao dos gestores tendo em vista a incorporao do planejamento como instrumento estratgico de gesto do SUS o avaliador selecionar como alternativa de resposta o sim e pontuar com: a) 3, estar considerando que o trabalho desenvolvido com esse 3, estar considerando que o trabalho desenvolvido com objetivo foi plenamente satisfatrio pelapela consistncia, abrangncia, por esse objetivo foi plenamente satisfatrio consistncia, abrangncia, por ter utilizado estratgias fortes, conseguido resultados positivos e concretos; ter utilizado estratgias fortes, conseguido resultados positivos e concretos; b) 2 estar considerando que o trabalho desenvolvido foi parcialmente satisfatrio, apresentando resultados medianos, houve participao, mas as contribuies foram pfias, a metodologia de trabalho no empolgou, no envolveu, ocorreu descontinuidade; 28

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

c) 1 estar considerando que o trabalho desenvolvido foi bem 1 estar considerando que o trabalho pouco satisfatrio, vez que as iniciativas adotadas no alcanaram os resultados esperados, foi baixa a adeso, o retorno e o envolvimento foram insuficientes.

5.2 Seleo da alternativa no ou em parte


Ao selecionar uma das alternativas no ou em parte, o avaliador dever apontar uma justificativa para esta escolha. Essa justificativa estar baseada na natureza das razes que, segundo a opinio/percepo do avaliador, fizeram com que a questo monitorada ou avaliada no ocorresse (no acontecesse/ou no se efetivasse) ou ocorresse (acontecesse/se efetivasse) em parte. A categorizao dessas justificativas (razes) considerou, tambm, a exclusividade de uma ou outra, ou a soma de duas ou mais das justificativas apontadas. Para facilitar o registro dessa categorizao, foram estabelecidas convenes como descritas na sequncia. Quando razes forem devidas exclusivamente a questes a) Quando asas razes forem devidas exclusivamente a tcnicas, tcnicas, utilizar como conveno EQT. questes utilizar como conveno EQT. Quando razes forem devidas exclusivamente a questes b) Quando asas razes forem devidas exclusivamente a operacionais e de infra-estrutura, utilizar como conveno EQO. questes operacionais e de infra-estrutura, utilizar como conveno EQO. Quando razes forem devidas exclusivamente a questes c) Quando as as razes forem devidas exclusivamente a polticas, polticas, utilizar como conveno EQP. questes utilizar como conveno EQP. Quando razes forem devidas exclusivamente a questes d) Quando asas razes forem devidas exclusivamente a relacionadas a comportamentos e percepes das equipes equipes questes relacionadas a comportamentos e percepes dase/ou dos profissionais, utilizar como conveno EQC. e/ou dos profissionais, utilizar como conveno EQC. Nas situaes em que a justificativa para no e em parte envolver mais de uma razo, ou seja, quando no for exclusiva, quando no resultar de apenas uma causa, ser considerada a agregao de at duas categorias. Em funo disso, cabem seis arranjos de categorias: (i) EQT + EQO; (ii) EQT + EQP; (iii) EQT + EQC; (iv) EQO + EQP; (v) EQO + EQC; e (vi) EQP + EQC. Perfazem, ao somar com as exclusivas, um total de 10 categorias de justificativas.

29

Ministrio da Sade

Figura 3 - Diagrama representativo das convenes utilizadas para justificar as alternativas NO e EM PARTE

NO / EM PARTE
justificativa/percepo
Exclusivamente questes tcnicas Exclusivamente questes operacionais Exclusivamente questes polticas Exclusivamente questes comportamentais Agregao de at duas justificativas

EQT EQO EQP EQC ++

Para ilustrar o entendimento do que est sendo considerado como questes de ordem tcnica (QT), pode-se referir, por exemplo: a falta de capacitao; o despreparo das equipes; a insuficincia de profissionais; a baixa capacidade de mobilizao; a inexistncia de metodologias ou instrumentos; a baixa disseminao de referencial terico; entre outras. Como exemplo de questes de natureza operacional e de infraestrutura (QO), tem-se: a falta de transporte; o no cumprimento de prazos; a existncia de processos administrativos morosos ou incorretos; o espao fsico inadequado; os equipamentos defasados; o acesso insatisfatrio internet; entre outros. J as relacionadas a justificativas de natureza poltica (QP) podem ser exemplificadas como: a falta de apoio do gestor ao processo de planejamento; a dificuldade de acesso pauta de colegiados estadual e regional ou pauta do Conselho de Sade respectivo; a falta de apoio ao 30

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

encaminhar instrumentos para apreciao nessas instncias; a falta de apoio dos dirigentes de escales superiores; a falta de incentivo participao das equipes no processo; o no referenciamento dos instrumentos de planejamento na fala e nos documentos e propostas; entre outros. No tocante s razes que consideram justificativas ligadas ao comportamento e/ou percepo das equipes (QC), pode-se traduzir, por exemplo, pelo desinteresse; descompromisso; desestmulo; falta de viso do processo; viso do planejamento como perda de tempo; experincia pessoal negativa com o planejamento; insuficiente participao nos processos de formulao; entre outros.

5.3 Definio da mdia da pontuao atribuda alternativa sim


Aps a anlise de cada tpico do mdulo ou da unidade do mdulo, solicitado do avaliador a realizao do clculo da mdia da pontuao atribuda alternativa sim (entre 1, 2 e 3), conforme orientado no tpico 4.1. um procedimento relativamente simples quando o instrumento trabalhado em meio magntico, uma vez que a planilha Excel faz a soma automtica das pontuaes atribudas. O avaliador clica na clula que corresponde pontuao mdia e substitui o X da frmula pelo nmero de vezes em que foi selecionada a alternativa sim. Nessas condies, a mdia calculada em cada mdulo ou unidade de mdulo transferida automaticamente para a sntese da avaliao parte 1, no final do instrumento de monitoramento e avaliao. Quando for utilizada a verso impressa do instrumento, o avaliador ter que proceder a algumas operaes, seguindo as orientaes contidas no anexo deste Caderno, que apresenta o instrumento de avaliao para ser utilizado como impresso, com orientaes sobre o uso do formulrio. Aps a obteno da mdia da pontuao atribuda alternativa sim, em cada mdulo ou unidade de mdulo, solicitado do avaliador um comentrio sobre a mdia encontrada. mais uma oportunidade de reflexo sobre o monitoramento e avaliao dos tpicos daquele mdulo ou unidade de mdulo, a partir da anlise do que representa a mdia encontrada e se a mesma explicita a realidade do que est sendo monitorado ou avaliado. , do 31

Ministrio da Sade

mesmo modo, mais uma oportunidade para o avaliador retomar a anlise feita, repensar a resposta dada e, se for o caso, modificar a escolha anterior. o caso, por exemplo, da obteno da mdia mxima (3) e/ou de mdias que se aproximam da mxima. Isso significa que o avaliador atribuiu pontuaes altas aos tpicos de monitoramento e avaliao, considerando, assim, que a situao (ou a ao ou o processo) objeto da anlise foi (vem sendo ou ) determinante para o xito e os avanos ou tem uma influncia extremamente positiva no processo de planejamento na respectiva esfera de gesto. Num outro caso, colocado em outro extremo, a mdia resultante poderia ser a mais baixa (1) ou prxima desta. Tal ocorrncia pode significar uma viso negativa, pessimista, do processo como um todo ou, de acordo com a percepo do avaliador, as realizaes, as iniciativas e os resultados no representam avano algum no processo de planejamento. Evidencia, assim, a necessidade de olhar de forma crtica a anlise e seus resultados, revendo-os sempre que necessrio. Ou seja: retomar a reflexo, reanalisar conceitos e percepes, permitindo que se estabelea uma relao dinmica, de idas e vindas, entre o objeto de monitoramento e avaliao e a percepo do avaliador, seu conhecimento, experincia e vivncia com este objeto.

5.4 Consolidao das justificativas (alternativas no e em parte)


Tambm solicitado do avaliador que, depois da anlise de cada tpico do mdulo ou da unidade do mdulo, seja procedida a consolidao parcial das justificativas para a alternativa no e em parte. Ao lado de cada bloco de mdulo ou unidade de mdulo, h uma coluna para fazer o consolidado da avaliao parcial.

5.5 Identificao de dificuldades e medidas de superao


Aps o clculo da mdia para a alternativa sim e a consolidao das justificativas para as alternativas no e em parte, solicitado um indicativo de problemas, dificuldades ou fragilidades relativas ao mdulo ou unidade de mdulo em monitoramento ou avaliao, que tm relao com a avaliao por ele procedida. 32

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

Para cada indicao, solicitado o registro de medida, ao ou estratgia adotada, com a orientao de que seja registrado tambm o encaminhamento dado. Para tanto, o avaliador utiliza a seguinte conveno: (i) a letra E para medida j efetivada; (ii) as letras EE para o que est em execuo; e (iii) AE para as ainda no encaminhadas. Estimula-se, com isso, mais uma oportunidade de reflexo no sentido da identificao dos fatores que impediram maiores ou melhores avanos ou, de outro modo, de contribuio para definir o que deve ser feito com vistas a superar o problema ou dificuldade identificada. O registro da medida, ao ou estratgia deve ser feito de forma clara, sinttica e objetiva, observando, inclusive, a viabilidade e exequibilidade, no caso de proposta a ser implementada. Solicita-se tambm do avaliador que evite repetir a cada mdulo ou unidade de mdulo os mesmos problemas/dificuldades e medidas j referidos.

5.6 Definio da sntese do monitoramento e avaliao


Para finalizar, conforme j referido, tem-se a sntese do monitoramento ou avaliao, composta por duas partes relacionadas: (i) mdia alcanada pela pontuao (valorao), atribuda alternativa sim (sntese da avaliao parte 1); e (ii) proporo das categorias das justificativas apontadas para a seleo das alternativas no e em parte (sntese do monitoramento ou avaliao parte 2). a) Sntese do monitoramento ou avaliao parte 1 A primeira sntese destina-se a consolidar as mdias parciais e global relativas pontuao atribuda alternativa sim. Como j ressaltado, se o monitoramento ou avaliao est sendo feita em meio magntico, as mdias obtidas em cada mdulo ou unidade de mdulo foram transferidas para cada uma das clulas. Assim, a mdia global calculada automaticamente. Caso contrrio, quando o monitoramento ou avaliao estiver sendo feita em material impresso, o registro da mdia ser feito pelo prprio monitorado ou avaliado. Ele tambm ter que fazer o clculo da mdia global, seguindo as orientaes contidas no anexo deste Caderno, que apresenta o instrumento de monitoramento ou avaliao para ser utilizado como impresso, com orientaes sobre o uso do formulrio. 33

Ministrio da Sade

Feito o clculo, solicitado do avaliador que comente sobre a mdia global obtida. Repete-se aqui os mesmos comentrios do item 4.3. Ou seja: mais uma oportunidade de reflexo sobre o monitoramento ou avaliao realizada, a partir da anlise do que representa a mdia global encontrada e se ela explicita a realidade do processo de construo no mbito do PlanejaSUS na esfera respectiva. , do mesmo modo, mais uma oportunidade para o avaliador retomar a anlise j feita, repens-la e, se for o caso, modificar a escolha anterior. Como se considera que mais uma oportunidade de reflexo e, se for o caso, de retomada da anlise feita ou de rever a resposta dada, se, por exemplo, a mdia obtida foi a mxima (3) ou prxima da mxima, importante que o avaliador reflita sobre o fato de que deve ter atribudo pontuaes altas aos mdulos ou unidades de mdulo. Tal ocorrncia significa que, na sua percepo, o processo de planejamento e seus produtos (PS, PAS e RAG) so iniciativas bem sucedidas, representam avanos, tm qualidade, influenciam e determinam o processo de gesto. Num outro extremo, quando a mdia resultante mais baixa (1) ou prxima desta, pode significar uma viso negativa, pessimista, do processo como um todo ou, de acordo com a percepo do avaliador, as realizaes, as iniciativas e os resultados no representaram avano algum no processo de planejamento. Refora-se, assim, a essncia do processo aqui proposto, calcado na viso crtica que deve permear o monitoramento ou avaliao e seus resultados, numa sistemtica de reviso e de retomada, em que se estabelece uma relao dinmica, de idas e vindas, entre o objeto do monitoramento ou avaliao e a percepo do avaliador, seu conhecimento, experincia e vivncia com este objeto. A mdia global e as parciais so sinalizadores para o responsvel pelo planejamento e para o gestor, no sentido de alertar sobre aspectos do trabalho que precisam ser revistos e aperfeioados, inclusive em termos da percepo, da sensibilidade e da capacidade crtica dos atores envolvidos quanto ao planejamento e aos processos que vm sendo estabelecidos com esta finalidade no mbito da esfera de gesto. Isso aponta a necessidade de investimentos nas perspectivas identificadas.

34

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

b) Sntese do monitoramento ou avaliao parte 2 A sistematizao para as justificativas no e em parte feita na parte 2 da sntese do monitoramento ou avaliao no final do instrumento. Nessa parte, so consideradas as convenes selecionadas, correspondendo as justificativas, de forma isolada ou em agrupamento de at duas. A idia obter a proporo com que as questes de ordem tcnica, operacional, poltica, comportamental foram apontadas como causas para uma percepo mais ou menos satisfatria do objeto de monitoramento ou avaliao. Para facilitar a sntese final, o avaliador faz consolidaes parciais das justificativas para cada mdulo ou unidade de mdulo, como j referido no tpico 5.4, a partir da soma dos eventos conforme orientado. Caso o monitoramento ou avaliao seja feita em meio magntico, a soma parcial de cada evento transferida automaticamente para a totalizao na coluna ao lado da parte 2 da sntese. Para obter a proporo global, o avaliador monta a frmula na clula correspondente, conforme orientado na planilha Excel, da seguinte forma: (i) coloca o sinal de igualdade; (ii) coloca o quantitativo que corresponde categoria ou grupo de categorias da justificativa para no e em parte; (iii) coloca o asterisco (*), que o sinal de multiplicao; (iv) coloca o nmero 100; (v) coloca a barra (/) que o sinal de diviso; (vi) coloca o nmero de respostas no e em parte que aparece na 1 clula da totalizao; e (vii) clica na tecla enter, e aparecer o percentual correspondente quela categoria ou grupo de categorias. No caso em que o monitoramento ou avaliao estiver sendo feita em material impresso, o avaliador ter que fazer o clculo da proporo. Para tanto, deve seguir as orientaes contidas no anexo deste Caderno. Ali apresentado o instrumento de monitoramento e avaliao para ser utilizado dessa forma, com orientaes sobre o uso do formulrio. Para finalizar, solicitado do avaliador comentrios sobre os resultados alcanados, destacando os maiores ou menores ndices, apontando razes e argumentos para essa realidade, bem como sobre as medidas j adotadas para superar as questes apontadas, as que esto em andamento e as previstas para implementar.

35

Ministrio da Sade

5.7 Definio de consolidado


Preenchido o instrumento, o avaliador encaminha para a rea/setor de planejamento que responsvel e coordena este processo, conforme orientado no tpico 4.3. De posse do conjunto de informaes, o responsvel pela rea/setor de planejamento faz a consolidao geral das informaes obtidas, podendo-se destacar como possveis snteses: a) a mdia parcial, para cada mdulo ou unidade de mdulo, e a a mdia parcial, para cada mdulo ou mdia global da pontuao atribuda alternativa sim, mostrando o nvel de satisfao dos envolvidos com o processo de construo, com o contedo e com o uso que vem sendo dado aos instrumentos do PlanejaSUS, bem como sobre o processo de planejamento na respectiva esfera, de uma forma bem geral; b) a proporo com que cada categoria, isolada ou em conjunto, a proporo com que cada categoria, isolada conjunto, influencia na seleo da alternativa no e e em parte, mostrandoinfluncia de influencia na seleo da alternativa no em parte, mostrando a a influncia diferentes questes no processo de construo, no contedo explicitado e de diferentes questes no processo de construo, no contedo no uso que vem sendo dado aos instrumentos, bem como sobre o processo de explicitado e no uso que vem sendo dado aos instrumentos, bem como sobre planejamento na respectiva esfera, de uma forma bem geral; o processo de planejamento na respectiva esfera, de uma forma bem geral; c) uma listagem de problemas, dificuldades e fragilidades uma oriundas de diferentes atores e diferentes origens (dependendo da abrangncia da avaliao), possibilitando um diagnstico amplo da situao em que se insere o planejamento na respectiva esfera; d) uma listagem de medidas, aes ou estratgias de superao uma listagem de medidas, aes ou relacionadas aos problemas, dificuldades e fragilidades apontadas, com indicaes para o responsvel pelo planejamento de sugestes e possibilidades de intervenes a serem consideradas no processo de planejamento, monitoramento e avaliao da rea. Acresce-se ainda a oferta de um levantamento sobre a percepo dos avaliadores quanto ao fato de essas iniciativas j terem sido implementadas, se esto em andamento ou se so questes futuras. Poder fazer, ainda, um consolidado dos comentrios feitos pelos participantes do processo aps o monitoramento e/ou avaliao de cada mdulo e unidade de mdulo. Com esse consolidado, poder obter um recorte bastante amplo e abrangente de como os avaliadores percebem a funo planejamento, apontando, a partir de uma anlise, necessidades diferenciadas de interveno, de maneira a contribuir significativamente para a 36

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

construo/consolidao da cultura do planejamento na respectiva esfera de gesto, bem como para a resolubilidade e qualidade da gesto e da ateno sade.

37

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

Referncias
BRASIL. Ministrio da Sade; ORGANIZAO PAN-AMERICANA DA SADE. Sistema de Planejamento do SUS (PlanejaSUS): uma construo coletiva: trajetria e orientaes de operacionalizao. Braslia: Ministrio da Sade, 2009. 318 p. (Srie B. Textos Bsicos de Sade). ______. Ministrio da Sade. Secretaria Executiva de Sade. Departamento de Apoio Descentralizao. Diretrizes Operacionais: Pactos pela Vida, em Defesa do SUS e de Gesto. (Srie A. Normas e Manuais Tcnicos); (Srie Pactos pela Sade, v. 1). CONTANDRIOPOULOS, A. P. A avaliao na rea da sade: conceitos e mtodos. In: HARTZ, Z. M. A. (Org.). Avaliao em sade: dos modelos conceituais prtica na anlise da implantao de programas. Rio de Janeiro: Fiocruz, 1997. p. 29-48. DESLANDES, S. F. Concepes em pesquisa social: articulaes com o campo da avaliao em servios de sade. Cadernos de Sade Pblica, Rio de Janeiro, v. 13, n. 1, p. 103-107, jan./mar. 1997. FELISBERTO, E. Da teoria formulao de uma Poltica Nacional de Avaliao em Sade: reabrindo o debate. Cincia e Sade Coletiva, Rio de Janeiro, v. 11, n. 3, p. 553-563, 2006. FURTADO, J. P. Um mtodo construtivista para a avaliao em Sade. Cincia e Sade Coletiva, Rio de Janeiro, v. 6, n. 1, p. 165-181, 2001. HARTZ, Z. M. A. Avaliao dos programas de sade: perspectivas terico metodolgicas e polticas institucionais. Cincia e Sade Coletiva, Rio de Janeiro, v. 4, n. 2, p. 341-353, 1999. NEVES, J. L. Pesquisa qualitativa: caractersticas, usos e possibilidades. Cadernos de Pesquisas em Administrao, So Paulo, v. 1, n. 3, 1996. RIVERA, F. J. U. A gesto situacional (em sade) e a organizao comunicante. Cadernos de Sade Pblica, Rio de Janeiro, v. 12, n. 3, p. 357-372, jul./set. 1996. 39

Ministrio da Sade

SILVA, L. M. V.; FOMIGLI, V. L. A. Avaliao em sade: limites e perspectivas. Cadernos de Sade Pblica, Rio de Janeiro, v. 10, n. 1, p. 8091, jan./mar. 1994. TANAKA, O. Y.; MELO, C. Reflexes sobre a avaliao em servios de sade e a adoo das abordagens qualitativa e quantitativa. In: BOSI, M. L. M.; MERCADO, F. J. (Org.). Pesquisa qualitativa de servios de sade. Petrpolis: Vozes, 2004. p. 121-136. TANCREDI, F. B. Planejamento Sade. In: TANCREDI, F. B.; BARRIOS, S. R. L.; FERREIRA, J. H. G. Sade e cidadania para gestores municipais de servios de sade. So Paulo: Faculdade de Sade Pblica da Universidade de So Paulo, 1998. (Coleo Sade e Cidadania, v. 2). Disponvel em: <http://bases.bireme.br/bvs/sp/P/pdf/saudcid/Volume02.pdf>. Acesso em: 22 jan. 2009. UCHIMURA, K. Y.; BOSI, M. L. M. Qualidade e subjetividade na avaliao de programas e servios em sade. Caderno de Sade Pblica, Rio de Janeiro, v. 18, n. 6, p. 1561-1569, nov./dez. 2002.

40

Anexo Instrumento para o monitoramento e avaliao do processo de formulao, do contedo e do uso dos instrumentos do PlanejaSUS

42

Orientaes bsicas

(1) Este instrumento de monitoramento e avaliao auto-explicativo (leia as orientaes bsicas e orientaes especficas ao fim de cada mdulo ou unidade de mdulo). Para utiliz-lo importante que voc tenha lido o Caderno 8: Monitoramento e avaliao do processo de formulao, do contedo e do uso dos instrumentos do PlanejaSUS.

(2) O formulrio integrado por 4 mdulos.

Ministrio da Sade

a) Mdulo 1: o processo de planejamento de um modo geral na esfera de gesto;

b) Mdulo 2: o processo de formulao do PS, da PAS e do RAG;

c) Mdulo 3: o contedo do PS, da PAS e do RAG; e

d) Mdulo 4: o uso do PS, das PAS e do RAG, incluindo o monitoramento e a avaliao de processos e de resultados

Os mdulos dois e trs so compostos por unidades.

Cada mdulo ou unidade de mdulo composto por tpicos de avaliao.

(3) Leia inicialmente todo o instrumento de avaliao.

(4) Depois inicie o preenchimento registrando as informaes relativas data de incio desse processo e ao (s) grupo (s) do (s) qual (is) voc faz parte, bem como sobre a estratgia adotada para a realizao do monitoramento e avaliao.

(5) V, em seguida, para o MDULO 1 e, na sequncia, aos demais mdulos, procedendo conforme orientado a seguir.

(6) Leia e analise cada tpico e selecione uma entre as trs alternativas: SIM, NO ou EM PARTE.

(7) Ao selecionar SIM, atribua um valor ao resultado da sua anlise, aplicando pontuao 1, 2 ou 3, como forma de expressar o seu nvel de satisfao com a questo objeto de monitoramento e avaliao (realidade, situao, ao, servio, produto, resultado):

a) ao pontuar com 3, o avaliador considera, a partir da sua percepo, se o que est representado (descrito) na questo ocorreu de forma plenamente satisfatria;

b) ao atribuir 2, significa que aquela questo ocorreu de forma parcialmente satisfatria;

c) ao pontuar com 1, significa que a questo objeto de monitoramento ou avaliao efetivou-se de forma bem pouco satisfatria.

(8) Para as alternativas NO ou EM PARTE, aponte uma justificativa (conforme explicado a seguir) que considere a sua percepo quanto natureza das questes que fizeram com que o tpico analisado recebesse uma aprovao parcial ou no fosse aprovado.

(9) Para justificar as alternativas NO ou EM PARTE, considere as seguintes convenes:

a) exclusivamente a questes tcnicas, utilizar como conveno EQT;

b) exclusivamente a questes operacionais e de infra-estrutura, utilizar como conveno EQO;

c) exclusivamente a questes polticas, utilizar como conveno EQP;

d) exclusivamente a questes relacionadas a comportamentos e percepes das equipes e/ou dos profissionais, utilizar EQC.

Nas situaes em que a justificativa para NO ou EM PARTE no for exclusiva, considera-se como vivel a associao de at duas justificativas, possibilitando a formao de mais sete categorias: (i) EQT + EQO; (ii) EQT + EQP; (iii) EQT + EQC; (iv) EQO + EQP; (v) EQO + EQC; e (vi) EQP + EQC. Perfazendo um total de 10 categorias de justificativas.

(10) Terminada o monitoramento ou avaliao do mdulo ou da unidade de mdulo, calcule a mdia aritmtica da pontuao atribuda s alternativas 'SIM'. Comente a mdia obtida, conforme indicado. Transfira o valor da mdia para o espao correspondente na parte 1 da SNTESE DO MONITORAMENTO OU AVALIAO.

(11) Faa tambm a soma das justificativas atribudas s alternativas 'em parte' e 'no', utilizando a coluna ao lado de cada mdulo ou unidade de mdulo, somando os eventos ocorridos. A soma de cada evento ser adicionada soma do mesmo evento de cada mdulo ou unidade de mdulos, na parte 2 da SNTESE DO MONITORAMENTO OU AVALIAO.

(12) Em seguida, aponte para o mdulo ou a unidade de mdulo que voc analisou os problemas e dificuldades mais relevantes e respectivas medidas adotadas para superao dos mesmos. Ao registrar, indique para cada medida, conforme orientao, a conveno 'E' caso j tenha sido efetivada; a conveno EE se estiver em execuo; e com AE se for a executar.

(13) No final do instrumento, no tpico SINTESE DO MONITORAMENTO OU AVALIAO, verifique a mdia global obtida a partir das mdias alcanadas pela pontuao atribuda opo 'sim' nos vrios mdulos/unidades de avaliao. Voc j deve ter transferido a mdia obtida em cada mdulo ou unidade de mdulo conforme orientado anteriormente no tpico 10. Calcule a mdia aritmtica das 10 mdias parciais, obtendo assim a mdia global. Analise a mdia alcanada e faa comentrios e observaes no espao indicado.

(14) Por ltimo, ainda no tpico SNTESE DO MONITORAMENTO OU AVALIAO, calcule a proporo alcanada pelas questes apontadas nas justificativas para 'NO' e 'EM PARTE'. Voc deve colocar no espao correspondente a proporo que foi calculada, a partir da soma das categorias da mesma espcie de cada mdulo ou unidade de mdulo, conforme orientado anteriormente no tpico 11. Conclua comentando sobre os percentuais alcanados e sobre o que vem pesando mais.

Ateno! Ao longo do formulrio, voc encontra nmeros entre parnteses referentes a orientaes especficas descritas no final do formulrio.

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

43

44

DATA DO MONITORAMENTO OU AVALIAO:____/_____/______

Identifique o grupo ao qual voc pertence (pode assinalar mais de um):

) integrante da equipe de planejamento do rgo gestor da esfera respectiva;

) integrante das equipes tcnicas das chamadas 'reas finalsticas';

Ministrio da Sade

) integrante do Conselho de Sade da esfera respectiva;

) integrante do colegiado de gesto (estadual, regional, municipal);

) integrante de equipe de sade (atua na rede de servios);

) assessor tcnico (presta assessoria gesto estadual ou municipal);

) servidor pblico;

) prestador de servios (sem vnculo empregatcio);

) ocupante de cargo de confiana.

Qual a estratgia adotada pela rea/setor de planejamento para realizar o monitoramento ou avaliao? (faa uma sntese)

Quem esteve diretamente envolvido? (cite os principais)

Quais as dificuldades para efetivar o processo? (cite as principais)

MDULO 1: O processo de planejamento desenvolvido na esfera de gesto (1)


SIM (3) Eventos Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10) Soma dos eventos

Tpicos de monitoramento e avaliao (2)

A esfera de gesto est inserida no Sistema de Planejamento do SUS (PlanejaSUS)?

O incentivo financeiro especfico para implementao do PlanejaSUS vem servindo de suporte para a atuao da rea/setor de planejamento?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais das atividades so contempladas com o incentivo: ( ) treinamentos/capacitaes; ( ) seminrios e/ou reunies tcnicas; ( ) contratao de servios; ( ) produo de materiais tcnicos/instrucionais e de divulgao .

N respostas 'no' + n respostas 'em parte'

Se voc assinalou trs ou quatro das opes acima, pontue com 3; se assinalou uma ou duas opes, pontue com 2; e se no assinalou nenhuma opo, pontue com 1.

A esfera de gesto adotou iniciativas para estimular o processo de planejamento junto a diferentes atores (municpios, reas tcnicas do rgo gestor; colegiados de gesto, conselhos, sociedade civil etc.)? N EQT

Ateno: SE A SUA RESPOSTA FOR 'SIM', pontue com 3; se voc considerar que os resultados foram bastante positivos, que houve engajamento, pontue com 2; e com 1, se os resultados no foram to satisfatrios. N EQO

A esfera de gesto prestou assessoria tcnica a outras esferas com a finalidade de estimular o processo de planejamento?

A esfera de gesto recebeu assessoria tcnica para o desenvolvimento do seu processo de planejamento?

N EQP

A esfera de gesto utilizou o PlanejaSUS como referncia para o desenvolvimento do processo de planejamento?

Ateno : SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais as referncias utilizadas: ( ) as diretrizes do PlanejaSUS; ( ) a metodologia; ( ) os instrumentos.

N EQC

Se voc assinalou trs das opes acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

Caso a rea/setor de planejamento da esfera de gesto exista formalmente na estrutura organizacional voc considera que ela est bem posicionada nesTa estrutura?

N EQT + EQO

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

45

46
N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC Pontuao mdia para a resposta SIM (8) Medida/ao/estratgia de superao (13)

A rea/setor de planejamento da esfera de gesto vem coordenando o (s) processo (s) de formulao dos instrumentos do PlanejaSUS (PS, PAS e RAG)?

Ateno: Aqui a expresso rea/setor de planejamento refere-se s situaes (i) em que a rea/setor existe formalmente, consta do organograma do rgo gestor; e (ii) s situaes em que a responsabilidade pelo planejamento atribuda a uma pessoa ou a um grupo ou a outra rea tcnica.

Ministrio da Sade

A rea/setor de planejamento da esfera de gesto vem coordenando o (s) processo (s) de monitoramento e avaliao do PS e das PAS?

10

A rea/setor de planejamento da esfera de gesto tem equipe tcnica suficiente para dar conta das suas responsabilidades?

A equipe tcnica da rea/setor de planejamento da esfera de gesto est 11 capacitada para o desempenho de suas funes?

12 A rea/setor de planejamento da esfera de gesto est fortalecida?

A rea/setor de planejamento da esfera de gesto participa e influencia no 13 processo decisrio?

14

A rea/setor de planejamento da esfera de gesto dispe de espao fsico adequado, equipamento (computador, fax, telefone etc.)?

17

A esfera de gesto tem mantido em arquivo os instrumentos de planejamento, especialmente o RAG?

18 A esfera de gesto registra experincia positiva no mbito do planejamento?

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de monitoramento e avaliao do Mdulo 1, problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

MDULO 2: o processo de formulao dos instrumentos do PlanejaSUS (1)

Unidade 2-A: processo de formulao dos instrumentos do PlanejaSUS, de modo geral (1)
SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10)

Tpicos de monitoramento e avaliao (2)

O processo de formulao dos instrumentos do PlanejaSUS (PS, PAS e RAG), de modo geral, tem contribudo para dar direcionalidade ao "que fazer" em termos de aes e servios de sade? Eventos

Soma dos eventos

O processo de formulao dos instrumentos do PlanejaSUS, de modo geral, tem contribudo para fortalecer e consolidar a cultura do planejamento na esfera de gesto respectiva?

N respostas 'no' + n respostas 'em parte' N EQT

O processo de formulao dos instrumentos do PlanejaSUS vem sendo definido formalmente, com publicao de instrumento legal?

Analisando os processos de formulao dos instrumentos do PlanejaSUS, desenvolvidos nos ltimos trs anos, voc afirmaria que tem havido avanos?

Ateno: SE A SUA RESPOSTA FOR 'SIM' para ajudar a refletir e a pontuar, assinale quais dos avanos voc consideraria: ( ) maior participao dos envolvidos; ( ) maior compromisso; ( ) maior apoio poltico; ( ) maior preciso nas propostas; ( ) valorizao dos instrumentos; ( ) textos mais claros; ( ) textos mais objetivos.

N EQO

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

5 Pontuao mdia para a resposta SIM (8)

As falhas, dificuldades e impasses observados no processo de formulao dos instrumentos do PlanejaSUS vm sendo corrigidos ou superados?

N EQP N EQC N EQT + EQO N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

47

48
Medida/ao/estratgia de superao (13)

Comente a mdia obtida (9):

Ministrio da Sade

Aponte, em relao aos tpicos de avaliao do Mdulo 2 Unidade 2-A, problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

Unidade 2-B: processo de formulao do Plano de Sade (PS) (1)

Perodo a que se refere o PS cujo processo de formulao est sendo monitorado ou avaliado: ______

Perodo de durao do processo de formulao do PS: ___/___/___ a ___/___/____

Tpicos de monitoramento e avaliao (2) SIM (3) Eventos Pontuao (4) EM PARTE (5) NO (6) Justificativa (7)

Consolidado (10) Soma dos eventos

O processo de formulao do PS foi realizado no 1 ano do governo?

O monitoramento e a avaliao do PS da gesto anterior serviu de base para a formulao do PS vigente?

N respostas 'no' + n respostas 'em parte' N EQT

O processo de formulao do PS foi participativo, integrou vrios atores?

O processo de formulao do PS adotou uma proposta metodolgica com instrumentos padronizados? N EQO

Ateno: considere a realizao de um trabalho baseado em algo sistematizado, com objetivos definidos, estratgias de ao (reunies, seminrios, oficinas) e cronograma de execuo, com instrumental prprio como planilhas, instrues etc.

No caso da esfera estadual e federal, o processo de formulao do PS foi ascendente, a partir de formulao de planos pelas demais esferas (estados e municpios, dependendo do caso)?

N EQP

O processo de formulao do PS contou com a participao do Conselho de Sade da respectiva esfera?

N EQC

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

49

50
N EQT + EQO N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC Pontuao mdia para a resposta SIM(8) Medida/ao/estratgia de superao (13)

O processo de formulao do PS fez uso dos diferentes insumos disponveis?

Ministrio da Sade

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais dos instrumentos tm sido utilizados: ( ) PPA; ( ) relatrios de conferncias estadual, nacional; ( ) planos regionais e municipais de sade; ( ) relatrios de avaliao do Plano vigente; ( ) relatrios anuais de gesto; ( ) termos de compromisso de gesto; ( ) programas e projetos especficos.

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

As diretrizes, metodologia e instrumentos do PlanejaSUS trouxeram importantes contribuies para o processo de formulao do PS?

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 2 Unidade 2-B, problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

Unidade 2-C: processo de formulao da Programao Anual de Sade (PAS) (1)

A esfera de gesto tem elaborado a PAS? ) 200_ ( ) 200_ ( ) 200_ ( )

) sim

) no

Caso sim, quantas foram elaboradas ao longo dos ltimos quatro anos? A que anos se referem? 200_ (

Caso no, por qu?

Tpicos de monitoramento e avaliao (2) SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7)

Consolidado (10) Eventos Soma dos eventos

O processo de formulao do PAS foi participativo, integrou vrios atores, diferentes setores/reas do rgo gestor da respectiva esfera de gesto?

O processo de formulao das PAS adotou uma proposta metodolgica com instrumentos padronizados?

Ateno: considere a realizao de um trabalho baseado em algo sistematizado, com objetivos definidos, estratgias de ao (reunies, seminrios, oficinas) e cronograma de execuo, com instrumental prprio como planilhas, instrues etc.

N respostas 'no' + n respostas 'em parte'

A formulao da PAS foi baseada num processo de formulao de programaes especficas nas reas/setores do rgo gestor da esfera de gesto respectiva? N EQT

Ateno: reas/setores aqui se refere s reas tcnicas especficas, ncleos, gerncias, diretorias, divises, coordenaes, superintendncias etc.

O processo de formulao da PAS fez uso dos diferentes insumos disponveis?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais dos instrumentos tm sido utilizados: ( ) PPA; ( ) relatrios de conferncias estadual, nacional; ( ) planos regionais e municipais de sade; ( ) relatrios de avaliao do Plano vigente; ( ) relatrios anuais de gesto; ( ) termos de compromisso de gesto; ( ) programas e projetos especficos.

N EQO

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

51

52
N EQP N EQC N EQT + EQO N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC Pontuao mdia para a resposta SIM (8) Medida/ao/estratgia de superao (13)

Ministrio da Sade

As diretrizes, metodologia e instrumentos do PlanejaSUS trouxeram importantes contribuies para o processo de formulao da PAS?

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 2 Unidade 2-C , problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

Unidade 2-D: processo de formulao do Relatrio Anual de Gesto (RAG) (1)


) no ) 200_ ( ) 200_ ( ) 200_ ( )

A esfera de gesto tem elaborado o RAG?

) sim

Caso sim, quantos foram elaborados nos ltimos quatro anos? A que anos se referem? 200_ (

Caso no, por qu?

Tpicos de monitoramento e avaliao (2) SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7)

Consolidado (10) Eventos Soma dos eventos

O processo de formulao do RAG foi participativo, integrou vrios atores, diferentes setores/reas do rgo gestor da respectiva esfera de gesto?

O processo de formulao do RAG foi realizado a partir de relatrios especficos oriundos das reas tcnicas da esfera de gesto, de consultas especficas a estas reas ou em sistema de acompanhamento prprio?

N respostas 'no' + n respostas 'em parte'

O processo de formulao do RAG adotou uma proposta metodolgica com instrumentos padronizados? N EQT

Ateno: considere a realizao de um trabalho baseado em algo sistematizado, com objetivos definidos, estratgias de ao (reunies, seminrios, oficinas) e cronograma de execuo, com instrumental prprio como planilhas, instrues etc.

O processo de formulao do RAG fez uso dos diferentes insumos disponveis?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais dos instrumentos tm sido utilizados: ( ) PPA; ( ) relatrios de conferncias estadual, nacional; ( ) planos regionais e municipais de sade; ( ) relatrios de avaliao do Plano vigente; ( ) relatrios anuais de gesto; ( ) termos de compromisso de gesto; ( ) programas e projetos especficos.

N EQO

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

53

54
N EQP N EQC N EQT + EQO N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC Pontuao mdia para a resposta SIM (8) Medida/ao/estratgia de superao (13)

Ministrio da Sade

O RAG formulado foi apreciado e aprovado pelo Conselho de Sade respectivo?

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 2 Unidade 2-D , problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

MDULO 3: o contedo dos instrumentos do PlanejaSUS (1)

Unidade 3-A: contedo dos instrumentos do PlanejaSUS, de modo geral (1)


SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10)

Tpicos de monitoramento e avaliao (2)

O contedo dos instrumentos do PlanejaSUS, de modo geral, explicitam a Poltica Nacional de Sade expressa na Constituio Federal, nas Leis Orgnicas da Sade e nas polticas especficas? Eventos

Soma dos eventos

O contedo dos instrumentos do PlanejaSUS, de modo geral, contempla os campos da promoo, proteo e recuperao da sade da populao?

N respostas 'no' + n respostas 'em parte'

O contedo dos instrumentos do PlanejaSUS, de modo geral, contempla os princpios da integralidade, universalidade e equidade das aes e servios de sade?

N EQT

No contedo dos instrumentos do PlanejaSUS, est contemplada (e respeitada) a diretriz da direo nica em cada esfera de gesto?

N EQO

O contedo dos instrumentos do PlanejaSUS influencia na definio de polticas especficas?

N EQP

O contedo dos instrumentos do PlanejaSUS, de modo geral, influencia na definio de recursos financeiros?

N EQC

O contedo dos instrumentos do PlanejaSUS, de modo geral, guardam relao entre si?

N EQT + EQO

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

55

56
N EQT + EQP Pontuao mdia para a resposta SIM (8) N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC Medida/ao/estratgia de superao (13)

Ministrio da Sade

Analisando o CONTEDO dos instrumentos do PlanejaSUS, voc afirmaria que tem havido avanos?

Ateno: SE A SUA RESPOSTA FOR 'SIM' para ajudar a refletir e a pontuar, assinale quais dos avanos voc consideraria: ( ) textos mais claros; ( ) textos mais objetivos; ( ) mais abrangentes; ( ) contemplam a promoo, a proteo e a recuperao da sade; ( ) contemplam a integralidade da ateno; ( ) alinhados com diretrizes nacionais; ( ) contemplam a realidade de sade do territrio ao qual se referem; ( ) objetivo e metas alinhados com a realidade de sade e com a viabilidade financeira.

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 3 Unidade 3-A, problemas e dificuldades mais relevantes e respectivas medidas (11)

Problema/dificuldade/fragilidade existente (12)

Unidade 3-B: contedo do Plano de Sade (PS) (1)

Perodo a que se refere o PS cujo processo de formulao est sendo avaliado: ______

Tpicos de monitoramento e avaliao (2) SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7)

Consolidado (10)

Analisando o CONTEDO do PS, voc afirmaria que ele atendeu as orientaes do PlanejaSUS?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais orientaes foram contempladas: ( ) anlise situacional: condies de sade na populao; ( ) anlise situacional: determinantes e condicionantes; ( ) anlise situacional: gesto em sade; ( ) objetivos; ( ) diretrizes; ( ) metas; ( ) indicadores.

Eventos

Soma dos eventos

Se voc assinalou seis ou sete das opes acima, pontue com 3; se assinalou quatro ou cinco opes, pontue com 2; e se assinalou de uma a trs opes; pontue com 1

No contedo do OS, a ANLISE SITUACIONAL sobre as condies de sade da populao contempla os aspectos indicados nas orientaes do PlanejaSUS?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais orientaes foram contempladas: ( ) dados demogrficos; ( ) dados socioeconmicos; ( ) dados epidemiolgicos; ( ) vigilncia epidemiolgica; ( ) ateno bsica; ( ) assistncia ambulatorial especializada; ( ) assistncia hospitalar; ( ) assistncia de urgncia e emergncia; ( ) assistncia farmacutica.

N respostas 'no' + n respostas 'em parte'

Se voc assinalou de sete a nove das opes acima, pontue com 3; se assinalou de quatro a seis opes, pontue com 2; e se assinalou de uma a trs opes, pontue com 1.

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

57

58
N EQT N EQO N EQP N EQC N EQT + EQO N EQT + EQP

No contedo do PS, a ANLISE SITUACIONAL contempla determinantes e condicionantes da situao de sade da populao da forma como orientado no PlanejaSUS?

Ministrio da Sade

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais orientaes foram contempladas: ( ) medidas intersetoriais; ( ) polticas pblicas (meio ambiente, saneamento, educao); ( ) participao de outros setores; ( ) participao da sociedade.

Se voc assinalou quatro das opes acima, pontue com 3; se assinalou duas ou trs opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

No contedo do PS, a ANLISE SITUACIONAL contempla aspectos da gesto em sade da forma como orientado no PlanejaSUS?

Ateno: SE A SUA RESPOSTA FOR 'SIM' para ajudar a refletir e a pontuar, assinale quais orientaes foram contempladas: ( ) planejamento; ( ) descentralizao/regionalizao; ( ) financiamento; ( ) participao social; ( ) gesto do trabalho em sade; ( ) educao em sade; ( ) informao em sade; ( ) infra-estrutura; ( ) termos de compromisso de gesto; ( ) exequibilidade tcnica, financeira e poltica.

Se voc assinalou de oito a 10 das opes acima, pontue com 3; se assinalou de cinco a sete opes, pontue com 2; e se assinalou de uma a quatro opes, pontue com 1.

No contedo do PS, os objetivos esto claros, ou seja, definem o que se deseja alcanar no perodo?

No contedo do PS, os objetivos tm relao com a anlise situacional formulada?

No contedo do PS, os objetivos expressam o que a esfera de gesto pretende fazer acontecer para superar, reduzir, eliminar ou controlar problemas identificados?

No contedo do PS, esto apontadas diretrizes a serem seguidas?

9 N EQT + EQC N EQO + EQP N EQO + EQC

No contedo do PS, as diretrizes a serem seguidas tm relao com a anlise situacional e com os objetivos?

10 No contedo do PS, esto definidas as metas para os 4 anos da gesto?

11

No contedo do PS, as metas definidas para os 4 anos da gesto esto correlacionadas aos indicadores? N EQP + EQC

12

No contedo do PS, as metas definidas para os 4 anos de gesto tm relao com a anlise situacional, com os objetivos e as diretrizes?

O contedo do PS a referncia para a formulao da PAS, de outras 13 programaes e de projetos?

14 O PS foi apreciado e aprovado pelo Conselho de Sade respectivo?

15

O contedo do PS guarda relao com o Termo de Compromisso de Gesto (TCG) respectivo?

16 O contedo do PS guarda relao com as prioridades do Pacto pela Sade?

17 O contedo PS expresso por um texto claro, objetivo, sucinto? Pontuao mdia para a resposta SIM (8)

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 3 Unidade 3-B, problemas e dificuldades mais relevantes e respectivas medidas (11) Medida/ao/estratgia de superao (13)

Problema/dificuldade/fragilidade existente (12)

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

59

60
SIM (3) Eventos Soma dos eventos Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10) N respostas 'no' + n respostas 'em parte' N EQT N EQO N EQP N EQC N EQT + EQO N EQT + EQP

Unidade 3-C: contedo da Programao Anual de Sade (PAS) (1)

Tpicos de monitoramento e avaliao (2)

Ministrio da Sade

O contedo da PAS operacionaliza os objetivos, as diretrizes e as metas do PS?

No contedo da PAS, esto definidas as aes que iro garantir o alcance dos objetivos do PS?

No contedo da PAS, esto definidas as aes que iro garantir o cumprimento das metas do OS?

No contedo da PAS, esto estabelecidas as metas anuais? (manter?)

No contedo da PAS, as metas anuais (ou aes?) estabelecidas tm relao com os objetivos e metas do PS?

No contedo da PAS, esto definidos os recursos oramentrios necessrios ao cumprimento da Programao?

No contedo da PAS esto contempladas demandas especficas?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale quais orientaes foram contempladas: ( ) de reas tcnicas especficas; ( ) de programaes pactuadas; ( ) de polticas especficas.

Se voc assinalou todas as trs opes acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

No contedo da PAS, esto apontados para cada ao respectiva(s) rea(s) responsvel (is)?

9 N EQT + EQC

No contedo da PAS, esto indicadas a(s) parceria(s) estabelecida(s) ou a ser(em) buscada(s)?

No contedo da PAS, esto definidos os mecanismos de monitoramento das 10 aes previstas, ou seja, h uma descrio de como a PAS ser monitorada? (mantm?) N EQO + EQP N EQO + EQC

11

No contedo da PAS, esto definidos os mecanismos de avaliao das aes previstas, ou seja, h uma descrio de como a PAS ser avaliada? (mantm?) N EQP + EQC

O contedo do PAS guarda relao com o Termo de Compromisso de Gesto 12 (TCG) respectivo?

13 O contedo do PAS guarda relao com as prioridades do Pacto pela Sade?

14 O contedo da PAS expresso por um texto claro, objetivo, sucinto? Pontuao mdia para a resposta SIM (8)

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 3 Unidade 3-C, problemas e dificuldades mais relevantes e respectivas medidas (11) Medida/ao/estratgia de superao (13)

Problema/dificuldade/fragilidade existente (12)

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

61

62
SIM (3) Eventos Soma dos eventos Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10) N respostas 'no' + n respostas 'em parte' N EQT N EQO N EQP N EQC N EQT + EQO N EQT + EQP

Unidade 3-D: contedo do Relatrio Anual de Gesto (RAG) (1)

Tpicos de monitoramento e avaliao (2)

Ministrio da Sade

O contedo do RAG expressa os resultados alcanados pelas aes e metas contidos na PAS?

O contedo do RAG expressa os resultados alcanados pelos objetivos e metas contidos no PS?

O contedo do RAG contempla as aes que no estavam includas na PAS, mas cuja realizao se fez necessria?

O contedo do RAG contempla uma anlise dos resultados alcanados, considerando aes programadas e no programadas?

O contedo do RAG contempla uma anlise dos resultados, considerando metas alcanadas e no alcanadas?

O contedo do RAG faz uma correlao entre metas (ou aes?) definidas na PAS, resultados obtidos e recursos utilizados?

O contedo do RAG contempla uma anlise da execuo fsica, oramentria e financeira?

No contedo do RAG, essa anlise permite a verificao da aplicao dos recursos financeiros destinados ao SUS, inclusive a comprovao do percentual aplicado pela esfera de gesto?

9 N EQT + EQC N EQO + EQP N EQO + EQC N EQP + EQC

O contedo do RAG contempla uma anlise dos recursos transferidos fundo-afundo?

10 O contedo do RAG contempla recomendaes para a PAS do ano seguinte?

11 O contedo do RAG contempla recomendaes para eventuais ajustes no PS?

12

O contedo do RAG guarda relao com o Termo de Compromisso de Gesto (TCG) respectivo?

13 O contedo do RAG guarda relao com as prioridades do Pacto pela Sade?

14 O contedo do RAG expresso por um texto claro, objetivo, sucinto? Pontuao mdia para a resposta SIM (8)

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 3 Unidade 3-D, problemas e dificuldades mais relevantes e respectivas medidas (11) Medida/ao/estratgia de superao (13)

Problema/dificuldade/fragilidade existente (12)

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

63

64
SIM (3) Pontuao (4) EM PARTE (5) NO (6) Justificativa (7) Consolidado (10) Eventos Soma dos eventos N respostas 'no' + n respostas 'em parte' N EQT

MDULO 4: O uso dos instrumentos do PlanejaSUS (1)

Tpicos de monitoramento e avaliao (2)

Ministrio da Sade

Os instrumentos do PlanejaSUS da respectiva esfera de gesto (PS, PAS e RAG) tm funcionado como documentos de referncia para os diversos atores do SUS?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontua,r assinale os atores que tm usado esses instrumentos como referncia: ( ) gestor federal; ( ) gestor estadual; ( ) gestores municipais; ( ) comisso intergestores bipartite; ( ) comisses regionais (onde houver); ( ) dirigentes da SES; ( ) equipes tcnicas da SES; ( ) Conselho Estadual de Sade; ( ) Conselhos Municipais de Sade; ( ) outras secretarias/rgos do governo; ( ) rgos de fiscalizao e regulao; ( ) Ministrio da Sade; ( ) formadores de opinio; ( ) meios de comunicao.

Se voc assinalou de sete a quatorze das opes acima, pontue com 3; se assinalou de cinco a sete opes, pontue com 2; e se assinalou de uma a quatro opes, pontue com 1.

Considere que os instrumentos tm sido usados como referncia quando o ator em questo tem usado como base para outros documentos; tem citado a anlise situacional e os objetivos e metas em discursos, em falas, em entrevistas; ou at mesmo se tem sido objeto de crtica ou questionamento.

Os instrumentos do PlanejaSUS foram divulgados junto s demais esferas?

Os instrumentos do PlanejaSUS foram divulgados junto sociedade civil?

Os instrumentos do PlanejaSUS servem como referncia para as equipes tcnicas do rgo gestor?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontua,r assinale as situaes em que as equipes tcnicas usam os instrumentos como referncia: ( ) usam os instrumentos como base para formulao de suas programaes especficas; ( ) citam a anlise situacional, os objetivos, as metas, os resultados em falas, em entrevistas; ( ) usam como base para a captao de recursos; ( ) usam como referncia para decidir sobre uma nova estratgia; ( ) ou at mesmo fazem crtica ou questionam os instrumentos. N EQO

Se voc assinalou quatro ou cinco das opes acima, pontue com 3; se assinalou duas ou trs opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

Considere como 'equipe tcnica' aqueles grupos (setor, coordenao, diretoria etc.) responsveis por programas ou reas especficas, como o programa de tuberculose, hansenase, DST/Aids, ou vigilncia epidemiolgica, ateno bsica, sade da criana etc. N EQP

Os instrumentos do PlanejaSUS so utilizados como referncia no momento da tomada de deciso por parte dos gestores (Secretrios e dirigentes do SUS)?

Os instrumentos do PlanejaSUS servem como referncia para as equipes dos servios do SUS ?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale as situaes em que as equipes dos servios do SUS usam os instrumento como referncia: ( ) usam os instrumentos como base para formulao de suas programaes especficas; ( ) citam a anlise situacional, os objetivos, as metas, os resultados em falas, em entrevistas; ( ) usam como referncia para decidir sobre uma nova estratgia; ( ) ou at mesmo fazem crtica ou questionam os instrumentos.

N EQT + EQO

Se voc assinalou trs ou quatro opes acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

Considere como 'equipe dos servios do SUS' os profissionais que esto nas unidades bsicas, nos centros de sade, nos hospitais, nos centros de referncia e em outros ncleos ou unidades que conformam a rede de ateno sade.

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

65

66
N EQT + EQP N EQT + EQC N EQO + EQP N EQO + EQC

Ministrio da Sade

Os instrumentos do PlanejaSUS servem como referncia para os colegiados de gesto na esfera respectiva?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale as situaes em que os colegiados de gesto usam os instrumentos como referncia: ( ) usam os instrumentos como base para definio/redefinio de polticas especficas; ( ) citam a anlise situacional, os objetivos, as metas, os resultados em falas, em reunies, em entrevistas; ( ) usam como referncia para sugerir ou apontar novas estratgias, mudanas de rumos; ( ) ou at mesmo fazem crtica ou questionam os instrumentos.

Se voc assinalou trs ou quatro opes acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

Considere como colegiados de gesto os fruns existentes: CIT, CIB estadual, CIB regional, colegiado de secretrios municipais do estado ou de uma regio etc.

Os instrumentos do PlanejaSUS so apontados como documentos de referncia pelo conselho de sade respectivo?

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale as situaes em que os colegiados de gesto usam os instrumentos como referncia: ( ) usam os instrumentos como base para definio/redefinio de polticas especficas; ( ) citam a anlise situacional, os objetivos, as metas, os resultados em falas, em reunies, em entrevistas; ( ) usam como referncia para sugerir ou apontar novas estratgias, mudanas de rumos; ( ) ou at mesmo fazem crtica ou questionam os instrumentos.

Se voc assinalou trs ou quatro opes acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou apenas uma opo, pontue com 1.

Os instrumentos do PlanejaSUS so utilizados como base para a elaborao do PPA, da LDO e da LOA na esfera respectiva?

10

Os instrumentos do PlanejaSUS so utilizados por outros setores de governo, especialmente os vinculados aos determinantes e condicionantes da sade?

A esfera de gesto tem uma proposta (programa/projeto) de monitoramento e avaliao dos instrumentos do PlanejaSUS?

Ateno: considerar como proposta, algo sistematizado, estruturado, com objetivos, metodologia, atividades e instrumental definidos, alm de um cronograma de execuo 11 e responsabilidades. N EQP + EQC

Pontue com 3, se considerar que a proposta de qualidade, vem sendo desenvolvida conforme programada e tem trazido resultados importantes para o aperfeioamento do processo de planejamento; pontue com 2 e com 1, se a proposta no atender a essas expectativas.

12

Os indicadores e metas do PS so monitorados na periodicidade apontada no Plano?

13

As aes e metas da PAS so monitoradas na periodicidade apontada na Programao?

14

Na ltima avaliao realizada na PAS, os resultados alcanados pelas aes foram satisfatrios?

15 tem resultado em

Na ltima avaliao realizada na PAS, a execuo das aes previstas foi satisfatria?

O processo de monitoramento adequaes/modificaes no PS?

avaliao

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale em que aspectos do PS foram feitas adequaes/modificaes: ( ) anlise da situao; ( ) nas diretrizes; ( ) nos objetivos; 16 ( ) nas metas e indicadores.

Se voc assinalou apenas uma opo acima, pontue com 3; se assinalou duas opes, pontue com 2; e se assinalou todas as trs opes, pontue com 1.

Considere que, quanto maior a necessidade de adequaes/modificaes, maior possibilidade de falhas no processo de formulao ou mesmo de um contedo inadequado do PS.

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

67

68
tem resultado em

Ministrio da Sade

O processo de monitoramento adequaes/modificaes na PAS?

avaliao

Ateno: SE A SUA RESPOSTA FOR 'SIM', para ajudar a refletir e a pontuar, assinale em que aspectos da PAS foram feitas adequaes/modificaes: ( ) nas aes; ( ) nas metas e indicadores; ( ) nos recursos oramentrios; 17 ( ) nos responsveis pelas aes e metas; ( ) nos mecanismos de monitoramento e avaliao.

Se voc assinalou apenas uma opo acima, pontue com 3; se assinalou duas ou trs opes, pontue com 2; e se assinalou quatro ou cinco opes, pontue com 1.

Considere que, quanto maior a necessidade de adequaes/modificaes, maior possibilidade de falhas no processo de formulao ou mesmo de um contedo inadequado do PAS.

A esfera de gesto adotou iniciativa de realizar avaliao externa do PS?

Ateno: considerar como avaliao externa o desenvolvimento de processo de anlise do PS por parte de pessoas de outras instituies pblicas, mediante convnio ou contrato (universidades, rgos de pesquisa) ou mediante contratao de consultoria 18 para essa finalidade.

Pontue com 3, se a avaliao externa tem contribudo de forma importante para o aperfeioamento do PS; pontue com 2 e com 1, se essas contribuies so menos relevantes.

A esfera de gesto adotou iniciativa de realizar avaliao externa da PAS?

Ateno: considerar como avaliao externa o desenvolvimento de processo de anlise da PAS por parte de pessoas de outras instituies pblicas, mediante convnio ou contrato (universidades, rgos de pesquisa) ou mediante contratao de consultoria 19 para essa finalidade.

Pontue com 3, se a avaliao externa tem contribudo de forma importante para o aperfeioamento da PAS; pontue com 2 e com 1, se essas contribuies so menos relevantes.

20

A rea/setor de planejamento coordena processos de monitoramento e avaliao promovidos na esfera de gesto?

21 Pontuao mdia para a resposta SIM (8)

No caso da gesto estadual, o RAG tem sido encaminhado ao Tribunal de Contas do Estado?

Comente a mdia obtida (9):

Aponte, em relao aos tpicos de avaliao do Mdulo 4, problemas e dificuldades mais relevantes e respectivas medidas (11) Medida/ao/estratgia de superao (13)

Problema/dificuldade/fragilidade existente (12)

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

69

70
SNTESE DO MONITORAMENTO OU AVALIAO (14)
MDULOS E UNIDADES DE MDULO Mdias parciais (16) MDIA GLOBAL (17)

1) Mdias parciais e global da pontuao atribuda alternativa 'sim' (15)

Ministrio da Sade

Mdia parcial referente ao MDULO 1: o processo de planejamento desenvolvido na esfera de gesto

Mdia para o MDULO 2, Unidade 2-A: processo de formulao dos instrumentos do PlanejaSUS, de modo geral.

Mdia para o MDULO 2, Unidade 2-B: processo de formulao do Plano de Sade (PS)

Mdia para o MDULO 2, Unidade 2-C: processo de formulao da Programao Anual de Sade(PAS)

Mdia para o MDULO 2, Unidade 2-D: processo de formulao do Relatrio Anual de Gesto (RAG)

Mdia para o MDULO 3, Unidade 3-A: contedo dos instrumentos do PlanejaSUS, de modo geral

Mdia para o MDULO 3, Unidade 3-B: contedo do Plano de Sade (PS)

Mdia para o MDULO 3, Unidade 3-C: contedo da Programao Anual de Sade (PAS)

Mdia para o MDULO 3, Unidade 3-D: contedo do Relatrio Anual de Gesto (RAG)

10 Mdia para o MDULO 4: o processo de aplicao/uso prtico dos instrumentos do PlanejaSUS

Comente sobre a mdia global obtida (18):

Comente sobre as maiores e menores mdias alcanadas:

2) Proporo dos padres de justificativas atribudos s alternativas 'no' e 'em parte' (19)
Totalizao (20)

Respostas EM PARTE + respostas NO

Total de justificativas EQT - EXCLUSIVAMENTE QUESTES TCNICAS

Total de justificativas EQO - EXCLUSIVAMENTE QUESTES OPERACIONAIS e de infraestrutura

Total de justificativas EQP - EXCLUSIVAMENTE QUESTES POLTICAS

Total de justificativas EQC - EXCLUSIVAMENTE QUESTES RELACIONADAS A COMPORTAMENTOS E PERCEPES DAS EQUIPES

Total de justificativas EQT + EQO

Total de justificativas EQT + EQP

Total de justificativas EQT + EQC

Total de justificativas EQO + EQP

Total de justificativas EQO + EQC

Total de justificativas EQP + EQC

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

71

72
PROPORO DAS JUSTIFICATIVAS PARA AS RESPOSTAS NO E EM PARTE (21) % (21) MDIA GLOBAL

Proporo de justificativas EQT - EXCLUSIVAMENTE QUESTES TCNICAS

Proporo de justificativas EQO - EXCLUSIVAMENTE QUESTES OPERACIONAIS e de infraestrutura

Proporo de justificativas EQP - EXCLUSIVAMENTE QUESTES POLTICAS

Ministrio da Sade

Proporo de EQC - EXCLUSIVAMENTE QUESTES RELACIONADAS A COMPORTAMENTOS E PERCEPES DAS EQUIPES

Proporo de EQT + EQO

Proporo de EQT + EQP

Proporo de EQT + EQC

Proporo de EQO + EQP

Proporo de EQO + EQC

10 Proporo de EQP + EQC

Comente sobre os percentuais alcanados pelos padres de justificativas isoladamente ou agrupados (22):

Comente sobre as maiores e menores percentuais alcanados:

Orientaes especficas para uso do formulrio de monitoramento e avaliao

(1) Atente para o foco do mdulo ou unidade de mdulo. Leia atentamente.

(2) Leia atentamente todos os tpicos de avaliao.

Depois, leia detidamente cada um, fazendo uma reflexo e uma anlise crtica sobre a questo colocada.

Em seguida, selecione uma entre as trs alternativas e assinale com um X na clula correspondente ao: sim, em parte e no.

(3) Caso selecione SIM, atribua um valor, pontuando sua opinio com 1, 2 ou 3, registrando no espao correspondente na coluna pontuao.

(4) Para pontuar, considere a sua satisfao e a dos envolvidos com a questo avaliada, a partir da sua anlise crtica quanto qualidade e consistncia do objeto avaliado (realidade, situao, ao, servio, produto, resultado); da forma como se deu; do resultado alcanado; das repercusses etc.

(5) Caso selecione EM PARTE, justifique a sua escolha, conforme orientado no tpico ix a seguir.

(6) Caso selecione NO, justifique a sua escolha, conforme descrito nas orientaes bsicas.

(7) Para as alternativas no ou em parte, registre uma justificativa para a sua escolha de acordo com o seguinte padro:

a) EQT: quando o no ou o em parte tiver como razes EXCLUSIVAMENTE QUESTES TCNICAS, como por exemplo: falta de capacitao; despreparo das equipes; insuficincia de profissionais; baixa capacidade de mobilizao; inexistncia de metodologias ou instrumentos; baixa disseminao de referencial terico; entre outras;

b) EQO: quando o no ou o em parte tiver como razes EXCLUSIVAMENTE QUESTES OPERACIONAIS e de INFRAESTRUTURA, a exemplo da falta de transporte; do no cumprimento de prazos; da existncia de processos administrativos morosos ou incorretos; espao fsico inadequado; equipamentos defasados; acesso insatisfatrio internet; entre outros;

c) EQP: quando o no ou o em parte tiver como razes EXCLUSIVAMENTE QUESTES POLTICAS, traduzidas, por exemplo, pela falta de apoio do gestor ao processo de planejamento; dificuldade de acesso pauta de colegiados estadual e regional, ou pauta do Conselho; falta de apoio ao encaminhar instrumentos para avaliao nessas instncias; falta de apoio dos dirigentes de escales superiores; falta de incentivo participao das equipes no processo; no referenciamento dos instrumentos de planejamentos na fala e nos documentos e propostas; entre outros;

d) EQC: quando o no ou o em parte tiver como razes EXCLUSIVAMENTE QUESTES RELACIONADAS A COMPORTAMENTOS E PERCEPES DAS EQUIPES, traduzidas, por exemplo, pelo desinteresse; descompromisso; desestmulo; falta de viso do processo; viso do planejamento como perda de tempo; experincia pessoal negativa com o planejamento; insuficiente participao nos processos de formulao; entre outros;

e) podem ser associados at dois padres: EQT + EQO; EQT + EQP; EQT + EQC; EQO + EQP; EQO + EQC; e EQP + EQC, quando a justificativa envolver mais de uma razo, ou seja, quando no for exclusiva, como, por exemplo: EQT + EQC, no caso de envolver questes tcnicas e as relativas a comportamentos e percepes; EQP + EQC, no caso de envolver questes polticas + questes de comportamento e percepo.

(8) Calcule a mdia aritmtica das pontuaes atribudas ao 'sim', por meio da seguinte frmula: Soma das pontuaes atribudas ao SIM X 100 Nmero total de respostas SIM

Mdia das pontuaes atribudas a SIM =

(9) Comente sobre a mdia obtida. Refira se a pontuao alcanada representa a realidade. Faa observaes. Lembre que a obteno da mdia mxima e ou de mdias que se aproximam da mxima, significa que voc atribuiu pontuaes altas, ou seja, considerou que a situao (ou a ao ou o processo) objeto do monitoramento e avaliao foi (vem sendo ou ) fundamental no mbito do PlanejaSUS, tem uma influncia extremamente positiva, representa avanos e ganhos no processo. UM MOMENTO DE REPENSAR A ANLISE. SE FOR O CASO VOLTE E REVEJA A SUA ANLISE E PONTUAES.

(10) Consolide as justificativas para o NO e EM PARTE na coluna CONSOLIDADO colocada ao lado do mdulo. Faa a soma de cada evento conforme indicado. Depois, essa soma de cada evento ser adicionada soma do mesmo evento em cada mdulo ou unidade de mdulo e o total ser levado para a parte 2 da SNTESE DO MONITORAMENTO E AVALIAO (item 19 destas orientaes).

Sistema de Planejamento do SUS: uma construo coletiva: monitoramento e avaliao

73

74
Soma das mdias parciais 10 X 100

(11) Na sequncia, aponte problemas/dificuldades e medidas correspondentes. Reflita criticamente e identifique questes que impediram maiores avanos, como forma de contribuir para definir o que deve ser feito ou o que j foi feito para superar o problema ou dificuldade identificada.

(12) Inclua problemas, dificuldades e fragilidades de ordem geral ou especficos, relacionados ao mdulo ou unidade de mdulo monitorada/avaliada. Na maior parte das vezes, os problemas/dificuldades/fragilidades interferem de forma generalizada no andamento das questes, mas existem aspectos especficos.No queira esgotar. Selecione. Aponte os mais relevantes.

Ministrio da Sade

(13) Aponte medida/ao/estratgia de forma clara e objetiva. Pense na viabilidade e exequibilidade. Selecione as mais relevantes. Identifique se foi medida/ao/estratgia j efetivada (E), em execuo (EE) e a executar (AE)

(14) A SNTESE DO MONITORAMENTO E AVALIAO considera duas partes e tem por objetivo ajudar o avaliador a ter uma viso global, sintetizada, da sua anlise sobre o processo de formulao, o contedo e o uso dos instrumentos do PlanejaSUS.

(15) A PARTE 1 refere-se ao clculo das mdias parciais e global da pontuao atribuda alternativa SIM. A mdia parcial foi calculada em cada mdulo ou unidade de mdulo.

(16) Traga o valor de cada MDIA PARCIAL, calculada em cada mdulo ou unidade de mdulo, e registre na coluna MDIAS PARCIAIS no espao correspondente a cada linha (ver item 8 destas orientaes).

(17) Registrada a mdia para cada item calcular a MDIA GLOBAL usando a seguinte frmula:

Mdia global das pontuaes atribudas alternativa SIM =

(18) Depois de calcular, comente sobre a MDIA GLOBAL obtida. Refira se a pontuao alcanada representa a realidade. Faa observaes. Lembre que a obteno da mdia mxima e ou de mdias que se aproximam da mxima, significa que voc atribuiu pontuaes altas, ou seja, considerou de forma bastante positiva o processo de formulao, o contedo e o uso dos instrumentos do PlanejaSUS. MAIS UM MOMENTO DE REPENSAR O MONITORAMENTO E AVALIAO. SE FOR O CASO VOLTE E REVEJA a SUA ANLISE E PONTUAES.

(19) A PARTE 2 da SNTESE DO MONITORAMENTO E AVALIAO refere-se ao clculo do percentual obtido pelos padres de justificativas para as alternativas de respostas EM PARTE e NO apontadas em toda a avaliao. A idia verificar em que proporo esses padres aparecem. Por exemplo, a proporo de questes de ordem tcnica, ou operacional, ou poltica ou de comportamento, isoladas ou agrupadas duas a duas.

(20) Para calcular a proporo, preencha inicialmente o quadro TOTALIZAO, que vai permitir fazer a soma dos eventos registrados por voc ao longo do formulrio de monitoramento e avaliao (ver item 10 destas orientaes).

Primeiro, totalize (some) o nmero de vezes em que apareceram respostas NO e EM PARTE e registre no espao correspondente.

Depois, totalize (some) o nmero de vezes em que apareceu cada uma das justificativas e registre em cada linha no espao correspondente.

(21) Agora, faa o clculo da proporo (%) para cada uma das justificativas, isolada ou agrupada, utilizando a frmula a seguir:

Exemplificando para o EQT:

Soma de todos os EQT de cada mdulo ou unidade de mdulo

Percentual de EQT =

N respostas 'no' + n respostas 'em parte'

(22) Depois de calcular, comente sobre os percentuais. Analise qual o peso maior se questes tcnicas ou polticas etc. MAIS UM MOMENTO DE REPENSAR A ANLISE. SE FOR O CASO, VOLTE E REVEJA A SUA ANLISE.

(23) Concluda a avaliao, devolva o formulrio para a coordenao do processo conforme orientado.

9 78 8 5 33 41 656 7

Disque Sade 0800 61 1997 Biblioteca Virtual em Sade do Ministrio da Sade www.saude.gov.br/bvs Sistema de Planejamento do SUS - PlanejaSUS www.saude.gov.br/planejasus

Você também pode gostar