Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

S UBSDIOS PARA AVALIAO DA

GESTO P BLICA : PROCESSO DE
C ONSTRUO DE I NDICADORES
PARA A VALIAO DA C APACIDADE
DE G ESTO DE O RGANIZAES
S OCIAIS
Sandra Maria Chaves dos Santos *
Maria do Carmo Lessa Guimares **
Cristina Maria Meira de Melo ***
Alvino Sanches Filho ****

R ESUMO

projeto de Reforma Administrativa do Estado brasileiro colocou em relevo a questo da avaliao nas organizaes pblicas. Este trabalho sistematiza o processo
de elaborao de uma proposta metodolgica para avaliar a capacidade de gesto
de Organizaes Sociais, entidades pblicas no estatais, criadas no bojo da Reforma. O desenvolvimento do trabalho contemplou a definio de um conceito-guia de gesto
e a identificao de suas dimenses, a partir dos quais foram selecionadas e construdas
variveis, indicadores e parmetros, assim como indicados os meios de verificao e os
dados necessrios para alimentar o sistema de informao. A proposta inclui um plano
para anlise dos resultados. Nas consideraes finais, os autores argumentam que as
escolhas conceituais e decises procedimentais visaram a produzir um desenho de avaliao que pudesse garantir a confiabilidade dos resultados e sua sensibilidade em aproximar-se do fenmeno em avaliao, a aplicabilidade do instrumental e sua reprodutibilidade
em diferentes contextos.

ABSTRACT

he project for the reform of the administration of the Brazilian state highlighted the
question of evaluation within public organizations. This study systematized the process
of elaboration of a methodological proposal to evaluate the management capacity of
non-state owned, public social organizations created within the framework of the
reform. The objective was to define a conceptual guide for management and to define its
dimensions. A selected set of variables, indicators and parameters was constructed, as
well as a means of verification and the data necessary to feed the information processing
system. The proposal presents a plan for analyzing the results. In the final comments, the
authors argue that the conceptual choices and procedural decisions aim to produce a design
of evaluation that should guarantee the reliability and sensitivity of results in their proximity
to the phenomenon being evaluated, the applicability of the instrument and its reproducibility
in different contexts.

* Prof. Escola de Nutrio/UFBA

** Prof. Escola de Administrao/UFBA
*** Prof. Escola de Enfermagem/UFBA
**** Prof. Faculdade de Filosofia e Cincias Humanas/UFBA
o &s - v.13 - n.37 - Abril/Junho - 2006

109

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

INTRODUO

ste artigo sistematiza o processo de elaborao de uma proposta metodolgica para avaliar a capacidade de gesto de Organizaes Sociais-OS, entidades pblicas no estatais, criadas no bojo da Reforma Administrativa do
Estado brasileiro, na primeira gesto do governo de Fernando Henrique
Cardoso, para atuarem em setores antes considerados exclusivos do Estado pela
natureza pblica dos servios que prestam sociedade.
No Estado da Bahia, a implantao de organizaes sociais iniciou-se em
1999 e, a partir de 2002, a demanda por avaliar os resultados do modelo de
gesto em curso mobilizou rgos do Estado para, em parceria com a universidade, desenvolverem uma proposta nessa direo.
Uma das caractersticas importantes do processo de avaliao a necessidade de que as variveis e os indicadores sejam factveis de ser construdos e que
aquilo que expressam seja valor compartilhado por todos os envolvidos. Dessa
forma, o desenvolvimento da proposta implicou em momentos de trabalho coletivo
com tcnicos da Secretaria de Administrao do Estado da Bahia-SAEB e de outras
secretarias setoriais, todos envolvidos com a implementao do programa de Organizaes Sociais, assim como com gestores de OS j implantadas. A proposta,
nesse caso, foi a de pactuar tanto o conceito-guia de gesto entre avaliados e
avaliadores, como os parmetros de julgamento. Alm disso, essa estratgia de
trabalho permitiu discutir a sensibilidade dos indicadores e a viabilidade de acessar
os dados e informaes necessrias.
Dessa forma, a construo do plano de indicadores foi demarcada por trs
momentos importantes. O primeiro momento contemplou a realizao de um Encontro Tcnico para discusso e parametrizao dos indicadores com tcnicos da
administrao estadual, do Ministrio do Planejamento e Oramento e das Organizaes Sociais em funcionamento no Estado, bem como a realizao de Oficinas
de Trabalho com a participao de consultores externos. O segundo momento
contemplou uma reviso crtica realizada pelos autores, aps os resultados de um
estudo piloto realizado em uma Organizao Social em funcionamento no Estado
da Bahia, para verificao da consistncia e viabilidade dos indicadores propostos. O terceiro momento contemplou a realizao de um Encontro Tcnico com a
participao de consultores externos, pesquisadores reconhecidos por seus estudos no campo da avaliao e da administrao pblica, momento em que a
metodologia foi avaliada quanto consistncia, coerncia e viabilidade.
Na perspectiva de compartilhar essa experincia e contribuir com o debate
sobre o desenvolvimento de metodologias de avaliao na gesto pblica, este
artigo est organizado tendo em vista os passos realizados pelos autores desde
o marco zero de definio do espao e do que seria objeto da avaliao, em termos prticos e conceituais, at a definio do plano de anlise dos resultados. Na
medida em que neste trabalho o foco o processo de construo, e tendo em
vista o volume do protocolo completo de indicadores, no se apresenta neste
momento a totalidade das matrizes que conformam a proposta metodolgica que
resultou das etapas de reflexo e ao. Todo o protocolo de avaliao, assim
como anlises mais detalhadas quanto aos resultados obtidos com a aplicao
podem ser consultados em trabalhos publicados pelos autores sobre o tema (GUIMARES et al., 2003). Na seo de consideraes finais faz-se uma anlise geral
do processo e dos alcances da metodologia.
Passo 1 - Definindo o espao da avaliao
O projeto de Reforma Administrativa do Estado Brasileiro iniciado na primeira gesto do governo de Fernando Henrique Cardoso trouxe, entre as propostas
de novas modalidades de gesto de servios de natureza pblica, a criao de
agncias executivas e de Organizaes Sociais, bem como a regulamentao da

110

o &s - v.13 - n.37 - Abril/Junho - 2006

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

concesso de servios pblicos e de contratos de gesto. Essas inovaes apresentaram-se como fundadas na idia de uma administrao pblica gerencial, em
que possvel desenvolver estratgias administrativas baseadas na ampla delegao de autoridade e na cobrana a posteriori de resultados (Brasil, 1997).
O processo de mudanas acima indicado pautou-se em um movimento terico denominado de Novo Gerencialismo Pblico, o qual declarou como objetivo
tornar a administrao pblica mais eficiente e moderna e voltada para o atendimento das necessidades e satisfao plena dos cidados. Para tanto, argumentou-se no sentido de fortalecer o ncleo estratgico do Estado e da autonomia
das agncias executivas e das Organizaes Sociais. O elo entre os dois sistemas
faz-se pelo contrato de gesto, um instrumento que define competncias, atribuies e responsabilidades das agncias e OS, assim como as responsabilidades do
Estado no controle de todo o processo.
O Projeto de Reforma Gerencial foi apresentado como uma oportunidade
para corrigir os rumos da administrao pblica latino-americana naquilo que sua
trajetria escreveu com mais cores: rigidez conjugada com ineficincia; ausncia
de mecanismos de controle externo; distanciamento e falta de compromisso com
as demandas dos cidados; excessos burocrticos; e uso poltico da mquina estatal para realizar interesses particularistas. Frente ao desafio, o reconhecimento
e a valorizao de um espao pblico no-estatal como ator na proviso de servios pblicos ganharam relevncia.
O pressuposto balizador, que orienta a transferncia da gesto de servios
pblicos para organizaes de natureza no estatais, que existe um espao
pblico no-estatal que envolve a capacidade da sociedade de atuar em associao com o Estado na oferta de servios pblicos, no apenas controlando-os,
mas, tambm, como executora, sempre visando ganhos em eficincia e efetividade
(CLAD, 1998, MODESTO, 2001).
Nesse contexto, a avaliao e o acompanhamento do desempenho da gesto pblica, bem como dos novos parceiros institudos por meio da concesso dos
servios pblicos e dos contratos de gesto so vistos como importantes para
subsidiar as correes necessrias na formulao das polticas governamentais e
na sua implementao, bem como no aperfeioamento dos instrumentos jurdicos
e administrativos que balizam as novas modalidades de gesto de servios pblicos. nessa direo e em sintonia com tais desafios que se elaborou a proposta
metodolgica para avaliao da capacidade de gesto de Organizaes Sociais,
objeto deste artigo.
Passo 2 - O tipo de avaliao que orientou o processo de construo da
metodologia
Uma reviso da literatura sobre avaliao permitiu observar que, embora o
termo avaliao seja utilizado quase sempre com o mesmo significado, o de determinar valor a alguma coisa, a variao e as imprecises do conceito decorrem do
fato de que o termo avaliao, para ganhar inteligibilidade, necessita estar acompanhado de outros termos que informem sobre o objeto e o sujeito da avaliao,
alm dos seus propsitos, objetivos e modos de proceder. Assim, as controvrsias
observadas situam-se no plano das prticas, do como esta deve ser conduzida,
ou, mais precisamente, na seleo do foco, dos mtodos e do grau de objetividade e de sistematizao utilizados para se avaliar.
Por outro lado, vem sendo observado na literatura que o conceito de avaliao um conceito em evoluo, que muda de acordo com o contexto, incorporando
as concepes anteriores e acrescentando novas perspectivas, tornando o processo de avaliar mais complexo em informaes e mais sofisticado em termos de seus
propsitos (PASTANE, 2002). Diante disso, torna-se necessrio ressaltar algumas
escolhas prvias sobre o tipo de avaliao que orientou a proposta metodolgica
para avaliar a capacidade de gesto de OS aqui apresentada, a saber:
o &s - v.13 - n.37 - Abril/Junho - 2006

111

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

a)

b)

c)

A natureza e o tipo de avaliao adotados se aproximam do que vem sendo

denominado de pesquisa interessada ou Policy Oriented, a qual, segundo
Draibe (2001), tem como objetivo detectar dificuldades e obstculos e produzir recomendaes visando a corrigir rumos do programa ou disseminar
lies e aprendizagens, de forma a melhorar a qualidade do processo de
implementao e do desempenho da poltica.
O foco da avaliao proposta a gesto, o que implicou na adoo de um
tipo de avaliao de processo entendida como aquela que evidencia as condies e o desenho da organizao e a forma pela qual so desenvolvidas as
aes programticas. Essa avaliao detecta os fatores que, ao longo da
implementao, facilitam ou impedem que um dado programa/atividade atinja
seus resultados da melhor maneira possvel (DRAIBE, 2001).
Tal avaliao exigiu o levantamento de hipteses/premissas, formuladas
luz de uma imagem-objetivo construda pelos avaliadores e por outros atores envolvidos. Entenderam os pesquisadores que esse tipo de procedimento avana em relao ao diagnstico de uma dada situao presente
porque constri compromissos em relao a uma direo futura que se pretende alcanar e ou transformar.
Passo 3 Definindo o foco da avaliao

O modelo de Organizaes Sociais com suas filigranas jurdicas e administrativas bastante polmico, em parte por ser ainda recente no Brasil, de outra parte
por representar para alguns um processo de delegao a outros de responsabilidades do Estado (PINTO, 2001; PENTEADO, 1998; MODESTO, 2001). Contudo, ainda
que a discusso sobre o modelo em si seja importante para o seu aperfeioamento,
no foi esse o objeto da proposta de avaliao apresentada neste artigo.
O foco da avaliao proposta a gesto. A opo fundamentou-se nas consideraes de que a maior parte das justificativas para a criao dos novos entes
jurdicos, presentes nos documentos e artigos de autoria dos seus formuladores,
pauta-se na expectativa de mudanas justamente no modelo de gesto dos servios
de natureza pblica, recorrentemente avaliado como dominado por princpios burocrticos que primam pela rigidez e pela centralizao decisria, sendo ineficiente,
ineficaz e pouco transparente, entre outros. Os novos modelos de gesto de servios pblicos, portanto, passam a ser orientados por princpios mais flexveis e
descentralizadores (MODESTO, 2001; NASSUMO, 1997).
Nessa perspectiva, verificou-se que dentre os argumentos utilizados pelo
governo federal para a criao do modelo de organizaes sociais trs princpios
se destacaram: maior autonomia decisria dessas organizaes, frente aos nveis
hierrquicos da estrutura burocrtica da administrao pblica brasileira, com vistas a possibilitar um processo decisrio mais rpido e, por conseqncia, mais
efetivo; maior flexibilidade para romper com a rigidez da estrutura organizacional,
objetivando maior interdependncia e compartilhamento na autoridade e na responsabilidade (MOTTA, 1991); por fim, maior transparncia, ao instituir, na estrutura organizacional das OS, os conselhos administrativo e fiscal, com a participao
de representantes do Estado e da sociedade civil, com vistas a gerar decises
mais consensuais, alm de instituir canais e expedientes que possam, ao divulgar
e socializar tais decises para trabalhadores e usurios, contribuir para a construo de um processo decisrio mais transparente e, por consequncia, sujeito a
um maior controle social.
Passo 4 - A construo de um conceitoguia de gesto
Tendo convencionado o tipo e o foco da avaliao que orientariam a proposta
metodolgica, partiu-se para a definio do conceito-guia de gesto. O conceito de
gesto amplo, diversificado e, por isto mesmo, controvertido. Os conceitos pre112

o &s - v.13 - n.37 - Abril/Junho - 2006

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

sentes na literatura fundamentam-se em campos tericos diversos e a polarizao

qualitativa encontra-se entre o campo da administrao e o da cincia poltica.
No campo da administrao, o conceito de gesto se aproxima da idia de
gerncia e, dessa forma, toma um carter mais operacional e instrumental ao
fazer prevalecer o entendimento de que se trata de uma funo organizacional
voltada pra o comando, a coordenao, o planejamento, o controle, a orientao
e a integrao das aes levadas a efeito nos diversos nveis e setores incumbidos da execuo dos servios (MOTTA, 1991:45). No campo da cincia poltica, o
conceito de gesto incorpora uma dimenso poltica que se traduz em aspectos
menos procedimentais, privilegiando a discusso sobre o poder e sua legitimidade, e os conflitos presentes no processo de deciso no mbito das organizaes,
inclusive e, sobretudo, nas organizaes pblicas. Nesse debate, constata-se que
os dois plos conceituais, da administrao e da poltica, no so antagnicos e/
ou excludentes entre si, e, em certa medida, eles se complementam na discusso
sobre o conceito de gesto.
Nessa perspectiva, a construo de um conceito-guia ou referncia sobre
gesto que servisse de base ao desenho de uma avaliao partiu, inicialmente,
da discusso levantada por Carlos Matus (1993) sobre a capacidade de governo.
Entenderam os autores que tal capacidade se aproxima, tanto do ponto de vista
conceitual como operacional da capacidade de gesto. Para Matus (1993), a capacidade de governo aferida a partir de trs dimenses, interdependentes entre
si, cujas relaes foram ilustradas pelo autor em um Tringulo de Governo. Essas
dimenses contemplam as idias: de que a capacidade de governo revela a articulao dinmica entre a existncia de projetos de ao capazes de conduzirem o
sistema ao alcance de seus objetivos; de determinado grau de governabilidade
do sistema, referida ao conjunto de variveis essenciais ao projeto sob controle
do ator responsvel pela conduo dos projetos; e da capacidade de governo,
contemplando o acervo de tcnicas, mtodos, destrezas etc. do ator e equipe
responsveis pela conduo do sistema.
Com o entendimento acima sintetizado, Matus (1993) agrega conceitos que
se situam em campos tericos que tradicionalmente se polarizam na discusso
sobre gesto: o da administrao e o da cincia poltica. O modelo terico triangular de governo, proposto por Carlos Matus (1993) privilegia tanto categorias
normativas (existncia de Projetos) e categorias administrativas (capacidade tcnica), como categorias polticas (governabilidade do sistema).
A partir da perspectiva acima se assumiu, primeiramente, que a capacidade
de gesto de uma organizao poderia ser, tambm, aferida pela anlise articulada de trs categorias: a capacidade de formular projetos, polticas e normas legais; a capacidade de executar, referida s condies tcnicas e administrativas
(recursos humanos, materiais e financeiros); e a capacidade de articular e de mobilizar alianas e parcerias, assim como recursos polticos e estratgicos, no sentido de assegurar as condies polticas para a busca dos objetivos perseguidos
pelas polticas, planos e programas.
Outras reflexes, porm, foram sendo agregadas nesse processo de construo do conceito-guia de gesto, as quais geraram a necessidade de se considerar dois aspectos centrais. O primeiro, relativo imagem objetivo de gesto
que justificava o modelo. No se tratava, no caso, de avaliar uma idia
descontextualizada ou descomprometida de gesto. Ao contrrio, como antes discutido, tratava-se de desenhar a avaliao de um modelo de gesto orientado por
princpios previamente estabelecidos, tais como: decises mais compartilhadas,
trabalhadores mais comprometidos com a organizao e usurios satisfeitos com
o atendimento de suas necessidades, contemplando ainda maior autonomia
decisria em todos os nveis, menores entraves burocrticos e distanciamentos
hierrquicos. Esse conjunto de valores deveria, no modelo, somar maior legitimidade aos gestores e confiabilidade organizao.
A constatao acima conduziu ao segundo aspecto central, referido necessidade dessa imagem-objetivo de gesto estar balizada por princpios
o &s - v.13 - n.37 - Abril/Junho - 2006

113

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

orientadores dos novos modelos de gesto pblica que so, por sua vez, baseados nas teses do Novo Gerencialismo Pblico. Observou-se, por exemplo, no bojo
das justificativas para criao dos novos modelos de gesto de servios pblicos,
que, alm dos princpios da flexibilidade e da maior autonomia decisria, os novos
modelos de gesto, tambm, perseguem uma maior capacidade de sustentar resultados, no sentido da construo de estratgias de gesto que possam assegurar a continuidade dos resultados obtidos, favorecendo o aumento da
confiabilidade da organizao.
Diante disso, a discusso sobre o conceito de capacidade de gesto agregou, na sua dimenso poltica, a idia de sustentabilidade, contemplando aspectos relacionados com a institucionalizao de mecanismos e estratgias que ampliem e/ou consolidem apoios e alianas capazes de favorecer a sustentabilidade
das decises e dos resultados pretendidos pela gesto.
Nessa perspectiva, o conceito de gesto firmado pelo grupo de pesquisa, o
qual serviu de referncia para a construo da matriz de indicadores e da proposta de avaliao, parte do entendimento de que a deciso o elemento central que
perpassa o processo de gesto e se revela atravs de trs dimenses: uma dimenso organizacional que evidencia o formato do processo decisrio (o quem e o
como se decide); uma dimenso operacional (capacidade de executar) que indica
iniciativas de gesto no sentido de manter e ampliar as condies logsticas e
gerenciais da organizao, mobilizando recursos, inclusive os estratgicos; e a
dimenso da sustentabilidade (capacidade de sustentar resultados) que revela como
os gestores vm construindo a capacidade de sustentar os resultados de gesto.
Dessa forma, a capacidade de gesto de uma organizao social foi concebida
como sendo a faculdade de uma organizao em decidir com autonomia, flexibilidade e
transparncia, mobilizando recursos e construindo a sustentabilidade dos resultados
de gesto. Essa abordagem constituiu-se em ferramenta conceitual do modelo
metodolgico desenhado para aferir a capacidade de gesto de Organizaes
Sociais.
Passo 5 - A construo do plano de indicadores
a)

A conveno de conceitos operacionais

O plano de indicadores para a avaliao da capacidade de gesto de OS foi
construdo em duas etapas. A primeira envolveu a definio das dimenses e das
variveis, ou seja, o caminho de ida (do conceito ao emprico) para a construo
dos indicadores. A segunda contemplou as descries dos indicadores, o estabelecimento de suas frmulas, requisitos e parmetros, orientados por premissas,
as quais representam o caminho de volta (do emprico aos conceitos) que os resultados obtidos devero realizar para dialogar com o conceito-guia de gesto.
Vale ressaltar que a construo do plano de indicadores exigiu, tambm,
dos autores decises metodolgicas que conformam a proposta de avaliao em
sua totalidade. Partiu-se do entendimento de que a construo de indicadores
deve ser entendida como um exerccio permanente, contnuo, o que significa, como
conseqncia, ser marcada por revises e adaptaes, contextualizadas e permanentes, tendo em vista o aperfeioamento da capacidade de aferir aquilo ao
que se prope. Assim, o plano de indicadores apresentado neste artigo no se
constitui em um produto universal e acabado, ao contrrio, defende-se que esse
deve ser sempre submetido a crticas que possibilitem ajustes, principalmente no
que diz respeito parametrizao dos diversos indicadores propostos.
Foi, tambm, necessrio convencionar um conceito operacional importante,
o de indicador, o qual foi concebido como sendo elemento que indica certa condio, caracterstica, atributo ou medida numrica que, ao registrar, compilar e analisar facilita que conceitos mais complexos se tornem mensurveis (JANNUZZI, 2001).
Nesse sentido, o indicador sintetiza, representa e/ou d maior significado ao que
se quer avaliar. Pode ser representado por um nmero, por uma relao entre
114

o &s - v.13 - n.37 - Abril/Junho - 2006

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

dois eventos ou por uma qualidade ou atributo do fenmeno em observao. Cabe

destacar, ainda, que o indicador s vlido no contexto especfico no qual se
processa a avaliao.
Para que os indicadores permitissem a leitura do fenmeno, foi necessrio,
tambm, definir os parmetros da avaliao. Isto , em face de um determinado
resultado, sendo necessrio emitir um julgamento, tornou-se essencial, como em
qualquer avaliao, estabelecer um timo esperado e outras gradaes.
Importante destacar que, em se tratando da avaliao da capacidade de
gesto de organizaes sociais, entidades relativamente recentes, uma das maiores dificuldades referiu-se condio de sistematizar ou adaptar indicadores e
parmetros antes testados. Dessa forma, tratou-se, predominantemente, de construir novos indicadores e propor novos parmetros, tendo por referncia o conceito-guia e os pressupostos sobre a inovao do modelo OS no campo da gesto.
b)

Selecionando e definindo os indicadores para avaliao da capacidade de

gesto
Como antes assinalado, o processo de construo dos indicadores teve como
ponto de partida um conceito-guia de gesto que se estrutura em trs dimenses: a organizacional, a operacional e a de sustentabilidade dos resultados. A
partir disso, e tendo em vista os princpios de gesto que justificavam a criao de
OS, a seleo e construo dos indicadores se iniciaram pela elaborao de um
conjunto de questes e pelo estabelecimento de premissas, as quais funcionam
como argumentos de sustentao para a avaliao e para a leitura dos resultados
obtidos com a aplicao dos indicadores.
A matriz 1 apresenta os resultados dessa etapa do trabalho. Observa-se na
matriz que as questes foram pensadas no sentido de problematizar aspectos da
gesto que tm dbitos com as expectativas geradas com a criao de OS, enquanto
as premissas so respostas prvias que objetivam fazer a ligao entre o desejado
e o encontrado. Dessa forma, de cada questo pode-se avanar para uma lista de
variveis e para a construo de indicadores, enquanto as premissas conformam
uma imagem objetivo, a partir da qual se tornou possvel estabelecer os parmetros
para os diferentes resultados que poderiam ser obtidos pelos indicadores.
Todo esse processo resultou em um plano com 34 indicadores, distribudos
nas trs dimenses, os quais expressam o conceito-guia de gesto. A matriz 2
apresenta um extrato do plano de indicadores, mostrando, a ttulo de ilustrao,
alguns indicadores de cada uma das dimenses, selecionados segundo sua natureza, como ser discutido na seo seguinte sobre o plano de anlise dos resultados.
Como pode ser observado, o plano est composto pelos indicadores, pela
frmula para atribuir um resultado quantitativo ou qualitativo ao indicador, por
uma coluna de pontuao, outra de parmetros e mais uma retomando as premissas. Na matriz aplicada em uma avaliao piloto que fez parte do processo de
validao do plano de indicadores, a matriz contemplou uma coluna de resultados
obtidos (GUIMARES et al., 2003). Assim, ao se registrar na prpria matriz a pontuao obtida pela organizao em cada um dos indicadores, alcanou-se maior
consistncia na anlise dos resultados face ao conceito orientador, e a visualizao
dos achados se tornou mais rpida e informativa.

o &s - v.13 - n.37 - Abril/Junho - 2006

115

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

Matriz 1- As Dimenses da Gesto

DIMENSO ORGANIZACIONAL
FORMATO DO PROCESSO DECISRIO
QUESTES
PREMISSAS
1- Um perfil desejvel de gestor contempla
1- Os gestores da OS tm capacitao capacitao tcnica e experincia prvia como
tcnica e experincia prvia em gesto e requisitos
desejveis
para
lhe
conferir
os conselheiros foram eleitos para o legitimidade tcnica e poltica para decidir. A
cargo e sua atuao reconhecida pelo legitimidade poltica conferida pela conduo
conjunto
de
trabalhadores
da via eletiva aos cargos e pelo exerccio efetivo da
organizao?
liderana.
2- Os gestores tm implementado um 2- O formato de deciso adotado deve ser
processo decisrio mais participativo e descentralizado envolvendo e comprometendo o
descentralizado,
favorecendo
que maior nmero possvel de setores e de
trabalhadores e parceiros conheam os trabalhadores da organizao nas decises sobre
objetivos da organizao, participem da as prioridades da organizao.
elaborao dos planos de metas e Legitimidade conferida pela conquista de
sintam-se
contemplados
em
suas ascendncia e aceitao por parte dos
propostas?
subordinados/gerenciados. Esse entendimento
minimalista de legitimidade possibilitou uma
convergncia com o conceito de liderana que ,
tambm, concebido como uma funo gerencial
e no um atributo de pessoas - fenmeno
relacional.
DIMENSO OPERACIONAL
QUESTES
PREMISSAS
1- A agenda decisria contempla a 1- A autonomia decisria e a flexibilidade
manuteno e ampliao dos recursos administrativa prevista para o modelo OS
operacionais, inclusive os estratgicos?
possibilitam aos gestores condies para
2O
processo
de
deciso
tem manterem e ampliarem as condies logsticas e
contemplado iniciativas no sentido de operacionais da organizao, incorporando novas
incorporar novas fontes e novos tipos de fontes de financiamento, de recursos tcnicos e
recursos alm dos previstos?
estratgicos.
3- Os gestores tm promovido iniciativas
no sentido de ampliar alianas e 2- A autonomia e a transparncia pressupostas
parcerias, a fim de manter ou ampliar as para o modelo OS asseguram condies para
condies logsticas e gerenciais da agregar novas parcerias e contribuies s
organizao?
organizaes e para elevar a qualidade e
4O
processo
de
deciso
tem quantidade dos trabalhadores que atuam na
contemplado iniciativas para melhoria da organizao.
qualidade e quantidade dos recursos
estratgicos da organizao (informaes
e capacitao de trabalhadores)?
DIMENSO DA SUSTENTABILIDADE
QUESTES
PREMISSAS
1As
iniciativas
de
gesto
tm Uma gesto autnoma e orientada pela
privilegiado a difuso de informaes flexibilidade gerencial, propiciada pelo modelo
entre trabalhadores, usurios e parceiros OS, utiliza distintos expedientes de divulgao e
da organizao?
difuso de informaes dentro da organizao e
2As
iniciativas
de
gesto
tm institucionaliza mecanismos de gesto para
contemplado a institucionalizao de auscultar os trabalhadores e os usurios, o que
mecanismos de gesto para auscultar os eleva o grau de transparncia do processo de
trabalhadores e usurios (formais ou deciso e da satisfao destes com a conduo
informais)?
da organizao pelos gestores, somando para a
3As
iniciativas
de
gesto
tm sustentabilidade dos resultados de gesto.
contemplado a construo de um
processo de trabalho e de deciso calcado
na liderana e na busca de alianas,
elevando a satisfao dos trabalhadores,
dos usurios e dos parceiros, com a
conduo da organizao pelos gestores?

116

o &s - v.13 - n.37 - Abril/Junho - 2006

MATRIZ 2 - PLANO DE INDICADORES PARA AVALIAR A CAPACIDADE DE GESTO DE

o &s - v.13 - n.37 - Abril/Junho - 2006

Natureza dos
Indicadores

Indicadores

Indicador de
existncia
constatada

% de atendimento pelos
gestores de requisitos
para exerccio da funo
gerencial
1-Treinamentos na rea
de administrao e ou
gesto;
2-Experincia
prvia em gesto
% de trabalhadores que
referem conhecimento
sobre existncia do
Conselho Curador ou
Administrativo

Indicador de
conhecimento

117

Indicador de %
de
gestores
participao
intermedirios
que
referem ter participado
do
processo
de
elaborao do Plano de
Metas (ou de outro
instrumento
de
planejamento
utilizado
pela organizao)
Indicador de %
de
gestores
satisfao
intermedirios
que
referem satisfao com
a incorporao das suas
propostas no Plano de
Trabalho

Frmulas

Pontos
Parmetros
Premissas
Previstos
DIMENSO ORGANIZACIONAL FORMATO DECISRIO NA ORGANIZAO
N.
de
gestores
preenchem
os
requisitos/Total
gestores x 100

que
dois
de

N. de trabalhadores que
referem
conhecer
existncia
do
conselho
curador/Total
de
trabalhadores informantes
x 100
N.
de
gestores
intermedirios que referem
ter
participado
como
representante do seu setor
na elaborao do Plano de
Metas
da
organizao/
Total
de
gestores
intermedirios informantes
x 100
N.
de
gestores
intermedirios que referem
satisfao/Total
de
gestores
intermedirios
informantes x 100

10

2,0 pontos a cada Capacitao especfica e experincia prvia

25% de respostas de gesto so requisitos desejveis para
construo da legitimidade tcnica do
positivas (50%)
gestor, o que soma para a capacidade de
decidir da organizao.

8,0 pontos para Maior percentual de trabalhadores que

25% de respostas referem conhecer a existncia do Conselho
Curador/Administrativo
indica
maior
positivas (25%)
visibilidade destes, o que amplia sua
legitimidade poltica, somando para a
capacidade de decidir da organizao.
percentual
de
gestores
2,5 pontos a cada Maior
25% de respostas intermedirios referindo participao na
elaborao dos planos de metas indica
positivas (100%)
ampliao do processo decisrio, o que
soma para a capacidade de decidir.

3,0 pontos a cada Maior percentual de gestores satisfeitos

25% de respostas com a incorporao de suas propostas no
Plano de Metas indica contemplao de
positivas (50%)
interesses distintos no processo decisrio
descentralizado, o que soma para a
capacidade de decidir.

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

ORGANIZAES SOCIAIS: alguns exemplos

118

Indicadores

Frmulas

Indicador de
existncia
constatada

Existncia de ampliao
dos
recursos
operacionais para alm
do contrato de gesto
nos ltimos 12 meses

Resposta
do
gestor
mximo:
SIM OU NO
Recursos: financeiros,
infra-estrutura e
equipamentos

Indicador de
satisfao

Grau de satisfao dos

gestores intermedirios
com
o
nvel
de
capacitao
dos
trabalhadores
em
atividade

Indicador de
existncia
constatada

Existncia de canais/
mecanismos
para
receber
crticas
e
sugestes
dos
trabalhadores
% de usurios que
referem
receber
orientao por parte da
organizao sobre os
servios prestados

Indicador de
existncia
referida

Indicador de
conhecimento

% de trabalhadores que
referem
conhecer
o
Plano
de
Cargos,
Carreira
e
Salrios
(PCCS) da organizao

Pontos
Parmetros
Previstos
DIMENSO OPERACIONAL
4

Pontos
para
Respostas positivas
Financeiros=2
Infra-estrutura=1
Equipamentos=1

Premissas

Iniciativas para ampliao dos recursos

operacionais alm daquelas previstas pelo
contrato de gesto indica preocupao dos
gestores em ampliar as condies fsicas e
financeiras favorveis da organizao, o
que soma para a capacidade de executar
da organizao.
N.
de
gestores
6
2,0 pontos a cada Um elevado grau de satisfao dos
intermedirios satisfeitos
25% de respostas gestores intermedirios com o nvel de
/Total
de
gestores
positivas (75%)
capacitao dos trabalhadores aponta
informantes x 100
condies
favorveis
para
o
desenvolvimento das aes, agregando
valor capacidade de executar da
organizao.
DIMENSO DA SUSTENTABILIDADE
Sim / No
4
Resposta positiva = Existncia de canais/mecanismos (formais
4 pontos
e/ou informais) indica reconhecimento, por
parte da gesto, dos interesses dos
trabalhadores e dos usurios, o que soma
para sustentar resultados de gesto.
N.
de
usurios
que
1,5 pontos a cada Maior percentual de usurios que acusam
referem
receber
25% de respostas receber
orientao,
por
parte
da
orientao/Total
de
positivas
organizao, sobre os servios ofertados
informantes x 100
indica preocupao da gesto com a
melhor utilizao dos servios pelos
usurios, o que soma para sustentar
resultados de gesto.
N. de trabalhadores que
4,0 pontos a cada Maior percentual de trabalhadores que
referem
conhecer
o
25% de respostas acusam conhecer o PCCS indica iniciativas
PCCS/Total
de
positivas (50%)
da gesto em tornarem transparentes os
trabalhadores informantes
procedimentos de admisso, promoo e
x 100
demisso dos trabalhadores, o que soma
para a capacidade de sustentar resultados
de gesto.

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

o &s - v.13 - n.37 - Abril/Junho - 2006

Natureza dos
indicadores

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

c)

Estabelecendo os meios de verificao e os dados e informaes de interesse para a avaliao

Em todo processo de avaliao, o acesso, a adequao e a confiabilidade das
informaes e dos dados que do forma aos atributos medidos pelos indicadores
so de fundamental importncia para os resultados e para a prpria confiabilidade
da avaliao. No desenho dessa avaliao da capacidade de gesto de OS, a
maioria dos dados e das informaes necessrias tiveram que ser buscadas diretamente na organizao e junto queles que vivem a organizao, devido ausncia
de um sistema de informaes estruturado para fazer face s questes postas. A
aplicao de questionrios a gestores, trabalhadores, usurios dos servios e parceiros da organizao foi, ento, a estratgia privilegiada, tendo sido identificada
como o principal meio de verificao de mais de 70% dos indicadores. Para outros
30% dos indicadores, a pesquisa documental e a observao dos avaliadores constituram-se na principal fonte de obteno das informaes.
Para a elaborao dos instrumentos a serem utilizados na coleta dos dados, foram considerados os numeradores e os denominadores de cada um dos
indicadores que contemplam uma frmula, ou a condio a ser observada para os
demais casos. Importa destacar que a implementao dessa avaliao, em uma
experincia piloto, contribuiu para dar partida organizao de um sistema de
informaes para acompanhamento e avaliao sistemtica da capacidade de
gesto da OS. Desta forma, em um segundo momento de avaliao, a coleta direta de dados pode ser reduzida.
Passo 6 Definindo o plano de anlise dos resultados
O plano de indicadores sistematiza as variveis e os indicadores que integram essa metodologia de avaliao. No entanto, partindo da premissa central de
que avaliar atribuir valor, impe-se a necessidade de emitir um julgamento desses dados em funo de uma escala de critrios que podem ser explcitos ou implcitos (DUPUIS, 1998; FIGUEIREDO e FIGUEIREDO, 1986).
A definio dos critrios e valores para julgamento dos resultados em uma
avaliao estabelece a efetiva diferenciao entre esta e a realizao de uma
auditoria ou de um controle administrativo, conforme discutido por Dupuis (1998).
Por outro lado, os critrios devem estar devidamente justificados e partilhados
pelo maior nmero de atores envolvidos com o alvo da avaliao. Isto porque
critrios e valores atuam no quadro da avaliao como os fundamentos que orientam todas as anlises, o que permite dar sentido a um conjunto de dados e informaes que, sem esse referencial, no ultrapassariam a condio de apenas descrever a situao avaliada.
No caso dessa pesquisa de interesse metodolgico assumiu-se que a avaliao tem o sentido de produzir respostas sobre a capacidade de gesto de organizaes sociais. Assumiu-se, tambm, que todos os critrios para a avaliao
seriam explcitos, inclusive como forma de garantir a reaplicao da metodologia e
a anlise comparativa dos achados no tempo e entre diferentes organizaes. De
outra parte, reunies e oficinas foram realizadas visando a pactuar com atores de
organizaes sociais, com aqueles que vm se responsabilizando pela implantao e acompanhamento desse modelo de gesto no mbito da administrao pblica e, tambm, com especialistas da rea, as variveis, os indicadores e as premissas da avaliao. Como visto nas sees anteriores deste documento, todo
esse processo resultou na construo de uma escala conceitual que partiu de
categorias mais abstratas at alcanar variveis mensurveis organizadas sobre
a forma de indicadores.
Um dos objetivos desse trabalho, o qual justifica a pesquisa bibliogrfica
realizada e, tambm, as reunies e oficinas com tcnicos da rea e consultores
externos, foi na direo de reconhecer quais parmetros poderiam ser adotados
para leitura dos achados. Essa busca constituiu-se em uma dificuldade adicional.
o &s - v.13 - n.37 - Abril/Junho - 2006

119

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

Avaliaes da gesto em organizaes podem ser encontradas, mas tendem a

resultados finalsticos. Avaliaes quanto eficincia tambm so encontradas.
No entanto, conforme discutido anteriormente, as organizaes sociais so propostas como um novo modelo de gesto na administrao pblica, orientado por
novos princpios. Dessa forma, deparou-se com a ausncia de referenciais testados que pudessem ser adotados como parmetros para realizar a avaliao que o
grupo se props.
Frente ao exposto, partindo-se da construo terica e tendo sempre como
pano de fundo os princpios que no plano conceitual e, tambm, poltico justificam
a adoo do modelo de organizaes sociais, constituiu-se em tarefa do grupo
construir os critrios para as anlises dos resultados de cada um dos indicadores.
Visando a permitir uma melhor compreenso dos achados e, tambm, como
forma de favorecer o acompanhamento dos resultados no tempo, optou-se, ento, por esclarecer os critrios e pontuar os resultados, de acordo com uma escala
numrica. Dessa forma, uma situao ideal seria representada pelo alcance do
mximo de pontuao possvel para cada um dos indicadores, tendo em vista os
pontos atribudos e os critrios adotados para a pontuao a partir das respostas
obtidas no levantamento dos dados. O anverso da situao seria, como pressuposto, representado pela inexistncia de pontuao (zero ponto), o que significaria o no alcance de pontos em qualquer dos indicadores considerados.
Tomada essa deciso metodolgica, o interesse foi estabelecer como seriam
valorados os diferentes indicadores. Para tanto, considerou-se: a) que os indicadores detm natureza distinta na medida em que mensuram fenmenos diversos
e, por essa razo, detm poder de definio tambm diferenciado sobre a capacidade de gesto conforme concebida na proposta; b) que os indicadores construdos
buscam mensurar fenmenos que expressam, no processo de gesto, os princpios que orientaram a opo pelo modelo de organizaes sociais. Assim, alguns
dos indicadores precedem a outros em ordem de importncia porque medem aspectos do fenmeno que, segundo sua natureza, so tambm mais importantes
na caracterizao dos princpios.
Resultou de tais consideraes quatro tipo de indicadores a saber: de participao, de conhecimento, de satisfao e de existncia. Esses ltimos, os indicadores de existncia, esto divididos em 2 tipos: existncia constatada - no caso,
pelos avaliadores quando da coleta dos dados - e existncia referida, quando
informada por outros. Na matriz 2 constam exemplos de cada um dos indicadores.
Os pontos atribudos a cada tipo de indicador foram, tambm, diferenciados,
valorando-se mais os indicadores de participao e menos aqueles de existncia
referida, conforme apresentado no quadro 1, a seguir.

120

o &s - v.13 - n.37 - Abril/Junho - 2006

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

Quadro 1 - Natureza dos Indicadores Propostos para Avaliao da

Capacidade de Gesto de Organizaes Sociais, Pontos Atribudos e
Justificativas
Ordem de
importncia

Indicadores
segundo
natureza
Indicadores de
participao

1
Total: 3
indicadores

Indicadores de
conhecimento
Total: 5
indicadores

Indicadores de
satisfao
Total: 11
indicadores

Indicadores de
existncia
a) existncia
constatada
total: 13
indicadores
b) existncia
referida
total: 2
indicadores

Caractersticas

Pontos

Conjunto de
10
indicadores que
mensuram o
envolvimento de
diferentes atores no
processo de
planejamento utilizado
pela organizao
Conjunto de
08
indicadores que
mensuram a
disseminao de
conhecimentos
estratgicos entre
diferentes atores
organizacionais
Conjunto de
indicadores que
mensuram a
satisfao referida de
diferentes atores
internos e externos
com os aspectos
estratgicos na gesto
de uma organizao
social

06

Conjunto de
indicadores que
mensuram a
existncia efetiva ou
referida, na
organizao, de
procedimentos e ou
mecanismos que so
estratgicos na
implementao e
sustentao de um
modelo diferenciado
de gesto

04

03

Justificativa

O
envolvimento
de
diferentes
atores
no
processo de planejamento
da organizao traduz de
forma direta os princpios
da
autonomia,
da
transparncia
e
da
flexibilidade do modelo OS
A melhor distribuio de
conhecimentos estratgicos
entre
diferentes
atores
organizacionais atende ao
princpio da transparncia e
qualifica
a
participao
destes no processo de
planejamento
da
organizao
A maior referncia de
satisfao por parte de
distintos atores internos e
externos
com
aspectos
estratgicos
da
gesto,
contemplando
atividades
meio e fins da organizao,
traduz a construo de
uma imagem positiva que
aumenta a viabilidade e a
sustentabilidade da mesma
A existncia comprovada
ou
referida
de
procedimentos
e
mecanismos
estratgicos
de
gesto
indica
investimentos
pela
organizao
social
para
garantir a sustentabilidade
dos resultados da sua
gesto

Vale ressaltar que os valores atribudos a cada um dos indicadores representam um mximo de pontuao que pode ser alcanado. Dessa forma, fez-se
tambm necessrio definir critrios para pontuar os diferentes resultados que
pudessem advir do trabalho de campo. Para tanto se considerou o seguinte:
1Alguns indicadores contemplam resultados dicotmicos (sim e no). Nesses
casos, os pontos sero totalmente atribudos para a resposta positiva.
2Os indicadores que mensuram a freqncia de determinadas respostas entre um conjunto de atores podem assumir valores entre zero e o total de
respostas possveis. Assim, a pontuao total prevista deve ser redistribuda
de forma a corresponder s possibilidades das respostas, o que se faz na
metodologia adotada a partir dos seguintes princpios:

o &s - v.13 - n.37 - Abril/Junho - 2006

121

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

Adoo de uma escala numrica com quatro pontos de corte (25%, 50%,
75% e 100%) que representam o percentual de respostas esperadas.
Exemplo: Se 25 clientes/usurios, num total de 60 entrevistados, referem
satisfao com o servio prestado pela organizao, o que corresponde a
41% de respostas positivas, o resultado situa-se no ponto de corte de 25%
de respostas, porque se encontra no intervalo de 25 a 50% (de corte).

Para alguns indicadores arbitrou-se que s seria possvel alcanar a pontuao mxima com o total de respostas positivas. Esse critrio foi adotado
para aqueles indicadores que expressam fenmenos mais relevantes e para
os quais a maior pontuao possvel teoricamente vivel.
Exemplo: O indicador percentual de trabalhadores que referem conhecer os
objetivos e a misso da organizao pode pontuar no mximo 8 pontos. O
critrio adotado foi o de valorizar o maior nmero de respostas possveis por
se tratar de fenmeno relevante para a capacidade de gesto e por ser vivel a qualquer organizao manter seus trabalhadores bem informados. Ento, cada 25% de respostas positivas corresponderiam a 2 pontos at o mximo de 100%, ou 8 pontos. Caso o percentual de respostas positivas fosse
de 41%, como no exemplo anterior, ento o indicador somaria 2 pontos.

Para outros indicadores arbitrou-se pela diviso dos pontos totais em at 25%,
50% e 75% de respostas positivas, o que significa aceitar que, em alguns
casos, um percentual de respostas menor que 100% tambm relevante.
Exemplo: O indicador percentual de trabalhadores que referem ter participado do processo de elaborao de instrumentos de planejamento para
definio das prioridades da organizao, pode somar at 10 pontos. Assume-se que, dada a cultura organizacional prevalecente no Brasil, um
percentual de 25% de respostas positivas bastante relevante. Assim, este
o ponto de corte, o que pode ser lido da seguinte forma: se pelo menos
25% dos trabalhadores da organizao referem participar, ento, a organizao merece receber todos os pontos possveis nesse indicador. O mesmo
raciocnio aplica-se para indicadores com ponto de corte em 50% e 75% de
respostas positivas.
Para alcanar os resultados finais da avaliao, aps registrar os valores
obtidos em cada um dos indicadores, procede-se soma dos valores. Dessa forma, os avaliadores chegam a um valor numrico que expressa a capacidade de
gesto da organizao.
Por ltimo, importa ressaltar a metodologia construda e utilizada para leitura dos achados. Nesse sentido, assumindo que o foco da avaliao a gesto
como processo, admite-se que o resultado conclusivo da anlise deve sinalizar
para um momento especfico do processo de desenvolvimento da capacidade de
gesto de uma organizao social. Isto implica em que a metodologia adotada
no avalia uma gesto como boa ou m, evitando as armadilhas de avaliaes
binrias que no geram perspectivas de aperfeioamento, seja para os bons,
seja para os maus.
Assim, considerou-se que, tendo em vista todo o esforo que vem sendo
feito para fazer avanar a gesto pblica, qualquer metodologia de avaliao deve
revelar os pontos crticos que vm constrangendo o desenvolvimento pleno da
capacidade de gesto de uma organizao. Tanto os gestores da organizao
como os gestores do processo de implementao do modelo OS podem incorporar
os resultados da avaliao como parte do planejamento de aes presentes e
futuras, e no apenas julgar o que no foi feito ou o que foi feito inadequadamente no passado.
Tambm para a avaliao da capacidade de gesto como um continnum fezse necessrio arbitrar valores. Nesse caso, optou-se por uma leitura inclusiva dos
resultados, o que levou a concepo da seguinte escala de valores, considerando
percentuais de alcance da totalidade de pontos possveis no plano de indicadores:

At 25% de desempenho: insuficiente desenvolvimento da capacidade de

gesto.
122

o &s - v.13 - n.37 - Abril/Junho - 2006

Subsdios para Avaliao da Gesto Pblica: Processo de Construo de Indicadores

para Avaliao da Capacidade de Gesto de Organizaes Sociais

Entre 26 e 50% de desempenho: baixo desenvolvimento da capacidade de

gesto.

Entre 51 e 75% de desempenho: mdio desenvolvimento da capacidade de

gesto.

76% ou mais de desempenho: alto desenvolvimento da capacidade de gesto.

Para reconhecer os pontos crticos e, tambm, os pontos altos da capacidade de gesto, retoma-se a matriz e faz-se a leitura crtica dos resultados obtidos
nos indicadores. Tendo em vista o desenho da avaliao, o retorno matriz permite, entre outros: a) identificar os indicadores que obtiveram piores e melhores
resultados; b) promover discusses internas com a equipe sobre os determinantes
e os condicionantes para o comportamento de determinadas variveis; c) identificar constrangimentos e sua insero, os quais podem ser internos ou externos
organizao; e d) definir e articular estratgias para superao dos constrangimentos a curto, mdio e longo prazo.

CONSIDERAES FINAIS
O desenvolvimento da metodologia para avaliao da capacidade de gesto de organizaes sociais encerrou uma srie de desafios e, por isto mesmo,
somou um conjunto de aprendizagens sobre a prpria proposta de organizaes
sociais, sobre o conceito de gesto e sobre muitos dos aspectos que envolvem a
avaliao de qualquer ao.
Por outro lado, importa destacar que os autores adotaram um caminho
metodolgico compatvel com as exigncias da pesquisa acadmica para o desenvolvimento da proposta de avaliao, mas os objetivos do trabalho vo alm dos
relativos produo de conhecimentos.
Tendo em vista o entendimento de que a avaliao deve ser uma prtica
incorporada ao cotidiano das organizaes pblicas, argumenta-se que os instrumentos de avaliao devem ser factveis e viveis. Dessa forma, o rigor que presidiu as escolhas conceituais e decises procedimentais visou a produzir um desenho de avaliao que, de um lado, busca a confiabilidade dos resultados e, tambm, sua sensibilidade em aproximar-se do fenmeno em avaliao. Por outro
lado, buscou-se, ainda, preservar a aplicabilidade do instrumental e sua
reprodutibilidade em diferentes contextos.
Considerando o que foi at aqui assinalado, pareceu de maior importncia e
adequao, em todo o trabalho, o constante dilogo entre os pesquisadores e os
tcnicos do estado e das organizaes sociais. reconhecido que o dilogo no
se faz sem dificuldades para a construo dos pactos, o que valoriza ainda mais o
esforo em se tratando de uma avaliao que gera resultados sobre o trabalho de
muitas pessoas.
Cabe, ainda, ressaltar que o desenvolvimento do trabalho foi presidido pelo
entendimento de que uma avaliao considerada positiva quando capaz de contribuir para a identificao dos problemas e para a proposio de formas de
enfrentamento. Assim, pressupe-se que a avaliao proposta no se encerra em
si mesma, ao contrrio, subsidia o planejamento de um futuro na direo da conquista de um desenvolvimento pleno da capacidade de gesto.

REFERNCIAS
BRASIL. Ministrio da Administrao Federal e Reforma do Estado - MARE/Secretaria da Reforma do Estado. Organizaes Sociais. Braslia: MARE, 1997 (Cadernos MARE da reforma do estado, v. 2).
CLAD. Una nueva gestin publica para America Latina, 1998. Disponvel em:
<http://www.clad.org> Acesso em : 20 out. 2001.
o &s - v.13 - n.37 - Abril/Junho - 2006

123

Sandra Maria Chaves dos Santos, Maria do Carmo Lessa Guimares,

Cristina Maria Meira de Melo & Alvino Sanches Filho

DRAIBE, Sonia. Avaliao de programas. In: BARREIRA, Maria Ceclia Roxo Nobre;
BRANT de CARVALHO, Maria do Carmo (Org.). Tendncias e perspectivas na avaliao de polticas sociais. So Paulo: IEE/PUC, 2001. p. 165-181.
DUPUIS, Jrme. Les raisons du faible impact des valuations. Les Cahiers de la
Dcentralisation. Pouvoirs Locaux, Boulogne - Billancourt, France, n. 38: 38-39, v.
III, sept. 1998.
FIGUEIREDO, Marcus Faria, FIGUEIREDO, Argelina Maria Cheibub. Avaliao
poltica e avaliao de polticas: um quadro de referncia terica. So Paulo: IDESP,
1986.
GUIMARES, Maria do Carmo Lessa, SANCHES, Alvino, MELO, Cristina M., SANTOS, Sandra M. C. dos. Indicadores para avaliar a capacidade de gesto de
organizaes sociais: resultados de um estudo piloto. In: XXVII Encontro Anual
da Associao Nacional de Programas de Ps-Graduao em Administrao.
Anais... Atibaia, SP: ANPAD, 2003 1 CD-ROM.
JANNUZZI, Paulo de Martino. Indicadores sociais no Brasil - conceitos, fontes de
dados e aplicaes. Campinas: Alnea, 2001.
MATUS, Carlos. Poltica, planejamento e governo. Braslia/IPEA, 1993.
MODESTO, Paulo. Reforma administrativa e marco legal das organizaes sociais
no Brasil. Jus Navigandi. Disponvel em: http://www1.jus.com-br/doutrina/texto
Acesso em: 18/10/2001.
MOTTA, Paulo Roberto. Gesto contempornea: a cincia e a arte de ser dirigente.
Rio de Janeiro. Ed. Record, 1991.
NASSUMO, Marianne. Organizao dos usurios, participao na gesto e controle das organizaes sociais. Revista do Servio Pblico, v. 48, n. 1, jan./abr.
1997.
PASTANE, Caroline. Prticas de avaliao na gesto descentralizada de sade: a
experincia de Vitria da Conquista-1998-2001. Dissertao apresentada ao
Mestrado em Administrao da Escola de Administrao da Universidade Federal
http://www.adm.ufba.br>.
da Bahia, 2002.Disponvel em <
PENTEADO, Paulo Arruda. Desafios e oportunidades da reforma do estado no
Brasil: a questo das organizaes sociais. O&S, v. 5, n.11, jan./abr. 1998.
PINTO, lida G. Plano diretor da reforma do aparelho do estado e organizaes
sociais. Jus Navigandi. Disponvel em :http://www1.jus.com.br/doutrina/texto
Acesso em: 18/10/2001.

124

o &s - v.13 - n.37 - Abril/Junho - 2006