Escolar Documentos
Profissional Documentos
Cultura Documentos
INTRODUO
bem como podendo se servir das possveis solues adotadas em outras IES que o texto
apresenta, sem perder de vista a relevncia do tema ao remeter o estudo para os milhares
de alunos concluintes, nas centenas de IES do Pas.
Em Lima et al (2011,p.18) apresentado no III Seminrio de Pesquisa
Interdisciplinar UNISUL, temos um ponto de vista a ser considerado:
Por entender que as IES so de natureza complexa, ambgua e anrquica, e
que, em decorrncia deste contexto complexo, que se sugere a realizao de
estudos que estejam voltados para o desenvolvimento metodologias para
processo de construo da autoavaliao, de tal forma que, este processo
represente de forma alinhada os anseios e os desejos de sua comunidade
acadmica e institucional.
OBJETIVOS
Este trabalho busca uma contribuio terica e prtica para todos aqueles que
passam a se envolver com a Avaliao Institucional, especialmente no que tange
autoavaliao. Apresenta uma rpida reviso terica sobre o tema, apresentando um
histrico fora e dentro do Brasil, indicando suas origens e principais focos de discusso.
A seguir apresenta a viso pratica da formao da CPA, seus desafios e conquistas.
Tem como objetivo principal, evidenciar a importncia formativa da CPA dentro
do contexto da avaliao institucional. Para tanto, apresenta trs objetivos menores de:
Trazer discusso o referencial terico que trata da avaliao e seus
aspectos doutrinrios e histricos;
Evidenciar os aspectos conceituais na construo do processo de
avaliao institucional e da autoavaliao no Brasil;
Apresentar dificuldades e indicar possveis caminhos de contorno na
formao, atuao e resultados das CPAs.
3
METODOLOGIA
Trata-se de uma pesquisa de natureza aplicada na medida que indica processos e
caminhos que possam ser utilizada no dia a dia, com objetivos descritivos e
explicativos, valendo-se do mtodo observacional comumente utilizado pelas cincias
sociais:
Por um lado, pode ser considerado como o mais primitivo e,
consequentemente, o mais impreciso. Mas, por outro lado, pode ser tido como
um dos mais modernos, visto ser o que possibilita o mais elevado grau de
preciso nas cincias sociais. (GIL, 2008, p. 16).
pesquisa. Yin (2005, p.28), ressalta que a utilizao do estudo de caso torna-se
adequada quando se pretende investigar o como e o porqu de um conjunto de eventos
contemporneos.
Sobre a forma de anlise dos dados, Godoy (1995, p.33) afirma que com a
abordagem qualitativa possvel obter dados descritivos sobre pessoas, processos
interativos, atravs do contato direto do pesquisador com a situao a ser estudada;
ainda afirma Godoy: Os pesquisadores qualitativos esto preocupados com o processo
e no simplesmente com os resultados ou produto. (1995, p.63)
4
4.2
A linha do tempo
CONCEITOS EM DESTAQUE
DAVID NEVO
Investigao sistemtica do valor e do mrito de um objeto
Joint Comitee
Avaliador deve emitir juzos, no existe uma neutralidade deste.
H um valor intrnseco da organizao.
CRONBACH
Conduzir um estudo sistemtico do que ocorre com a instituio com o objetivo de
Stanford Evaluation melhorar e instrumentalizar outros programas e instituies.
Consortium
O avaliador no tem o papel de Juiz.
Michael Quinn
Caractersticas: Mtodos qualitativos; Avaliao formativa; Promover discusso
Patton
com os interessados (stakeholders)
UtilizationComo definimos avaliao e que nome dar a uma avaliao especfica so
Focused Evaluation questes que precisam ser discutidas, classificadas e negociadas. O que no
negocivel que a avaliao esteja baseada em fatos, intencional e sistemtica
NO BRASIL
Jos Dias Sobrinho Um empreendimento sistemtico que busca a compreenso global da
universidade, pelo reconhecimento e pela integrao de suas diversas dimenses
Isaura Belloni
a) Preocupao com o processo educacional da avaliao como meio para o
despertar da conscincia.
b) Processo constante de negociao em todas as fases (deciso, implementao e
uso dos resultados).
Avaliao institucional... um empreendimento que busca a promoo da
tomada de conscincia sobre a instituio
Ver artigo em EDUCACIN SUPERIOR y SOCIEDAD - VOL 5 N 1 y 2: 51-70,
1994 - Proposta de avaliao institucional da Universidade de Braslia
4.4 SINAES
Neste inicio da apreciao do tema, apresentam-se algumas das mais importantes
caractersticas, pois as discusses sobre avaliao no Brasil passaram por diversas
etapas e culminaram (2003) com o SINAES, o qual representava o modelo conceitual
dos debates da poca (Quadro 2), sobre o tema avaliao, embora a partir da sofra a
influncia forte dos preceitos utilitaristas afirmados com a legislao. Sua gesto pela
Comisso Nacional de Avaliao da Educao Superior CONAES constituda por 13
membros, dos quais cinco representantes de rgos governamentais (INEP, CAPES,
MEC), cinco indicados pelo ministro da Educao e trs representantes da comunidade
acadmica.
Alm da avaliao externa o sistema prev a avaliao interna ou autoavaliao
que dever anteceder externa. Estas avaliaes so conduzidas internamente por uma
comisso autnoma em relao aos conselhos e colegiados internos, chamada CPA
(Comisso Permanente de Avaliao).
4.5
Indicadores Educacionais
4.6
Autoavaliao e CPAs
RESULTADOS E DISCUSSOES
Para que atinja seus objetivos temos a sua consolidao, o debate a ser
promovido, ou seja o processo crtico interno a cada campus, cada curso, cada funo,
cada local, com vistas a melhoria de qualidade, apropriando este conhecimento para a
cultura da organizao.
Constituio e Autonomia
No aspecto inicial, da constituio da CPA, o principio da autonomia da
comisso, pode esbarrar em algumas dificuldades polticas e disputas de poder, uma vez
que a comisso avalia aspectos docentes-pedaggicos e tambm a gesto; atuar com
autonomia, no necessariamente significa independncia, pois depender sempre a CPA
de toda uma infraestrutura proporcionada pela alta administrao. Isto poder
transparecer em alguns momentos como uma troca de favores, prejudicando
sobremaneira os objetivos maiores.
O outro aspecto constitutivo se refere representatividade (e legitimidade) da
comisso, o que significa que no basta uma indicao inicial dos membros, preciso
um processo aberto que permita sensibilizar e trazer tona o processo poltico que
venha a estabelecer os representantes (docentes, tcnicos e estudantes). A sensibilizao
ir se valer dos diversos meios disponveis, mas todos aqueles que convivem no
ambiente acadmico sabem das dificuldades para a alocao de eventos que no sejam
diretamente ligados ao ensino; desta forma, professores interessados e com
disponibilidade de tempo, tcnicos capacitados e disponveis e mesmo alunos, tero
muita resistncia em deixar sua zona de conforto se no existir um real envolvimento de
todos.
As discusses em reunies e o contraditrio que iro gerar o volume
motivacional, devendo-se abrir espao para que elas existam e procurando a
conciliao, com uma agenda mnima consensual.
5.2.2
Aspectos formativos
O conhecimento conceitual sobre Avaliao da comisso, com a leitura dos
diversos materiais (tal como este trabalho), condio sine quae non para que seja vista
como um eficaz instrumento para o aperfeioamento institucional.
Alm do cenrio interno na Instituio, outros estudos14 se referem, o
distanciamento do CONAES e outros organismos das comisses prprias de avaliao
das instituies, ou seja, os avaliadores externos, so formados, capacitados, avaliados e
remunerados externamente, o que no ocorre com os avaliadores internos.
Ao final do processo interno de autoavaliao, os relatrios finais produzidos
so encaminhados ao rgos externos competentes (postados via upload), mas
permanece o distanciamento, no existindo qualquer feedback sobre o documento. Em
resumo h evidencias de um dilogo insuficiente entre CPAs e CONAES-INEP, no
apenas com o feedback final, mas inclusive sobre as diversas publicaes, notas
tcnicas, normativas, etc. Ou seja, da parte do governo, a implementao de
mecanismos de comunicao tais como redes sociais, emails, comunicaes para as
CPAs inexistente, embora fcil de ser implementada, especialmente considerando os
recursos proporcionados pelo sistema BASis15.
Outro ponto de fragilidade o aspecto formativo-tcnico dos membros da CPA
que deve iniciar com a familiaridade dos princpios e conceitos do SINAES, e a seguir
com o apoio tcnico das TICs (Tecnologias de Informao e Comunicao) para a
elaborao de questionrios, documentos, tabelas, grficos, relatrios, etc. onde
geralmente falta gente habilitada tanto na captao, publicao, anlise, estatstica e
10
Passo 1 - Planejar
No passo que o planejamento
natural que quando voc saiba o
porque est sendo feita a avaliao
11
seja muito mais fcil concordar sobre o que deve ser avaliado. Mas na realidade o que
acontece que muitas vezes o objetivo, o porque no claro, uma vez que o conflito
de interesses dos diversos stakeholders usual.
Embora avaliar seja parte de nossa rotina, autoavaliar incomum pois
significa refletir sobre as prprias aes, reconhecer as limitaes e quase sempre isto
doloroso; ento a primeira dificuldade reconhecer as limitaes e a segunda e maior
ainda estabelecer o que deve ser mudado, pois isto requer esforo e honestidade.
improvvel que se possa conquistar uma posio melhor e perene,
fortuitamente, quase sempre necessrio empenho, esforo e constncia.
Observa-se que o planejamento e especialmente o cronograma que no
contempla algumas folgas, ou um coeficiente de segurana, comumente fadado ao
insucesso, porque durante o processo, os membros da equipe so solicitados a tarefas
fora da CPA e que fazem parte do dia a dia da instituio. Como a funo na CPA no
perene, do conhecimento do participante que poder atrasar suas obrigaes na CPA
toda vez que for solicitado para atuar em outra atividade que faz parte da rotina da IES.
Outro ponto desafiador a natural resistncia s mudanas e neste caso, uma das
fontes importantes para orientar as organizaes nas mudanas, Harvard, com os 8
passos de Koter (2012) conforme observa-se no Quadro 3.
Para colocar em movimento toda a estrutura organizacional em torno da
avaliao quase sempre requerido um esforo, para deixar claros os valores e objetivos
e compartilh-los com a instituio, visando minimizar situaes pontencialmente
problemticas como:
Alm dos processos institucionais regulares da IES, outro fator que drena o
potencial humano disposio da CPA, so as necessidades particulares de cada
membro que devem ser atendidas, tais como capacitaes, cursos internos e externos,
programas de ps-graduao (especializao, mestrado e doutorado) que comumente
requerem dedicao e tempo e que muitas das vezes representam uma retribuio
financeira futura da qual o servidor/colaborador no ir abrir mo. Divulgar e tornar
pblico estes cronogramas, datas limite, recursos envolvidos pode ser um bom fator
para desencadear o processo de forma clara e evitar desculpas como desconhecimento
e/ou no fui avisado disso.
Olhando para aos aspectos organizacionais, temos a estrutura da gesto da IES,
papis e atribuies, responsabilidades, processos de tomada de deciso, eficincia e
eficcia, comunicao, uso de recursos, planejamento participativo e efetividade das
decises tomadas e, todos so tpicos que podem vir tona, toda a vez que se fala em
avaliao pois esto ligados QUADRO 3 - Passos de Kotter para liderar as mudanas
diretamente ao poder, da
que pode surgir o conflito entre Em seu livro liderando a mudana, Kotter enumera oito
a administrao da instituio e pontos, apresentados aqui de forma sucinta:
a equipe que implementar o 1. Estabelea um "senso de urgncia" (crise sinal de
processo avaliativo interno.
oportunidade);
Dentre estes conflitos pode ser 2. Crie uma coalizo administrativa forte;
3. Desenvolva uma Viso de Futuro e Estratgia;
citado:
A equipe ajudar a mostrar 4. Comunique-se exaustivamente apresentando uma Viso
das Mudanas (exemplifique);
os pontos fracos da gesto 5. D poder aos envolvidos (remova obstculos);
atual o que pode no ser 6. Realize conquistas a curto-prazo (vitrias imediatas);
adequado especialmente se 7. Consolide os ganhos e vitrias e divulgue-os;
tratando de cargos diretivos 8. Estabelea novas metodologias na organizao (integrar
cultura organizacional)
eletivos.
Fonte: Kotter (1997, 2012)
12
Decorrente do temor ocasionado pelo item anterior poder inexistir qualquer apoio
logstico ao processo e equipe; lgico que o escalo superior no queira dar
munio a quem vai deton-los.
So comuns:
No ter apoio logstico: Sala, materiais, equipamentos;
No liberar os componentes das tarefas pr-existentes, fazendo com que a
participao no processo seja um encargo adicional e desgastante, prejudicando o
desempenho regular do envolvido.
No proporcionar suporte tcnico adequado: Tecnologia da informao e
Comunicaes, estatstica, softwares, etc.
Desinformao o que produz conflitos entre as diversas reas da instituio (cursos,
departamentos) e a CPA e muitas vezes gerando conflitos internos na prpria
equipe.
Embora a conduo do processo seja pela CPA (interna), esta poder necessitar
de recursos externos, e pessoas, tais como especialistas no preparo de formulrios,
questionrios, tabulao de resultados e estatstica, editorao e impresso, etc. A no
liberao destes recursos implica na prtica na fragilidade da equipe, falta de
confiabilidade dos resultados e na aniquilao do processo.
Falta de habilidade do presidente da comisso em apresentar os dados de forma
isenta e imparcial. Apresentar os dados comprovados fundamental; a avaliao no
pode prescindir de dados fidedignos.
Falta de interesse dos componentes da equipe uma vez que foram designados
arbitrariamente para tal.
Falta de habilidade da CPA e transmitir os valores e objetivos da Instituio e de
como os resultados da avaliao podem conduzir a IES a patamares mais elevados.
Maior interesse da administrao no ranking representado pelo provo que na
evoluo da IES; o que significa: Do ponto de vista interno, investir o mnimo
suficiente para manter o credenciamento da instituio e do curso e investir apenas
no preparo da grande prova dos alunos, a qual detm toda a ateno da mdia
o marketing. Dir-se-ia mais que isso, o TER sobrepujando o SER, quando os
dois poderiam estar aliados; a aparncia vencendo o real. No caso das IES pblicas
governamentais e especialmente as Federais, esta situao adquire outras
conotaes, uma vez que o descredenciamento quase que impraticvel.
Neste caso a comisso de avaliao interna (CPA) tem apenas papel Figurativo.
Felizmente esta ideia de apenas aparncia praticamente inexistente nas IES
pblicas.
Falta de clareza por parte da CPA dos valores, objetivos e da metodologia a ser
aplicada e que estes possam refletir a tica organizacional.
Existe aqui o pressuposto de que os objetivos maiores da avaliao interna
dentro da IES sejam formativos, proporcionando um aperfeioamento institucional
servindo de base para a tomada de decises que impliquem em evoluo da instituio;
claro que se o objetivo for apenas maquiar a Instituio para que obtenha uma boa
pontuao junto aos avaliadores externos, isto ter outra conotao e outra abrangncia.
Embora abordados cada um dos pontos de forma isolada, cabe ressaltar que
todos estes tpicos atuam de forma concorrente e muitas vezes simultnea cada um dos
componentes da CPA, o que evidencia que a natureza desta forma de pensar e agir no
simples, e sim bastante complexa requerendo da coordenao esforos para manter o
foco nos aspectos relevantes e/ou substantivos da autoavaliao.
Novamente cabe recordar Ramos (1989) e Morin (2000), o primeiro quando
evidencia a racionalidade substantiva e o paradigma multidimensional, ao invs de um
13
Passo 3: Resultados
Antes de chegar aos resultados (coleta, tabulao e anlise) importante que
saber de antemo como chegaremos a eles e como sero apresentados; ou seja se voc
no pensou previamente em como apresent-los poder se deparar com informaes
incompletas, incongruentes e inconclusivas, que no podero mais ser obtidas, a no ser
com grande esforo adicional e certamente custos elevados. Como os recursos
disponibilizados s CPAs, no so ilimitados, importante estar preparado; com o
passar do tempo, a CPA ter aprendido com os erros do passado e este item ser
minimizado em sua importncia.
A divulgao dos resultados algo, fundamental e tambm deve ser planejado
minuciosamente. O uso de arquivos digitais ou a mdia impressa necessria que
significa que alm dos pontos tcnicos que iremos discutir, alguns aspectos de
diagramao, padres da instituio, layout deve ser obedecido para que torne sua
leitura agradvel e til.
Os relatrios podem ter classificaes conforme sua destinao:
INTERNO CPA: Completos contendo todos os dados.
CIRCULAO INTERNA: Apresentando os resultados importantes
CIRCULAO EXTERNA: Obedecendo aos critrios de regulao
14
15
CONSIDERAES FINAIS
16
Outro ponto a ser aprimorado se reporta ao fator financeiro, onde a CPA reclama
Condies oramentrias independentes para que o contingenciamento de recursos no
comprometa o funcionamento da CPA. Pessoas envolvidas nestas tarefas necessitam
deslocar-se, alimentar-se, matrias de trabalho, etc. tudo isto precisa ser negociado, cada
item individualmente, gerando desgastes desnecessrios e gerando por vezes a perda do
foco principal o processo avaliativo.
6.2 E agora ?
Identidade, a organizao racional e burocrtica, seus objetivos so parte
fundamental dos estudos organizacionais (REED, 2012) e refletem sua cultura
organizacional e o principio de que a organizao social atribui racionalmente a cada
indivduo sua funo tcnica cai por terra. Observa-se desta forma nas organizaes o
que diz REED (2012, p.112): um emaranhado de atividades, delegaes e
responsabilidades desconexas.
Nas organizaes pblicas no seria diferente e por consequncia, tambm no
nas Instituies de Ensino. Em Vianna (2011), dentre os desafios para o gestor da nova
administrao pblica, encontramos Desenvolver a cultura da qualidade, a qual
baseada na premissas de:
Apontar as caractersticas e valores das organizaes no Sculo 21
Distinguir cultura organizacional e cultura de servio
Identificar os fundamentos constitucionais e gerenciais da cultura de
qualidade no servio pblico. (VIANNA, 2011, p.108)
que considera mais importantes, fazendo com que o avaliado responda (e atue) de
acordo com seus pontos de vista. Vimos tambm que a despeito de evidenciar este
poder, deve sempre estar apoiado em dados e fatos e seu ponto mais vulnervel o ser
humano.
Apresentamos a gnese do SINAES e os principais princpios observamos a
sociedade, seu clamor para o ranqueamento e como este processo deixa de ser
substantivo, na medida que no contempla as idiossincrasias de cada instituio;
abordamos o antigo provo, o ENEM, e no que tange autoavaliao nos
concentramos no aspecto conceitual do processo, na cultura organizacional da
autoavaliao e na atuao cotidiana das CPAs. Com a autoavaliao, o processo
avaliativo permite que o avaliado olhe para si mesmo, avalie sua real situao, melhore
seus resultados e evolua, de modo que a avaliao externa seja um complementar ao que
j feito.
Cabe-nos constatar que a despeito de no estar incorporada cultura da
instituio, a autoavaliao deixou de ser uma mera coleo de dados, e j supera a fase
da informao transformando-se em conhecimento. No Instituto Federal de Santa
Catarina (IFSC), a comparao dos resultados atuais, com experincias anteriores j
demonstra que se est trilhando um novo caminho, inclusive avaliando no apenas os
cursos de graduao, mas tambm os cursos tcnicos (alm da obrigatoriedade legal).
Embora timidamente e ainda sem utilizar os resultados de forma rotineira, se percebe
sua necessidade e possvel contribuio na busca da excelncia. Embora citada, a
dificuldade da inexistncia de um oramento prprio pode ser superada, mas
aparentemente o problema maior que no permite dar o grande passo e buscar a
superao, reside no fato de que a CPA no uma estrutura perene como em algumas
instituies, com maior tradio a equipe circunstancial e a fora tarefa, uma vez
montada, executa a coleta de dados, tabulao e divulgao, sem dar o aporte necessrio
para o acompanhamento das possveis correes de rumo como analisar, fazer
recomendaes, acompanhar solues e a partir do sucesso de algumas destas
alternativas, indicar para outros.
Nossa sugesto para futuras pesquisas no sentido de avaliar os resultados
efetivamente conquistados a partir dos relatrios da CPA, comparando-se os relatrios
ano a ano e verificando os pontos de reincidncia em vrias instituies. Outro tema de
grande praticidade observar os padres, formatos, profundidade e extenso dos
relatrios das CPAs, buscando os tpicos mais comumente abordados e indicados para
melhoria.
Nesta pesquisa foram apresentados os aspectos tericos, prticos e a constatao
de que na instituio da qual o pesquisador participou, a expectativa futura promissora
a despeito das dificuldades at o momento encontradas. Apoiada no desempenho
individual, na disposio de seus elementos, nos multiplicadores e na capilaridade de
sua atuao em cada campus, floresce uma nova cultura organizacional, tendo como
ponto central a excelncia do ensino e a formao no apenas de tcnicos, mas tambm
de cidados onde floresce a cultura da autoavaliao.
7
REFERNCIAS
18
19
Stakeholder: Termo utilizado em administrao para indicar partes interessadas, tais como fornecedores,
clientes, scios, colaboradores, proprietrios, governo, etc.
2
Criado em 1808, o bacharelado um diploma do sistema educativo Frances que apresenta uma dupla
particularidade de sancionar o fim dos estudos secundrios e abre o acesso ao ensino superior. Ele
constitui primeiro diploma universitrio. (Ministrio da Educao do Governo Frances, 2012) traduo
do autor.
3
Docimologia: Estudo sistemtico dos exames, em particular da atribuio de notas e dos
comportamentos de examinadores e examinados.
4
Psicometria: Testes padres e objetivos para medir inteligncia e desempenho.
5
Edumetria: a cincia da medida aplicada s cincias da educao.
6
Bibliometria: Um conjunto de leis e princpios empricos que contribuem para estabelecer os
fundamentos tericos da Cincia da Informao. O termo statistical bibliography hoje Bibliometria foi
usado pela primeira vez em 1922 por E. Wyndham Hulme.
7
Discurso Ruskin Oxford: Em outubro de 1976, James Callaghan, eleito primeiro-ministro trabalhista
da Inglaterra, pronuncia seu famoso discurso no College Ruskin de Oxford, lanando suspeitas em
relao ao baixo padro de ensino, gerando grande repercusso. Logo a seguir, no mesmo ms, numa
conferncia do Partido Trabalhista, preocupava-se com as despesas muito elevadas em educao. Surge
ento o Yellow Book, elaborado pelos conselheiros de Callaghan, que era um documento com 60
pginas fazendo um balano da educao.
8
Accountability: Termo em ingls utilizado na administrao que corresponde prestao de contas.
9
Acreditation: Termo em ingls, utilizado pelos autores em avaliao e que significa que a Instituio foi
oficialmente reconhecida como satisfazendo os requisitos essenciais de excelncia acadmica. No Brasil
os principais autores a traduziram como acreditao.
10
Fournier, Deborah M. Evaluation. In S. Mathison,(ed.) Encyclopedia of Evaluation. Thousand Oaks,
CA: Sage Publications, 2005, p. 139140
20
11
21