Escolar Documentos
Profissional Documentos
Cultura Documentos
Resumo
A pesquisa qualitativa sobre a Poltica Pblica de Avaliao da Educao Superior o Sistema Nacional de Avaliao da Educao Superior (SINAES) no Brasil teve dois objetivos: examinar como vem sendo construda a avaliao interna na Universidade do Estado da Bahia (UNEB), a partir de fontes documentais e das vozes dos membros da Comisso Prpria de Avaliao, das Comisses Setoriais de Avaliao e dos Gestores da administrao da universidade; analisar a fala dos Gestores da Administrao Superior da UNEB, membros da Comisso Prpria e das Comisses Setoriais de Avaliao, sobre o processo de avaliao interna institucional sob o marco referencial do SINAES e a construo de uma cultura de avaliao na universidade. A pesquisa ocorreu no Campus I, em Salvador, Bahia Brasil, entre o segundo semestre de 2007 e o primeiro de 2008. Foram identificadas: dificuldade de comunicao; pouca formao em avaliao dos membros das Comisses e falta de apoio da administrao superior atividade avaliativa. Palavras-chave: Poltica pblica de avaliao da educao superior. Avaliao institucional interna. Sistema Nacional de Avaliao da Educao Superior. SINAES.
**
Licenciada em Cincias Sociais pela UFBA; Mestra em Polticas Sociais e Cidadania, Universidade Catlica de Salvador (UCSAL); Especialista em Avaliao e em Administrao Universitria;. Professora Adjunta, Universidade do Estado da Bahia (UNEB), lotada no Departamento de Educao do Campus ISalvador. Leciona Sociologia nos cursos de Administrao, Pedagogia, Nutrio e Desenho Industrial. E-mail: rlbvieira@uol.com.br Professora pesquisadora da UCSAL, Ph. D. em Administrao da Educao, The Pennsylvania State University. E-mail: sfkatia@gmail.com
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
444
Sinaes at the public state universityAnalysis of the Internal Evaluation Process at Bahia State University (UNEB) Abstract
The qualitative research on Public Evaluation Policy on Higher Education-The National Evaluation System of Higher Education (SINAES)- aimed at two objectives: to examine how the internal evaluation system has been constructed at the Bahia State University and how well it functions. Documents were examined and members of the internal evaluation commission, the sectorial evaluation commission, and university administrators were interviewed to analyze what top administrator and members of both commissions would say about the internal evaluation process under SINAES regulation and about the development of an evaluation culture at the university. The research was developed at Campus I, in Salvador, Bahia, Brazil, between the second semester 2007 and the first semester 2008. Data analysis indicate: difficulties with communication, lack of knowledge regarding evaluation among members of all commissions and lack of support of the higher administration evaluation activities. Keywords: Public evaluation policy for higher education. Inside institutional evaluation. The National Evaluation System of Higher Education-SINAES.
SINAES en la universidad pblica estadual (provincial): anlisis del proceso de construccin de la evaluacin interna en la Universidad del Estado (Provincia) de Baha (UNEB) Resumen
Esta investigacin cualitativa sobre la Poltica Pblica de Evaluacin de Educacin Superior Sistema Nacional de Evaluacin de Educacin Superior en Brasil (SINAES) tiene dos objetivos: examinar cmo la evaluacin interna ha sido construida en la Universidad del Estado (Provincia) de Baha, a partir de fuentes documentales y voces de los miembros de la Comisin Propia de Evaluacin, as como tambin de las Comisiones Sectoriales de Evaluacin y de los Gestores de la Administracin de la Universidad; en segundo lugar, analizar el habla de los Gestores de la Administracin de la Universidad; el de los Gestores de la Administracin Superior de la UNEB, miembros de la Comisin Propia y de las comisiones Sectoriales de Evaluacin, sobre el proceso de evaluacin interna institucional bajo el marco referencial del SINAES y de la construccin de una cultura de evaluacin en la Universidad. La investigacin se llev a cabo en el Campus I, situado en Salvador, Baha, estado (provincia) de Brasil, entre el segundo semestre de
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
445
2007 y el primero de 2008. Se identificaron los siguientes procesos: dificultades de comunicacin; poca formacin en evaluacin de los miembros de las Comisiones y falta de apoyo de la Administracin Superior a la actividad evaluativa. Palabras clave: Poltica pblica de evaluacin de educacin superior. Evaluacin Institucional interna. El Sistema Nacional de Evaluacin de la Educacin Superior -SINAES.
Introduo
O nosso interesse pelo tema da avaliao institucional fruto no s de uma vivncia profissional na entidade que serviu como base de campo investigativo para este estudo, como tambm da curiosidade, do desejo de aprofundar conhecimentos sobre como est sendo construda a avaliao interna hoje na universidade pblica, sob o marco do Sistema Nacional de Avaliao da Educao Superior (SINAES). A avaliao sempre foi um instrumento do nosso trabalho, do qual lanamos mo em todos os processos de planejamento e de prticas de gesto. Acreditamos na avaliao como um ato de ao e de deciso a ser realizado pelos sujeitos envolvidos na cena institucional: docentes, discentes, gestores, tcnicos e, tambm, os sujeitos externos a essa comunidade e que com ela mantm inextrincveis relaes. Acreditamos na avaliao que, ao contrrio da cartorial/reguladora, no se preocupa apenas em avaliar a realidade objetivada, qualificada pela dana dos nmeros e da estrutura material e administrativa que cerca a instituio. Arriscamos neste estudo outros olhares sobre a avaliao institucional. Partimos para investigar o processo de construo da avaliao interna na universidade pblica, sob o marco do SINAES. Convidamos os membros da Comisso Prpria de Avaliao (CPA), das Comisses Setoriais de Avaliao (CSAs) do Campus I e dos Gestores da Administrao Superior de uma universidade estadual, multicampi, a UNEB, para serem os sujeitos da pesquisa. Nosso convite foi acatado e eles falaram sobre avaliao, os significados da avaliao interna para a universidade e de como est ocorrendo, na prtica, esse processo na instituio. Deixamos o nosso olhar correr sem pressa sobre cada ponto do caminho a ser investigado, procurando apreender os ambientes pesquisados e escutar e decifrar o que os membros da CPA, das CSAs e os Gestores da UNEB expressavam sobre avaliao e sobre o atual processo de avaliao interna vivenciado por eles.
446
ais as informaes quantitativas e qualitativas produzidas tanto pelos rgos que tratam da educao superior e das polticas voltadas para esse nvel do sistema, como pelas prprias Instituies de Ensino Superior (IES). Esses sistemas de avaliao e de informao hoje tm quase que uma rotinizao no sentido weberiano, do ponto de vista das aes governamentais, conclui Maria Helena Guimares de Castro (1999, p. 37). Tratando-se especificamente das polticas pblicas de avaliao da educao superior, vivemos hoje no Brasil o marco do SINAES, gestado a partir de 2003, quando o primeiro Ministro da Educao do Governo Lula, Cristovam Buarque, criou a Comisso Especial de Avaliao da Educao Superior (CEA) para propor a conduo da reforma. A CEA tinha como objetivo auxiliar no cumprimento das novas funes estratgicas de educao superior: a cidadania democrtica, a justia social e o desenvolvimento sustentvel (INEP, 2003, p. 8). Em 2004, como fruto de um processo intenso de reconduo da poltica do nvel universitrio no Brasil, foi promulgada a Lei n 10.861, de 14 de abril de 2004, que instituiu o SINAES (BRASIL, 2004). O SINAES entende a avaliao institucional como parte das polticas pblicas de educao, voltadas para a construo de um sistema de educao brasileira ligado ao projeto de sociedade democrtica, compatvel com as exigncias de qualidade, relevncia social e autonomia. Em conformidade com a Comisso Nacional de Avaliao da Educao Superior (CONAES) (INEP, 2004), o processo de auto-avaliao, como um processo contnuo, se constitui em um instrumento de construo e consolidao da cultura de avaliao na instituio, fazendo com que a comunidade interna se identifique e se comprometa com o processo avaliativo. O seu carter formativo deve possibilitar o aperfeioamento pessoal e institucional dos membros da comunidade acadmica, na medida em que instiga os envolvidos na avaliao a refletir sobre a instituio, o que, regra geral, leva a uma tomada de conscincia institucional. Segundo Ristoff (2004), um dos desafios do SINAES desenvolver, nas IES, essa cultura de avaliao. As pesquisas e estudos sobre polticas pblicas de educao, de um modo geral, tm abrangido mais o macrossistema, pois nesse campo constata-se essa cultura, a tradio de responder s concepes crticas que valorizam as grandes narrativas. O estudo sobre o SINAES, com um olhar crtico-reflexivo a partir das vozes dos Gestores e membros da CPA e CSAs sobre a construo do processo de avaliao interna na universidade pblica, responde inicialmente a ainda pouca produo sobre essa poltica, no s em razo de se tratar de uma temtica muito recente, uma vez que o SINAES, como disse anteriormente, foi implantado em 2004, mas tambm pela forma de abordagem e pela sua abrangncia do microssistema universitrio.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
447
448
Em 2004, a UNEB fez a sua inscrio no SINAES. Em 2006 deu incio ao processo avaliativo institucional sob o marco dessa nova poltica. As Jornadas de Avaliao tiveram continuidade em 2006, 2007 e 2008. Em 2008 foi realizada uma Vdeo-Conferncia envolvendo a CPA e todas as CSAs que, vale destacar, se encontravam ainda em estgios de constituio e trabalho bem diferentes; um Grupo Focal com todos os Gestores da Administrao Superior da universidade tendo, dentre outros, o objetivo de analisar o ciclo de auto-avaliao institucional e seu desenvolvimento no mbito do SINAES. Na oportunidade os Gestores responderam ao instrumento de avaliao proposto pela CPA; uma segunda vdeo-conferncia foi realizada com a Avaliao como a temtica central de discusso. Em setembro de 2008 os instrumentos especficos dos segmentos docente, discente e tcnico-administrativo comearam a ser aplicados. Com esse novo momento avaliativo, a UNEB objetivou atingir trs objetivos bsicos: contribuir para o aperfeioamento acadmico, oferecer subsdios ao planejamento em todos os nveis, lastreando, assim, o processo de tomada de deciso e prestar contas sociedade que a mantm e que destinatria de tudo o que se pensa e se realiza dentro dela.
A metodologia da pesquisa
Nosso grande desafio foi a pesquisa de campo com a abordagem qualitativa e a forma de narrao, a anlise do discurso1, tendo como lcus privilegiado a Universidade do Estado da Bahia (UNEB) da rede pblica estadual de ensino superior, Campus I, Salvador, BA. O destaque na pesquisa foi dado s vozes de atores importantes do processo de avaliao interna da universidade, que, em seus lugares e tempos institucionais, tm envolvimento com a construo desse processo, vivenciando na prtica a aplicao do SINAES: os Gestores da Administrao Superior da universidade e os membros da Comisso Prpria de Avaliao (CPA) e das Comisses Setoriais de Avaliao (CSAs) do Campus I. Neste estudo eles foram convidados, desafiados a participar da crtica construo do processo de avaliao interna da universidade no contexto do SINAES, como sujeitos e, tambm, destinatrios do processo avaliativo. A opo que fizemos por uma abordagem reflexiva, na linha qualitativa, fez-se importante na medida em que nos levou a uma melhor compreenso das relaes e vises dos diferentes atores sobre a interveno da qual participavam e ao entendimento de que os julgamentos, significaes, vivncias e reaes, expressas na falas de cada um deles, faziam parte da interveno que estavam realizando na instituio com o processo de avaliao interna e de seus possveis ou esperados resultados.
1
O uso que fizemos do conceito de discurso se encontra na fala de Orlandi (2006, p. 157); aquele em que considera a linguagem em relao s suas condies de produo; aquele em que considera que a relao estabelecida pelos interlocutores, assim como o contexto, so constitutivos da significao do se diz. Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
449
Todos os dados coletados foram vistos como referncias, indicaes necessrias compreenso das questes norteadoras da investigao, na medida em que o objetivo era compreender as relaes, vises, significaes e o julgamento dos diferentes atores sobre a interveno na qual participavam, entendendo que suas vivncias e reaes fazem parte da construo da interveno e de seus resultados (MINAYO; ASSIS; SOUZA, 2005, p. 82). A pesquisa de campo aconteceu entre o final do segundo semestre de 2007 e o primeiro semestre de 2008. Esse perodo abrangeu o momento da realizao das entrevistas, da participao em reunies e eventos promovidos pela CPA e CSAs, espaos de coleta e anlise dos documentos institucionais que tratavam da avaliao interna. Participamos de trs reunies da CPA; duas vdeo-conferncias promovidas pela CPA; uma da CSA do DCH; um encontro com o Magnfico Reitor; duas visitas in loco aos Departamentos do Campus I; dois contatos informais com o Vice-Coordenador da CPA; um encontro informal com a Coordenadora da CPA. Entrevistamos 10 membros das CSAs do Campus I - Salvador; cinco da CPA e seis Gestores da Administrao Superior da UNEB, dentre eles, Coordenadores e Vice-Coordenadores das Comisses, Pr-Reitores da rea meio e reas fim da universidade, Reitor e Vice-Reitora. No geral, essas entrevistas constituram-se fontes essenciais de questes e evidncias, como denomina Yin (2005), para o estudo realizado. As evidncias foram registradas, analisadas e interpretadas na perspectiva da anlise do discurso. Delimitamos os centros de interesse nas conversas mantidas com os sujeitos da pesquisa, direcionando-as mediante um roteiro pr-elaborado. Nossa pretenso era investigar, em profundidade, o descrito nos roteiros. Mas as falas desses sujeitos institucionais abarcaram mais do que simples ndices do universo discursivo delimitado tematicamente: avaliao interna no marco do SINAES. Elas revelaram um sistema de ideias e representaes no qual se abrigavam as significaes do contexto em que vivem esses sujeitos: a UNEB, universidade pblica, estadual, situada na Regio Nordeste do Pas. Desta forma, encontramos em cada resposta s questes das entrevistas influncias das constantes interaes verbais experimentadas por esses atores em suas posies e ocupaes na UNEB. A despeito do papel que atribumos a esses sujeitos, s suas vozes, a lngua foi o importante instrumento atravs do qual eles construram um processo de comunicao conosco. A nossa conduta enquanto pesquisadoras encontrou reforo em Machado (2003, p. 3-4), que diz: atribui-se aos sujeitos do discurso uma atuao relevante na constituio da fala, mas no se retira da lngua a funo maior de se oferecer como instrumento atravs do qual os falantes realizam a comunicao. O sentido de avaliao que esses atores institucionais imprimiram em seus discursos/falas incitou-nos a pensar para alm da avaliao interna, para o significado
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
450
da universidade, sua organizao, sua estrutura multicampi, seus procedimentos de participao e comunicao, enfim, sua prpria razo de ser. As falas, construdas a partir das entrevistas, foram apoiadas por outras informaes obtidas de fontes como documentos e conversas informais. As vozes da UNEB: tecendo os fios que do sentido e significado ao processo de construo da avaliao interna institucional sob o marco do SINAES2 Como as temticas nas entrevistas eram entrelaadas o olhar dos sujeitos entrevistados sobre a construo do processo de avaliao interna institucional e sobre a coexistncia de situaes afetas a esse processo, como a questo da participao e do envolvimento dos segmentos universitrios no processo avaliativo; a comunicao dos resultados, a gesto do processo, os benefcios da avaliao para a universidade, dentre outros, - optamos por construir, a partir dos discursos elaborados por esses sujeitos, cinco grandes categorias de anlise e fazer de cada uma delas uma abordagem unificada, de forma a permitir uma apreenso mais efetiva das ligaes e implicaes que esses campos temticos apresentavam: 1- significado do atual processo de avaliao interna no qual Gestores, membros da CPA e CSAs esto envolvidos, como definem a participao dos segmentos universitrios nesse processo e o entendimento que tm sobre o mesmo; 2 - prtica do processo de avaliao interna na universidade, com a possvel consolidao de uma cultura de avaliao institucional e a existncia de possveis mudanas na universidade em funo desse processo avaliativo; 3 - a divulgao, comunicao e uso dos resultados da avaliao; 4 - gesto do processo de avaliao na universidade multicampi e a relao desse atual processo com os anteriormente construdos pela universidade; e 5 - compromissos da avaliao hoje em prtica na universidade, os benefcios da avaliao para a instituio e as implicaes do processo avaliativo nas reas fim da universidade.
Para os nossos registros, identificamos os Departamentos pelas suas respectivas siglas institucionais: Departamento de Cincias Humanas ( DCH); Departamento de Cincias da Vida (DCV); Departamento de Cincias Exatas e da Terra (DCET) e Departamento de Educao ( DEDC).
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
451
seu futuro, o seu crescimento, para fazer-se conhecida pelos diversos setores institucionais e pela sociedade tambm. Avaliar, diz um dos Gestores,
significa a oportunidade de saber dos resultados, de todas as aes empreendidas pela universidade ao logo desses trs, quatro, cinco anos, e de como elas tm refletido, impactado na sociedade. A avaliao ajuda a construir indicadores para poder mensurar a insero da universidade no cenrio nacional e local e sensibilizar as pessoas sobre issso (Gestor).
Mas h, tambm, para 5% dos vinte e um (21) sujeitos entrevistados, o entendimento de que o atual processo de avaliao interna institucional tem por objetivo preparar a universidade para o cumprimento das exigncias legais do seu recredenciamento que acontecer em 2010. A composio inicial de perguntas feitas aos entrevistados acabou permitindo que, em suas respostas, eles pudessem delinear um quadro mais significativo da avaliao, assim como da prpria instituio e de seu crescimento desordenado, sem um planejamento sistemtico. Assim que, dos 21 entrevistados, 14% descrevem a UNEB como uma universidade que cresceu muito em um primeiro momento o da sua criao at com certo planejamento. Com o tempo, ela foi se expandindo de forma desordenada, aleatria e no sistmica, muito embora desempenhando papel importante para a sociedade baiana, principalmente a interiorana. A fala de um dos membros da CPA revela tal posio:
[...] realizar uma avaliao de carter mais global nesse momento, para mim, fundamental para a universidade. [...] Existe quase um consenso nos debates sobre a UNEB, de que ela cresceu de uma forma meio sem um planejamento mais sistemtico, de forma meio aleatria. Acho que uma avaliao mais sria, de carter mais global como essa que est sendo construda na universidade, se for politicamente valorizada, pode significar o momento inaugural do futuro da instituio, apontar para onde ela de fato pretende ir e se consolidar como uma universidade (CPA).
Alm do fato de todos os 21 sujeitos entrevistados darem avaliao interna importncia inquestionvel e lhe delegarem responsabilidade e compromisso com o conhecimento da realidade institucional, nas falas de 19% deles encontramos registros das expectativas que cada um tem, especialmente Gestores e membros da CPA. Eles esperam que esse processo avaliativo interno aponte caminhos e trilhas do futuro institucional, a direo dos principais investimentos a serem feitos, a priorizao das aes nas reas fim e meio da universidade e a criao de uma cultura de avaliao como um instrumento de crescimento e de fortalecimento institucional.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
452
[...] Avaliar um processo amplo, global, e para mim importante. Espera-se que ele sirva de base para o planejamento institucional e que os seus resultados tragam respostas e informaes necessrias e importantes, fazendo com que a avaliao e o planejamento caminhem juntos, o que at ento no tem acontecido (CPA).
Uma vez que o SINAES relativamente novo apenas quatro anos tem suscitado muitas dvidas, principalmente entre os membros das CSAs quanto sua concepo e funcionamento. A UNEB, com a sua forma multicampi, pode estar a reforar essa complexidade e, com isso, o risco da disperso das aes empreendidas pela Comisso Prpria, na medida em que no so pensados e implantados mecanismos que estimulem a participao e a coeso das Comisses e de todos os envolvidos. As falas dos Coordenadores das Comisses Setoriais revelam certa insegurana, certas dificuldades em conduzir o processo da avaliao interna em seus respectivos Departamentos, o que consideramos perfeitamente normal nesse primeiro momento de implantao da avaliao interna nos moldes que o SINAES prope. Os 21 sujeitos entrevistados consideram o envolvimento e a participao de professores, alunos e funcionrios no processo de avaliao interna da universidade ainda muito deficitrios. Isso sinaliza para um caminho muito longo a ser percorrido por esses segmentos universitrios at atingirem a compreenso efetiva do que significa um processo de avaliao interna institucional. De modo geral, a anlise das falas deixa transparecer ausncia de engajamento dos diferentes segmentos universitrios no processo da avaliao, pela falta de conhecimento do processo, de como ele vai acontecer e de seus reflexos e possveis impactos na vida da universidade.
O nvel de participao dos trs segmentos reduzido e absolutamente incipiente ainda, mas isso tem uma histria que remete a uma desmobilizao geral e, no caso da avaliao, ao fato da avaliao ser vista como uma atividade de pouca importncia. O trabalho da avaliao visto como algo decorativo. O Departamento registra um lapso de tempo significativo em que teve interrompida a atividade da avaliao. Finalmente, h uma resistncia grande por parte dos alunos ao ENADE e eles confundem o processo de avaliao interna com o ENADE e ai no participam (CSA do DCH).
Algumas falas puseram em evidncia o pouco estmulo que a atividade avaliativa tem dentro da universidade, como pode ser percebido a seguir.
s vezes, a CSA no formada porque docentes no tm interesse em participar tanto em funo da carga horria j devidamente ocupada por outras atividades, como pelo fato de terem dificuldade de liberao de alguma delas
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
453
para se inserir no trabalho da avaliao. O aluno tambm no tem interesse e o funcionrio, quando participa, se queixa da superposio de atividades. O processo tem suas dificuldades, mas tambm a questo da conscientizao que ainda coisa sria (CPA). Na UNEB, muitas pessoas gostariam de participar desse processo de avaliao, mas j esto com as suas cargas horrias comprometidas e aqui tem uma coisa que eu queria acrescentar que o fato de que mesmo essas pessoas que se mostram sensveis, predispostas ideia da avaliao, ainda no esto convencidas de a avaliao institucional na universidade ser levada a srio no sentido dos seus resultados apropriados e ai na hora de escolher ou de priorizar, acabam escolhendo ou priorizando aquilo mais urgente ou de resultados mais imediatos (CPA) [...] No h recursos financeiros da universidade que assegurem uma maior qualificao dos quadros das Comisses nem para as pesquisas que precisam ser executadas para o trabalho da CPA e CSAs (CPA).
Para ns, o pouco incentivo aparece no apenas nas questes da carga horria mas, tambm, na frgil capacitao dos docentes e tcnicos na rea de avaliao, assim como na ausncia de uma poltica institucional de consolidao dos quadros de integrantes das Comisses de Avaliao, com o objetivo de minimizar o problema recorrente da descontinuidade das Comisses. Como consequncia da falta de estmulo e de valorizao da atividade de avaliao dentro da universidade, do ponto de vista da produo de conhecimentos, esse processo se ressente da existncia de limitado quadro de pessoal preparado, capacitado terica e operacionalmente. Mesmo os membros das Comisses, as pessoas mais dedicadas ao trabalho avaliativo, so, em sua maioria, oriundas das mais diversas reas e sofrem pela falta de uma efetiva articulao, integrao, que seja mediada por uma reflexo terica sobre a temtica da avaliao. Vejamos o que diz um dos membros da CSA do DCH:
H uma deficincia de conhecimento, de entendimento do processo como um todo. Para tornar mais claro o que eu estou dizendo, a CPA solicitou a assinatura da Revista Avaliao e ns recebemos todos os nmeros dessa revista, mas me pergunte se em algum momento ler os artigos, discuti-los, tem sido ponto importante de nossas agendas? (Membro da CSA do DCH).
Essas questes postas chamam a ateno para o que Cronbach j colocava em 1963, e, ao que parece, a universidade ainda no se deu conta: a avaliao uma atividade de pesquisa sistemtica, e no uma mera expresso de opinies e palpites
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
454
de iluminados e o avaliador , antes de tudo, um educador, cujo sucesso se mede pelo que ambos aprendem (CRONBACH, 1963 apud RISTOFF, 2003, p. 21). Quanto aos cinco membros da Comisso Prpria que entrevistamos, 20% deles consideraram prematuro um julgamento sobre essa questo. Mas trouxeram tona, em muitos momentos de suas falas, a ideia de que a dificuldade com a questo da participao geral dentro da universidade devido sua complexa estrutura multicampi. uma participao que se d por representatividade e, mesmo assim, de forma muito frgil, sem fora para atuar dentro dos Departamentos. Nesse aspecto, podemos dizer que, apesar da importncia que os sujeitos entrevistados do avaliao, de toda a trajetria institucional com relao atividade avaliativa, falta ainda na UNEB o mais importante, que a cultura da avaliao, historicamente construda e sedimentada no seu interior e, com ela, o convencimento, por parte dos segmentos universitrios (professor, aluno e funcionrio), de que a avaliao levada a srio dentro da universidade. O que evidente nesses discursos que a questo da pouca participao dos diversos segmentos universitrios no processo avaliativo est vinculada a um sentimento de descrdito que esses segmentos nutrem em relao avaliao, ou s ideias preconcebidas que eles tm de que avaliar punir fiscalizar, desvendar feridas, como mencionou um membro da CPA. Para muitas pessoas, disse ele, a avaliao no leva a nada, mais uma ao isolada que no tem consequncias. Isso sinaliza para ns experincias avaliativas vividas anteriormente e que foram frustrantes do ponto de vista do uso de seus resultados e que a participao precisa, como disse esse mesmo membro da CPA ser alimentada para que cresa, floresa e d frutos. Mas a verdade que ela ainda incipiente. As conversas acerca da temtica da participao nos foram conduzindo para um outro ponto importante, que diz respeito ao entendimento das pessoas sobre a avaliao interna.A anlise dos discursos/textos produzidos pelos membros das Comisses de Avaliao, quando indagados sobre o nvel de entendimento dos docentes, funcionrios e alunos acerca do atual processo de avaliao interna da UNEB, revela que esse nvel ainda muito baixo entre eles. H uma percepo do processo como necessrio, mas o entendimento do SINAES, que est sendo utilizado como base para a construo do processo de avaliao interna da universidade, tem sido complicado, inclusive para eles, membros das Comisses. Da mesma forma isso acontece no mbito de muitos Departamentos, onde os Gestores no tm o entendimento do SINAES, da sua importncia e dos percursos da avaliao que ele traz. Isso revela, para muitos membros das Comisses Setoriais de Avaliao, falhas nos mecanismos de sensibilizao da comunidade universitria como um todo, agravadas pelo fato de que a instituio no conseguiu, ao longo desses anos de experincia com avaliao, criar as bases de uma cultura avaliativa e sediment-la na instituio.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
455
Pouco a pouco, tudo o que estava sendo dito pelos entrevistados da CPA e das CSAs foi revelando, tambm, o que estava sendo feito por eles na prtica, no cotidiano de cada uma das Comisses, no trabalho de construo do processo de avaliao interna da universidade. Um cotidiano que nos pareceu de dificuldades tcnicas, fsicas e operacionais que muitos deles tm de enfrentar. Um cotidiano em que a lide maior com o desnimo, a apatia, a indiferena ou mesmo a omisso das pessoas em relao atividade da avaliao, assim como com a convivncia com a desconfiana
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
456
que alguns guardam em relao aos resultados da avaliao. Isso est presente em todas as falas dos membros das CSAs, a exemplo dos que transcrevemos a seguir:
O processo vem ocorrendo de forma ainda simplria. Recebemos algumas informaes da CPA, temos que desenvolver todo um trabalho. As pessoas no tm compromisso com a avaliao e no h a devida valorizao institucional deste processo (CSA do DEDC). Sou muito crtica com relao ao que a CSA tem feito no Departamento, mas que a comisso no foi preparada, informada sobre o processo avaliativo, principalmente sobre o SINAES. [...] O conhecimento da avaliao institucional e do seu processo est solto, perdido, prejudicado. H uma grande preocupao em operacionalizar a avaliao, mas no em preparar as comisses. H tambm uma desarticulao das CSAs entre si. O processo avaliativo como um todo foi instalado com muita pressa. No tem havido um cronograma regular de trabalho, de encontros. Ento, se no h suporte, estmulo para o trabalho, isso fatalmente leva fragmentao e ai a descentralizao com a criao das CSAs no adianta. [...] A questo de oramento, de recursos para as atividades relacionadas ao processo avaliativo algo muito complicado dentro da UNEB e de cada Departamento especificamente (CSA do DCH)
Apesar disso, todas as falas carregam, sem que nenhuma contradio exista nisso, muitas expectativas quanto ao futuro da instituio. O processo de avaliao sob o marco do SINAES est instalado na universidade desde 2006 e tem demandado, ao longo desses dois anos, muito tempo por parte dos membros das CPAs para a difuso de seu entendimento e para a sua operacionalizao, que envolveu a reconstituio das Comisses de avaliao, elaborao do Regimento da CPA, reviso do Projeto de Avaliao e a montagem dos instrumentos. Uma das maiores queixas dos 21 sujeitos entrevistados foi com relao aos sucessivos fazer e desfazer das CSAs, o que d a muitos a sensao de um permanente recomear. Outra est relacionada s resistncias encontradas ao processo, a falta de tempo de muitos para se envolverem com a atividade da avaliao, ao preconceito que eles possuem com referncia a ela, associado ao valor de troca, tanto seja punio, quanto premiao. Aliado a isso, a metodologia utilizada pela CPA para a operacionalizao do processo, as precrias condies de espaos fsicos para a instalao das Comisses e de recursos tcnicos e financeiros para o desenvolvimento de todas as etapas do Projeto fazem com que a avaliao, na prtica, se d de forma mais lenta e com um nvel de participao menor do que o desejado, inclusive daquele que est nos rgos da Administrao Superior da universidade.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
457
Muito em funo dessa prtica, os entrevistados no conseguem enxergar mudanas institucionais que esto acontecendo ao longo desse processo avaliativo ou no sabem responder no momento. A mudana uma consequncia de um processo assimilado, reconstrudo, e isso ainda no aconteceu, diz um membro da CPA reforado por outro depoimento, tambm de membro da CPA: Infelizmente, no percebo mudanas institucionais. E acho que o principal elo dessa cadeia que articula avaliao e impactos da avaliao sobre a vida da universidade ainda no foi construdo.
458
deve-se procurar formatar instrumentos de divulgao dos resultados da avaliao que sejam mais populares. Para ele, a UNEB, ao cumprir uma de suas funes sociais, com as aes afirmativas, tem dado acesso ao ensino superior a uma populao de baixa renda e essa populao precisa ter respostas da instituio naquilo que diz respeito aos resultados da avaliao (Gestor).
Esse Gestor, contudo, no sabe qual seria esse instrumento de divulgao com esse carter mais popular, mas diz que alguma coisa precisa ser feita para ampliar, universalizar as informaes produzidas pelo processo avaliativo. Outro Gestor diz que
o melhor formato de disseminao das informaes do processo avaliativo seria o mais aberto, o mais democrtico, como, por exemplo, os Seminrios localizados, envolvendo toda a populao de determinada comunidade onde a UNEB est inserida. Seminrios onde pudesse ser colocado o que foi feito no processo avaliativo e de que forma foi feito.
E conclui: essa seria uma forma de envolver mais as pessoas e, a partir da, obter sugestes importantes para a correo de rumos e levar prtica algumas aes. Falando sobre o uso dos resultados, um dos Gestores entrevistados disse que saber qual o valor da universidade era, para ele, o grande capital desse processo de avaliao institucional.
Essa informao tem que ser para dentro da universidade, evidentemente, e externamente tambm. Saber qual o nosso valor para, sabendo, corrigir trajetrias, replanejar, estabelecer prioridades, todos aqueles procedimentos convencionais que ns sabemos que tm que ser adotados, mas que no sabemos muito bem como adotar e em que sentido caminhar (Gestor).
Para um terceiro Gestor, o desafio da CPA que est frente do processo de avaliao e, tambm, dos gestores da Administrao Superior, convencer, mais ainda, os demais gestores da universidade, de que esses resultados so importantes para a conduo da instituio e, efetivamente, mostrar como que as coisas podem ser alteradas. Construir essas alteraes com os Departamentos o passo seguinte apontado por esse entrevistado. O momento da divulgao, do retorno ao pblico interno da universidade, dos resultados da avaliao, e do uso que dado a esses resultados, e da prtica de medidas corretivas com base neles, foi considerado, nos diversos discursos analisaEnsaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
459
dos, como sendo ainda um dos momentos mais difceis, mais frgeis do processo da avaliao interna, embora apontado, por unanimidade, como de extrema importncia no processo como um todo e tambm uma possibilidade de mudana. Isso aparece como reflexo da ausncia de mecanismos de comunicao geis e efetivos dentro da universidade e de um poder real dado avaliao na estrutura da instituio, a fim de impactar aes efetivas e medidas corretivas ou de ajustamentos.
Os discursos analisados nos conduziram a pensar que talvez um dos maiores desafios da universidade diante do atual processo de avaliao interna seja a capacidade gestora para mobilizar esforos, visando a aumentar a reflexividade dentro dos Departamentos e nos diversos setores da administrao universitria, de forma que essa reflexividade possa vir a se traduzir na construo de uma ambincia institucional de propositividade, de ao e de participao efetiva dos diferentes atores institucionais.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
460
Eles expressaram tambm o que acham ser preciso investir em cada rea especfica e as dificuldades que tm em gerir questes que, aos seus olhos, tm implicaes profundas na qualidade das atividades fim da universidade. Algumas ideias dos benefcios que a avaliao poder trazer para a universidade so recorrentes nas falas dos 21 sujeitos entrevistados. As que preconizam a retroalimentao do planejamento institucional pela atividade da avaliao, por exemplo, ou a de que, atravs da avaliao, a universidade poder conhecer e se reconhecer a si prpria como uma instituio pblica, ter a cara de uma universidade pblica, como disse um membro da CSA do DCV. A organizao da universidade apontada pelos Gestores como outro benefcio que a avaliao poder trazer. No que a UNEB no tenha organizao, ressaltou um Gestor.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
461
evidente que ela tem, mas eu estou sentindo necessidade disso, de que essa organizao se d de uma forma mais sistmica, de uma forma mais integrada, de uma forma que articule verdadeiramente as aes universitrias nas suas trs grandes dimenses. Acho que a avaliao poder nos ajudar a tomar conscincia dessa necessidade de organizao (Gestor).
Os benefcios mais aguardados pelos Gestores so para a rea acadmica, na medida em que a avaliao poder mostrar, para cada um deles, o que fazer de forma mais concreta em suas reas, bem como indicar uma sistemtica de acompanhamento dos rumos institucionais para que, posteriormente, os resultados possam ser visualizados com mais clareza. Acho que a avaliao dever trazer como resultado a consolidao efetiva das aes institucionais no ensino superior, na pesquisa e na extenso, elevando ao nvel da excelncia, por que no, a UNEB no cenrio das universidades estaduais do Norte, Nordeste e a nvel nacional, conclui um Gestor. Percebemos em alguns momentos, pelas consideraes que eram tecidas pelos entrevistados acerca da questo dos benefcios da avaliao para a universidade, que o lugar de onde cada um falava era o mesmo. Independentemente da posio que ocupavam dentro da instituio, o lugar era a prpria universidade. Da a idealizao, presente em todas as falas, da avaliao como o instrumento capaz de possibilitar a universidade inserir-se na dimenso contempornea de refletir sobre si mesma como instituio pblica e multicampi, fortalecendo a sua insero no sistema nacional de educao superior, ser ditada pela necessidade sentida por todos os entrevistados de se ter uma viso clara e real da universidade para, a partir da, construir-se um projeto institucional com foco em um repensar a sua configurao multicampi, complexa, desafiadora e desintegrada devido falta de um modelo gerencial adequado que contemple essa lgica. nesse sentido que a ideia de avaliao interna extrapola, nas falas de muitos dos entrevistados, a perspectiva individual, porque o mais importante para eles a reflexo dirigida para o coletivo, para o conhecimento da realidade institucional: na qualidade de instituio pblica e multicampi, seus programas, projetos, aes e as diferentes atividades que realiza. Enfim, em seus discursos, os membros da CPA e CSAs do Campus I e Gestores da Administrao Superior da universidade no deixaram dvidas quanto ao fato de a avaliao interna ser para eles, nesse momento, o caminho possvel e o mais concreto para a instituio poder ampliar o conhecimento sobre si mesma; para poder desencadear um processo de reestruturao do seu modelo multicampi e para realizar uma reviso das suas formas de conduo poltica e acadmica.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
462
Consideraes finais
A experincia da escuta a esses Gestores e membros das Comisses de Avaliao da UNEB e toda a vivncia com eles, ao longo do tempo em que estivemos trabalhando no campo de pesquisa, valeram a pena. Ouvimos suas vozes, na qualidade de sujeitos de suas expresses acerca da construo do processo de avaliao interna da universidade, sob o marco do SINAES. Provocamos em cada um dos entrevistados no s a possibilidade de (re) pensar o processo da avaliao interna em prtica na universidade, como tambm de (re) pensar a prpria instituio. Abrimos espaos para que temas importantes sobre a organizao, procedimentos e conduo poltica e acadmica da universidade fossem tratados, provocando o afloramento de opinies, percepes, identificao de valor e mrito e posicionamentos s vezes recorrentes dentro de algumas falas, em um desnudamento, em uma retratao sem retoques da instituio. Ao convidarmos os membros da CPA, das CSAs e Gestores para falarem do processo de avaliao interna da universidade, esperamos ter provocado neles, com as nossas perguntas, o efeito espelho a que se referem Belloni e outros ( 1995) quando falam da avaliao como uma reflexo ampla sobre a realidade institucional, para alm da questo da avaliao interna, iluminada a partir dos enfoques, perspectivas, significaes e compreenses das mltiplas relaes da realidade institucional vivida por eles, que foram, pouco, a pouco, sendo construdas ao tempo das discusses levantadas nas entrevistas. As vozes desses sujeitos da pesquisa revelaram, recorrentemente, ideias e significados importantes do processo avaliativo e tambm um retrato inquietante e sem retoques da instituio. Mostraram os problemas e as dificuldades que decorrem, em grande parte, da forma como hoje a multicampia se estrutura na universidade, retardando a comunicao, a participao e o desenvolvimento de atividades importantes e imprescindveis para o ensino, a pesquisa e a extenso. Para eles, a UNEB do ano 2008 continua sendo uma grande reunio de Departamentos, porque, alm de ser vista e entendida como uma instituio que no conseguiu desenvolver uma cultura de instituio multicampi, tampouco encontrou o seu modelo de gesto para esse tipo de estrutura. A partir das argumentaes construdas nas falas dos membros das Comisses (CPA e CSAs) do Campus I da UNEB e dos Gestores da Administrao Superior da Universidade, constata-se que h, na maioria desses sujeitos, de forma muito presente, a defesa de ideias de avaliao que buscam uma compreenso global da instituio e que reconhecem a necessidade de integrao de suas diversas dimenses, como recomendado por Dias Sobrinho (1995); avaliao como instrumento que possibilita aos gestores institucionais a tomada de decises mais seguras e eficazes, como destaca Stufflebeam (1983 apud RISTOFF, 2003, p. 25) em sua
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
O SINAES na universidade pblica estadual: anlise do processo de construo da avaliao interna na Universidade do Estado da Bahia (UNEB)
463
proposta de avaliao voltada para a tomada de deciso com o sentido de agir no cotidiano institucional; avaliao como um processo sistemtico de identificao de mrito ou valor em face da misso social da instituio, como proposto por Scriven (1991 apud RISTOFF, 2003, p. 26), ou de avaliao como instrumento de tomada de conscincia sobre a instituio, visando melhoria da qualidade institucional e de sua relevncia social, como defende Belloni e outros (1995). Enfim, a ideia de avaliao como alcance de indicadores de um modelo prprio de universidade multicampi e de seus novos e futuros rumos. As vozes de nossos entrevistados se mostraram tambm carregadas de boas expectativas, de desejos de que os resultados desse processo avaliativo vivenciado por eles, no cotidiano da universidade, possam alterar a cultura da instituio, promover melhorias constantes e significativas nos seus processos e padres estabelecidos e trazer possibilidades efetivas de construo dos futuros novos horizontes da Universidade do Estado da Bahia. Eles apostam nisso. No h porque no apostarmos.
Referncias
BAHIA. Lei n. 7.176, de 10 de setembro de 1997. Reestrutura as Universidades Estaduais da Bahia e d outras providncias. Dirio Oficial do Estado da Bahia, Salvador, 10 set. 1997. BELLONI, I. et al. Avaliao institucional da Universidade de Braslia. In: BALZAN, N. C.; DIAS SOBRINHO, J. Avaliao institucional: teoria e experincias. So Paulo: Cortez, 1995. BRASIL. Lei n 10.861, de 14 de abril de 2004. Sistema Nacional de Avaliao da Educao Superior. Dirio Oficial da Unio, Braslia, DF, 15 abr. 2004. Poder Executivo, Seo 1, p. 3-4. CASTRO, M. H. G. Do significado da avaliao institucional no mbito da poltica educacional. In: BICUDO, M. A. V.; SILVA JNIOR, C. A. Formao do educador e avaliao educacional. So Paulo: Ed. UNESP, 1999. DIAS SOBRINHO, J. Avaliao, instrumento de qualidade educativa: a experincia da UNICAMP. In: BALZAN, N. C.; DIAS SOBRINHO, J. Avaliao institucional: teoria e experincias. So Paulo: Cortez, 1995. FIALHO, N. H. Universidade multicampi. Braslia, DF: Autores Associados, 2005. Encarte.
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010
464
INEP. Diretrizes para a avaliao das instituies de educao superior. Braslia, DF, 2004. ______. SINAES: bases para uma nova proposta de avaliao da educao superior brasileira. Braslia, DF, 2003. MACHADO, R. H. B. Vozes e silncios de meninos de rua: o que os meninos de rua pensam sobre as nossas instituies. So Paulo: Martins Fontes, 2003. MINAYO, M. C. S.; ASSIS, S. G.; SOUZA, E. R. (Org.). Avaliao por triangulao de mtodos: abordagem de programas sociais. Rio de Janeiro: Ed. Fiocruz, 2005. ORLANDI, E. P. A linguagem e seu funcionamento: as formas do discurso. Campinas, SP: Pontes Editores, 2006. RISTOFF, D. I. Algumas definies de avaliao. In: DIAS SOBRINHO, J.; RISTOFF, D. I. (Org.). Avaliao e compromisso pblico: a educao Superior em debate. Florianpolis: Insular, 2003. ______. O SINAES e os seus desafios. Avaliao, Campinas, SP, v. 9, n. 1, p. 179183, mar. 2004. YIN, R. K. Estudo de caso: planejamento e mtodos. Trad. Daniel Grassi. Porto Alegre: Bookman, 2005. Recebido em: 27/01/2010 Aceito para publicao em: 14/06/2010
Ensaio: aval. pol. pbl. Educ., Rio de Janeiro, v. 18, n. 68, p. 443-464, jul./set. 2010