Swot Tri

Revista Eletrnica Sistemas & Gesto 1 (3) 276-298 Programa de Ps-graduao em Sistemas de Gesto, TEP/TCE/CTC/PROPP/UFF
Avaliao de programas de ps-graduao: proposta baseada na integrao ELECTRE TRI, SWOT e sistema CAPES
Roberta Braga Neves1, robertaneves@producao.uff.br Helder Gomes Costa1, hgc@vm.uff.br
1
Universidade Federal Fluminense, Rio de Janeiro, RJ, Brasil
*Recebido: Janeiro , 2006
/ Aceito: Dezembro, 2006
RESUMO Os programas de Ps-graduao Stricto Sensu no Brasil so avaliados pela Coordenao de Aperfeioamento de Pessoal de Ensino Superior (CAPES). Esta avaliao tambm serve como direcionador s estratgias adotadas pelas coordenaes dos programas de Ps-graduao Stricto Sensu no Brasil. Este sistema de avaliao no explicita o uso de instrumental tradicionalmente adotado no mbito a definio de posicionamentos estratgicos e, tampouco, explicita o uso de mtodos para o tratamento de variveis subjetivas. O presente trabalho prope um abordagem capaz de incorporar abordagens de diagnstico estratgico (SWOT) e de tratamento de variveis subjetivas AMD) ao sistema de avaliao da CAPES. Um estudo piloto de aplicao desta abordagem tambm apresentado ao final do trabalho.
Palavras-chave: Multicritrio. MCDA. MCDM. SWOT. CAPES. Indicador.
1.0 INTRODUO
No Brasil, conforme reportado em Capes (2004) a Coordenao de Aperfeioamento de Pessoal de Nvel Superior (CAPES) foi criada em 1951 com o objetivo de garantir pessoal especializado para o desenvolvimento nacional. Em 1976, a CAPES implantou o Sistema de Avaliao dos cursos de ps-graduao, com o intuito de contribuir na consecuo do seu fim. O sistema de Avaliao desenvolvido pela CAPES contribui para o aumento da qualidade do ensino e classifica os programas em classes ou padres estabelecidos. Os Programas de Ps Graduao Stricto-Sensu nacionais buscam, constantemente, seu aperfeioamento seguindo as diretrizes e buscando atingir os padres de qualidade estabelecidos pela CAPES em seu Sistema de Avaliao. Assim, os resultados do sistema de avaliao tm sido adotados pelas coordenaes de programas, na definio de estratgias de ao e de melhoria contnua.
SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006
276
Neves & Costa / Avaliao de programas de ps-graduao: proposta baseada na integrao ELECTRE TRI, SWOT e ...
Por outro lado a CAPES, apesar de adotar estratgias ancoradas e articuladas com o desenvolvimento nacional, no explicita a utilizao de um instrumental de cunho estratgico na definio do seu sistema de avaliao. Conforme reportado em David (1998), a elaborao e a implementao de um Plano Estratgico podem ser divididas em quatro fases: diagnstico estratgico, misso da empresa, instrumentos prescritivos e quantitativos e controle e avaliao. O diagnstico estratgico identifica a posicionamento de uma organizao a partir de uma perspectiva estratgica. O mtodo SWOT uma ferramenta til nesta etapa, facilitando a anlise do ambiente interno e o ambiente externo da organizao. Essa tcnica permite organizao conhecer sua posio estratgica e, com isso, definir as atitudes tomar para a realizao de seus objetivos e metas. Vale ainda registrar as observaes reportadas em Kurttila (2000), Kangas (2003), Kajanus (2003) e Leskinen (2004). Segundo estes textos, a anlise SWOT no consegue considera o grau de importncia de cada fator interno e externo. Akhter (2003) e Oliveira (1999) destacam a relevncia do Planejamento Estratgico na orientao para a tomada de deciso. Outro aspecto a ser considerado que o sistema de avaliao da CAPES, assim como o maioria dos sistemas de avaliao, envolvem julgamentos subjetivos, que dificultam o estabelecimento de padres bem-definidos de avaliao. Apesar disto, no se percebe no sistema de avaliao da CAPES, a presena de algoritmos desenvolvidos para tratar problemas com estas caractersticas - a despeito da existncia de mtodos de AMD (Auxlio Multicritrio Deciso) desenvolvidos para tratar problemas desta natureza. Considerando estes aspectos e a importncia do Sistema de Avaliao da CAPES, est sendo desenvolvida uma pesquisa em que se busca a investigar a investigou a integrao de uma tcnica de diagnstico estratgico (SWOT) e um mtodo de Auxlio Multicritrio Deciso (ELECTRE TRI, ELimination Et Choix TRaidusant la REalit) avaliao e classificao de desempenho dos Programas de Ps-graduao, classificando-os segundo um padro ou classes de referncia. Atualmente esta pesquisa est estruturada em duas vertentes: A primeira vertente busca investigar a integrao SWOT, ELECTRE TRI ao sistemas de Avaliao da CAPES. O presente artigo apresenta uma descrio destas abordagem e os resultados j alcanados neste mbito; A segunda vertente tambm considera a integrao SWOT e ELECTRE TRI, porm considera um conjunto de critrios mais abrangentes do que aqueles considerados atualmente pela CAPES. Isto permite abordar aspectos como impacto da Ps-graduao no desempenho profissional dos egressos dos cursos de Ps-graduao.
Estes trabalhos fazem parte de uma linha de pesquisa que vem sendo desenvolvida com o apoio de CNPq, CAPES e FAPERJ e que se dedica a investigao da aplicao de tcnicas de Pesquisa Operacional avaliao de desempenho de sistemas de formao e capacitao. A importncia do Sistema de Avaliao da CAPES justifica a realizao da pesquisa, visto que, de acordo com a prpria Capes (2005) os seus resultados servem de base para a formulao de polticas para a rea de ps-graduao, bem como para o dimensionamento das aes de fomento bolsas de estudo, auxlios, apoios , estabelecendo, ainda, critrios para o reconhecimento pelo Ministrio da Educao dos cursos de Mestrado e Doutorado novos e em funcionamento no Brasil.
277
2. REVISO BIBLIOGRFICA Foi realizada uma extensa pesquisa bibliogrfica que considerou, dentre outras as seguintes bases de dados: Portal de peridicos da CAPES; Bando de Teses (CAPES, UFRGS, UICAMP, USP, UFSC); Base SCIELO, Google Acadmico, Portal LIVRE!, MBM (Mapa Brasil de Multicritrio, htttp://www.uff.br/multicrtiteria), e em buscadores na Internet. Os resultados desta pesquisa esto apresentados a seguir: Kurttila (2000) propem um mtodo hbrido, chamado AWOT, resultante da integrao do mtodo AHP (Analytic Hierarquic Process) com a anlise SWOT. Esta abordagem aplicada no mbito da obteno da certificao florestal; e, considera aspectos ecolgicos, econmicos e sociais.. Neste trabalho, o mtodo multicritrio AHP atribui pesos aos pontos fortes e fracos e s oportunidades e ameaas da anlise SWOT na certificao. Esses fatores so avaliados para a obteno ou no do certificado. Kwak (2002) apresentam um modelo MCMP (MultiCriteria Mathematical Programming), mais especificamente o GP (Goal Programming), o qual ajuda nas decises para o planejamento estratgico nos processos de reengenharia. O objetivo da pesquisa projetar e avaliar um modelo para ajudar numa alocao efetiva de recursos de um sistema de assistncia sade. Neste trabalho, o mtodo AHP empregado para melhorar a formulao do modelo GP, pois estabelece a importncia (pesos) dos critrios. Portanto, este modelo integrado utiliza o AHP para determinar prioridades no GP. Kangas (2003) propem um mtodo hbrido, chamado S-O-S, resultante da integrao do mtodo SMAA-O (Stochastic Multicriteria Acceptability Analysis with Ordinal criteria) com a anlise SWOT. O mtodo AHP, utilizado na integrao original AWOT, trocado pelo SMAA-O para que seja possvel utilizar informaes ordinais. O trabalho aplica este novo mtodo na avaliao de estratgias de gerenciamento de uma propriedade florestal de uma organizao privada, que inclui a floresta e uma sede de vero. Kajanus (2003)aplicam a metodologia proposta em Kangas (2003) no processo de Planejamento Estratgico de turismo rural. Portanto, o trabalho utiliza o mtodo hbrido S-O-S, resultante da integrao do mtodo SMAA-O (Stochastic Multicriteria Acceptability Analysis with Ordinal criteria) com a anlise SWOT. A pesquisa, realizada nas regies de Yla-Savo na Finlndia e Kassel na Alemanha, conclui que o fator de sucesso no turismo rural a cultura local de cada regio. Shrestha et al. (2004) adotam com sucesso o mtodo hbrido AWOT) para a pesquisa do potencial para a implantao de silvicultura no centro-sul da Flrida, demonstrando a aplicabilidade deste mtodo ao contexto do problema abordado. Leskinen (2004) aplicam o mtodo hbrido proposto em Kurttila (2000), integrando a anlise SWOT ao mtodo AHP. Este trabalho utiliza o mtodo numa estao de pesquisa florestal, estabelecendo prioridades aos fatores internos e externos em trs cenrios distintos. Vale registrar que quando o nmero de alternativas ou o de critrios em uma mesma camada da hierarquia grande, as abordagens fundamentadas no AHP exigem um esforo muito grande para obteno dos julgamentos de valor (visto que so julgamentos paritrios). Em paralelo aos trabalhos desenvolvidos na linha do mtodo AWOT, Azevedo e Costa (2000) prope um modelo para classificar as organizaes de uma mesma indstria quanto sua competitividade conforme um padro de classes, aplicando o mtodo ELECTRE TRI de AMD ferramenta CPMC (Metodologia de Avaliao do Grau de Competitividade por Ponderao de
SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006 278
Mltiplos Critrios) de Planejamento Estratgico. A evoluo desta proposta est reportada culminou no ELECOMP reportado em Azevedo e Costa (2001; (2004). Politis e Siskos (2004) utilizam-se do mtodo MUSA (MUlticriteria Satisfaction Analysis - Grigoroudis (2001) para avaliao do desempenho Departamento de Engenharia de Produo e Gesto da Universidade Tcnica de Creta (Department of Production Engineering and Management of the Technical University of Crete). Os critrios considerados nesta modelagem tratam aspectos ligados a trs diretrizes: operao e processos internos; satisfao dos estudantes; e, aceitao pelo mercado de trabalho. Ainda segundo estes autores, as universidades, como instituies de ensino e pesquisa, precisam ser avaliadas para se prepararem e a sociedade para as mudanas geradas pela globalizao e pela reestruturao do mercado de trabalho. Miranda (2003) investiga a aplicao do mtodos ELECTRE TRI avaliao de Programas de Ps-graduao (stricto sensu). Este trabalho toma por objeto de estudo o sistema de avaliao da CAPES e os resultados da avaliao de curso da rea Engenharias III da CAPES. Seguindo a linha da avaliao de cursos de avaliao de Programas de Ps-graduao (stricto sensu) no Brasil, considerando uma abordagem baseada em mtodos multicritrio, Miranda (2004) investiga o ordenao (ou ranking) de programas da de curso da rea Engenharias III da CAPES. Mais especificamente este trabalho inter-compara os resultados obtidos pelo emprego de dois diferentes mtodos multicritrio ao problema de ordenao: o ELECTRE II e o MAUT. Os resultados obtidos nestes trabalhos indicam a aplicabilidade da abordagem multicritrio ao problema de avaliao de desempenho de cursos de ps-graduao.. Costa e Freitas (2000) propem a aplicao do ELECTRE TRI - reportado em Mousseau et al. (1999, 2000), Yu (1992) e Vincke (1992) - avaliao do desempenho de docentes de cursos de extenso universitria, classificando-os em categorias ou classes de desempenho. Barroso (2002), baseou-se na proposta de Costa e Freitas (2000) para investigar que investigou aplicao da mesma em um contexto mais amplo, avaliando docentes de diferentes cursos de graduao. Em seu trabalho, Barroso (2002) analisou o efeito memria. Isto : os questionrios foram respondidos por discentes que j haviam completado a disciplina a pelo menos dois semestres letivos.
Seguindo esta a linha de avaliao de sistemas de ensino utilizando abordagens multicritrio: Motta e Costa (2001) investigou a aplicao do mtodo ELECTRE III definio da ordenao (ranking) de docentes segundo critrios de produtividade. Este trabalho enfocou a produtividade de docentes de um Centro Federal de Educao Tecnolgica (CEFET) e os critrios adotados nos mesmos foram definidos pela Comisso de Carreira Docente da instituio, que se basearam no sistema de Gratificao e Incentivo Docncia (GID) que na poca da pesquisa era praticado pelo Governo Federal do Brasil para avaliar o desempenho docente. Buscando simplificar o processo de modelagem, atravs da reduo do nmero de parmetros solicitados na modelagem, Motta e Costa (2006) investigaram a aplicao do ELECTRE II ao problema de ordenao docente. Ribeiro (2003) investiga aplicao do mtodo ELECTRE TRI avaliao de desempenho de IES. Este trabalho enfoca o contexto da Avaliao Institucional de Instituies Ensino Superior, considerando outros aspectos alm da
avaliao docente e permitindo uma classificao mais abrangente da instituio. Os resultados deste trabalho esto reportados em Ribeiro e Costa (2005). Meca (2006) investiga a aplicao de diferentes mtodos de AMD (ELECTRE I, ELECTRE II, CONDORCET e BORDA) avaliao de Instituies Pblicas de Ensino secundrio, comparando os resultados obtidos com aqueles fornecidos pelo Programa Nova Escola (programa oficial de avaliao de escolas pblicas ensino secundrio no Estado Rio de Janeiro). Este trabalho concentra seus estudos na avaliao de Escolas Secundrias do municpio de Maca (RJ), situado na regio da Bacia de Campos.
3. PROPOSTA PARA A MODELAGEM Esta seo apresenta a modelagem proposta neste trabalho e a aplicao da mesma a uma situao real. A modelagem aqui proposta baseia-se no trabalho de Azevedo e Costa (2000; 2004), que prope a integrao do mtodo ELECTRE TRI ferramenta SWOT, para o posicionamento estratgico de negcios. Mais especificamente, se prope integrar estes instrumentos na modelagem da avaliao do posicionamento estratgico de Programas de Ps-Graduao. Esta abordagem est estruturada no desenvolvimento das seguintes etapas: (a) Caracterizar o Programa sob avaliao. (b) Especificar os critrios que sero considerados. (c) Classificar os critrios, segundo a abordagem SWOT. (d) Definir o peso de cada critrio. (e) Especificar a escala para o julgamento de desempenho do programa em cada critrio. (f) Definir as classes de equivalncia (ou padres de referncia) e seus perfis. (g) Coletar os julgamentos de valor que avaliam o desempenho do Programa luz de cada critrio. (h) Executar o algoritmo de classificao do ELECTRE TRI considerando os critrios classificados em fatores internos. (i) Executar o algoritmo de classificao do ELECTRE TRI considerando os critrios classificados como fatores externos. (j) Analisar os resultados obtidos para as duas classificaes, fatores internos e fatores externos.
4. BASE CONCEITUAL: O MTODO ELECTRE TRI

Para facilitar o entendimento deste trabalho aos leitores no familiarizados ao ELECTRE TRI, nesta seo faz-se uma descrio deste mtodo. Assim, par o leitor que tenha familiaridade com o ELECTRE TRI, a leitura desta seo pode ser dispensada. Conforme reportado em: Zeleny (1982); Roy e Boyssou (1993); Roy e Boyssou (1985); Chankong (1983) e Saaty (1980; 1991; 2000), a tomada de deciso em um ambiente complexo envolve a considerao de mltiplos critrios. A soluo do problema depende de um conjunto de pessoas, cada uma das quais tem seu prprio ponto de vista, muitas vezes conflitante com os demais Gomes et al. (2002). Vincke (1992) classifica os vrios mtodos de AMD como pertencentes a uma das seguintes famlias: Teoria da Utilidade Multiatributo; Mtodos Interativos; e, Mtodos de Subordinao. Os mtodos de subordinao caracterizam-se por utilizar o conceito francs srclassente traduzido, para a lngua inglesa, como outranking e, para a lngua portuguesa, como superao, subordinao, superclassificao e, at mesmo, dominao. Segundo este conceito, diz-se que uma alternativa genrica a A domina uma outra alternativa genrica b A (aSb), se no existem argumentos suficientes para dizer que a pior do que b. Como princpio, consideram-se nestes mtodos como dominadas as alternativas que "perdem" para as demais (ou so piores que as demais) em um maior nmero de critrios. Observa-se, ainda, que: Na lngua portuguesa, a expresso aSb tambm lida como a subordina (supera, superclassifica) b. Algumas interpretaes deste conceito consideram que aSb, se no existem argumentos suficientes para contestar a afirmao de que a pelo menos to boa quanto b.
Estas denominaes e interpretao do significado da expresso aSb tm introduzido dificuldades quando da interpretao de incomparabilidades que surgem nos mtodos ELECTRE. Objetivando reduzir estas dificuldades, no presente, introduzse uma leitura alternativa para a expresso aSb: a no dominada por b. A construo das relaes de subordinao est embasada em uma lgica no compensatria. Buscando estabelecer uma ilustrao didtica deste conceito, Costa (2005a) apresenta a seguinte reflexo: Para se estabelecer bem a diferena entre o emprego da mdia ponderada e dos mtodos de superao, pode-se tomar uma analogia com o que acontece em uma partida de voleibol no confronto entre os times A e B. Se no primeiro set B ganha de A por 25 a 0; porm, nos demais trs sets A ganha de B por 25 a 20. Podemos ter duas anlises: Usar a mdia ponderada para obter o resultado final. Neste caso B seria o vencedor da partida por 85 a 75. Usar o nmero de sets para definir o vencedor. Neste caso A seria o vencedor por 3 a 1. O princpio fundamental dos mtodos de superao pode ser considerado semelhante a esta 2a. abordagem, se considerarmos que cada set equivale a um dos critrios da anlise multicritrio. A mais conhecida famlia de mtodos de Subordinao a famlia ELECTRE., a qual composta pelos seguintes mtodos: ELECTRE I (Roy, 1968), ELECTRE II
(Roy e Bertier, 1971); ELECTRE III (Roy, 1978)), ELECTRE IV (Roy e Hugonnard, 1981)), ELECTRE IS (Roy e Skalka, 1985)) e ELECTRE TRI (Yu, 1992)). O Mtodo ELECTRE TRI caracteriza-se por tratar de problemas especficos de classificao ordenada. Ou seja: dado um conjunto de A de alternativas, associa-as a um conjunto de classes ordenadas C considerando o desempenho das alternativas em A luz de um conjunto de critrios F. A figura 1 ilustra o conjunto formado por p+1 classes, delimitadas por p limites de classes. Assim, conforme reportado em Yu (1992) e Mousseau et al (2000), uma classe genrica Cp delimitada pelos limites bn e bn-1.
Classes
Cp+1 CP
Limites bn
b n-1 b2
C2 C1
b1
Figura 1. Classes de equivalncia no ELECTRE TRI No entanto, esta afirmao de classe deve ser revista para: Uma classe genrica Cp delimitada pelo seu limite inferior bn-1. Sendo exceo a esta regra a classe C1 , a qual delimitada pelo seu limite superior b1. Esta alterao se faz necessria para que os algoritmos de clculo as relaes de subordinao (apresentados a seguir), sejam coerentes. 4.1 RELAO DE SUBORDINAO NO ELECTRE TRI A relao de subordinao construda para tornar possvel a comparao de uma alternativa a com um limite padro bh. A afirmao de que aSbh , significa que a no tem um desempenho pior do que o limite bh. Na validao da afirmao aSbh devem-se verificar duas condies: Concordncia: para que aSbh (ou bhSa) seja aceita, uma maioria suficiente de critrios deve ser a favor desta afirmao. No-discordncia: quando na condio de concordncia esperada, nenhum dos critrios na minoria deve se opor afirmao aSbh (ou bhSa). Computar o ndice de concordncia parcial cj(a, bh) e cj(bh, a),
Os seguintes passos so seguidos na obteno desta relao:
Computar o ndice de concordncia geral c(a, bh), Computar o ndice de discordncia parcial dj(a, bh) e dj(bh, a),
(a, bh),
Computar a relao de subordinao fuzzy conforme o ndice de credibilidade
Determinar um corte da relao fuzzy para obter uma relao de subordinao. Isto : Se (a,bh) => aSbh.
O grau de credibilidade da relao de subordinao (a, bh) expressa com que intensidade se pode acreditar que a subordina bh de acordo com o ndice de concordncia global cj(a, bh) e com o ndice de discordncia dj(a, bh). A traduo de uma relao de subordinao fuzzy obtida entre uma relao de subordinao S feita sobre o significado de um nvel de corte . Este nvel de corte () considerado como o menor valor do ndice de credibilidade compatvel com a afirmao de que a subordina bh. Isto : se (a, bh) , ento aSbh. 4.2 PROCEDIMENTOS DE CLASSIFICAO O ELECTRE TRI integra funes especficas que do suporte ao decisor no processo de preferncia e reduzem o esforo cognitivo requerido na fase de modelagem. Este mtodo classifica as alternativas seguindo dois passos consecutivos: construo de uma relao de subordinao S, que caracteriza como as alternativas so comparadas aos limites das classes; e, explorao (atravs de procedimentos de classificao) da relao S. Procedimento de classificao descendente (ou conjuntivo, ou pessimista) descrito a seguir: o o o Compare a sucessivamente com bi, para i = p, p 1, ..., 1. Encontre um bh que seja o primeiro limite tal que aSbh Classifique a na classe Ch+1. Ou seja: na Classe limitada inferiormente pelo limite bh).
O procedimento de classificao ascendent (ou disjuntivo, ou otimista) descrito a seguir: o o o Compare a sucessivamente com bi, i=1, 2, ..., p. Encontre o primeiro bh para o qual bh > a Classifique a na classe limitada superiormente por este limite. Ou seja classifique a na classe Ch.
4.3 COMPARAO ENTRE OS DOIS PROCEDIMENTOS DE CLASSIFICAO. Sendo estes dois procedimentos diferentes, conseqentemente, pode ocorrer a classificao de algumas alternativas em diferentes classes, pois: o procedimento otimista tende a classificar as alternativas em classes mais altas; o procedimento descendente tende a classificar as alternativas nas categorias mais baixas; e, o procedimento ascendente tende a classificar as alternativas nas categorias mais elevadas. Quando o ocorre divergncia entre as classificaes pessimista e otimista, o classificador deve adotar uma das duas classificaes de acordo com o seu perfil: (mais exigente ou menos exigente). Mais ainda, no caso do ELECTRE TRI, uma divergncia entre estas classificaes indica uma incapacidade do sistema em comparar o elemento sendo classificado a pelo menos um dos perfis das classes de equivalncia utilizadas. Esta incapacidade pode ser causada pelo avaliador, pelo
modelo de classificao (incluindo o conjunto de critrios) ou pelo sistema de coleta de dados (incluindo as escalas utilizadas), ou como reportado em Costa (2005b), por heterogeneidade da amostra a luz do conjunto de critrios.
5. CASO DE APLICAO DA PROPOSTA

Nesta seo apresenta-se uma modelagem na qual se aplica a abordagem proposta a um caso real. (a) Caracterizar o Programa sob avaliao. Foi escolhido o Programa de Psgraduao Stricto Sensu em Engenharia de Produo de uma Universidade Pblica Brasileira. Escolha do Conjunto de critrios. Foram considerados os os critrios adotados pela Sistema de Avaliao da CAPES para os Programas de psgraduao da era d Engenharias III, no Trinio (2002, 2003 e 2004). Conforme Capes (2004), este sistema analisa 7 dimenses. O presente estudo no aprecia a dimenso Proposta do Programa, pois considera-se que este quesito no se configura necessariamente como um indicador de desempenho do programa, mas como uma condio de necessria a existncia do programa ou um pr-requisito a existncia deste. Mais ainda, entende-seque a Proposta do Programa deve ser fruto do posicionamento do programa nos demais indicadores/quesitos. A seguir so listadas as dimenses consideradas na modelagem e os seus respectivos critrios. A dimenso Corpo Docente abrange 5 critrios que so descritos a seguir: o o o o o C1: Composio e atuao do corpo docente; vnculo institucional e dedicao. C2: Dimenso do NRD6 relativamente ao corpo docente. Atuao do NRD6 no Programa. C3: Abrangncia, especializao do NRD6 relativamente s reas de Concentrao e Linhas de Pesquisa. C4: Intercmbio ou renovao do corpo docente. Participao de outros docentes. C5: Qualificao do NRD6.
(b)
A dimenso Atividades de Pesquisa avaliada atravs de 4 critrios, so eles: o o o o C6: Adequao e abrangncia dos Projetos e Linhas de Pesquisa em relao s reas de Concentrao. C7: Vnculo entre Linhas e Projetos de Pesquisa. C8: Adequao da quantidade de Linhas e Projetos de Pesquisa em andamento em relao dimenso e qualificao do NRD6. C9: Participao do corpo discente nos Projetos de Pesquisa.
A dimenso Atividades de Formao comporta 5 critrios: o C10: Adequao e abrangncia da Estrutura Curricular relativamente Proposta do Programa e s suas reas de Concentrao. Adequao e abrangncia das disciplinas ministradas em relao s Linhas e Projetos de Pesquisa. C11: Distribuio da carga letiva e carga horria mdia. Participao de outros docentes.
284
o o o
C12: Quantidade de orientadores do NRD6 relativamente dimenso do NRD6. C13: Atividades letivas de graduao. C14: Orientao nos cursos de graduao.
A dimenso Corpo Discente avaliada atravs de 4 critrios: o o o o C15: Dimenso do corpo discente em relao dimenso do NRD6. C16: Nmero de desligamentos e abandonos em relao dimenso do corpo discente. C17: Nmero de titulados em relao dimenso do corpo discente. C18: Nmero de discentes-autores da ps-graduao em relao dimenso do corpo discente.
Teses e Dissertaes uma outra dimenso do Sistema de Avaliao da CAPES. Ela possui 5 critrios. o C19: Vnculo das teses e dissertaes com reas de Concentrao e com Linhas e Projetos de Pesquisa; adequao ao nvel dos cursos. C20: Tempo mdio de titulao de bolsistas; tempo mdio de bolsa. Relao entre os tempos mdios de titulao de bolsistas e de no bolsistas. C21: Nmero de titulados em relao dimenso do NRD6. Participao de outros docentes. C22: Nmero mdio de orientandos em relao dimenso do NRD6. C23: Adequao das dissertaes e teses proposta do programa.
o o o
A ltima dimenso Produo Intelectual, a qual comporta 5 critrios. o C24: Adequao dos tipos de produo Proposta do Programa e vnculo com as reas de Concentrao, Linhas e Projetos de Pesquisa ou Teses e Dissertaes. C25: Qualidade dos veculos ou meios de divulgao. C26: Quantidade e regularidade em relao dimenso do NRD6; distribuio da autoria entre os docentes. C27: Autoria ou co-autoria de outros participantes (no pertencentes ao ncleo bsico). C28: Produo tcnica.
o o o o
(c)
Classificar os critrios segundo a abordagem SWOT. Os critrios acima foram classificados em dois grupos: Fatores Internos. o C1; C2; C3; C4; C5; C6; C7; C8; C9; C10; C11; C12; C15; C16; C18; C19; C22; C23; C24; C25; C26; C27; C28.
Fatores Externos. o C13; C14; C16; C17; C18; C20; C21.
285
(d)
Definir o peso de cada critrio. Objetivando possibiliatr uma comparao com os resultados oficiais emitidos pela CAPES, adotaram-se os mesmos pesos pelo Comit de avaliao das Engenharias II da CAPES . Estes pesos esto reportados na Tabela 1. Tabela 1: Peso dos critrios da dimenso Produo Intelectual
Dimenso I. Corpo Docente (Peso: 10%) Critrio C1 C2 C3 C4 C5 II. Atividades de Pesquisa (Peso: 10%) C6 C7 C8 C9 Peso 30 20 30 10 10 30 30 20 20
III. Atividades de Formao (Peso: 10%)
C10 C11 C12 C13 C14
40 20 20 10 10 25 15 40 20
IV. Corpo Discente (Peso: 20%)
C15 C16 C17 C18
V. Teses e Dissertaes (Peso: 20%)
C19 C20 C21 C22 C23
10 30 30 20 10 10 30 30 10 20
VI. Produo Intelectual (Peso: 30%)
C24 C25 C26 C27 C28
(e)
Especificar a escala para o julgamento de desempenho do programa em cada critrio. Tambm objetivando permitir comparao com os resultados
286
oficiais, foram adotadas as escalas de avaliao utilizadas pelo Comit de Engenharia III da CAPES em seu processo de avaliao. (f) Definir as classes de equivalncia (ou padres de referncia). As escalas definidas pela CAPES, geram uma classificao do desempenho do Programa (em cada critrio) em uma dentre cinco categorias: Muito Bom, Bom, Regular, Fraco e Deficiente. Em analogia com este sistema; com base nos trabalhos de Azevedo e Costa (2000), Likert (1932), Miller (1954)(1954), Parducci (1965) e em conceitos do mtodo SWOT, adotaram-se dois grupos de classes (Tabelas 2 e 3). Tabela 2: Classes para o desempenho do Programa luz dos critrios internos.
Ponto forte Muito Forte Padro da Classe de desempenho Codificao da Classe Muito Bom AI Pouco Forte Bom BI Ponto neutro Neutro Regular CI Ponto fraco Pouco Fraco Fraco DI Muito Fraco Deficiente EI
Tabela 3: Classes para o desempenho do Programa luz dos critrios externos.

Oportunidade Muito Intensa Padro da Classe de desempenho Codificao da Classe Muito Bom AE Intensa Bom BE Situao neutra Neutra Regular CE Ameaa Intensa Fraco DE Muito Intensa Deficiente EE
Observa-se que esta as classes so compatveis com as escalas de avaliao utilizadas pela CAPES adotadas no presente trabalho. (g) Desempenho do Programa em cada um dos critrios considerados. As tabelas 4 e 5 reportam o desempenho do Programa luz dos critrios classificados como fator internos e externos, respectivamente. Estas avaliaes foram obtidas com dos documentos disponibilizados no site da CAPES (CAPES, 2004). Executar o algoritmo de classificao do ELECTRE TRI considerando os critrios classificados em fatores internos. Foram executados os algoritmos pessimista (que fornece uma classificao mais exigente) e otimista (que fornece uma classificao menos exigente ou mais relaxada) para diferentes valores do grau de credibilidade (), com (0,5 ; 1,0].
(h)
287
Tabela 4: Desempenho do Programa luz dos critrios internos.

Critrios C1 C2 C3 C4 C5 C6 C7 C8 Composio e atuao do corpo docente; vnculo institucional e dedicao. Dimenso do NRD6 relativamente ao corpo docente. Atuao do NRD6 no Programa. Abrangncia, especializao do NRD6 relativamente s reas de Concentrao e Linhas de Pesquisa. Intercmbio ou renovao do corpo docente. Participao de outros docentes. Qualificao do NRD6. Adequao e abrangncia dos Projetos e Linhas de Pesquisa em relao s reas de Concentrao. Vnculo entre Linhas e Projetos de Pesquisa. Adequao da quantidade de Linhas e Projetos de Pesquisa em andamento em relao dimenso e qualificao do NRD6. Participao do corpo discente nos Projetos de Pesquisa. Adequao e abrangncia da Estrutura Curricular relativamente Proposta do Programa e s suas reas de Concentrao. Adequao e abrangncia das disciplinas ministradas em relao s Linhas e Projetos de Pesquisa. Distribuio da carga letiva e Participao de outros docentes. carga horria mdia. Desempenho MB MB MB MB MB MB MB F
C9 C10
B MB
C11 C12 C15 C16 C17 C19
MB MB B MB R B
Quantidade de orientadores do NRD6 relativamente dimenso do NRD6. Dimenso do corpo discente em relao dimenso do NRD6. Nmero de desligamentos e abandonos em relao dimenso do corpo discente. Nmero de discentes-autores da ps-graduao em relao dimenso do corpo discente. Vnculo das teses e dissertaes com reas de Concentrao e com Linhas e Projetos de Pesquisa; adequao ao nvel dos cursos. Nmero mdio de orientandos em relao dimenso do NRD6. Adequao das dissertaes e teses proposta do programa. Adequao dos tipos de produo Proposta do Programa e vnculo com as reas de Concentrao, Linhas e Projetos de Pesquisa ou Teses e Dissertaes. Qualidade dos veculos ou meios de divulgao. Quantidade e regularidade em relao dimenso do NRD6; distribuio da autoria entre os docentes. Autoria ou co-autoria de outros pertencentes ao ncleo bsico). Produo tcnica. participantes (no
C22 C23 C24
B MB MB
C25 C26 C27 C28
R R B B
288
Tabela 5: Desempenho do Programa luz dos critrios externos

Critrios C13 Atividades letivas de graduao. C14 Orientao nos cursos de graduao. C16 Desempenho MB B
Nmero de desligamentos e abandonos em relao dimenso MB do corpo discente. B
C17 Nmero de titulados em relao dimenso do corpo discente. C18
Nmero de discentes-autores da ps-graduao em relao R dimenso do corpo discente.
Tempo mdio de titulao de bolsistas; tempo mdio de bolsa. C20 Relao entre os tempos mdios de titulao de bolsistas e de R no bolsistas. C21 Nmero de titulados em relao dimenso do NRD6. B Participao de outros docentes.
A tabela 6 apresenta o resumo das classificaes obtidas. Observa-se, nesta tabela, que para um = 0,76 existe divergncia entre os resultados da classificao do Programa com nos procedimentos Mais Exigente e Mais Relaxado. Este fato caracteriza uma incomparabilidade na comparao do Programa com o limite superior da classe CI, com o limite inferior e o superior da classe BI e com o limite inferior da classe AI. Portanto, como visto anteriormente, no procedimento de classificao pessimista o Programa classificado como CLASSE CI e no procedimento de classificao otimista classificado na CLASSE AI. Isto significa que o Programa tem um desempenho que oscila entre a classe AI e a classe CI, luz dos fatores internos com um plano de corte = 0,76. Tabela 6: Classificao do Programa luz dos fatores internos.
Classificao Mais exigente = 0,50 = 0,65 = 0,76 BI CI CI Classificao Mais Relaxada BI BI AI
(i)
Executar o algoritmo de classificao do ELECTRE TRI considerando os critrios classificados em fatores externos. Tambm foram executados os algoritmos pessimista (que fornece uma classificao mais exigente) e otimista (que fornece uma classificao menos exigente ou mais relaxada) para diferentes valores do grau de credibilidade (). A tabela 7 apresenta o resumo das classificaes obtidas.
Tabela 7: Classificao do Programa luz dos fatores externos.

Classificao exigente = 0,50 = 0,65 = 0,76 BE CE CE Mais Classificao Mais Relaxada BE BE BE
289
Tambm neste caso, para valores de = 0,76 e 0,65, existe divergncia entre os resultados da classificao do Programa com nos procedimentos Mais Exigente e Mais Relaxado. Este fato caracteriza uma incomparabilidade na comparao do Programa com o limite superior da classe CI e com o limite inferior da classe BI. Portanto, como visto anteriormente, no procedimento de classificao pessimista o Programa classificado como CLASSE CE e no procedimento de classificao otimista classificado na CLASSE BE. Isto significa que o Programa tem um desempenho que oscila entre as classes CE e BE , luz dos fatores internos em um plano de corte = 0,76. (j) Analisar os resultados obtidos para as duas classificaes, fatores internos e fatores externos. A Figura 2 ilustra o posicionamento estratgico do Programa gerado pelo abordagem aqui proposta, considerando o procedimento de classificao mais exigente, considerando = 0,76. Observa-se que nesta classificao, o Programa apresenta um posicionamento estratgico neutro (CI/CE)..
AI BI CI DI EI
Manuteno
Desenvolvimento
Sobrevivncia
Crescimento
EE
DE
CE
BE
AE
Figura 2. Posicionamento estratgico para o Procedimento mais exigente J a figura 3 ilustra o posicionamento estratgico do Programa, conforme o procedimento de classificao menos exigente, tambm para = 0,76..
AI BI CI DI EI
Manuteno
Desenvolvimento
Sobrevivncia
Crescimento
EE
DE
CE
BE
AE
Figura 3. Posicionamento estratgico para o Procedimento menos exigente
290
Observa-se, para o procedimento de classificao menos exigente, que o posicionamento estratgico do Programa de desenvolvimento (AI/BE). 6. ANLISE DE SENSIBILIDADE DOS RESULTADOS OBTIDOS NO CASO DE A Figura 4 apresenta o posicionamento estratgico do Programa a partir das classificaes atribudas pelo procedimento mais exigente e considerando os trs planos de corte reportados nas Tabelas 6 e 7. Em acordo com esta figura, o posicionamento estratgico do Programa, para o plano de corte de 0,50, de desenvolvimento (BI/BE). Para os planos de corte de 0,65 e 0,76; o posicionamento do Programa neutro (CI/CE).
AI BI
Manuteno
Desenvolvimento
= 0,50
CI DI EI
Sobrevivncia Crescimento
= 0,65 = 0,76
EE
DE
CE
BE
AE
Figura 4. Anlise de sensibilidade do posicionamento estratgico no Procedimento Pessimista. A Figura 5 ilustra o posicionamento estratgico do Programa a partir das classificaes atribudas a partir das classificaes atribudas pelo procedimento menos exigente e considerando os trs planos de corte reportados nas Tabelas 6 e 7. De acordo com esta figura, para os trs planos de corte considerados, o posicionamento estratgico do Programa de desenvolvimento (AI/BE e BI/BE) no procedimento mais relaxado.
AI BI
Manuteno
Desenvolvimento
= 0,50 = 0,65 = 0,76
CI DI EI
Sobrevivncia Crescimento
EE
DE
CE
BE
AE
Figura 5. Anlise de sensibilidade do posicionamento estratgico no Procedimento Otimista. Observa-se que o valor 0,76 tem sido um valor frequentemente adotado para o parmetro . No entanto, no se encontra na literatura uma discusso aprofundada sobre a escolha do valor de . Possivelmente, a escolha do valor 0,76 est associa ao
fato deste valor ser o default do mais conhecido (provavelmente o nico) aplicativo comercializado que executa o algoritmo ELECTRE TRI (software ELECTRE TRI, http://www.lamsade.dauphine.fr). Por outro lado, a adoo de um parmetro plano de corte () igual a 0,5 parece ser razovel pois indica que uma alternativa esta predominantemente em uma determinada categoria, o que destaca o aspecto Fuzzy da modelagem pelo ELECTRE TRI. Vale lembrar que, embora no seja destacado na literatura, o grau de credibilidade pode ser interpretado como o grau de pertinncia do objeto sob classificao uma determinada categoria. Neste caso a adoo de um grau de credibilidade de 0,5, implica que o curso est sendo classificado na categoria em que ele tiver maior predominncia lembrar, que, de uma forma geral, as actegiras so delimitadas pelos seus limites inferiores. O aspecto fuzzy apresentado de forma muito sutil no mtodo ELECTRE TRI, tendo que ser depreendido da anlise detalhada do seu algoritmo, no sendo encontrado na literatura textos que discutam em detalhe este aspecto, o que leva a interpretaes equivocadas. Um outro aspecto que refora a idia de se adotar um parmetro de corte igual a 0,5 o trabalho de Condorcet (1788), desenvolvido inicialmente para decises multidecisor e que apresenta as bases para os mtodos de subordinao. Segundo o Mtodo de Concorcet, uma alternativa supera a outra se ela apresenta o melhor desempenho para a maioria dos decisores. Por analogia, ao se adotar =0,5 no Mtodo ELETCTRE TRI, uma alternativa classificada em uma determinada categoria se ela supera o limite inferior desta categoria em pelo menos 50% dos critrios - quando todos os critrios tiverem o mesmo peso. Para o caso em que o s critrios apresentam pesos diferentes, a analogia continua sendo vlida, porm deve-se observar que uma alternativa classificada em deteminada categoria caso o grau de credibilidade3 com que ela supera ao limite inferior da categoria superior a 0,5 . 6.1 COMENTRIOS ADICIONAIS SOBRE A AVALIAO A tabela 8 apresenta os critrios nos quais o programa obteve as melhores e as piores avaliaes. Tabela 8: Melhores e piores avaliaes FATOR INTERNO MELHOR PIOR FATOR EXTERNO MELHOR C13 e C16 PIOR C18 e C20
C1, C2, C3, C4 e C5 C8
Os critrios internos que obtiveram a melhor avaliao, foram todos aqueles relacionados dimenso Corpo Docente (C1, C2, C3, C4 e C5). Esta dimenso se destaca por ter todos os critrios classificados como internos e por estes terem obtido a avaliao mxima (Muito Bom). O critrio C8 (adequao da quantidade de Linhas e Projetos de Pesquisa em andamento em relao dimenso e qualificao do NRD6) foi o o critrio interno no qual o programa obteve a pior avaliao. Isto porque o Programa possui menos de 2 Linhas e Projetos de Pesquisa em relao ao NRD6. Os critrios externos que obtiveram a melhor avaliao foram o C13, referente s atividades letivas de graduao, e o C16, relacionado ao nmero de desligamentos e abandonos em relao dimenso do corpo discente. O critrio C13 foi considerado muito bom, pois a carga horria na graduao por docente do NRD6 maior do que
292
70%. J o critrio C16 tambm foi considerado muito bom, pois o nmero de desligamentos e abandonos menor do que 10% do total dos discentes. Apesar de considerar ambos no nvel regular, os critrios externos C18, relacionado ao nmero de discentes-autores da ps-graduao em relao dimenso do corpo discente, e C20, relativo ao tempo mdio de titulao de bolsistas; tempo mdio de bolsa (relao entre os tempos mdios de titulao de bolsistas e de no bolsistas) receberam os piores julgamentos. Isto porque o nmero de discentesautores em relao ao corpo discente varia entre 20 e 35% e a relao entre os tempos mdios de titulao de bolsistas e de no bolsistas varia entre 1,2 e 1,3. 5. CONCLUSES Os critrios externos que obtiveram a melhor avaliao foram o C13, referente s atividades letivas de graduao, e o C16, relacionado ao nmero de desligamentos e abandonos em relao dimenso do corpo discente. O critrio C13 foi considerado muito bom, pois a carga horria na graduao por docente do NRD6 maior do que 70%. J o critrio C16 tambm foi considerado muito bom, pois o nmero de desligamentos e abandonos menor do que 10% do total dos discentes. Apesar de considerar ambos no nvel regular, os critrios externos C18, relacionado ao nmero de discentes-autores da ps-graduao em relao dimenso do corpo discente, e C20, relativo ao tempo mdio de titulao de bolsistas; tempo mdio de bolsa (relao entre os tempos mdios de titulao de bolsistas e de no bolsistas) receberam os piores julgamentos. Isto porque o nmero de discentesautores em relao ao corpo discente varia entre 20 e 35% e a relao entre os tempos mdios de titulao de bolsistas e de no bolsistas varia entre 1,2 e 1,3. A classificao do Programa, considerando o perfil mais exigente para os critrios internos, a CLASSE CI, isto implica em dizer que a nesta classificao no h predominncia de pontos fortes ou pontos fracos. Sob o ponto de vista menos exigente, classifica-se o Programa na CLASSE AI. Isto significa que o Programa Muito Bom, tendo, portanto, uma predominncia de pontos fortes, Segundo esta classificao. Observa-se que, para os critrios externos, segundo a classificao mais exigente, o Programa considerado Regular (CLASSE CE). Logo, nesta classificao, tambm no h predominncia de oportunidades ou ameaas. J o procedimento de classificao menos exigente classifica o programa na como CLASSE BE considerando-o, portanto, Bom (com predominncia de oportunidades). Aps a anlise das classificaes, faz-se a combinao destas para o diagnstico estratgico do Programa. Conforme o procedimento de classificao mais exigente, o Programa apresenta um posicionamento estratgico neutro (CI/CE). Segundo o procedimento de classificao menos exigente, o posicionamento estratgico do Programa de desenvolvimento (AI/BE). Estes dois resultados indicam o posicionamento de Programa em uma postura entre estabilidade e desenvolvimento, indicando aes de inovao. Ressalta-se que os resultados esto associados ao recorte temporal da pesquisa, que foi concluda em 2006 e tomou por base os dados do Ano de 2005. Como sugestes para futuros desenvolvimentos, sugerem-se: a explorao desta abordagem a outros casos; a incorporao de critrios associados ao impacto social do curso; e, o contraste dos resultados obtidos com outras tcnicas de construo de indicadores.
293
5. REFERNCIAS AKHTER, Syed H. Strategic planning, hypercompetition, and knowledge management. Business Horizons, v.46, n.1, 19-24. 2003. AZEVEDO, Marilena Coelho de e COSTA, Helder Gomes. Metodologia para o diagnstico estratgico. Conferencia Internacional de Ciencias Empresariales. Santa Clara, CUBA: Universidad Central Marta Abreu. 2000, 2000. 8 p. ______. ELECOMP: avaliao da competitividade pelo ELECTRE TRI. Encontro Nacional De Ps-Graduao em Administrao (ENAMPAD). Campinas, SP, Brasil: Associao Nacional dos Programas de Ps-graduao em Administrao. 2001, 2001. 12 p. ______. Avaliao do Grau da Competitividade de Organizaes: Electre TRI x Competitive Profile Matrix. XXXVI Simpsio Brasileiro de Pesquisa Operacional (SBPO 2004). So Joo Del Rey, MG, Brazil: Sociedade Brasileira de Pesquisa Operacional, 2004. 11 p. BARROSO, Marlia de Ftima C. M. . Anlise multicritrio e avaliao de desempenho docente sob a tica do corpo discente em instituies de ensino superior. Dissertao (Mestrado em Engenharia de Produo), Universidade Estadual do Norte Fluminense Darcy Ribeiro (UENF), Campos dos Goytacazes, 2002. CAPES. Avaliao trienal 2004: relatrio final da avaliao trienal da psgraduao 2004. <http://www.capes.gov.br/capes/portal/>. Acesso em: 13/05/2005. ______. Avaliao da ps-graduao: documento de <http://www.capes.gov.br/capes/portal/>. Acesso em: 13/05/2005. rea. 2005.
CHANKONG, Y.; HAIMES, Y. Multiobjective Decision Making. Amsterdam: Ed. North Holland, 1983. COSTA, Helder Gomes. Estruturas de Suporte Deciso. Niteri, Brasil: Grupo de Pesquisa em Sistemas de Apoio Deciso/Universidade Federal Fluminense. 2005. CONDORCET, Jean Antoine Nicolas de Carita. Essai sur la constitution et les fonctions des Assembles provinciales. Paris, Frana: Academia de Cincias, 1788. ______. An multicriteria approach to evaluate consumer satisfaction: a contribution to marketing. VIII International Conference on Decision Support Systems (ISDSS'05). Porto Alegre, RS, Brasil: International Society of Decision Suppotrt Systems, 2005b. 10 p. COSTA, Helder Gomes e FREITAS, Andr Lus Policani. Metodologia multicritrio para a medio e classificao do grau de satisfao de clientes. Metrologia 2000. So Paulo, SP: Sociedade Brasileira de Metrologia, 2000. 10 p. DAVID, F. R. . Strategic Management Concepts & Cases. New Jersey: Prentice Hall, 1998. 525 p. GOMES, Luiz Flavio Autran Monteiro; Simes, GOMES; Carlos Francisco e ALMEIDA, Adiel Teixeira de. Tomada de deciso gerencial enfoque multicritrio. So Paulo: Editora Atlas, 2002. p.
294
GRIGOROUDIS, P.; SISKOS, Y. Preference disaggregation for measuring and analyzing customer satisfaction: The MUSA method. European Journal of Operational Research, v.143, n.100, p.148-170. 2001. KAJANUS, Mikka; KANGAS, Jyrki; KURTTILA, Mikko. The use of value focused thinking and the AWOT hybrid method in tourism management. Tourism Management, v.25, n.4, p.499-506. 2003. KANGAS, Jyrki et al. Evaluating the management strategies of a forestland estatethe S-O-S approach. Journal of Environmental Management, v.69, n.4, p.349-358. 2003. KURTTILA, Mikko et al. Utilizing the analytic hierarchy process (AHP) in SWOT analysis a hybrid method and its application to a forest-certification case. Forest Policy and Economics, v.1, n.1, p.41-52. 2000. KWAK, N.K.; LEE, Chang W. Business process reengineering for healt-hcare system using multicriteria mathematical programming. European Journal of Operational Research, v.140, n.2, p.447-458. 2002. LESKINEN, Leena Aetal. Adapting modern strategic decision support tools in the participatory strategy processa case study of a forest research station. Forest Policy and Economics, v.2, n.50, p.200-700. 2004. LIKERT, R.A. Technique for measurement of attitudes. Archives of Psychology, v.140, n.1, p.5-55. 1932. MECA, Eduardo Fernando Moreira Anlise multicritrio aplicada avaliao do sistema de ensino adotado nas Escolas Pblicas do Rio de Janeiro. Dissertao (Mestrado em Engenharia de Produo), Universidade Federal (UENF), Niteri, 2006. MILLER, G.A. The Magical Number Seven, Plus or Minus Two: Some Limits on Our Capacity for Processing Information. Psychological Review, v.101, n.2, p.343-352. 1954. MIRANDA, Caroline Maria Guerra de ; ALMEIDA, Adiel Teixeira de. Avaliao de PsGraduao com Mtodo ELECTRE TRI - O Caso de Engenharias III da CAPES. Produo, v.13, n.3, p.101-112. 2003. ______. Viso Multicritrio da Avaliao de Programas de Ps-Graduao pela CAPES - O Caso da rea Engenharias III Baseado nos Mtodos ELECTRE II e MAUT. Gesto & Produo, v.11, n.1, p.51-64. 2004. MOTTA, Slavson Silveira e COSTA, Helder Gomes Metodologia para a avaliao e classificao do desempenho da produtividade de professores. I Encontro Norte Fluminense de Engenharia de Produo (ENFEPE 2006). Campos dos Goytacazes: Laboratrio de Engenharia de Produo - Universidade Estadual do norte Fluminense "Darcy Ribeiro" (UENF): 6 p. 2001. ______. Utilizao do mtodo electre na avaliao e classificao de professores quanto a sua produtividade. XIII Conferencia Latino-Ibero-Americana de Investigacin de Operaciones (CLAIO 2006). Montivido: ALIO (Asociacin LatinoIbero-Americana de Investigacin de Operaciones) 6p. 2006.
295
MOUSSEAU, Vincent; SLOWINSKI, R. e ZIELNIEWICZ. ELECTRE TRI 2.0a. methodological guide and users manual. Document du LAMSADE. Universit de ParisDauphine. Paris: Fev. 1999 ______. A user-oriented implementation of the ELECTRE-TRI method integrating preference elicitation support. Computers & Operations Research, v.27, n.7, p.757777. 2000. OLIVEIRA, Djalma de Pinho Rebouas. Planejamento Estratgico: conceitos, metodologia e prticas. So Paulo: Editora Atlas, 1999. p. PARDUCCI, G.A. Category judgement: a range-frequency model. Psychological Review, v.72, n.3, p.407-418. 1965. POLITIS, Y.; e SISKOS, Y. Multicriteria methodology for the evaluation of a Greek engineering department. European Journal of Operational Research, v.156, n.1, p.223-240. 2004. RIBEIRO, Tnia Aparecida da Conceio. Avaliao institucional de IES: um estudo de caso sob a tica do corpo discente. (Mestrado em Engenharia de Produo), Universidade Estadual do Norte Fluminense "Darcy Ribeiro" (UENF), Campos dos Goytacazes, 2003. RIBEIRO, Tnia Aparecida da Conceio e COSTA, Helder Gomes. Aplicao do mtodo ELECTRE TRI classificao da percepo do desempenho de IES por parte do corpo discente. Encontro Nacional de Engenharia de Produo (ENEGEP 2005). Porto Alegre, RS: Associao Brasileira de Engenharia de Produo (ABEPRO), 2005. 8 p. ROY, B ; e HUGONNARD, J. C. Classement des prolongements de lignes de stations en banlieu parisienne. Cahiers u LAMSADE. Universit Dauphine et RATP. Paris. 1981. ROY, B e SKALKA, J. M. . ELECTRE IS: Aspcts methodologiques et guide dutilization. Cahier du LAMSADE. Universit de ParisDauphine. Paris: Fev. 1985 ROY, B. e BERTIER, P.M. . La methode ELECTRE II: Une methode de classement en presence de criteres multiples. Paris. SEMA (Metra International) Paris. 1971. p.45 ROY, B. e BOYSSOU, D. Mthodologie Multicritre dide la Dcision. Paris Ed. Economica, 1985. ______. Aid Multicritre la decision. Paris Ed Economica, 1993. p. ROY, Bernard. Classement et choix en presence de points de vue multiples (la methode ELECTRE). Lausanne Presses Polytechiniques et Universitaires Romandes, 1968. ______. ELECTRE III: Un alghoritme de methode de classements fonde sur une representatio floue des preferences em presence de criteres multiples. Cahieres de CERO, v.20, n.1, p.3-24. 1978. SAATY, Thomas L. The Analytic Hierarquic Process. Pittsburg: RWS Publications, 1980.
______. Mtodo de Anlise Hierrquica. So Paulo: McGraw-Hill-Makron, 1991. ______. Decision making for leaders the Analytic Hierarchy Process for decisions in a complex world. Pittsburgh: RWS Publications, 2000. 315 p. SHRESTHA, Ram. K.; ALAVALAPATI, Janaki R. R. e KALMBACHER, Robert. S. . Exploring the potential for silvopasture adoption in south-central Florida: an application of SWOT-AHP method. Agricultural Systems, v.81, n.3, p.185-199. 2004. VINCKE, Ph. Multicriteria decision Aid. New York: John Wiley, 1992. YU, W. ELECTRE TRI - Aspects Methodologiques et Guide dUtilisation. Document du LAMSADE. Universit de ParisDauphine. Paris. 1992 ZELENY, M. Multiple Criteria Decision Making. New York: McGraw-Hil, 1982. AGRADECIMENTOS Os autores agradecem ao apoio institucional da Universidade Federal Fluminense e ao apoio financeiro do CNPq e da CAPES.
297
Post graduate programs evaluation: an integrated approach based on ELECTRE TRI, SWOT and CAPES evaluation system
Roberta Braga Neves1, robertaneves@producao.uff.br Helder Gomes Costa1, hgc@vm.uff.br
1
Universidade Federal Fluminense, Rio de Janeiro, RJ, Brasil
*Received: January, 2006 / Accepted: December, 2006
ABSTRACT CAPES evaluates Postgraduate programs in Brazil. This evaluation drives the strategies adopted by the direction of Brazilian postgraduate programs, although CAPES system doesnt explicit the use of any traditional strategic planning approach in its system. Moreover, this system doesnt explicit the use of approaches developed for qualitative variables evaluation. Present work proposes an original approach that is able to integrate a strategic planning method (SWOT) and a multicritrio decision aid method (ELECTRE TRI) to CAPES evaluations system. An experimental application of the proposal is either presented in this work.
Keywords: Multicritrio. MCDA. MCDM. SWOT. CAPES. ELECTRE
298

Swot Tri

Enviado por

Dados do documento

Título original

Direitos autorais

Formatos disponíveis

Compartilhar este documento

Compartilhar ou incorporar documento

Opções de compartilhamento

Você considera este documento útil?

Este conteúdo é inapropriado?

Direitos autorais:

Formatos disponíveis

Swot Tri

Enviado por

Direitos autorais:

Formatos disponíveis

Revista Eletrnica Sistemas & Gesto 1 (3) 276-298 Programa de Ps-graduao em Sistemas de Gesto, TEP/TCE/CTC/PROPP/UFF

Universidade Federal Fluminense, Rio de Janeiro, RJ, Brasil

*Recebido: Janeiro , 2006

/ Aceito: Dezembro, 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

4. BASE CONCEITUAL: O MTODO ELECTRE TRI

Os seguintes passos so seguidos na obteno desta relao:

Computar a relao de subordinao fuzzy conforme o ndice de credibilidade

5. CASO DE APLICAO DA PROPOSTA

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Fatores Externos. o C13; C14; C16; C17; C18; C20; C21.

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

III. Atividades de Formao (Peso: 10%)

C10 C11 C12 C13 C14

IV. Corpo Discente (Peso: 20%)

C15 C16 C17 C18

V. Teses e Dissertaes (Peso: 20%)

C19 C20 C21 C22 C23

VI. Produo Intelectual (Peso: 30%)

C24 C25 C26 C27 C28

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Tabela 3: Classes para o desempenho do Programa luz dos critrios externos.

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Tabela 4: Desempenho do Programa luz dos critrios internos.

C11 C12 C15 C16 C17 C19

C22 C23 C24

C25 C26 C27 C28

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Tabela 5: Desempenho do Programa luz dos critrios externos

Nmero de desligamentos e abandonos em relao dimenso MB do corpo discente. B

C17 Nmero de titulados em relao dimenso do corpo discente. C18

Nmero de discentes-autores da ps-graduao em relao R dimenso do corpo discente.

Tabela 7: Classificao do Programa luz dos fatores externos.

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Figura 3. Posicionamento estratgico para o Procedimento menos exigente

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

= 0,50 = 0,65 = 0,76

C1, C2, C3, C4 e C5 C8

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Universidade Federal Fluminense, Rio de Janeiro, RJ, Brasil

*Received: January, 2006 / Accepted: December, 2006

SISTEMAS & GESTO, v. 1, n. 3, p. 276-298, setembro a dezembro de 2006

Você também pode gostar