*Analista de Recursos Humanos Snior da Eletronorte. Administradora com Mestrado em Administrao UnB. Especializao em Recursos Humanos.
RESUMO
A UCEL Universidade Corporativa da Eletronorte vem desenvolvendo programas intensivos de Educao Corporativa nos ltimos anos, em funo da competitividade exigida pelas empresas do setor eltrico. Um Sistema de Avaliao de Treinamento capaz de monitorar a eficincia e eficcia desses programas tornou-se imperioso na empresa. Com esse foco, a empresa implantou o Sistema de Avaliao de Treinamento SAT: um projeto de ponta que utiliza medidas de avaliao validadas cientificamente, tanto ao nvel de reao, quanto ao nvel de impacto do treinamento no trabalho. No SAT tambm avaliado o Centro de Treinamento da Empresa, localizado na sede, Bem-Te- Vi Desenvolvimento e Educao Empresarial. Os resultados encontrados so encaminhados sistematicamente para as reas clientes da empresa, instrutores, treinados e empresas fornecedoras desses programas. O SAT tem sido efetivo para a empresa, pois com base nos resultados encontrados nas avaliaes de reao e de impacto do treinamento no trabalho, a UCEL reformula e introduz novas estratgias para a gesto da educao corporativa na Eletronorte.
Palavras-chave: Educao Corporativa; Avaliao de Treinamento; Avaliao do Impacto do Treinamento no Trabalho.
INTRODUO
A Centrais Eltricas do Norte do Brasil S.A (Eletronorte) uma concessionria de servio pblico de energia eltrica, sociedade annima de economia mista, subsidiria das Centrais Eltricas Brasileiras S.A. Eletrobrs, criada em 20 de junho de 1973, com sede no Distrito Federal e com Unidades Descentralizadas nos estados do Acre, Amap, Amazonas, Maranho, Mato Grosso, Par, Rondnia, Roraima e Tocantins. Tem como finalidade principal a realizao de estudos, projetos, construo e operao de usinas geradoras e de sistemas de transmisso e distribuio de energia eltrica, diretamente ou por meio de suas subsidirias integrais Boa Vista Energia S/A e Manaus Energia S/A, bem como a celebrao de atos de comrcio decorrentes dessas atividades. A Eletronorte tem investido substancialmente em Educao Corporativa, desde a sua criao, tendo em vista o fomento de uma cultura empresarial de excelncia, nos moldes do Prmio Nacional de Gesto Pblica (PQGF), Prmio Nacional da Qualidade (PNQ) e Total Productive Maintenance (TPM). A Universidade Corporativa da Eletronorte (UCEL), criada em 2002, vem intensificando programas de Treinamento, Desenvolvimento e Educao Empresarial, fortalecendo o capital humano da empresa, em funo da competitividade exigida atualmente pelas empresas do setor eltrico. Esses programas compreendem aes educacionais presenciais e a distncia, como tambm por meio da TV-Educativa Digital, que oferta programas de educao continuada On line. Um Sistema de Avaliao de Treinamento capaz de monitorar a eficincia e eficcia dos programas desenvolvidos tornou-se imperioso na empresa, sobretudo, em funo dos altos custos envolvidos nessas aes. O Sistema de Avaliao de Treinamento (SAT) foi implantado na Eletronorte em 2000, com o objetivo de estabelecer medidas de avaliao fidedignas, cientficas e sistematizadas das aes de educao adotadas na empresa. O SAT vem se consolidando na empresa, desde ento, como estratgia eficaz para a monitorao da educao corporativa na Eletronorte.
1. MODELO DO SISTEMA DE AVALIAO DE TREINAMENTO SAT
O Sistema de Avaliao de Treinamento (SAT), da Eletronorte, foi baseado no modelo de avaliao de Hamblin (1978), que preconiza a avaliao de treinamento em cinco
nveis: Reao, Aprendizagem, Mudana de Comportamento no Cargo (Avaliao de Impacto), Organizao (Mudanas Organizacionais) e Valor Final (Retorno Financeiro). A Figura 1, a seguir, apresenta os nveis de avaliao, conforme preconizado por Hamblin (1978):
Figura 1. NVEIS DE AVALIAO DE TREINAMENTO (HAMBLIN, 1978) (FONTE: SILVA, M.E. Gesto da Educao Corporativa na Eletronorte: estratgias visando consolidao da Universidade Corporativa Eletronorte.
Para Hamblin (1978) avaliao o ato de julgar se o treinamento valeu a pena ou no em termos de algum critrio de valor luz da informao disponvel. O SAT tem, portanto, o objetivo geral de fornecer informaes contnuas e fidedignas Eletronorte sobre a eficincia e eficcia das aes educacionais realizadas e/ou patrocinadas pela empresa. Tem os seguintes objetivos especficos: Avaliar a eficincia dos treinamentos realizados e/ou patrocinados pela Eletronorte, pela avaliao de reao; Avaliar a aprendizagem das competncias adquiridas (conhecimentos, habilidades e atitudes) pela avaliao de aprendizagem; Avaliar o impacto do treinamento no trabalho, que tem como objetivo averiguar a transferncia para o trabalho dos conhecimentos, habilidades e atitudes adquiridas na ao educacional, a melhoria do desempenho no trabalho, bem como o suporte organizacional encontrado pelo treinado (gerencial, social e material);
Avaliao de Reao Avaliao de Aprendizagem Avaliao do Impacto do Treinamento Avaliao das mudanas organizacionais
Avaliao do retorno financeiro
Avaliar as mudanas ocorridas na organizao em funo das aes educacionais realizadas. Essas mudanas vinculam-se diretamente ao alcance dos objetivos organizacionais e as mudanas comportamentais esperadas na fora de trabalho; Avaliar o retorno financeiro dos treinamentos realizados. Refere-se relao entre a avaliao das mudanas na organizao e o retorno financeiro. Os dois ltimos nveis ainda se encontram em fase de projeto com vistas implantao futura na Eletronorte. Porm, sabe-se que as habilidades adquiridas, quando transferidas para o trabalho, aumentam o desempenho do indivduo e, por conseqncia, o da organizao. Muitos tm procurado frmulas de avaliar o retorno financeiro do treinamento para a empresa; contudo, esse retorno pode ser percebido pelo aumento do ativo intangvel da organizao, como a sua performance no mercado. A Eletronorte prova disso, face aos inmeros prmios de qualidade que vem recebendo nos ltimos anos, o que naturalmente provocou aumento do seu ativo intangvel.
2. MODELO TERICO UTILIZADO NA CONSTRUO DOS INSTRUMENTOS DE AVALIAO DO SAT
Em funo das especificidades da Eletronorte - cultura, suporte organizacional para a transferncia do treinamento, poltica de recursos humanos e caractersticas dos colaboradores, foram estabelecidos objetivos de avaliao especficos para a empresa. A elaborao dos Questionrios de Avaliao de Reao e de Avaliao de Impacto foi baseada nos conceitos de Hamblin (1978) e nos pressupostos tericos do modelo MAIS (Borges-Andrade, 1982), conforme se apresenta a seguir (Figura 2):
Figura 2
Insumo: refere-se aos fatores sociais e fsicos, e aos estados comportamentais da clientela, anteriores ao processo de treinamento; Procedimentos: refere-se aos procedimentos instrucionais e outras ocorrncias adotadas na situao de ensino/aprendizagem; Processos: mudanas ocorridas no comportamento dos treinandos durante o treinamento; Resultados: indicam o sucesso imediato ou fracasso dos treinamentos, que so os indicadores de aprendizagem; Ambiente: refere-se ao contexto do treinamento que influencia os seus resultados. Este componente subdividido em quatro sub-componentes: avaliao de necessidades _ identifica as lacunas entre o que ideal e o que real, em termos de desempenho do futuro treinando; apoio ou suporte organizacional _ refere-se s variveis do ambiente em que o treinando est inserido, que podem afetar os resultados instrucionais; disseminao _ diz respeito s estratgias de divulgao do treinamento; resultados a longo prazo _ refere-se ao impacto do treinamento no trabalho.
2.1 PROCESSO DE CONSTRUO E VALIDAO DOS QUESTIONRIOS
Para a construo dos questionrios utilizados no SAT, os tcnicos da rea de educao empresarial da Eletronorte foram capacitados nos pressupostos tericos relatados anteriormente, a partir dos quais foram formulados os itens dos Questionrios de Avaliao de Reao e de Impacto. Os questionrios passaram por dois processos demorados e intensos de validao: validao semntica e validao psicomtrica, o que lhes garantiu bons ndices de preciso e consistncia. PROCEDIMENTOS AMBIENTE: APOIO AMBIENTE: NECESSIDADES AMBIENTE: RESULTADOS A LONGO PRAZO AMBIENTE: DISSEMINAO PROCESSO PROCESSO INSUMOS RESULTADOS
A Avaliao de Reao de Treinamento Interno abrange as seguintes categorias de avaliao: Desempenho do Instrutor; Desempenho dos Treinandos e Programao. A Avaliao de Reao de Treinamento Externo convergiu os seus itens em duas categorias de avaliao: Qualidade Instrucional e Apoio. A Avaliao de Reao de Treinamentos a Distncia (Com Tutor) contempla as categorias: Desempenho do Tutor; Desempenho do Aluno; Quanto ao Curso. A Avaliao de Reao de Treinamentos a Distncia (Sem Tutor) contempla as seguintes categorias: Processo de Aprendizagem do Aluno; Quanto ao Curso; Utilidade do Curso e Suporte Organizacional. A Avaliao de Reao de Treinamento Interno aplicada nas atividades educacionais no ltimo dia da ao, de forma presencial e a Avaliao de Reao de Treinamento Externo enviada por e-mail ao participante, quando do retorno da atividade de educao. Os questionrios de Avaliao de Reao de Treinamentos a Distncia so disponibilizados para preenchimento no software que faz o gerenciamento da Universidade Corporativa da Eletronorte (UCEL) e os participantes so orientados pela coordenao para o seu preenchimento. A Avaliao de Aprendizagem definida pelo respectivo instrutor, portanto, elaborada e aplicada por ele nos cursos presenciais e pelo tutor/conteudista no caso do treinamento a distncia. A Avaliao de Impacto do Treinamento no Trabalho tambm sofreu as anlises estatsticas semntica e psicomtrica e compreende trs conjuntos de categorias: Objetivos Especficos do Treinamento; Suporte Organizacional e Impacto em Amplitude que avalia o impacto sobre os indicadores do TPM Manuteno Produtiva Total (Total Productive Maintenance) na Eletronorte. A Avaliao de Impacto do Treinamento no Trabalho realizada tanto pelo colaborador treinado, quanto pelo seu gerente imediato e aplicada, no mnimo, trs meses aps o trmino da ao educacional.
2.2 ANLISE DOS RESULTADOS E EMISSO DOS RELATRIOS
O processo da avaliao de treinamento e emisso de relatrios realizado por uma equipe especfica na Sede e pelos Coordenadores de Treinamento nas Unidades Descentralizadas. Qualquer processo de avaliao envolve, em algum grau, variadas fontes de erro ou vis, como a subjetividade do avaliador, diferenas metodolgicas e de
estilo. Para minimizar a fonte de vis, a equipe da sede sistematiza e padroniza a coleta de dados, anlise e redao dos relatrios das avaliaes de reao e de impacto de treinamento no trabalho. Os questionrios preenchidos pelos treinados e respectivos gerentes so digitados no programa estatstico Statistical Package for the Social Science (SPSS), que gera tabelas descritivas de freqncias das mdias gerais e desvios padro, obtidas em cada uma das categorias dos instrumentos. A partir dos resultados obtidos, as informaes so analisadas e emitido o respectivo relatrio. Os relatrios so encaminhados aos gerentes envolvidos na empresa, instrutores e treinados, gerencias da rea de Educao Empresarial e empresas fornecedoras. Os dados encontrados tambm do origem a relatrios gerenciais para a Eletronorte sobre o ranking das melhores empresas fornecedoras, de acordo com as mdias encontradas nas avaliaes de reao. Esse ranking encaminhado para todas as gerncias da empresa. Na sede, avalia-se, ainda, a qualidade do Centro de Treinamento da Eletronorte: BEM-TE-VI DESENVOLVIMENTO E EDUCAO EMPRESARIAL.
3. PARTICIPAO DO SAT NO PLANEJAMENTO ESTRATGICO DA EMPRESA
Os dados do SAT mantm perfeita interao com o Planejamento Estratgico da Eletronorte, uma vez que os resultados das avaliaes das aes de educao desenvolvidas e/ou patrocinadas pela empresa retratam os indicadores de excelncia da rea de educao empresarial: Satisfao dos Treinados com as Aes Educacionais (STAE) e Impacto do Treinamento no Trabalho (ITT). Dentre os indicadores de desempenho empresariais contidos no Plano Estratgico da Empresa, encontra-se o Impacto do Treinamento no Trabalho (ITT), com a meta de 70%, para 2006. O quadro 1 a seguir apresenta a matriz desse indicador, conforme as metas do Desempenho Empresarial para 2005-2007: Quadro 1
Indicador e Meta para 2006 Perspectiva Aprendizado Objetivo Indicador Nvel Unidade Metas 2006 rea
Assegurar a gesto de pessoas alinhadas com os desafios Empresariais ITT* Resultado % 70% GSE *ITT Impacto do Treinamento no Trabalho
No Plano Estratgico da Eletronorte, ciclo 2006, o objetivo Aperfeioar Continuamente a Gesto Empresarial, indica a necessidade da otimizao dos processos empresariais, pela certificao dos processos crticos segundo a norma ISO 9001:2000, a qual exige avaliaes sistematizadas e documentadas dos produtos fornecidos aos clientes. Os resultados das avaliaes de reao contriburam e tm sido essenciais para a manuteno da certificao ISO 9001:2000, no processo denominado Projeto e Implementao de Treinamento e Desenvolvimento de Pessoas da Superintendncia de Desenvolvimento e Educao Empresarial (GSE), por meio do indicador Satisfao dos Treinados com as Aes Educacionais (STAE). Na Eletronorte, o processo de educao corporativa contempla trs etapas fundamentais e interdependentes (Figura 3), cada uma fornecendo informaes importantes para a outra.
Figura 3 _ PROCESSO DE EDUCAO EMPRESARIAL NA ELETRONORTE
PLANEJAMENTO o processo de elaborao do Plano Diretor de Educao PDE, baseado no Plano Estratgico da Eletronorte e outros diagnsticos. EXECUO Projeto e Realizao de todo o processo da ao educacional, Projeto e Implementao de Treinamento e Desenvolvimento de pessoas. AVALIAO a mensurao da eficincia e eficcia da ao educacional, conforme metodologias adotadas no SAT.
Os programas de educao corporativa so definidos em funo dos objetivos estratgicos da Eletronorte, dos gaps encontrados na avaliao de desempenho dos empregados e das competncias organizacionais. Espera-se que sejam eficientes e eficazes, ou seja, os treinados fiquem satisfeitos, adquiram as habilidades e as transfiram para o trabalho, apresentando impacto desses programas no trabalho e na organizao, redundando, portanto, em resultados empresariais consistentes. O processo de educao corporativa da Eletronorte foi totalmente revolucionado aps a implantao do Sistema de Avaliao de Treinamento (SAT). Os relatrios de avaliao de reao tm subsidiado constantes reformulaes no projeto do treinamento, na performance do instrutor, na qualidade do material instrucional e na definio das caractersticas da clientela indicada para as atividades. As reformulaes tm sido assimiladas e adotadas na rea de educao empresarial, nas reas clientes e demais reas envolvidas na empresa. Tambm, tem-se estendido s empresas fornecedoras de treinamento. A Avaliao de Impacto do Treinamento no trabalho tem mostrado, sistematicamente, a importncia da avaliao da necessidade do treinamento e do perfil da clientela envolvida, bem como do suporte gerencial existente na empresa para a transferncia das habilidades adquiridas, sugerindo aos gestores da empresa maior critrio nas indicaes para treinamento e suporte organizacional. Atualmente, percebe-se uma nova cultura gerencial na empresa em relao ao processo de educao corporativa, tanto por parte da rea gestora do processo _ havendo um significativo aumento da competncia tcnica para a negociao e planejamento dos treinamentos _, bem como por parte dos gerentes, os quais ganham maior conscientizao para o cumprimento dos critrios na indicao para treinamento. A Eletronorte dispe de um Sistema de Avaliao de Treinamento capaz de fomentar uma cultura corporativa de alto desempenho, pela obteno de critrios cientficos de avaliao, consolidando informaes-chave sobre a educao corporativa que desenvolvida na empresa.
4. PROCESSO DE COMUNICAO PARA O PBLICO INTERNO
Um Sistema de Avaliao de Treinamento dessa natureza requer que os segmentos organizacionais tenham seus papis bem definidos e que uma nova cultura de avaliao seja fomentada na Empresa. Em funo disso, a Eletronorte elaborou uma
78 22 1 87 12 1 86 13 1 92 8 0 89 10 1 93 7 0 0 20 40 60 80 100 2001 2002 2003 2004 2005 2006 Evoluo do STAE - Satisfao dos Treinandos com as Aes Educaionais(Em Percentuais) Plenamente Satisfatrio Medianamente Satisfatrio Pouco Satisfatrio estratgia de disseminao e sensibilizao para a colaborao desses segmentos no processo de avaliao, a fim de valorizarem o SAT. A sensibilizao dos membros da organizao como um todo fundamental para esse processo. Inicialmente, apresentou-se o projeto para a empresa atravs do jornal Norte/News, no qual se detalhou todo o processo do SAT. Por ocasio da capacitao dos Coordenadores de Treinamento, foi entregue o Manual do SAT, com os conceitos, metodologias, instrumentos e procedimentos do projeto, inclusive nos aspectos tcnico- cientficos, a fim de servir como guia na implantao local do sistema. Alm disso, foi distribuda, na empresa, uma cartilha ilustrada que explicava o SAT, cujo teor, alm de apresentar os objetivos de avaliao, nveis adotados, instrumentos e procedimentos utilizados, tambm sensibilizava os leitores para a adeso ao projeto, respondendo s avaliaes e lendo os relatrios de reao e de impacto. Essas estratgias de endomarketing tiveram sucesso, pois hoje o corpo funcional, na maioria, responde s avaliaes que so encaminhadas.
5. RESULTADOS OBTIDOS NA ELETRONORTE COM O SAT
Os resultados obtidos com o SAT so robustos e mostram que produzem dados comparativos relevantes para a efetividade do processo de gesto da educao empresarial, fazendo parte da matriz de indicadores da Eletronorte. Os grficos 1 e 2, a seguir, apresentam o resultado do indicador Satisfao dos Treinandos com as Aes Educacionais (STAE) e do Impacto do Treinamento no Trabalho (ITT) obtido na empresa no perodo de entre 2001 e 2006. Grfico 1
Evoluo do STAE - Educao a Distncia (Em Percentuais) 100 100 100 100 100 0% 20% 40% 60% 80% 100% Plenamente Satisfatrio 2002 2003 2004 2005 2006
GRFICO 2
O indicador STAE tem se apresentado alto na Eletronorte, sobretudo com aes de educao a distncia, indicando que a maioria dos treinados esto muito satisfeitos com as aes de educao realizadas, seja com relao ao projeto instrucional, ao desempenho do instrutor e ao desempenho dos treinandos. Sabe-se, entretanto, que reaes favorveis sobre a ao educacional no garantem a transferncia das competncias adquiridas. preciso medir o impacto posterior que a ao educacional provoca no trabalho do treinado e tambm na organizao. O Impacto do Treinamento no Trabalho (ITT) um indicador de educao estratgico para a Eletronorte, pois demonstra a eficcia do treinamento para o trabalho do treinado. O Grfico 3, a seguir, mostra a evoluo desse indicador. GRFICO 3 33 67 100 67 33 53 47 25 75 32 68 0 20 40 60 80 100 Evoluo do ITT - Impacto do Treinamento no Trabalho na Eletronorte (Em percentuais) Grande Impacto Moderado Impacto
2001 2002 2003 2004 2005 2006
Percebe-se que os resultados do ITT no se apresentam em um padro crescente, como ocorre com os resultados da avaliao de reao. Entretanto, vale lembrar que o impacto _ compreendido como a transferncia das habilidades ensinadas no treinamento para o trabalho, o suporte organizacional encontrado e o impacto sobre as metas de trabalho do TPM _ no depende apenas da qualidade do projeto instrucional ou do desempenho do instrutor, mas, sobretudo, do suporte gerencial e dos pares encontrado pelo treinado, bem como das caractersticas da clientela indicada. O Suporte Organizacional tem sido relatado na literatura como crucial para a transferncia de treinamento. Conforme Freitas, Borges-Andrade, Abbad e Pilati (2006, p.490) o impacto de treinamento no trabalho avaliado em termos da transferncia de treinamento e pela influncia dessa estratgia sobre o desempenho posterior do treinado. Segundo esses autores, transferncia de treinamento a aplicao correta, no ambiente de trabalho, de conhecimentos, habilidades e atitudes (CHAs) adquiridos nesses eventos instrucionais (ib. id. p.490). Segundo Abbad et al. (2001, p. 2), Impacto do Treinamento no Trabalho a influncia da ao sobre o desempenho, motivao e atitudes do treinado. classificado em dois tipos: avaliao de impacto em amplitude ou em largura, que mede os efeitos gerais do treinamento sobre o desempenho do treinado e avaliao de impacto em profundidade, que mede o efeito do treinamento em tarefa estritamente relacionada ao contedo especfico do curso. Entretanto, para Kozlowski et al. (2000, p.159), transferncia de treinamento tem apenas duas distines: transferncias horizontais, que ocorrem por meio de diferentes rumos ou contextos, no mesmo nvel da tarefa executada pelo indivduo; e as transferncias verticais, que se referem ao link entre os resultados do treinamento no indivduo e na organizao. A Avaliao de Impacto utilizada na Eletronorte a de profundidade e de amplitude, uma vez que avaliam a transferncia das competncias adquiridas para o trabalho dos treinados, o suporte organizacional encontrado e o impacto sobre os indicadores especficos do TPM. Os resultados encontrados nas Avaliaes de Impacto apontam para a necessidade de a Eletronorte prover maior suporte gerencial e social transferncia de treinamento, a fim de aumentar o impacto das aes de educao na empresa, uma vez que esse impacto tem sido mediano, na maioria dos eventos.
6. CONCLUSO
Um sistema de avaliao de treinamento dessa natureza est apoiado em uma mudana de longo prazo nos valores empresariais, de forma a incluir na organizao a cultura da mensurao contnua e objetiva dos processos e dos resultados das aes de educao empresarial. Os dados produzidos pelas avaliaes de treinamento fornecem feedback contnuo ao sistema de gesto da educao corporativa na Empresa. A Eletronorte monitora a qualidade do projeto instrucional das aes de educao, assim como o impacto percebido no trabalho dos indivduos treinados. Nas avaliaes de impacto, a categoria pior avaliada pelos treinados tem sido o suporte organizacional, mais especificamente, o suporte psicossocial (gerencial e dos pares). Embora a Eletronorte tenha desenvolvido inmeros Programas de Desenvolvimento Gerencial, ainda percebido, pelos treinados, que falta encorajamento, acompanhamento e orientaes dos gestores para a transferncia das habilidades adquiridas em aes de educao. A empresa necessita investigar em que extenso o suporte organizacional percebido pelos empregados, ou seja, o quanto ela valoriza a transferncia das habilidades adquiridas em treinamento. Hoje, a cultura da empresa est consolidada no que se refere avaliao de reao e de impacto, pois a maioria dos treinados e respectivos gestores colabora espontaneamente com o Sistema de Avaliao da organizao. Na economia do conhecimento, informaes precisas, fornecidas por anlises cientficas, so fatores-chave para as empresas alcanarem sucesso. Os dados encontrados nas avaliaes so capazes de agregar valor ao processo de gesto da educao na Eletronorte.
REFERNCIAS BIBLIOGRFICAS
ABBAD, G; SALLORENZO, L. H. Desenvolvimento e validao de escalas de suporte transferncia de treinamento. Revista de Administrao da USP, So Paulo, v. 36, n. 2, p. 33-45, abr./jun. 2001.
BORGES-ANDRADE, J. E. Avaliao Somativa de Sistemas Instrucionais. Tecnologia Educacional,. v..XI, n.46, p. 29-39,1982.
CENTRAIS ELTRICAS DO NORTE DO BRASIL S/A - ELETRONORTE. Manual do Sistema de Avaliao de Treinamento SAT. Braslia, 2006. 84 p.
CENTRAIS ELTRICAS DO NORTE DO BRASIL S/A ELETRONORTE. Plano Estratgico da Eletronorte. Braslia, 2006.
FREITAS, I.A. de et al. Medidas de impacto de TD&E no trabalho e nas organizaes. In: BORGES-ANDRADE, J. B.; ABBAD, G.; MOURO, L. Treinamento, Desenvolvimento e Educao em Organizaes e Trabalho. Porto Alegre: Artmed, 2006. cap. 24, p. 489- 504.
HAMBLIN, A. C. Avaliao e controle de treinamento. So Paulo: McGraw-Hill, 1978.
KOZLOWSKI, S. W. J. et al. A Multilevel approach to training effectiveness: enhancing horizontal and vertical transfer. In: KOZLOWSKI, S.W.J. Multilevel Theory: research and methods in organizations. San Francisco: Jossey-Bass, 2000. cap. 4, p. 157-210.
SILVA, M. E. Gesto da Educao Corporativa na Eletronorte: estratgias visando consolidao da Universidade Corporativa Eletronorte UCEL. In: RICARDO E. J. (Org.) Gesto da Educao Corporativa. So Paulo: Pearson Prentice Hall, 2007, cap. 10, p.109-121.