Você está na página 1de 11

E-learning no ensino superior: anlise de modelos de

e-maturidade organizacional
Joo Monteiro
Unidade de Investigao e Desenvolvimento em Educao e Formao (UIDEF), Instituto
de Educao, Universidade de Lisboa, Portugal
jjpm@campus.ul.pt

Neuza Pedro
Unidade de Investigao e Desenvolvimento em Educao e Formao (UIDEF), Instituto
de Educao, Universidade de Lisboa, Portugal
nspedro@ie.ul.pt

Resumo
O presente artigo insere-se num projeto de investigao mais abrangente que tem como
propsito, identificar e sistematizar princpios orientadores para o desenvolvimento de
estratgias para a implementao de programas de e-Learning em Instituies do Ensino
Superior, assumindo-se como foco particular os fatores organizacionais.
A comunicao em causa centra-se na primeira fase dessa investigao e apresenta os
resultados decorrentes de um processo de reviso sistemtica de modelos e outros quadros
referenciais associados a e-Learning benchmarking.
Baseado em procedimentos de recolha e anlise da literatura associados ao scoping
review, identificaram-se 46 modelos ligados a e-Learning benchmarking e avaliao da
qualidade do e-learning, com base nos quais se identificou informao de relevo relativa a:
estado do modelo/projeto; data de surgimento e evoluo; autoria; abrangncia geogrfica;
estrutura geral; dimenses e categorias; estrutura da dimenso organizacional e indicadores
associados.
Palavras-chave:
organizacional.

e-Learning,

e-maturidade,

e-benchmarking,

inovao

mudana

Abstract
This paper is part of a broader research project that assumes the purpose of identify and
systematize guidelines to the development of strategies for the implementation of e-Learning
programs in Higher Education Institutions, taking as particular focus the organizational factors.
This paper is focused on the first phase of the project and presents the outcomes of a
systematic review process applied to the analysis of models and frameworks associated with elearning benchmarking.
Based on the procedures of collection and analysis related to scoping literature review, we
identified 46 models tied to e-learning benchmarking and/or about the assessment of e-learning
quality, under which we have identified relevant information related to: state of the
model/project; date of appearance and evolution; authorship; geographic scope; overall
structure; dimensions and categories; specific structure in the organizational dimension and
respective descriptors.
Keywords: e-Learning, e-maturity, innovation and organizational change, e-benchmarking.

EUTIC 2014 Lisboa E-learning no ensino superior: anlise de modelos de e-maturidade


organizacional

Introduo
E-Learning no Ensino Superior
O posicionamento do Ensino Superior (ES) europeu, no seio da atual
sociedade de Informao e do Conhecimento, tem vindo a ser amplamente
discutido, desde h vrias dcadas, tendo resultado em diversas iniciativas sob
a gide da Comisso Europeia.
Perante um cenrio de mudana contnua, as instituies universitrias tm
vindo gradualmente a adaptar-se, reconhecendo como fundamental para a sua
atividade, a implementao e rentabilizao das tecnologias e processos
pedaggicos por estas suportados, enquadrando-se o e-Learning nesses
mesmos processos.
O e-Learning tem sido muitas vezes perspetivado como uma soluo para
alguns dos problemas com que o ensino superior atualmente se debate. No
entanto, a maioria das instituies de ensino superior (IES) no se tm
movimentado para institucionalmente desenhar processos planificados de
adoo efetiva do e-Learning, nas diversas dimenses que tais processos
necessitam contemplar (Varis, Haugen, Ohagan & Floor, 2003).
A introduo e adoo plena do e-Learning exigem um processo de
planificao e mudana organizacional, com alterao/reviso da cultura e
misso da Universidade, bem como, das suas estruturas e prticas
administrativas e pedaggicas, sendo frequente a emergncia de dificuldades
relacionadas com a capacidade estratgica e de mudana organizacional.
Identifica-se dessa forma, uma relao estreita entre a cultura ou ambiente
organizacional e as contingncias internas e externas que caracterizam o
processo estratgico para a adoo do e-Learning (Boezerooij, 2006).
Verifica-se assim que a dimenso organizacional/institucional na
implementao de projetos de e-Learning no Ensino Superior possui ampla
complexidade e assume particular importncia nos projetos de e-Learning no
ES, nomeadamente considerando-se a sua interligao com as dimenses
pedaggica e tecnolgica. A principal dvida que surge quando uma instituio
pretende implementar programas de e-Learning na sua dinmica
organizacional associa-se ao fato de esta se revelar ou no preparada para tal
(Minton, 2000).
Para as IES, o e-Learning tem um valor estratgico para a sua atividade, e
quando implementado devidamente contribui para a modernizao do ES, pelo
que a deciso estratgica sobre a adoo do e-Learning, dever consider-lo
como um meio e no um fim como sinalizam vrios autores (Darling, 2002, Fry,
2001, Hartley, 2000, citados por Singh, O'Donoghue & Worton, 2005).
, neste contexto, que se entende importante identificar as contingncias e
potencialidades associadas a tais processos organizacionais, procurando-se
neste sentido caracterizar a forma como os programas de e-Learning tm sido
assumidos e considerados nos ltimos anos no contexto das IES, olhando tais
processos sob uma perspetiva organizacional e assumindo a avaliao da
maturidade institucional para a implementao do e-Learning, ou ematuridade, como dimenso central da anlise a desenvolver.

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

A e-maturidade indissocivel de prticas de avaliao da qualidade,


capacidade (e-capability) e e-benchmarking no ES. Deste modo, entende-se
necessrio analisar os quadros de referncia que neste domnio tm emergido
e identificar as dimenses sinalizadas como relevantes, de modo a suportar
atuaes institucionais no mbito da implementao de programas de eLearning.
Propsito do Estudo
O presente trabalho centra-se na identificao e anlise de modelos de eLearning benchmarking, sendo que o estudo em causa se insere numa
investigao de maior dimenso, em desenvolvimento no mbito de projeto de
Doutoramento em TIC e Educao da Universidade de Lisboa. Esse projeto
tem como propsito geral, identificar e caracterizar as prticas e resultados
inerentes a projetos e iniciativas de e-Learning no contexto universitrio
nacional, sinalizando consequentemente quais os fatores, internos e externos,
que determinam o menor ou maior desenvolvimento desses mesmos projetos
institucional, com centrao na dimenso organizacional/institucional de tais
projetos.
No que se refere ao workflow metodolgico do projeto em causa, o mesmo
estrutura-se em quatro etapas:
Etapa 1 Reviso de Literatura e anlise documental para
caracterizao do panorama europeu e nacional no que respeita a modelos de
referncia no domnio da implementao de e-Learning no ensino superior;
Etapa 2 Desenho e teste dos instrumentos para anlise das dimenses
estruturadoras de modelos de e-benchmarking e de explorao da estrutura da
dimenso organizacional (com propsito de identificar indicadores a submeter a
reviso por especialista, atravs de questionrio a aplicar atravs de mtodo de
Delphi);
Etapa 3 Estabilizao do painel de especialistas em e-Learning do
ensino superior a inquirir;
Etapa 4 Implementao do mtodo de Delphi, estimando-se em trs, o
nmero de rondas mnimo para obter resultados de consenso. Nesta fase
integram-se procedimentos e tcnicas intermdias de anlise de dados
(qualitativas e quantitativas) como meio de tratamento de respostas obtidas em
cada ronda com subsequente devoluo ao painel de especialistas.
A pesquisa inicial de modelos de e-Learning benchmarking, conduziu
eleio inicial do modelo desenvolvido por Marshall (2007), o e-Learning
Maturity Model (eMM); contudo, a dimenso organizacional descrita no eMM
apresenta limitaes nos indicadores descritos, relativamente aos dados a
obter, nomeadamente sobre:
a. as representaes institucionais sobre e-Learning;
b. os fatores e contextos institucionais /organizacionais que influenciam a
adoo e desenvolvimento dos projetos de e-learning no ES;
c. as estratgias institucionais /organizacionais para e-Learning nas IES.

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

EUTIC 2014 Lisboa E-learning no ensino superior: anlise de modelos de e-maturidade


organizacional

Desta forma para obter a profundidade e diversidade dos dados


necessrios, entendeu-se a necessidade de complementar a informao
contida no eMM com outros indicadores associados dimenso organizacional
existentes em outros modelos de referncia. Os resultados dessa etapa
preliminar da investigao estruturam a presente comunicao.

Metodologia
No sentido de identificar o conceito chave para iniciar o processo de
reviso sistemtica da literatura tomou-se como referncia principal o conceito
de e-learning benchmarking (Bacsich, 2005, Scepanovic, Devedzic &
Kraljevski, 2011; Ossiannilsson, 2012) e procurou-se identificar o conjunto de
modelos e outros referenciais de relevo associados ao design e implementao
de programas de e-Learning para o ensino superior, fazendo
consequentemente incidir a anlise sobre a dimenso organizacional e
institucional de tais modelos.
A reviso sistemtica da literatura descreve-se como uma metodologia de
pesquisa estruturada com base em processos de anlise documental
realizados de forma exaustiva, crtica e metdica onde se elege a literatura
cientfica como fonte de dados (Gough, Oliver & Thomas, 2012). Com a mesma
pretende-se proporcionar um resumo de todos os estudos realizados no
domnio eleito, fornecendo desta forma uma maior visibilidade aos resultados
previamente encontrados na rea.
Esta metodologia deriva sobretudo da investigao realizada na rea das
Cincias da Sade e procura integrar critrios de sistematicidade e rigor
cientfico ao processo de eleio do corpo de literatura a rever em determinado
estudo. Tais mtodos tm-se expandido para as cincias sociais e humanas,
tendo j presena no domnio da educao. Estas metodologias tm vindo a
ser aperfeioados para a realizao de pesquisas sistemticas de literatura
existente sobre a eficcia das intervenes programas e polticas educativas,
Estas metodologias incluem: revises sistemticas, scoping review e metaanlises (Arksey & OMalley, 2005, p.22).
De entre os mtodos de reviso sistemtica da literatura enunciados,
elegeu-se o scoping review como um mtodo apropriado para o processo de
reviso sistemtica da literatura a utilizar na medida em que o mesmo permite
um levantamento rigoroso da literatura de modo adaptvel natureza dos
trabalhos eleitos para anlise. Permite a incluso de estudos analticos e de
desenvolvimento onde os resultados/concluses no so representados em
expresses numricas (Arksey & OMalley, 2005). De igual modo, revela-se
mais flexvel ao acolhimento e anlise de documentos no acadmicos,
provenientes de entidades de relevo na rea, nomeadamente as de cariz nogovernamental. Seguiram-se assim as fases para conduo da etapa do
estudo como descritas por Arksey e OMalley (2005), a saber: fase 1:
identificao da questo de investigao; fase 2: identificao de trabalhos
relevantes; fase 3: seleo dos estudos; fase 4: mapeamento dos dados; fase
5: recolha, sntese e apresentao dos resultados (p.23).

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

A reviso da literatura associada ao estudo pretendeu identificar informao


relevante na avaliao dos processos organizacionais e institucionais
associados ao e-Learning, sintetizando evidncias no domnio em causa.
Com base no propsito do trabalho central do estudo, enunciou-se uma
questo orientadora para o processo de reviso sistemtica:
Considerando os modelos de e-Learning benchmarking desenvolvidos nos
ltimos anos, em que medida se revela nestes a presena explcita da
dimenso organizacional enquanto indicador de avaliao da e-maturidade nas
IES? E como se estrutura a mesma?
A questo permite desta forma identificar os critrios para seleo das
fontes de informao, conforme estabelecido por Cummings, Browner e Hulley
(2003, citado por Vilelas, 2009). As fontes de informao e os propsitos
seguidos para seleo das mesmas encontram-se sistematizados na tabela 1.

Fontes

Artigos cientficos, Comunicaes em encontros


cientficos, whitepapers, Relatrios de projetos, outros
documentos associados a trabalhos acadmicos e a
projetos de investigao (designada como literatura
cinzenta).

Participantes

Entidades que tenham desenvolvido trabalho sobre ebenchmarking e ligadas avaliao da qualidade do eLearning, no delimitadas geograficamente ou no tempo
de atuao.
a. que modelos de e-benchmarking possuem na sua
estrutura uma dimenso organizacional e de que modo
se estruturam?

Questes
orientadoras

b. que nomenclatura e terminologia


hierarquia) utilizam os modelos de
benchmarking e e-maturidade?

(estrutura,
e-Learning

c. que escalas e mtricas so utilizados nos modelos?


d. existem modelos semelhantes ou com a mesma
estrutura de base, nomeadamente na dimenso
organizacional? Nesse caso, complementam-se ou
evoluem em sentido semelhante?

Resultados

Sistematizar
informao
sobre
a
dimenso
organizacional
dos
modelos
de
e-Learning
benchmarking, identificar indicadores relevantes sobre
essa dimenso, definir uma nomenclatura e uma

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

EUTIC 2014 Lisboa E-learning no ensino superior: anlise de modelos de e-maturidade


organizacional

terminologia para essa dimenso, obter dados que


permitam desenhar um instrumento de recolha de dados
junto das IES.
Tabela 1 - Esquema representativo das questes de investigao da reviso da literatura
realizada.

Para o processo de pesquisa elegeram-se os seguintes termos-chave e


utilizou-se a seguinte equao de pesquisa (ver tabela 2):

Tabela 2 - Esquema representativo da equao de pesquisa realizada (Adaptado de Correia &


Mesquita, 2012).

Resultados
O processo inicial de pesquisa conduziu a um corpo de dados que se
materializou em 46 modelos e referenciais de avaliao da qualidade do eLearning, desenvolvidos entre 1990 e 2014, por entidades individuais ou
coletivas de pases da Europa, EUA, Austrlia e Nova Zelndia. De igual modo,
constatou-se que no se identificam muitos autores individuais com
investigao realizada neste tema, mas antes, grupos e organizaes de
investigao que ao longo dos anos, especialmente nos ltimos 15 anos, tm
vindo a apresentar trabalhos relevante na rea, em particular a EFQUEL 1, a
ACODE2, a iNACOL3, OBHE4, SLOAN-C5 e Quality Matters6.
1

European Foundation for Quality in E Learning

Australasian Council on Open, Distance and e-Learning

International Association for K-12 Online Learning

Observatory on Borderless Higher Education

Sloan Consortium

Quality Matters Program

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

Seguidamente eleio do corpo inicial de modelos e referenciais a analisar


estabeleceu-se uma matriz de anlise de informao para cada modelo,
contendo os seguintes campos/critrios, definidos com base nas questes
orientadoras descritas na tabela 1: i) estado do projeto ou modelo; ii) nvel de
anlise do contedo e da literatura; iii) data de origem e evoluo do modelo;
iv) verso ou ltima data de atualizao do modelo; v) autoria; vi) descrio do
Modelo; vii) abrangncia geogrfica; viii) concordncia de modelos e/ou
derivao de outros modelos; ix) estrutura geral do modelo; x) escalas ou
mtricas usadas no modelo (Dimenses, Categorias, Processos, Indicadores);
xi) utilizao em contexto educativo/ensino superior versus utilizao em
contexto empresarial, formao profissional; xii) apresentao de uma ou mais
dimenses organizacionais explicitas; xiii) apresentao de indicadores de
outras dimenses com relevncia na dimenso organizacional; xiv) estrutura da
dimenso organizacional; xv) instrumentos de anlise usados; xvi)
mtricas/escalas/indicadores descritos na dimenso organizacional; xvii)
indicadores descritos noutras dimenses mas com contributos para a anlise
organizacional institucional; xviii) outras informaes complementares.
Aps sistematizao e anlise da informao recolhida, procedeu-se
aplicao sequencial dos seguintes critrios de excluso, avaliando assim a
elegibilidade dos modelos para o estudo em causa:
C01 O modelo no revela ter sido desenvolvido para/em ligao ao ensino
superior ou para outros contextos educativos.
C02 - O modelo ou referenciais no evidencia possuir uma ou mais dimenses
organizacionais/institucionais explcitas.
C03 No se encontra informao de que o modelo se encontra ativo, em
desenvolvimento e/ou em aplicao na atualidade.

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

EUTIC 2014 Lisboa E-learning no ensino superior: anlise de modelos de e-maturidade


organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

Tabela 3 Resultados da aplicao sequencial dos critrios de excluso aos modelos de eBenchmarking

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

EUTIC 2014 Lisboa E-learning no ensino superior: anlise de modelos de e-maturidade


organizacional

A aplicao dos critrios em causa (ver tabela 3) levou reduo dos 46


modelos iniciais para 12 modelos que encontrando-se atualmente ativos, foram
desenvolvidos em relao com o contexto do ensino superior e que integram
em si uma dimenso organizacional e/ou institucional explicita. As concluses
do processo analtico destes 12 modelos so seguidamente enunciadas.

Concluses preliminares
Considerando os modelos e referenciais analisados, e sobre uma anlise
preliminar dos dados, possvel concluir que:
a. a dimenso organizacional em e-benchmarking e e-maturidade na
maioria dos modelos pouco desenvolvida em comparao com
dimenses como a tecnolgica, pedaggica, ou de qualidade dos
contedos; mais de metade dos modelos no possui uma dimenso
organizacional/institucional explcita e estruturada, embora refiram
outros tipos de dimenso que contm indicadores organizacionais e
institucionais.
b. uma significativa parte dos modelos de e-benchmarking tm aplicao
no contexto educativo e foram desenvolvidos em contexto universitrio.
c. os modelos distinguem-se e estruturam-se na sua finalidade de anlise
nomeadamente, por se orientarem para i) guiar processos de:
diagnstico, de avaliao/ monitorizao de programas a desenvolver ou
em implementao e ii) para identificao de boas prticas de melhoria/
otimizao de programas em desenvolvimento.
d. ser necessria uma sistematizao de informao nesta rea,
nomeadamente no que se refere necessidade de proposta de uma
terminologia/nomenclatura estandardizada (dada a diversidade de
nomenclaturas e termos encontrados em cada modelo analisado).
e. existe uma delimitao de clusters de modelos, em funo da sua rea
geogrfica e relao e influncias em cada um dos clusters (Europa,
Amrica do Norte e Ocenia); sendo que as contribuies mais
significativas para a dimenso organizacional derivam dos trabalhos
desenvolvidos na Austrlia e Nova Zelndia.
f. cerca de 20 modelos esto atualmente inativos, embora os seus
contributos na poca e presentemente possam ser relevantes.
Finalmente, sinaliza-se ainda uma significativa proliferao de modelos de
avaliao de qualidade, e-maturidade e e-Learning benchmarking, ainda que
seja necessrio considerar a transitoriedade de alguns, a sua circunscrio a
determinados contextos de aplicao ou organizaes e a larga evoluo ou
derivao entre modelos. Neste sentido a diversidade de abordagens por parte
dos modelos eleitos, contribuir de forma relevante, para a obteno de uma
perspetiva mltipla e ao mesmo tempo transversal, sobre os fatores
organizacionais que influenciam o desenvolvimento do e-Learning no ES.

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional

Referncias
Arksey, H. & O'Malley, L. (2005). Scoping studies: towards a methodological
framework. International Journal of Social Research Methodology, 8(1), 19-32.
Bacsich, P. (2005). Theory of benchmarking for e-Learning A top-level literature review.
Matic Media Ltd. Retirado de http://repository.alt.ac.uk/425/1/Benchmarking_elearning_bibliography_version_1.doc
Boezerooij, P. (2006). E-learning strategies of higher education institutions. (Tese de
doutoramento, Universiteit Twente, Twente, Nederlands). Retirado de
http://www.utwente.nl/mb/cheps/phdportal/CHEPS%20Alumni%20and%20Their
%20Theses/2006boezerooydissertation.pdf
Correia, A. M., & Mesquita, A. (2012). Mestrados e Doutoramentos, Estratgias para
elaborao de trabalhos cientficos: o desafio da excelncia. Porto. Vida
Econmica.
Gough, D., Oliver, S. & Thomas, J. (2012). An introduction to systematic reviews.
Londres: SAGE Publications Ltd.
Marshall, S. (2007), E-Learning maturity model - Process descriptions. Victoria, New
Zealand:
Victoria
University
of
Wellington.
Retirado
de
http://www.utdc.vuw.ac.nz/research/emm/publications.shtml
Minton, M. C. (2000). Is your organization ready for E-Learning?, Communication
Project Magazine, 3(1). Retirado de http://www.comproj.com/Minton.htm
Scepanovic, S., Devedi, V., & Kraljevski, I. (2011). E-Learning benchmarking
methodology and tools review, ICERI2011 Proceedings (pp.3064-3073). Sevilha:
IATED.
Ossiannilsson, E. (2012). Benchmarking e-learning in higher education: lessons
learned from international projects. (Tese de Doutoramento , University of Oulu,
Oulu, Finland). Retirado de http://jultika.oulu.fi/Record/isbn978-952-62-0041-5
Singh, G., O'Donoghue, J., & Worton, H. (2005) A Study Into The Effects Of eLearning
On Higher Education, Journal of University Teaching and Learning Practice, 2 (1) 315.
Varis, T., Haugen, H., Ohagan, C., & Floor, P. (2003). Are Universities ready for the
Virtual World?. Elearningeuropa.info. Consultado em 22 de Maro de 2012 de
http://www.elearningeuropa.info/pt/node/2381
Vilelas, J. (2009). Investigao O processo de construo do conhecimento. Lisboa:
Edies Slabo.

E-learning no ensino superior: anlise de modelos de e-maturidade organizacional