Estudo e Proposta para Recuperao de Objetos de Aprendizagem usando a Web 2.

0
Geovlia Oliveira Coelho1 , Lucila Ishitani1 , Maria Augusta V. Nelson1 Stefane de Melo Silva 1 , Stela de Queiroz Pessoa 1
1

Instituto de Informtica Pontifcia Universidade Catlica de Minas Gerais (PUC Minas) Belo Horizonte - MG Brasil

geovalia@hotmail.com,{lucila,guta}@pucminas.br,{fanemeloara,stelaqpessoa}@yahoo.com.br

Abstract. Learning objects (LOs) are teaching and learning tools that may aid the instructor in doing his job and the learner in building his own knowledge. However, the development of LOs requires investments that drives the reuse of existing LOs through mechanisms for retrieval. Among them, stand out: the search engines and learning object repositories. Unfortunately, these mechanisms had difculties to nd OAs in Brazil. To counter this difculty, this article proposes a new mechanism for retrieving LOs. Resumo. Objetos de aprendizagem (OAs) so ferramentas de ensino e de aprendizagem que podem auxiliar o professor nas suas atribuies, e o aluno, na construo do seu prprio conhecimento. Entretanto, o desenvolvimento de OAs demanda investimentos que, por sua vez, estimulam o uso de mecanismos para a recuperao de OAs existentes. Entre eles, destacam-se as mquinas de busca e os repositrios de OAs. Contudo, esses mecanismos no apresentam bons resultados para recuperao de OAs desejados, no Brasil. Diante dessa diculdade, este artigo prope um novo mecanismo de recuperao de OAs.

1. Introduo
No contexto da educao, tem se destacado o uso de ferramentas virtuais de apoio aprendizagem, como os objetos de aprendizagem (OAs). OAs podem ser compreendidos como entidades digitais projetadas para auxiliar o aluno a atingir um determinado objetivo pedaggico [CLOE ]. Eles podem apresentar formatos diferenciados, tais como textos e apresentaes, sendo desejvel que atendam a critrios de avaliao, como os especicados pelo Learning Object Review Instrument (LORI) [Nesbit et al. 2003], que uma proposta que avalia OAs sob nove aspectos, dentre eles destacam-se: qualidade de contedo, adequao ao objetivo da aprendizagem, motivao, feedback e reusabilidade. Em geral, o desenvolvimento de OAs ainda uma tarefa difcil para os professores [Tarouco et al. 2003], pois eles nem sempre possuem tempo disponvel, conhecimentos pedaggicos ou domnio tcnico necessrios para a criao de OAs de qualidade. Diante dessas diculdades, uma forma de ampliar o uso de OAs oferecer recursos para sua pesquisa e reutilizao. Este artigo apresenta alguns resultados da avaliao emprica de algumas ferramentas utilizadas: mquinas de busca, repositrios de OAs e ferramentas da Web 2.0. O estudo realizado permitiu identicar a diculdade para se encontrar OAs desejados, principalmente na rea de computao, utilizando a lngua portuguesa. Frente essa situao, o artigo apresenta uma proposta de soluo para o problema identicado.

Este artigo se encontra organizado da seguinte forma: as sees 2, 3 e 4 abordam, respectivamente, resultados da avaliao da recuperao de OAs em mquinas de busca, repositrios de OAs e em uma ferramenta da Web 2.0; a Seo 5 apresenta uma proposta para facilitar a pesquisa e o acesso aos OAs e a Seo 6, as concluses.

2. Repositrios de OAs
Repositrios so colees de OAs com recursos para facilitar a sua recuperao. Porm, eles nem sempre possuem OAs na lngua desejada ou em uma rea de interesse especco, como o caso da rea de computao. Em repositrios estrangeiros, como o MERLOT1 e o NSDL2 , os OAs so, em maior parte, desenvolvidos na lngua inglesa, dicultando a sua utilizao por usurios de outras lnguas, como o portugus (tabelas 1 e 2). E, nos repositrios brasileiros, o nmero de OAs disponibilizados muito pequeno. Por exemplo, o RIVED3 , disponibiliza apenas 190 OAs, todos eles voltados ao ensino de Cincias e Matemtica do ensino mdio.
Tabela 1. Pesquisas por OAs no MERLOT Palavras-chave Itens resultantes Idioma utilizado Stack 22 21 em ingls e 1 em espanhol Pilha no encontrado Criptograa no encontrado rvore B no encontrado Pipeline 10 10 em ingls

Tabela 2. Pesquisas por OAs na NSDL Palavras-chave Itens resultantes Itens acessados Idioma utilizado Stack 5.560 30 30 em ingls Pilha 42 30 6 em ingls e 24 em portugus Criptograa 2 2 2 em espanhol rvore B no encontrado Pipeline 10.028 30 30 em ingls

3. Avaliao da Recuperao de OAs em Mquinas de Busca

Alm dos repositrios, outra alternativa para a recuperao de OAs so as mquinas de busca que ajudam a encontrar informaes publicadas na Web. Com o intuito de avaliar essas ferramentas em relao recuperao de OAs, sob a tica do usurio/professor brasileiro, foram realizadas diversas pesquisas no Google, o buscador mais utilizado no Brasil4 . O objetivo das pesquisas era encontrar OAs voltados ao ensino de computao. O processo de avaliao consistiu em utilizar 6 consultas formuladas com uma, duas ou mais palavras. Durante 2 meses, as pesquisas foram repetidas 3 vezes para evitar distores momentneas de resultados. Em cada uma delas foram acessados 30 itens, que correspondem ao nmero mximo de itens que so acessados pela maioria dos internautas
1

Multimedia Educational Resources for Learning and Online Teaching - http://www.merlot.org National Sciences Digital Library - http://nsdl.org/ 3 Rede Internacional Virtual de Educao - http://rived.proinfo.mec.gov.br/ 4 http://www.wbibrasil.com.br
2

. Para cada item acessado, foi denido o seu nvel de relevncia: (0) no relevante ou link invlido; (1) parcialmente relevante ou (2) relevante. Os itens considerados relevantes so OAs que obtiveram nota igual ou acima de 3 nos cinco aspectos que se destacam na proposta do LORI [Nesbit et al. 2003]. E os itens considerados parcialmente relevantes so aqueles que no se adequaram ao critrio anterior. Esses nveis de relevncia foram usados no clculo das medidas de preciso completa, preciso de uso e melhor preciso[Gwizdka and Chignell 1999], pois essas medidas melhor se adequam ao objetivo deste trabalho. A preciso completa uma mtrica que fornece a proporo dos itens retornados associados a uma pontuao de relevncia. A preciso de uso considera os itens mais relevantes e os que contm links para os mais relevantes. E a melhor preciso considera apenas os itens mais relevantes. As equaes para clculo dessas medidas so apresentadas a seguir, sabendo-se que: N - o nmero de itens que sero mensurados (30); ItensRetornados - o nmero total de itens que so retornados em um consulta; MinItens - o mnimo de (N, ItensRetornados); Pontuaoi - a pontuao associada a cada item retornado; MaxPontuao - o mximo de pontuao que pode ser associada a um item (2). P recisaoCompleta(M inItens) = P recisaoU so(M inItens) =
P ontuacaoi M inItensM axP ontuacao
M inItens i=1

ItensM inItens (P ontuacao1) i=1 M inItens ItensM inItens (P ontuacao=2) i=1 M inItens

M elhorP recisao(M inItens) =

Na literatura comum a utilizao das medidas de preciso e revocao na avaliao de sistemas de recuperao de informao. A revocao a frao de documentos relevantes que so recuperados e a preciso a frao de documentos recuperados que so relevantes para o usurio. No entanto, a ecincia dessas mtricas est relacionada relevncia dos documentos recuperados, ou seja, para utilizao dessas mtricas necessrio denir previamente os documentos que so relevantes para o usurio. Como no era possvel ter essa informao para realizao dos experimentos, optou-se por utilizar outras medidas de avaliao.
Tabela 3. Avaliao da Recuperao de OAs no Google Itens Itens Parcialmente Preciso Preciso Melhor Palavras-chave resultantes relevantes relevantes completa de uso preciso Pilha 2.890.000 0 1 0,02 0,03 0 Estrutura de dados pilha 184.000 2 7 0,18 0,30 0,07 Criptograa 909.000 3 6 0,20 0,30 0,10 Segurana Criptograa 298.000 0 0 0 0 0 Quicksort 357.000 0 9 0,15 0,30 0 Ordenao Quicksort 3.760 4 11 0,32 0,50 0,13 MDIA 0,14 0,24 0,05

Os resultados so apresentados na Tabela 3. A preciso completa, que considera o grau de relevncia dos itens retornados nas pesquisas, atingiu apenas 14%. E a melhor
http://www.iprospect.com/premiumPDFs/WhitePaper_2006_ SearchEngineUserBehavior.pdf
5

preciso, que uma medida que mensura a proporo de itens relevantes retornados, ou neste caso, o nmero de OAs recuperados, atingiu apenas 5%. Alm disso, geralmente, as pesquisas resultam em grande volume de informaes, que diculta ao professor identicar o material que realmente relevante para suprir suas necessidades.

4. Recuperao de OAs em Ferramentas da Web 2.0

A Web 2.0 refere-se a um conjunto de tecnologias emergentes, que se caracterizam pela efetiva participao dos usurios na produo de contedo. Dentre essas tecnologias se encontram os bookmarkings sociais, servios conhecidos como favoritos, que permite aos usurios guardar endereos de home pages disponveis na Web. Um exemplo muito conhecido de bookmarking o del.icio.us6 . As ferramentas da Web 2.0 tm por caracterstica o uso de folksonomias, ao invs de metadados. As folksonomias so pequenas anotaes ou descritores curtos de objetos, que podem ser denidos livremente pelos usurios de uma ferramenta. Xu et al. mostram que o uso de folksonomia pode trazer melhores resultados que a busca utilizando mecanismos tradicionais da Web [Xu et al. 2008]. Para vericao desses resultados, experimentalmente, avaliamos o del.icio.us seguindo a mesma metodologia descrita na Seo 3. Os resultados apresentados na Tabela 4 indicam que essa ferramenta da Web 2.0 retorna melhores resultados, (na melhor preciso, 12%), apesar dela no ser especca para a recuperao de OAs.
Tabela 4. Avaliao da Recuperao de OAs no Del.icio.us Itens Itens Itens Parcialmente Preciso Preciso Melhor resultantes acessados relevantes relevantes completa de uso preciso Pilha 291 30 1 0 0,03 0,03 0,03 Estrutura de dados pilha 4 4 2 1 0,63 0,75 0,50 Criptograa 1.779 30 6 7 0,32 0,43 0,20 Segurana Criptograa 1 1 0 1 0,50 1 0 Quicksort 399 30 0 0 0 0 0 Ordenao Quicksort no encontrado 0 0 0 MDIA 0,25 0,37 0,12 Palavras-chave

5. Ferramenta Dedicada Recuperao de OAs

Os resultados apresentados na Seo 4 motivam o desenvolvimento de uma ferramenta para recuperao de OAs, baseada nos princpios da Web 2.0. Monge et al. armam que as estratgias de participao da Web 2.0 incrementam o engajamento dos usurios de repositrios de OAs [Monge et al. 2008]. Franklin & Van Harmelen consideram que os repositrios se tornam mais acessveis para o ensino e aprendizagem atravs do uso de tecnologias da Web 2.0, incluindo classicao por tags, folksonomia e software social [Franklin and Harmelen 2007]. Dentre as opes de ferramentas, o modelo dos bookmarkings sociais se destacam, pois permitem armazenar os links selecionados pelos usurios, compartilh-los e classic-los atravs de tags. Por esses motivos, prope-se um bookmarking social voltado especicamente para a recuperao de OAs.
6

http://del.icio.us/

5.1. Funcionalidades da ferramenta O bookmarking deve atender a um conjunto de requisitos, levantados atravs de estudos de casos envolvendo ferramentas da Web 2.0: Armazenamento de links de OAs, com tags relacionadas para indexar os links. Pesquisa por links de OAs atravs de tags, pois as tags ltram os resultados das pesquisas; Avaliao dos links de OAs pelos usurios para compor o ranking de resultados das pesquisas; Criao de conta exclusiva para os usurios postarem seus links de OAs; Controle de acesso para garantir a privacidade dos usurios; Organizao dos links de OAs pessoais; Organizao de tags adicionadas pelos usurios (alterao e renomeao). O bookmarking ser disponibilizado na Web com a base de dados previamente preenchida por links que do acesso aos OAs, de forma automtica (utilizando um rob). Esses links cadastrados pelo rob sero avaliados por um grupo de professores para compor o ranking das primeiras possveis buscas. Essa estratgia ser utilizada somente no momento de disponibilizao da ferramenta para que os primeiros usurios no se sintam desmotivados em realizar buscas que no apresentam resultados. 5.2. Arquitetura e implementao A aplicao est sendo desenvolvida em Ruby on Rails. Ruby uma linguagem de programao adequada ao desenvolvimento de aplicaes Web, orientada a objetos e com tipagem dinmica [Thomas and Hunt 2000]. O Rails um framework de desenvolvimento para aplicaes em Ruby que se concentra no padro arquitetural MVC (modelo-visocontrolador). A juno Ruby on Rails permite uma alta produtividade, tornando o desenvolvimento de aplicaes Web mais rpido e fcil.

Figura 1. Arquitetura do Bookmarking Social

A Figura 1 apresenta a arquitetura do bookmarking social proposto. No cliente, o navegador executa a parte da aplicao que corresponde viso do MVC (Action View). A viso utiliza o HTML para a apresentao no navegador, o Cascading Style Sheets (CSS) para denir o estilo da viso, o Ajax para evitar recarregar por completo pginas com pequenas alteraes e a linguagem JavaScript para compor dinamicamente as pginas exibidas ao usurio nal. No servidor, a aplicao composta por um controlador escrito em Ruby e um modelo de dados descrito com base no framework ActiveRecord que faz

parte do Rails. O controlador responsvel por manipular requisies feitas pelo usurio e o modelo de dados responsvel por descrever as relaes entre as classes de forma que o ActiveRecord possa fazer o mapeamento objeto-relacional para o banco de dados do servidor. Nesse banco so armazenadas as informaes dos usurios, dos links dos OAs e as tags associadas. Os OAs em si continuam armazenados apenas na sua fonte original.

6. Concluses
A reutilizao de OAs reduz investimentos nanceiros nas instituies com o pagamento de licenas na compra de softwares educativos e com o custo de desenvolvimento desses recursos pedaggicos. importante recordar que a falta de tempo e de conhecimentos tcnicos especcos impedem os professores de desenvolverem materiais didticos ricos de contedo e recursos multimdia que atendam aos objetivos pedaggicos de um OA. A partir dos estudos realizados, foi possvel vericar que as mquinas de busca e os repositrios apresentam diculdades na recuperao de OAs. Essas diculdades reforam a necessidade de criao de um novo mecanismo para recuperao dos OAs que se valha de outros recursos para facilitar a pesquisa, como por exemplo o uso de tags. Um mecanismo eciente de recuperao de OAs facilitaria a utilizao, pesquisa e acesso aos OAs que se encontram espalhados na Web. Desta forma, os principais envolvidos no processo de ensino-aprendizagem poderiam reaproveitar os OAs, obtendo, assim, melhoria da qualidade dos materiais didticos utilizados como apoio ao ensino. Esse projeto ser ponto de partida para nortear outros trabalhos de pesquisa, inclusive sugesto de tags.

Referncias
[CLOE ] CLOE. Denitions of learning objects. Disponvel em: http://learnware. uwaterloo.ca/projects/CCCO/cloe_about_def.html. Acesso em: 09 abr. 2008. [Franklin and Harmelen 2007] Franklin, T. and Harmelen, M. V. (2007). Web 2.0 for content for learning and teaching in higher education. Journal of Information Science. [Gwizdka and Chignell 1999] Gwizdka, J. and Chignell, M. (1999). Towards information retrieval measures for evaluation of web search engines. Disponvel em: http://www.imedia.mie.utoronto.ca/~jacekg/pubs/webIR_eval1_ 99.pdf. Acesso em: 15 mai. 2008. [Monge et al. 2008] Monge, S., Ovelar, R., and Azpeitia, I. (2008). Repository 2.0: Social dynamics to support comunity building in learning object repositories. Interdisciplinary Journal of E-learning and Learning Objects, 4:191204. [Nesbit et al. 2003] Nesbit, J., Belfer, K., and Leacock, T. (2003). Learning object review instrument (lori). E-Learning Research and Assessment Network. [Tarouco et al. 2003] Tarouco, L. M. R., Fabre, M.-C. J. M., and Tamusiunas, F. (2003). Reusabilidade de objetos educacionais. In Revista Novas Tecnologias na Educao, volume 1, Porto Alegre - RS. [Thomas and Hunt 2000] Thomas, D. and Hunt, A. (2000). Programming Ruby: the pragmatic programmers guide. Addison-Wesley Longman Publishing Co. [Xu et al. 2008] Xu, S., Bao, S., Fei, B., Su, Z., and Yu, Y. (2008). Exploring folksonomy for personalized search. In Proc. 31st ACM SIGIR, pages 155162, New York. ACM.