RCCI Vol. 3, No. 3-4 JULIO-DICIEMBRE, 2009 p.

33-39 Recibido: 7/6/2010

Mtricas para medir la calidad de portales web

Metrics to measure the quality of Web portals
Laritza Santo lvarez
Departamento de la Especialidad Facultad Regional Granma de la Universidad de las Ciencias Informticas lsanto@grm.uci.cu

34

Resumen
El artculo persigue el propsito de de nir un conjunto de mtricas web para evaluar la calidad de los portales desarrollados en la Universidad de las Ciencias Informticas. Para esto fue necesario desarrollar una investigacin acerca de la aplicacin de mtricas web en la universidad, mediante la aplicacin de una encuesta a un conjunto de lderes de proyectos demostrando con los resultados obtenidos la necesidad de conocer y aplicar mtricas para medir los diferentes factores de calidad presentes en los portales. Despus de un anlisis la propuesta se enfoc a los cuatro factores de calidad que se consideraron ms importantes para este tipo de producto: con abilidad, e ciencia, funcionalidad y usabilidad. Palabras clave: calidad; factores de calidad; mtricas web; portales web.

Introduccin
El desarrollo actual de la Informtica como ciencia encargada de la gestin y control de la informacin a partir de sus procesos de automatizacin, ha trado consigo valiosos aportes cient cos, permitiendo a su vez, el desarrollo de importantes tecnologas que tributan, sin dudas, al progreso actual de la humanidad. Las tcnicas creadas y las tecnologas que le han dado su paso, son una correspondencia clara del desarrollo alcanzado por varias ciencias que, gracias a sus aportes y convergencias, han hecho de las Ciencias Informticas una herramienta actual indispensable. Es por ello que los temas relacionados con la calidad adquieren cada da mayor importancia en estos mbitos, y de modo ms espec co en las aplicaciones web. Pues stas poseen caractersticas que las diferencian de los sistemas tradicionales tales como; el tamao y complejidad de las aplicaciones, el carcter multidisciplinar del equipo de desarrollo, la tasa apresurada de entrega del proyecto, entre otras. Las caractersticas antes mencionadas traen consigo que los procesos, modelos y mtricas existentes para evaluar la calidad tengan que ser adaptados para considerar los cambios impuestos por las nuevas tecnologas. A medida que el nmero y la complejidad de los portales web crecen, es necesario re exionar sobre la forma en que stos deben ser creados y cmo mantener su calidad e integridad, algo que deben tener presente las empresas y organizaciones que desarrollan portales o aplicaciones. La baja aceptacin de un sitio web, se debe entre otros aspectos, a la falta de una clara estructura organizativa de la pgina principal; la ausencia de una tabla de contenidos, un mapa del sitio o ndices; la falta de contenidos relevantes; la baja velocidad al cargar las pginas o la existencia de enlaces invlidos; lo que puede conducir a que el usuario abandone el sitio o aplicacin con una imagen deslucida de la institucin productora. (Gonzlez, 2001). Por ende es necesario comprender, analizar, controlar, medir y potencialmente mejorar la calidad de los productos. Para controlar la excelencia en los servicios de la web es necesario buscar soluciones novedosas, como lo constituyen hoy da las mtricas, que son una medida estadstica no cuantitativa que se aplica a todos los aspectos de la calidad del software, los cuales deben ser medidos desde diferentes puntos de vista.

Abstract
This paper is intended to de ne a set of web metrics to evaluate the quality of the sites developed at the University of Informatics Sciences, acronym in Spanish). For this it was necessary to develop a comprehensive research on the application of web metrics in college, speci cally by applying a questionnaire to a group of project leaders demonstrating with its results the great need to understand and apply metrics to measure different quality factors present in the portals. After a analysis the proposal was focused on the four quality factors that are considered the most important for this type of product: reliability, ef ciency, functionality and usability. Keywords: quality; quality factors; web metrics; web portals.

Mtodos empleados

forma general se muestran a continuacin: Uno de los factores que in uye en que la mayora de los proyectos encuestados no apliquen mtricas en sus portales es la falta de conocimiento que existe con respecto a estas, hecho que se observa en la siguiente gura:

Segn los resultados de las entrevistas realizadas se pudo comprobar que los distintas aplicaciones web desarrolladas en la universidad no cuentan con la mxima calidad para satisfacer las necesidades de los clientes, pues en algunas ocasiones se torna muy difcil encontrar los sistemas de bsquedas, ya que estos no se ven a simple vista, existen de ciencias y redundancias en la visualizacin de las imgenes, enlaces invlidos, entre otros aspectos. Todos estos problemas conllevan a que los productos que se desarrollan en estos proyectos, principalmente los portales web, no cumplan con las expectativas esperadas, el proceso se hace muy tedioso, hay menos aprovechamiento del tiempo y de los recursos. Adems en la mayora de los proyectos encuestados no se realizan mediciones a los productos desarrollados para conocer el estado de los diferentes factores de calidad. Es por ello que se hace necesario llevar a cabo un proceso de medicin en estos proyectos, pues la calidad de los productos que se desarrollan en la facultad es la clave para mejorar la imagen dentro de la universidad y de esta forma complementar la con anza que se ha depositado en la produccin de la misma. Despus de haber visto los principales problemas que afectan la calidad de los productos desarrollados en los proyectos productivos de la universidad, se analizarn los resultados obtenidos de la encuesta aplicada a los lderes de proyectos que han desarrollado portales web. El objetivo principal de la encuesta fue conocer el nivel de conocimiento que tienen los lderes de proyectos respecto a las mtricas que se pueden aplicar a los diferentes portales que desarrollan y conocer adems si dichas mtricas son aplicadas en su proyecto. Tambin los resultados obtenidos muestran en qu reas y cules factores son considerados por estos lderes de mayor importancia para realizar las mediciones. De manera general la encuesta fue aplicada a ocho proyectos de la Facultad 10 que desarrollan portales web, los resultados que se obtuvieron de

Figura 1. Conocimiento de las mtricas a aplicar en los portales web.

Como se puede observar en la gura anterior solo dos de los lderes de proyectos conocen cules son las mtricas que se pueden aplicar a los portales web, sin embargo la mayora de ellos no las aplican, resultado que se muestra a continuacin.

Figura 2. Aplicacin de las mtricas en los portales web.

Como se puede observar en la gura anterior solo dos de los lderes de proyectos conocen cules son las mtricas que se pueden aplicar a los portales web, sin embargo la mayora de ellos no las aplican, resultado que se muestra a continuacin. En la Figura 2 se demuestra que slo uno de los proyectos encuestado aplica mtricas para medir la calidad de los portales que se han desarrollado, no obstante casi la totalidad de los lderes de proyectos aunque no tienen los conocimientos su cientes acerca de las mtricas y no las aplican, consideran importante la utilizacin de las mismas. De manera general los resultados obtenidos por la encuesta realizada a los proyectos que han desarrollado portales web, el 87.5% no est aplicando mtricas para conocer el estado de sus productos en cuanto a la calidad de los mismos, esto se debe fundamentalmente a que slo el 25% de los lderes tienen conocimiento de las posibles

Mtricas para medir la calidad de Portales Web

Para la realizacin de dicho trabajo se utilizaron las entrevistas y encuestas a diferentes lderes de proyectos, vicedecanos de produccin y especialistas de calidad de la Universidad de las Ciencias Informticas (UCI), con el n de recopilar informacin acerca de la situacin en la universidad con respecto a la aplicacin y a los conocimientos de las posibles mtricas utilizadas en la evaluacin de la calidad de los portales web desarrollados en la institucin.

35

36

mtricas que pueden utilizarse, mientras que slo el 50% de los proyectos guardan datos de las revisiones que realizan, siendo estos imprescindibles para la obtencin de medidas y de nicin de mtricas que proporcionen indicadores para guiar el proyecto en la obtencin de portales de alta calidad. Para formalizar la propuesta de las mtricas a determinados factores de calidad se incluy en la encuesta la siguiente pregunta: Cules factores de calidad considera ms importante para realizar la medicin de los portales web? Los factores propuestos para que los lderes de proyecto seleccionaran fueron los 5 atributos de calidad que propuso el Doctor en Ciencias en el rea de Ingeniera de Software en la web, Luis Antonio Olsina, el cual desarroll junto a otros autores un modelo de calidad web denominado WebQEM donde, para llevar a cabo la medicin de calidad ellos proponen y prueban el modelo basado en la inspeccin, con sistemas manuales y automticos de cada uno de los cinco aspectos que consideran de ms valor para los sitios web; usabilidad, funcionalidad, abilidad o con abilidad, e ciencia y capacidad de mantenimiento. La mayora de estos aspectos coinciden con los que plantea el estndar ISO/ICE 9126 con la diferencia de que el Dr. Olsina considera que algunas caractersticas que se plantea en el estndar para el atributo de portabilidad son las mismas que propone l en el atributo de mantenibilidad, por tal motivo ste no considera la potabilidad como atributo de calidad para portales web. Igualmente la uatora coincide con el planteamiento del Dr. Olsina (1999), pues el factor portabilidad no es de mucho inters para los clientes porque los sitios estn montados en servidores web y no se ven tan afectados con este tipo de factor a diferencia de otros productos informticos. Adems, la medida de los 5 atributos escogidos da un valor de estimacin de la calidad total del sitio, sin dejar de mencionar que se tiene en cuenta algunas de las caractersticas de los factores del estndar 9126 por su gran coincidencia. Las respuestas obtenidas a la pregunta antes plantada se muestran a continuacin. Como se puede observar la totalidad de los lderes consideran que los cinco factores son muy importantes para realizar las mediciones en los portales web que desarrollan porque a travs de ellos se puede obtener un producto de alta calidad.
Figura 3. Factores que pre eren los lderes de proyecto para las mediciones.

Sin embargo existen preferencias por algunos de ellos, pues segn stos son los que ms les interesan a los clientes. Se puede resumir entonces que los factores que ms les interesa medir a los lderes de proyecto para obtener un producto de calidad y lograr la satisfaccin de los clientes son: Funcionalidad: pues se re ere al correcto funcionamiento tcnico del sitio. Al margen de que un sitio sea accesible y fcil de usar, si no lleva a cabo su funcin sin errores, no resultar de valor alguno para el usuario. Como se observa, la funcionalidad tiene una estrecha relacin con la utilidad, pudiendo de nirse funcionalidad con utilidad objetiva, es decir, la capacidad tcnica de la aplicacin para soportar las tareas que el usuario desea realizar. Su interrelacin con la usabilidad se fundamenta en que muchos errores o fallos de funcionalidad son considerados al mismo tiempo propio de la usabilidad, debido a la frustracin que provocan en el usuario durante la interaccin. (Monterol, 2006) Usabilidad: Es considerada como el grado de e cacia, e ciencia y satisfaccin con la que usuarios espec cos pueden lograr objetivos espec cos, en contextos de uso espec cos al utilizar un producto. Es uno de los factores ms importantes que existen para elevar la calidad de los portales web, ya que juega un papel clave para generar experiencias positivas, para la mejora en la toma de decisiones y para contribuir a la creacin de sitios web ms e cientes. Por tanto la usabilidad no es ms que el arte y la ciencia de crear sistemas o sitios web que brindan una experiencia positiva al usuario, lo que implica facilidad en el manejo, facilidad en la bsqueda de informacin espec ca, efectividad del uso del tiempo que el usuario utiliza, error tolerante y acoplamiento. (Nuez, 2001)

Igualmente el diseo e ciente de sitios web no slo tiene ventajas para el usuario si no que el propio diseador se bene ciar en el futuro de la creacin de un sitio plani cado, estructurado y usable, ya que los rediseos y mejoras posteriores sern ms rpidos y sencillos de aplicar y afectarn en menor medida al funcionamiento del sitio. (Fernndez, 2007) Con abilidad: Se puede de nir como la capacidad de un sitio de realizar sus funciones de la manera prevista. De otra forma, la con abilidad se puede de nir tambin como la probabilidad en que un producto realizar su funcin prevista sin incidentes por un perodo de tiempo especi cado y bajo condiciones indicadas (Rcm, 2008). Se consideran tres caractersticas para este atributo tales como: proceso correcto de enlace, recuperacin de errores y la validacin y recuperacin de la entrada del usuario. Lo que indica que si un sitio web contiene varios enlaces rotos o invlidos, degrada la con abilidad del mismo desde el punto de vista del usuario. Por todo lo antes expuesto la propuesta de las mtricas que se realiza est encaminada principalmente a estos factores, pues son de suma importancia a la hora de disear un portal web con la calidad requerida.

PITA = CITA * 100/ CTI Donde: PITA: Porciento de imgenes con texto alternativo. CITA: Cantidad de imgenes que poseen texto alternativo. CTI: Cantidad total de imgenes que posee el portal. Anlisis de los resultados: Cuanto ms cercano del 100% est el valor de PITA, ser mejor, pues signi ca que casi la totalidad de las imgenes presentan texto alternativo lo que es de gran importancia porque facilita la comprensin del contenido en caso de que las imgenes no carguen correctamente. Porcentaje de redundancia de imgenes: La repeticin de imgenes en los portales web no es recomendable, pues adems de sobrecargar el tamao de las pginas del portal conlleva a que exista redundancia de la informacin visual. PRI= 100 * (1- CID / CTI) Donde: PRI: Porciento de redundancia de imgenes. CID: Cantidad de imgenes distintas. CTI: Cantidad total de imgenes. Anlisis de los resultados: Mientras que el valor de PRI sea menor, ser mejor, pues el portal tendr menos redundancia de imgenes y por lo tanto menor cantidad de repeticiones de informacin visual. Porcentaje de enlaces rotos: Esta mtrica representa bsicamente el porciento de enlaces que conducen a nodos destinos ausentes. PER = (CERI + CERE) * 100 / CTE Donde: PER: Porciento de enlaces rotos. CERI: Cantidad de enlaces rotos internos. CERE: Cantidad de enlaces rotos externos. CTE: Cantidad total de enlaces. Anlisis de los resultados: Mientras que el valor de PER sea ms prximo al

Resultados y Discusin Algunas mtricas propuestas:

Porcentaje de la presencia de la etiqueta ALT: Una de las mtricas existentes para medir la e ciencia en los portales web es el porcentaje de las imgenes que poseen un texto alternativo (ALT). En cada pgina web, se debe proveer texto alternativo para cada imagen u objeto gr co, pues tiene como objetivo comunicar alguna informacin de tipo visual. La presencia de esta propiedad ALT en cada imagen permite incluir como bien se ha dicho texto alternativo para cada una de ellas, para que ste se despliegue

Mtricas para medir la calidad de Portales Web

E ciencia: Es el grado de cumplimiento de las expectativas buscadas con el sitio web por parte de su propietario. Por tanto, exige facilitar que el usuario ejecute las acciones perseguidas. Este factor est estrechamente relacionado con la usabilidad pues una e ciencia buena o aceptable con una usabilidad mala permite que el propietario recoja sus resultados, pero el usuario no volver a entrar porque tendr mal recuerdo de su bsqueda y por tanto se habr perdido un cliente.

antes que las imgenes y facilite de esta forma la comprensin del contenido a los usuarios. De esta manera, favorece la legibilidad de la pgina. Analizando el cdigo en formato HTML es fcil detectar por cada una de las imgenes que posee el sitio, la presencia de la propiedad ALT (Lafuente, 2007). Para calcular el porciento de imgenes que poseen texto alternativo se emplea la siguiente frmula:

37

38

1%, ser mejor, pues signi ca que no ha habido muchos enlaces en el portal que conduzcan a pginas ausentes. Porcentaje de pginas muertas: Las pginas muertas representa la cantidad de pginas que no tienen ningn enlace de retorno dentro del sitio, por lo tanto la mtrica antes mencionada calcula el porciento de estas pginas a travs de la siguiente frmula: PPM = CPM * 100 / CTP Donde: PPM: Porciento de pginas muertas. CPM: Cantidad de pginas muertas. CTP: Cantidad total de pginas. Anlisis de los resultados: Mientras que el valor de PPM sea ms prximo al 1%, ser mejor, pues signi ca que no ha habido muchas pginas muertas en el portal. Para la validacin de la propuesta desarrollada se aplic un cuestionario a varios especialistas en calidad, el mismo tuvo como objetivo conocer las opiniones de los especialistas consultados acerca de la utilidad, resultados positivos y transformadores que arrojar la aplicacin de la propuesta, as como las ventajas que brindar de manera general. El cuestionario cont de siete preguntas las cuales deben ser respondidas adems del criterio u opinin de los especialistas en una escala del 1-5. Los resultados obtenidos se muestran en la siguiente tabla.
Tabla 1. Resultados de la validacin Preguntas 1 Especialistas 1 2 3 4 5 6 5 4 4 5 5 4 2 3 4 5 6 7 Categora Final 5 3 3 5 5 5 4 4 5 5 5

Figura. 4 Evaluacin de la propuesta

Donde se puede observar que el porciento obtenido fue de 93,3 lo cual signi ca que la propuesta de forma general es evaluada de bien, porque la misma hace una correcta valoracin de la teora y las normas internacionales existentes. Adems consta de las de niciones necesarias para su aplicacin. Siendo de mucha utilidad para los lderes de proyectos al frente de la produccin web, pues con esta se puede revisar el estado de los productos as como su calidad nal. Tambin cuenta con un gran valor cient co, pues aportar bene cios al ponerse en prctica con el n de poder estimar con mayor precisin el tipo y cantidad de mantenimiento que requiere un sistema web.

Conclusiones
El incremento de la competencia entre industrias del software, espec camente en el desarrollo de la web, ha llevado a varias empresas del software a producir con ms calidad y e cacia. Un portal web que no sea con able, usable, e ciente y funcional, no tiene calidad, pues estos son los principales factores que deben tener los mismos para cumplir con esta propiedad. Durante el desarrollo de este trabajo se dio cumplimiento al objetivo trazado, realizando una propuesta de las mtricas web para medir los portales desarrollados en la universidad, debido a la poca aplicacin de las mismas en los proyectos, existiendo un desconocimiento casi general de stas. Adems se pudo validar la propuesta realizada mediante la consulta a un conjunto de especialistas en el tema. Con la aplicacin de la propuesta realizada se puede medir la con abilidad, usabilidad, e ciencia y funcionalidad en los portales web, ayudando de esta forma a los lderes de proyectos en la toma de decisiones.

5 4 4 5 5

5 5 5 4 4 4 5 5 5 4 5 5

5 3 3 5 5 5

5 5 5 5 5 5

Referencias
Fernndez, David. Variables intrnsecas de una pgina web: contenido, usabilidad, e ciencia y diseo. [Consultado el: 8 de noviembre de 2007] Disponible en: http://diariored.com/ blog/mkt20/archivo/000257.php

Para la interpretacin de los resultados antes expuestos se calcul el porciento de la categora nal de la propuesta y se de ni un intervalo para la evaluacin de la misma, mostrndose en la siguiente gr ca.

Gonzlez, Julia; Olsina Luis y LaFuente, Guillermo. Portal web. Automatizando mtricas Web. GIDIS, Facultad de Ingeniera, Universidad Nacional de La Pampa. Argentina y Escuela Politcnica. Universidad de Extremadura. 2001. [Consultado el: 12 de noviembre de 2007]. Disponible en: http://ctp.di.fct. unl.pt/QUASAR/QUATIC2001/documents/ abstracts/ST1_1/LuisOlsina.htm LaFuente, G. J. (2000). Automatizando Mtricas en la web. Buenos Aires, Argentina, Universidad Nacional de Lujn. [Consultado el: 19 de noviembre de 2007]. Disponible en: http://mdk.ing. unlpam.edu.ar/~labweb/downloads/ pdfs/tesiswebsitema.pdf LaFuente, Guillermo Javier y Olsina, Luis. Catalogando Mtricas Web. Facultad de Ingeniera, Argentina. [Consultado el 12 de noviembre de 2007]. Disponible en: http://www.informandote.com/ jornadasIngWEB/articulos/jiw07.pdf Mantenimiento, Reliability y Con abilidad RCM. [Consultado el: 8 de mayo de 2008]. Disponible en: http:// w w w. s o l o m a n t e n i m i e n t o . c o m / m _ con abilidad_crm.htm Martnez Vidrio, Luis Manuel. Portales web. Universidad de las Amricas Puebla, Siria. 2007. [Consultado el 15 de marzo de 2008] Disponible en: http://catarina. udlap.mx/u_dl_a/tales/documentos/lis/ martinez_v_lm/capitulo1.pdf Menndez, J. Rico. Evolucin del concepto de Calidad, [Consultado el: 1 de abril de 2008]. Disponible en: http://www. medynet.com/elmedico/publicaciones/ trasplantes3/169-175.pdf Monterol, Y. H. (2006). Factores del diseo web orientado a la satisfaccin y no frustracin de uso. Revista Espaola de Documentacin Cient ca 29. abril-junio 2: 239-257. Disponible en: http://www. nosolousabilidad.com/hassan/Factores_ satisfaccion_frustracion.pdf Nuez de la, Alfonso. La medicin de la Usabilidad Web: una ventaja competitiva. Proyecto Web-Sobre Diseo de Interaccin, Usabilidad y Al. Octubre 2001, La Habana, Cuba. [Consultado el: 30 de abril de 2008]. Disponible en: http:// www.proyectoweb.cubaweb.cu/boletin/ medicion-de-la-usabilidad-web.html Olsina, L. A. Metodologa Cuantitativa para la Evaluacin y Comparacin de la Calidad, 1999. [Consultado el: 19 de noviembre del

Mtricas para medir la calidad de Portales Web

2007] Disponible en: http://www.di.uniovi. es/~cueva/investigacion/tesis/WebsiteQEM. pdf Prez, Memo. Calidad total. [Consultado el: 1 de abril de 2008]. Disponible en: http://www. gestiopolis.com/recursos2/documentos/ fulldocs/ger/caltotalmemo.htm Torregrosa Snchez, Rafael. Concepto de calidad y generalidades. [Consultado el 27 de enero de 2008] Disponible en: http://chguv.san. gva.es/Descargas/Gerencia/PlaniCalidad/ Kiosco/Calidad_generalidades.pdf.

39