Universidad del Azuay

Facultad de Ciencias de la Administración

Carrera de Administración de Empresas

JUEGOS SERIOS

Autoras:

Directora:

Cuenca – Ecuador
2019-2020
Índice

ADQUISICIÓN DE COMPETENCIAS EMOCIONALES MEDIANTE EL DESARROLLO Y USO DE SERIOUS GAMES EN

EDUCACIÓN SUPERIOR .................................................................................................................................... 1
1.- INTRODUCCIÓN .................................................................................................................................................. 1
1.1.- Conocimientos específicos de programación ......................................................................................... 2
1.2.- La competencia emocional .................................................................................................................... 3
1.3.- Desarrollo de juegos digitales como estrategia pedagógica ................................................................. 3
1.4.- Uso de juegos como estrategia pedagógica .......................................................................................... 4
2.- MÉTODO .......................................................................................................................................................... 4
2.1.- Características de la muestra ................................................................................................................ 5
2.2.- Descripción de las experiencias.............................................................................................................. 6
EDUCATIONAL SERIOUS GAMES AS A SERVICE: CHALLENGES AND SOLUTIONS .................................................... 8
3. BACKGROUND..................................................................................................................................................... 8
3.1. Cloud Computing ..................................................................................................................................... 8
3.2. Software as a service (SaaS) ................................................................................................................. 10
3.3. Serious game ......................................................................................................................................... 10
LESSONS LEARNED APPLYING LEARNING ANALYTICS TO ASSESS SERIOUS GAMES ............................................. 12
3. CASE STUDY CONECTADO .................................................................................................................................... 12
3.1. Experimental design .............................................................................................................................. 13
3.2. GLA data ............................................................................................................................................... 14
3.3. Results ................................................................................................................................................... 14
3.4. GLA application: lessons learned .......................................................................................................... 15
REFERENCIAS BIBLIOGRÁFICAS: ............................................................................................................................ 16

i
Índice de figuras y tablas
Índice de figuras
Figura N° 1 Algunos de los videojuegos desarrollados por el primer grupo experimental ................... 6
Figura N° 2 Cloud computing ................................................................................................................ 9

Índice de tablas
ADQUISICIÓN DE COMPETENCIAS EMOCIONALES MEDIANTE EL
DESARROLLO Y USO DE SERIOUS GAMES EN EDUCACIÓN SUPERIOR

1.- Introducción

En todo el mundo, la educación superior permanentemente se enfrenta al reto de mejorar la

calidad de la enseñanza. Además de este desafío general, cada carrera presenta también sus
propios retos específicos. En particular, uno de los mayores obstáculos que deben superar los
estudiantes que cursan carreras informáticas es aprender a programar. Existe la percepción
generalizada de que se debe tener cierta aptitud para la programación, y que quienes no la
posean estarán condenados al fracaso. No obstante, Jenkins (2002) pone en duda la existencia
de tal aptitud y postula que la dificultad se debe a estilos de aprendizaje o una motivación
erróneos (p. 54). Por otro lado, en su informe final, el Grupo de Informática del Proyecto
Tuning América Latina destaca que, para poder ofrecer una educación superior de calidad, las
instituciones deben lograr que los estudiantes desarrollen tanto las competencias específicas de
la disciplina que eligieron, como también ciertas competencias generales (Contreras Véliz,
2013, pp. 40-47), entre las cuales destacamos la competencia emocional. Frente a estas
necesidades, cada vez más docentes desean aplicar en sus clases estrategias que involucren
juegos —en especial los digitales— por el enorme potencial que tienen. Según Revuelta
Domínguez (2014), «la metodología de aprendizaje basado en juegos digitales no es nueva del
todo, resulta que aún no se ha trabajado mucho» (p. 125). Si bien es posible encontrar
beneficios formativos en los juegos comerciales, en este estudio nos enfocaremos en los juegos
serios, cuya meta primaria es la educación en lugar del entretenimiento (Michael & Chen, 2006,
p. 17). Ahora bien, ¿es posible que tanto el desarrollo como el uso de juegos serios, trabajando
en equipo, permitan adquirir conocimientos específicos de la programación y también
favorezcan el desarrollo de la competencia emocional? Y de ser así, ¿qué conceptos de la
programación y qué facetas de la competencia emocional se adquieren en mayor o menor grado
al desarrollar los juegos y cuáles al usarlos? En busca de respuestas para estas preguntas, hemos
planteado este estudio con el propósito de comparar tres estrategias pedagógicas en cuanto a
su eficacia para facilitar tanto la asimilación de los contenidos específicos de la programación,

1
como también el desarrollo de la competencia emocional: la tradicional —basada en resolver
problemas—, la construcción de juegos serios —inspirada en las ideas de Seymour Papert
(1991)— y, por último, el uso de esos mismos juegos.

1.1.- Conocimientos específicos de programación

El paradigma denominado POO (Programación orientada a objetos) se basa en cuatro pilares:

la abstracción, el encapsulamiento, la herencia y el polimorfismo. Para programar un sistema
en este paradigma, primero deberá emplearse la abstracción para definir qué objetos serán
necesarios y establecer cómo se irán comunicando entre sí y con los usuarios. Definir cuáles
partes del estado (el valor de sus atributos) y del comportamiento (las funciones o métodos que
el objeto ejecuta al recibir solicitudes) de un objeto podrán ser accedidos desde otros objetos
es lo que se determina empleando el segundo pilar de la POO (el encapsulamiento). En Java,
el lenguaje enseñado en la materia que es objeto de este estudio, existen cuatro formas de
indicar la accesibilidad en una declaración: public, private, protected y sin especificar. En la
mayoría de los lenguajes orientados a objetos, pueden inventarse clases (declaraciones de
atributos y métodos comunes) a partir de las cuales es posible crear objetos. Cuando al declarar
una clase se hace mención a otra, se establece una relación entre ellas. Las seis principales
relaciones son la generalización, la realización, la asociación, la agregación, la composición y
la dependencia, cada una correspondiente a un tipo distinto de flecha en el UML (Unified
Modeling Language) usado para representar las clases y sus relaciones (Rumbaugh, Booch &
Jacobson, 2000, pp. 41-52). El tercer pilar de la POO (la herencia) es otro nombre para la
generalización. Si dos clases tienen esta relación, los objetos de la clase más específica tendrán
ciertos atributos de la más general. El cuarto y último pilar de la POO (el polimorfismo) permite
que una variable de una clase más general pueda contener una referencia a un objeto de
cualquier clase derivada de la anterior. Así, puede usarse una única variable para acceder
sucesivamente a objetos de muchas formas. En Java, por una cuestión de eficiencia, existen
tipos primitivos para trabajar con datos que no requieran ser modelados como objetos. Según
la cantidad de espacio que ocupen en la memoria, estos tipos primitivos permiten utilizar rangos
de datos de mayor o menor extensión. Para construir objetos a partir de datos de tipos
primitivos, es posible utilizar clases de envoltorio. Por ejemplo, a partir de un dato del tipo int
se puede construir un objeto de la clase Integer. Por último, varios lenguajes poseen una
característica muy útil: la sobrecarga. En Java, esta permite otorgarle diferentes
funcionalidades a un mismo método, según de qué tipo sean los argumentos con los que se lo
utilice. Por ejemplo, el método partir podría sobrecargarse para que, si recibe un número, lo
divida por 2 y, en caso de recibir una cadena de caracteres, la separe en dos mitades.

1.2.- La competencia emocional

La competencia emocional se puede definir como «el conjunto de conocimientos, capacidades,

habilidades y actitudes necesarias para comprender, expresar y regular de forma apropiada los
fenómenos emocionales» (Bisquerra Alzina & Pérez Escoda, 2007, p. 69). Es una evolución
del concepto de inteligencia emocional, término definido como «la capacidad de percibir las
emociones y los sentimientos de uno mismo y los de los demás, de discernirlos y de usar esa
información para guiar el pensamiento y las acciones propios» (Salovey & Mayer, 1990, p.
189). En cierto momento, surgió la denominación competencia emocional como «resultado del
interés despertado sobre su aplicación práctica. . . .
El concepto de competencia emocional adquirió importancia en principio en el ámbito laboral
incluyéndose como elemento a valorar en los aspirantes por los departamentos de selección de
personal» (Díaz Matarranz & González Urbano, 2011, p. 194). El desarrollo de la competencia
emocional es fundamental, ya que «entre los aspectos que se ven favorecidos por las
competencias emocionales están los procesos de aprendizaje, las relaciones interpersonales, la
solución de problemas, la consecución y mantenimiento de un puesto de trabajo, etc.»
(Bisquerra Alzina & Pérez Escoda, 2007, p. 69). Según Pedrera Rodríguez (2017), «la
existencia de programas planificados de desarrollo de competencias emocionales, incluidos en
el currículum, presenta mayor probabilidad de elevar el grado de adquisición de estas
competencias en el alumnado» (p. 341). En este sentido, Menardo, Balboni y Cubelli (2017)
sugieren que aunque el capital social y el capital cultural de los padres tienen influencia sobre
algunos rasgos de la personalidad de los hijos, es su propio capital cultural y social el que más
influye en la personalidad que desarrollan. Es por ello que Lozano Martínez y Merino Ruiz
(2015) proponen la utilización de las TIC para desarrollar las habilidades emocionales, pues
«los medios informáticos ofrecen un entorno favorable para el aprendizaje y desarrollo de
habilidades emocionales y sociales, ya que suponen una dinámica estructurada entre el
contenido y el alumno» (p. 11). En el estudio de estas autoras, el software educativo utilizado
contribuyó a desarrollar la autonomía de los alumnos.

1.3.- Desarrollo de juegos digitales como estrategia pedagógica

El aprendizaje mediante el desarrollo de juegos digitales es una estrategia pedagógica muy
apreciada entre los representantes del construccionismo (Kafai & Burke, 2015), especialmente
si se lleva a cabo teniendo como meta principal no el aprendizaje de un lenguaje de
programación de propósito general, sino la adquisición de competencias para el siglo XXI.
Cuando el objetivo es el aprendizaje de la programación a través del desarrollo de juegos
digitales, los antecedentes abarcan tanto libros que enseñan lenguajes mediante el desarrollo
de videojuegos (Quick, 2016), como también publicaciones académicas que narran
experiencias de estudiantes que aprendieron programación al desarrollar videojuegos,
utilizando tanto lenguajes y entornos tradicionales (Soares, Fonseca & Martin, 2015), como
frameworks específicos para la programación de videojuegos (Simões, 2016).

1.4.- Uso de juegos como estrategia pedagógica

La utilización de juegos con fines didácticos abarca tanto la metodología de aprendizaje

basado en juegos digitales (Prensky, 2001) como los juegos serios o serious games. Los
videojuegos pueden motivar a los alumnos independientemente de la materia que estén
estudiando y, en comparación con los medios tradicionales, como los libros o las películas,
tienen «un ingrediente añadido y otro que les quitamos. El elemento que añadimos es el
elemento interactivo, (…) el elemento que quitamos es el elemento lineal, aunque no lo
quitamos, lo sustituimos por otro componente, a saber, pensar en red» (Revuelta Domínguez,
2014, p. 124). Si la meta es el aprendizaje de la programación a través del uso de juegos
digitales, los antecedentes van desde los videojuegos con personajes programables como
Hakitzu (Clifford, 2013) hasta videojuegos del género mundo abierto como Minecraft
(Wilkinson, Williams & Armstrong, 2013). En vista de la notable presencia que los juegos
están teniendo en las aulas, coincidimos con Gros Salvat (2014) en que «el uso de los juegos
digitales aparece como tendencia destacada desde el 2005 en la docencia universitaria y se
apunta como un recurso que se irá extendiendo»

2.- Método

Para esta investigación, decidimos utilizar una metodología mixta con ejecución secuencial
explicativa, que es aquella en la cual el investigador primero realiza una investigación
cuantitativa, analiza los resultados y luego se basa en ellos para explicarlos con más detalle con
la investigación cualitativa (Creswell, 2014, p. 15).
Para la primera fase (la cuantitativa), utilizamos un diseño basado en la aplicación de un pretest
y un postest en dos grupos experimentales y en uno de control. En nuestro caso, el diseño es
cuasi-experimental, ya que el muestreo de los participantes se llevó a cabo mediante un
procedimiento no probabilístico incidental, por no ser posible definir los grupos al azar (son
los estudiantes quienes se inscriben voluntariamente para cursar la materia en una u otra
comisión).
Para la segunda fase (la cualitativa) se realizaron entrevistas semiestructuradas. En este caso,
también se utilizó un procedimiento no probabilístico para la selección de los participantes: la
muestra fue autoseleccionada, ya que los participantes se propusieron voluntariamente,
respondiendo a una invitación.

2.1.- Características de la muestra

La muestra estuvo formada por 77 estudiantes que cursaron la materia Programación II de la

carrera de Informática Aplicada en una institución de educación superior de Buenos Aires
(Argentina) en 2016 y 2017, de los cuales 65 eran hombres (84,4%) y 12 mujeres (15,6%), con
una edad promedio de 28,1 años (desviación estándar=6,35). Todos ellos participaron de la
fase cuantitativa del estudio. El primer grupo experimental estuvo formado por 25 estudiantes
que desarrollaron juegos serios en 2016, de los cuales 20 eran hombres (80%) y 5 eran mujeres
(20%), con una edad promedio de 29,9 años (desviación estándar=7,45). El segundo grupo
experimental estuvo formado por 25 estudiantes que usaron juegos serios en 2017, de los cuales
22 eran hombres (88%) y 3 eran mujeres (12%), con una edad promedio de 27,6 años
(desviación estándar=4,97). El grupo de control estuvo formado por 27 estudiantes que
cursaron la materia Programación II de la manera tradicional (sin desarrollar ni usar juegos
serios), de los cuales 23 eran hombres (85,2%) y 4 eran mujeres (14,8%), con una edad
promedio de 26,9 años (desviación estándar=6,25). Según Gay, Mills y Airasian (2012), para
verdaderos estudios experimentales, se recomienda un mínimo de 30 participantes en cada
grupo, aunque en algunos casos es difícil alcanzar este número (p. 139).
Dado que, en nuestro caso, el estudio es cuasi-experimental, nos permitimos utilizar muestras
un poco menores que el mínimo tamaño recomendado para estudios experimentales, ya que,
como afirman estos mismos autores, no estaríamos muy seguros de los resultados de un único
estudio basado en muestras pequeñas, pero si varios de tales estudios obtienen resultados
similares, nuestra confianza en los hallazgos generalmente es mayor (Gay et al., 2012, p. 139).
De la fase cualitativa del estudio participaron 16 estudiantes: cinco del primer grupo
experimental (100% hombres; edad promedio 28,6 años, desviación estándar=9,13), cinco del
segundo (cuatro hombres: 80% y una mujer: 20%; edad promedio 27,4 años, desviación
estándar=3,51) y seis del grupo de control (100% hombres; edad promedio 26 años, desviación
estándar=4,52).

2.2.- Descripción de las experiencias

Las dos experiencias que se llevaron a cabo tuvieron una duración de un mes cada una (el
cuarto mes de la cursada de la materia Programación II, que se dicta una vez por semana). En
2016 se dividió a los estudiantes del primer grupo experimental en ocho equipos que debieron
utilizar el framework LibGDX para desarrollar videojuegos cuya temática girara en torno a los
propios conceptos de la POO vistos hasta ese momento, es decir, se trataría de juegos serios.

Figura N° 1 Algunos de los videojuegos desarrollados por el primer grupo experimental

Fuente: Corsi Diego, Revuelta Domínguez Francisco Ignacio y Pedrera Rodríguez María Inmaculada, 2019, 101

Siete de los ocho equipos cumplieron con el objetivo, desarrollando videojuegos de los géneros
más diversos (Figura 1): El Escuerzo Erudito (un sapo debe cruzar una avenida y un río e
identificar una respuesta), The Java Hacker (un agente secreto debe recorrer un laberinto en 3D
y responder preguntas), Fighting Questions Club (dos luchadores dan o reciben golpes según
se respondan bien o mal las preguntas), The Road of Destiny (en una carretera llena de
obstáculos se debe ganar dinero al responder preguntas para poder seguir el viaje), El
Tumbalatas (al derribar una pila de latas aparecen las preguntas que se deben responder),
Programación Verdura (un cocinero debe atrapar verduras y hortalizas que representan
conceptos de la POO) y The Java Mania Game (un arquero debe acertar con sus flechas los
conceptos correctos ubicados en blancos móviles).
En 2017 se trabajó con el segundo grupo experimental. Durante la primera media hora de cada
una de las cuatro clases que duró la experiencia, los estudiantes formaron espontáneamente
equipos y jugaron con los siete juegos desarrollados el año anterior por el primer grupo
experimental. Al contrario de la primera experiencia, esta tuvo lugar solamente durante el
horario de clase. (PIXEL-BIT)
EDUCATIONAL SERIOUS GAMES AS A SERVICE: CHALLENGES AND
SOLUTIONS

3. Background

Constant technological advancement nowadays has caused the production and management of
high data and information. That is why different government, commercial and social
institutions have had the need to adjust their information backup and storage processes to
guarantee immediate access and availability in a safe mode. This section presents conceptual
bases for Cloud Computing, SaaS and Serious Games, which are the pillars on which the
research carried out is based.

3.1. Cloud Computing

Cloud computing can be understood as a new computing model that offers in a shared way a
series of services and high level technological resources, which are offered in a public and/or
private way, on demand and highly available and that can be accessed by the users through a
browser with internet connection.
The cloud model enunciated by NIST (National Institute of Standards and Technology)
responds to the definition of 3 service models and 4 deployment models [26, 27, 28].
In regards to service models, cloud computing offers to the users the possibility of consuming
resources on demand, through applications such as Software as a Service (SaaS) and also
Infrastructure as a Service (IaaS) where users can acquire this services model to use different
technological resources (processing, servers, storage and network) in which software could be
executed, including applications and operating systems. On the other hand, Platform as a
Service (PaaS) is the model in which the user can access the development of applications and
their services deployment in internet, of own applications as well as acquired (developed using
programming environments supported by the provider), allowing the development of
personalized software applications.
In regards to the four deployment models [29, 30, 31, 32], cloud computing offers the
possibility for customers to access computing services virtualized through Public cloud, in
which the infrastructure is to serve the public or companies in general, which are the property
of the organization that sells the services. Also, they could opt for a private cloud, which will
facilitate higher agility in regards to the organization’s resources management and flexibility
(internal administration and infrastructure are managed or controlled only by the organization
that offers this service). Other of the deployment models that could be used by the customer is
the Community cloud; it offers common services to similar customers, in which several
organizations share the computing infrastructure in the cloud, but each component keeps its
autonomy. Journal of Computer Science & Technology, Volume 19, Number 1, April 2019 -
68- Finally, the user can use the Hybrid cloud, model that offers mixed infrastructure services,
in which the computing infrastructure in the cloud is composed of two or more clouds; either
private or public which allow them to send data and applications among them. They are still
unique entities, but they are linked through standardized or patented technologies, which allow
data and applications portability.

Figure 1, (taken and adapted from the text Bazán [30]) shows how the 3 service models for
cloud computing can be integrated. IaaS is an indispensable requirement to be able to have the
other two service models. It can also be appreciated that the SaaS is available, directly
supported over the infrastructured services. This is the analysis case of this work.

Figura N° 2 Cloud computing

Fuente: Sandí Delgado Juan Carlos y Bazán Patricia Bazán, 2019, 69

This investigation considers cloud computing from the SaaS focus and its support on the IaaS
to execute educational serious games. In this context, the most important aspects considered
are collaborative work (facilitated by the access to a common repository in a synchronized
way), multi-tenant modality (resources grouped to serve multiple customers) and the elastic
supply capacity of technological resources.
3.2. Software as a service (SaaS)

SaaS is a service model that allows the customer to use the applications that are running in a
cloud infrastructure and which adapts more easily to most of the requirements of all type of
organizations, public as well as private and even educational institutions [27, 33, 34, 35].
Applications and services in SaaS can be accessed by the user from different electronic devices
through a browser with internet connection from any part of the world, with the particularity
that the user feels as if it were his own personalized software [36, 37, 38, 39, 40].
In the case of educational institutions, SaaS could be a viable alternative to solve part of the
institutional requirements, specifically referring to the ones related to software and hardware
acquisition needed for the continuous faculty training, in particular, the execution of
educational serious games [41, 42, 43, 44].

3.3. Serious game

Serious games are those games that have an explicit educational objective and that have been
thoroughly thought as a learning instrument or tool that allow the user to experiment situations
similar to real life, learn from their mistakes through immediate feedback and acquire
experience without risking his safety and physical integrity, as well as to reduce costs and time
[20, 45, 14, 10, 12].
In general, serious games have been developed with the purpose of training and change
behavior in business, industry, commercialization, health, government (military training),
NGO’s, as well as in education, to maximize attitude and behavior changes, through
collaboration among players and the exchange of innovative strategies that will maximize the
acquisition and development of new competencies and/or technological abilities that allow the
generation of significant knowledge among faculty and staff [46, 47, 48].
It is important to rescue that there is a clear difference between traditional video games oriented
only to entertaining and serious games, which go beyond a ludic objective. Serious games aside
from the entertainment have a specific purpose, which could be learning, skills acquisition,
training, attitude and behavior change [49, 50, 51].
The next section describes in detail the methodological process used in this investigation.(Sandí
Delgado and Bazán)(Sandí Delgado and Bazán)
LESSONS LEARNED APPLYING LEARNING ANALYTICS TO ASSESS SERIOUS
GAMES

3. Case study Conectado

Conectado is a graphic adventure SG to increase bullying and cyberbullying awareness for

students between 12 and 17 years old, which is considered a serious universal problem
(Kowalski, Giumetti, Schroeder, & Lattanner, 2014). The game places the player in the role of
a student suffering cyberbullying by schoolmates upon arriving in a new school. The aim of
the game is to promote empathy with the victims making players experience the feelings that
aggression victims usually experience.

Titulo No. 1Example collected xAPI-SG trace, describing a player's interaction with the in-game
computer in Conectado.
The game is designed to be played at schools with the supervision of teachers; the game is
therefore intended to be completed in 30–40 min, leaving time for a 15-min discussion with
the teacher afterward, which would fit into a standard 55-min high school lecture in Spain. The
plot of the story occurs during 5 days in which the players move from home to school and back

home, in the usual places where cyberbullying occurs (Fig. 1). Empathy and other emotions
are brought to players through mini-games presented as nightmares at the end of each day.
Dialogues with other in-game characters also raise players’ emotions, as the schoolmates
slowly turn against the main character. The player can choose among several options in
different in-game situations. Choices taken alter the story, e.g. the ending is determined by the
protagonist's relationship with classmates and parents, and by whether the character has asked
the teacher for help or not. No matter the choices taken, a satisfactory ending cannot be reached
until the end of the fifth day, so all players go through the complete game experience. Also,
physically aggressive answers are excluded from dialogues.

3.1. Experimental design

Conectado provides a linear flow with some available choices to take in-game that arrive in
one of the three possible endings. The game comprises the most common situations, scenarios
and roles involved in bullying and cyberbullying, as identified in literature (El Asam & Samara,
2016; Larrañaga, Yubero, Ovejero, & Navarro, 2016; Patchin & Hinduja, 2006). Evaluation of
the game is done with pre- and post-tests which assess the level of cyberbullying awareness.
The questionnaire used in the pre- and post-tests was adapted based on previous (cyber)
bullying measurement questionnaires (Álvarez-García, Núñez Pérez, & Dobarro González,
2013; Ortega-Ruiz, Del Rey, & Casas, 2016). Reliability of questionnaire was verified
statistically (Cronbach's Alpha = 0.95). Full questionnaire can be found (in Spanish) as an
Appendix in (Calvo Morata, 2017). The game was validated in a single group pre- and post-
test experiment (reasons for this choosing are fully explained in the experiment publication)
(Calvo Morata, 2017) with N = 257 high-school students aged between 12 and 17 years old
from three schools in Spain, in June 2017. The pre- and post-test shared 18 questions to measure
bullying and cyberbullying awareness.

3.2. GLA data

GLA data collected included: options taken in some relevant dialogues (e.g. if players have
shared their personal password or not, if they have decided to tell parents or teachers about the
situation, if they have chosen the most confronting option when meeting the aggressor),
changes in the patterns of friendship with the classmates and parents and the general risk value,
the specific ending reached (out of the 3 possible), interactions with other classmates and
parents, interactions with other game elements (e.g. mobile phone, computer, school
bathroom), times in completing each game day and the full game, and whether players have
completed the game or not. Fig. 2 depicts an example xAPI-SG trace collected for Conectado
showing that the player with name “XXXX” has interacted (xAPI-SG verb, depicted in red)
with the game object (xAPI-SG activity type, in blue) with identifier “Computer” (orange);
extensions (green) represent the day and hour in-game and that the protagonist has mobile
messages.

3.3. Results

The increase in cyberbullying awareness was measured with the pre-test and post-test, each
containing eighteen 7-point Likert items to validate the game. The average score in the pre-test
was 5.72 (SD = 1.26), compared to 6.38 (SD = 1.11) in the post-test, a statistically-significant
effect (paired Wilcoxon test yields p-value < 0.001).
In the optional questions of the post-test, out of the players who answered (73.3%), most of
them (85.9%) considered that they had learned something new about bullying or cyberbullying
while playing, and 80% of the opinions given about the game were positive. Most students
(88%) did not feel represented by any in-game character but some admitted feeling identified
with the classmates (9%) or the victim (2%).
The analysis of GLA data showed that the younger the players, the longer the time required to
complete the game (for 16 years old, mean completion time was 28 min, which increased up
to 38 min for 12 years old). Also, women took longer to finish the game than men (36 min on
average for female players, compared to 31 min for males). Regarding the three possible
endings, data shows that most players who finished arrived at the best ending (74.4%).

3.4. GLA application: lessons learned

GLA data was used at near real-time to allow teachers to monitor what students were doing
while they were playing the game (CalvoMorata, Alonso-Fernández, Freire, Martínez-Ortiz, &
FernándezManjón, 2018). This information was provided using a dashboard that comprised
several visualizations including the ones depicted in Fig. 3: gauge chart showing the average
friendship level with in-game characters (a); bar chart showing number of players that were in
each day in-game (b); and pie chart showing the players in each possible ending (c).

Results of GLA helped to identify some design problems, for instance, the first version of the
game (tested in an initial formal evaluation with N = 64 students) took too long to complete
and left no additional time for discussion with the teacher; this was amended in the second
version of the game. All the results reported correspond to this second version of the game.
Also, as data was captured at near realtime, some available visualizations allowed to have
feedback to control the intervention (e.g. check if data was being received correctly, at which
stage of the game players were at every moment). The game was validated as data proved that
all target users (despite their different age, gender, school, previous intervention conditions)
indeed increased their cyberbullying awareness with the intervention and most of them found
the game enjoyable.
This experiment has so far been deployed in 8 schools where some of the interventions where
performed by instructions with little support by the authors. Hence, this experiment leverages
the advantages of GLA to facilitate the deployment of SGs in classroom settings in a systematic
way.(Alonso-Fernández et al.)
 REFERENCIAS BIBLIOGRÁFICAS:

Alonso-Fernández, Cristina, et al. “Lessons Learned Applying Learning Analytics to Assess

Serious Games.” Computers in Human Behavior, vol. 99, no. June, Elsevier, 2019, pp. 301–
09, doi:10.1016/j.chb.2019.05.036.
PIXEL-BIT.
Sandí Delgado, Juan Carlos, and Patricia Bazán. “Educational Serious Games as a Service:
Challenges and Solutions.” Journal of Computer Science and Technology, vol. 19, no. 01,
2019, p. e07, doi:10.24215/16666038.19.e07.