Unidad 3

La eva 1uaci6n cuantitativa

EI desarrollo de esta unidad 10 ayudarci a comprender con c1aridad 10 evaluaci6n cuantitativo y sus funciones. Asimismo, a conocer 105 distintos instrumentos cuantitativos, su sistema de clasificaci6n y su validez y con Fiabilidad.

Los siguientes interrogantes nos serviran para introducir el tema de esta unidad y para reflexionar sobre nuestro quehacer educativo y la metodologia de evaluaci6n que estamos utilizando.

Piense en los mementos en que ha tenido que elaborar pruebas 0 examenes.

lNo sentia a veces que le era dificil eleqir que aspectos prequntar, como hacerlo y cutin pertinentes eran las preguntas? Asimismo, lse ha sentido en la disyuntiva de asiqnar un puntaje determinado a las preguntas de acuerdo con su importancia? Finalmente, lha cuestionado la validez y confiabilidad de las pruebas que elaboro?

Luego de plantear el contexto anterior, explicaremos el aspecto teorico que nos servira de base conceptual para desenvolvemos posteriormente en nuestro ambiente de trabajo de manera mas afectiva y autonoma,

3.1 l.Que es la evaluacion cuantitativa?

La evaluacion cuantitativa es el proceso que permite crear situaciones controladas para medir el real rendimiento 0 aprendizaje alcanzado por los alumnos. Un ejemplo es cuando usted elabora pruebas con preguntas que tienen una sola respuesta correcta; esto representa una situaci6n de evaluacion controlada.

Las funciones de la evaluacion cuantitativa son:

• Diagnosticar el nivel de aprendizaje de los alumnos, ayudando a establecer si estes adquirieron 0 no los conocimientos presentados en el proceso de enseftanza-aprendizaje. Un ejemplo seria cuando usted le asigna un diez (10) a un estudiante, 10 cual significa que este aun no ha alcanzado un dominio adecuado del tema.

1 45 ,

• Clasificar a los alumnos una vez concluido el proceso instructivo, identificando los diferentes niveles de rendimiento aIcanzados en el aula para establecer una jerarquia de resultados. Un ejemplo seria cuando, luego de tomar un examen, obtiene el pro medio del aula y este Ie sirve para diagnosticar en que nivel se encuentran sus alumnos, es decir, si estan debajo 0 encima del promedio.

• Facilitar la toma de decisiones para determinar rapidamente cuales son los niveles de rendimiento de los alumnos. Si este procedimiento est a bien elaborado, podra ser util en la evaluaci6n sumativa. Con el diagnostico del ejemplo anterior, usted podria intervenir en forma individual con cada alumna, segun se encuentre debajo 0 encima del promedio. Asimismo, si el promedio del aula estuviera demasiado bajo, esto podria llevarlo a reflexionar sobre la metodologia de enseftanza 0 el sistema de evaluacion que ha venido aplicando.

• Realizar estudios comparativos del rendimiento que tengan valor estadistico, cumpliendo los requisites del caso. Es decir, con los resultados obtenidos en el examen, usted podria encontrar diversos valores estadisticos, como la moda preponderante (puntuacion con mayor frecuencia) y la media (promedio antmetico).

Estas funciones de la evaluacion cuantitativa pueden sintetizarse en el siguiente grafico:

CLASIFICACION

ESTABLECER VALORES ESTAOiSTICOS

Funciones de la evaluaci6n cuantitativa

OIAGNOSTICO

lOMA DE OECISIONES

3.2 Instrumentos de la evaluaci6n cuantitativa

Luego de revisar el concepto y las funciones de la evaluacion cuantitativa, veremos la diversidad de instrumentos que pueden utilizarse dentro de este tipo de evaluaciones.

3.2.1 Sistema de clasificacien de instrumentos

Los instrumentos cuantitativos pueden clasificarse segun el tipo de prueba que constituyen. Ast, en primer lugar tenemos las pruebas objetivas, que son aquellas situaciones controladas en las que se intenta verificar el grado de aprendizaje logrado por los alumnos. Son, por ejemplo, aqueUas preguntas que prepare y que requerian de respuestas cortas, como seria completar una frase con una palabra.

I 46 I

Estan tambien las pruebas de ejecucion, que son aquellas disefiadas en base a una situacion real -0 cuando menos simulada-, en donde los alumnos ejecutan las habilidades tecnicas 0 aplican los conocimientos aprendidos. Un ejemplo seria cuando usted, en una clase de educacion fisica, les pide a sus alumnos que realicen una rutin a de atletismo durante un tiempo determinado.

Las pruebas objetivas se construyen a partir de diferentes tipos de items, entre los que podemos distinguir:

a) La seleccion simple

Consiste en un enunciado, que puede ser una pregunta 0 una oracion incompleta, y un con junto de altemativas (por 10 comun cuatro 0 cinco) para que el alum no seleccione una entre los distractores que contesten correctamente la pregunta 0 completen la oracion. Por ejemplo:

Complete el siguiente refran: .Una golondrina no hace ...• I} una bandada

2) el verano

3) una estaci6n

4) un problema

5) ninguna de las anteriores

b) La opcion verdadero/falso

Esta constituida por una afirmaci6n que el alumno debera determinar si es correcta 0 no. Ejemplo:

Coloque verdadero M 0 falso (F) segun corresponda:

1) La novela de Vargas Llosa ambientada en el colegio militar Leoncio Prado es La ciudad y los petros.

2) La Cordillera Negra atraviesa el departamento de Arequipa.

c) La correspondencia

Son preguntas confeccionadas con dos listas paralelas, una con una serie de palabras o frases de estimulo y la otra con un listado de respuestas. La tarea del estudiante consiste en marcar la correspondencia segun cada caso. Por ejemplo:

Marque la relaci6n de los autores (columna de la izquierda) can sus respectivas obras (columna de la derecha]:

1) Gabriel Garcia Marquez

2) Jorge Luis Borges

3) Alfredo Bryce Echenique

4) Ciro Alegria

5) Jose Maria Arguedas

La serpiente de oro

La vida exaqerada de Martin Romaiia La hojarasca

EI zorro de arriba y el zotro de abajo Ficciones

I 47 r

d) La respuesta corta

En estos casos se requiere que el alumna responda can una ados frases la pregunta planteada. Par ejemplo:

Nornbre cuatro representantes del Romanticismo espanol: 1)

2)

3)

4)

e) EI completamiento"

Aqui el alumno debe responder la pregunta con una ados palabras, a menudo dentro del cuerpo de la respuesta misma. Por ejemplo:

El agua esta compuesta por dos moleculas de y una de _--'- __

.fJ EI ensayo

Es una forma de pregunta de tipo reactivo que el alumno debe responder con amplitud. Estas preguntas permiten evaluar la capacidad de organizacion, integracion y ponderacion de los conocimientos. Las respuestas a las preguntas de ensayo pueden reflejar tambien las actitudes, la creatividad y la fluidez verbal de los alumnos. Un ejemplo seria:

l Que opina de la intervencion judicial de Inglaterra y Espana en el caso Pinochet?

g} Los problemas

En este tipo de preguntas se describe una situacion especifica y se propordonan algunos datos pertinentes. La tarea de los alumnos consiste en resolver el problema presentado. Por 10 cormin, esto incluye la identificacion de 10 que se pregunta, de los parametres y los datos importantes, la formulacion de una ecuacion a un procedimiento analitico y la aplicacion de esto ultimo a los datos, con el fin de obtener una solucion.

Un ejemplo seria cuando les plantea un problema de aritmetica a sus alumnos. Esta clase de preguntas tambien se presenta bajo la forma de una situacion problematica que debe solucionarse.

Por ejemplo: una persona esta de pie en una habitacion en donde dos cuerdas cuelgan del techo y hay varios objetos cercanos en una mesa (como un alicate, un yoy6. cinta adhesiva y un gancho de ropa); el sujeto debe tratar de atar ambas cuerdas, sin agarrarlas a la vez.

Para resolver este problema. se tendra que hacer un analisis de la situacion y hallar otras alternativas de solucion, como el usa de instrumentos de los que se disponga .

• N. del E.: Termine utilizado en la jerga psicologica. La palabra castellana es completion.

I 48 I

De otro lado tenemos las pruebas de ejecucion, cuyos items permiten evaluar la capacidad de un alumno. Su aplicacion exige del estudiante un mayor nivel de competencia que el requerido para responder las preguntas escritas, ya quedicha capacidad debe demostrarse mediante un desempeno real. Cuando se disefian este tipo de pruebas, se requiere tomar en cuenta que los sujetos deben saber exactamente que se espera que ellos hagan; lo cual generalmente se sefiala en el objetivo de instruccion. El resultado que se busca sirve para definir la tarea y las condiciones para ejecutarla se especifican tambien. Estas aluden a facto res tales como: tiernpo del que se dispone para realizar la tarea, uso de ayudas disponibles y otras variables que puedan afectar la ejecucion.

Por ejemplo, si usted fuese un profesor de educacion fisica, les podria pedir a sus alumnos algo asi como:

Correr 100 metros en una pista de atletismo en un maximo de 15 segundos.

Tipo de prueba Tipode item
Prueba objetiva Selecclon multiple
Opcion de verdadero/falso
Correspondencia
Respuesta corta
Completamiento
Ensayo
Problemas
Prueba de ejecuclon Ejecucion 3.2.2 La validez

Cuando se trabaja con instrumentos cuantitativos, es indispensable constatar su validez y confiabilidad para garantizar que los resultados que se alcancen sean significativos.

La validez,como fue definida en la primera seccion, representa el grade en que la prueba mide 10 que supuestamente debe medir. En el campo de la medicion educativa, se dice que existen divers os tipos de validez, cada uno adaptado a un determinado contexto; el tipo mas adecuado a los Instrumentos cuantitativos educativos es la denominada validez de contenido.

La validez de contenuio es el grado en el eual los items de la prueba constituyen una muestra representativade todo el eontenido que se va a estudiar. La estrategia basic a para

! 49 I

investigar este tipo de validez consiste en comparar de modo sistematico los items de la prueba con el universe de contenido, es decir, con el tema examinado. Por ejemplo, usted desea evaluar el dominio conseguido por sus alumnos de quinto grade en las operaciones basicas. El universe de contenido serian entonces todas las operaciones basicas posibles que correspondan a las caracteristicas del desarrollo alcanzado por el nino, es decir, numeros enteros con un maximo de cinco digitos,

Existen diversas formas de comprobar la validez de contenido, siendo las mas importantes:

a) EI analisis logico de los items y de la estructura de la prueba

Consiste en estudiar de forma logica y racionallos items, explicando por que se incluyen en el instrumento. Se suele representar en la forma de cuadros 0 tablas, para mostrar mas claramente el universo que se esta estudiando.

Por ejemplo, si desea evaluar la geografla de America del Sur, sabe de antemano =basandcse en conocimientos teoricos y revision blbliografica especializada- que esta incluye: hidrografla, cadenas montafiosas, clima, paises y capitales, entre otros. Por 10 tanto, una pregunta que diga: "Nombre un rio que desemboque en el Oceano Pacifico" posee validez porque, por analisls legico, se encuentra dentro del universo de contenido.

b) El anahsis por criterio de jueces

Implica recibir el apoyo de un con junto de personas calificadas y con am plio conocimiento sobre el tema evaluado, quienes haran las veces de jueces. Ellos evaluaran hasta que grade los items de la prueba concuerdan con los planteamientos hechos por el profesor.

Un ejemplo es cuando usted, como profesor de matematica de primer grade, les consulta a sus colegas que son especialistas en la materia antes de elaborar una prueba.

El siguiente grafico ayudara aasimilar mejor esta informacion:

AmHisis logico de los items y de estructura de la prueba

VaUdezde contenido

Analisis por criterio de jueces

La validez de contenido incluye la validez curricular. Esta trata de evaluar si la prueba es representativa del programa completo (curriculo) que se ha venido siguiendo 0 si garantiza lo~ conocimientos necesarios para iniciar determinadas actividades. Esta validez puede verse, por ejemplo, cuando el contenido de las preguntas de una prueba que se elaboro esta incluido en el programa curricular de su institution.

I 50 J

3.2.3 La confiabilidad

La confiabilidad se define como el grade de consistencia entre las medidas de un mismo hecho, objeto 0 construccion. La confiabilidad ha side estudiada respondiendo a diversos criterios, como son: la estabilidad de 10 que mide, la equivalencia 0 la especificidad de los items.

Supongamos que usted ha medido el largo de su salon y logro determinar que es de cuatro metros. Su medicion sera entonces confiable si, luego de varias mediciones hechas por otras personas, se obtiene la misma longitud que usted obtuvo.

En el caso de los instrumentos evaluativos cuantitativos que puede utilizar, la dimension que le corresponde evaluar es la de consistencia interne. Esta requiere que todos los items de una prueba, 0 de un area de la misma, apunten a medir un mismo concepto. Par ejemplo, si va a evaluar los conocimientos sabre la rebelion de Tupac Amaru, entonces todos los items de est a prueba deben dirigirse a evaluar ese levantamiento y no otro suceso.

En el grafico siguiente se muestra que, para hallar la confiabilidad de un instrumento cuantitativo, es necesaria su consistencia interna.

Confiabilidad

Consistencia interna

3.2.4 Modelo de evaluacion cuantitativa

EI modele de evaluacion cuantitativa nos ayuda a ordenar los pasos que vamos a seguir para hacer una buena medicion. Este procedimiento esta compuesto por los siguientes aspectos: detinir la competencia que se va a evaluar, definir el universe de contenido, definir la tabla de especificaciones, redactar los items, organizar el formato final de la prueba, estudiar la validez de contenido, aplicar la prueba en clase, determinar las puntuaciones y realizar un analisis cualitativo.

El caso siguiente puede explicar mejor este modele:

Usted va a realizar la evaluacion de la competencia para transformar figuras en el plano cartesiano, y para medirla piensa idear una prueba de geometria para cuarto grado. Para ello siga estos pasos:

a) Defina la competencia que va a evaluar

Usted recurrio ala estructura curricular basica y extrajo los siguientes conceptos:

Competencia: Disefta y transfonna figuras en el plano cartesiano con precision y creatividad.

Capacidad 0 subcompetencia:

1) Reproduce en cuadriculas disenos geometric os propios de su entorno cultural (telas, objetos de ceramica, etc.]

2) Crea sus propios disefios aplicando transformaciones.

i 51

b) Defina el universo de contenidos

Luego de definir la competencia y la subcompetencia, proceda a identificar los indicadores para determinar el universo de contenido, detallando los principales aspectos trabajados en el aula.

UniVfTSO de contenidos Indicadores:

1) Encuentra elementos de simetria en figuras geometricas,

2) Construye figuras geometricas considerando el eje de simetria.

3) Amplia figuras poligonales en el plano a partir de figuras dadas.

4) Reproduce figuras poligonales en el plano a partir de figuras dadas.

5) Dibuja en un papel cuadriculado diseftos geometricos de su entomo cultural.

c) Defina la tabla de especificaciones

Una vez determinado el universo de contenido, y con ayuda de la estructura de la competencia y los indicadores, proceda a construir la tabla de especificaciones.

Conocimiento de procedimientos
Indicador Razones Compilaci6n Composici6n Iransferencia
1. Encuentra elementos en
figuras geometricas 2 2
2. Construye figuras qeometricas
considerando el eje de slmetrla 2 2
3. Amplia figuras poligonales en el
plano a partir de figuras dadas 2 2
4. Reproduce figuras poligonales en
el plano a partir de figuras dadas 2 2
5. Dibuja en un papel cuadriculado
diselios geometricos de su
entorno cultural 2 2
TOTAL = 20 2 4 8 6 Los numeros representan los pesos de cada uno de los indicadores, de acuerdo con los procesos comprendidos en el conocimiento de procedimientos. Son pesos que nos ayudaran a definir el numero de preguntas incluldas en la prueba.

I 52 f

d) Redacte los items

A partir de la tabla de especificaciones, se escriben los items de la prueba en cualquiera de los formatos establecidos: opciones multiples, operon de verdadero/falso, completar frases, respuesta corta, problemas 0 de ejecucion.

Par ejemplo:

El siguiente item de respuesta corta sirve para medir el indicador 1 a un nivel de razones: «Indica can un ejemplo cudndo dos figuras qeometricas son simetricas».

Con el siguiente item de ejecuci6n se puede medir el indicador 5 a un nivel de transferenda: «En una hoja cuadriculada, dibuja (res figuras geometricas dijerentes que conozcas».

Con la tabla de especificaciones, usted podra elaborar preguntas de uno a dos puntas y combinarlas hasta sumar veinte.

e) Organice el formato final de la prueba

Una vez completada la cantidad de preguntas incluidas en la prueba, debera revisar si son totalmente independientes entre si. Es decir, si no existen relaciones entre las opciones de respuesta para dos preguntas distintas.

fj Estudie la validez de contenido

Una vez definido e1 formato final de 1a prueba, se procede a evaluar su validez de contenido. Para ello es necesario contar con un grupo de jueces 0 expertos, que en nuestro caso pueden ser otros profesores de matematica de cuarto grado, A ellos se les entregara la prueba completa y 1a tabla de especificaciones, para que determinen si los items corresponden a1 universo de contenido y a los indicadores respectivos.

Cada uno de estos profesores debera indicar si esta de acuerdo 0 no con cada item. AI final, el docente podra determinar si existe consenso entre los jueces sobre cada item. Si alguna de las preguntas fuera rechazada, se procedera a idear items alternativos hasta lograr que la prueba sea representativa del universo de contenido.

g) Aplique la prueba en c1ase

Una vez comprobada la validez de contenido de la prueba, se procede a evaluar a los alumnos de la clase aplicandola de forma simultanea.

h) Asigne puntuaciones

Como en la prueba se asignan puntuaciones de cero a veinte, no se requiere una transformaci6n para obtener el rendimiento de los alumnos; bastara con recurrir al procedimiento tradicional. Para fines comparativos, es utll transformarla a la escala porcentual (0/0).

i) Realice el analisis cualitativo

Conviene trabajar no s6lo con las puntuaciones, sino tambien, en un marco cualitativo, determinar los aspectos en los que fracaso el alumno. Para ello bastara con

I 53