Escolar Documentos
Profissional Documentos
Cultura Documentos
CENEVAL
DISEAR SISTEMAS,
INSTRUMENTOS, PROCEDIMIENTOS Y ESTRATEGIAS DE EVALUACIN
DISEAR, ELABORAR
Y APLICAR EXAMENES DE EVALUACIN
FUNCIONES DEL
CENEVAL
DESARROLLAR E IMPULSAR
ACTIVIDADES RELACIONADAS CON SU OBJETIVO
EXMENES ESPECIALES
COORDINACIONES DE EXMENES
EXANIS: I, II Y III CIENCIAS SOCIALES Y HUMANIDADES CIENCIAS DE LA VIDA Y DE LA CONDUCTA INGENIERAS Y TECNOLGICAS
EXAMEN GENERAL
PARA EL EGRESO DE LA LICENCIATURA (EGEL)
Es un instrumento diseado
exprofeso para medir y evaluar conocimientos y algunas habilidades cognitivas de los egresados del nivel de educacin superior en diferentes reas disciplinarias
Caractersticas
del EGEL
EGEL
Cuentan con una gua de examen Construidos por expertos
Caractersticas
Exmenes estandarizados
Consejo Tcnico
Comit Acadmico
Coordinacin del EGEL
Investigacin y anlisis
Genera propuestas y ejecuta acuerdos
rgano Normativo
Instancia en donde se lleva a cabo el consenso
a. los propsitos del examen b. el perfil referencial de validez c. la tabla de contenidos y especificaciones
Secuencia en la
elaboracin de los EGEL
Especificacin de la finalidad
Evaluar los resultados logrados por los estudiantes que egresan de las instituciones de educacin superior, contribuyendo al desempeo y mejoramiento acadmico de los estudiantes y sus instituciones Se tiene el propsito de determinar si los estudiantes satisfacen o no un criterio fijado previamente por el grupo de expertos que disea el instrumento
Especificacin de la finalidad
Metodologa de evaluacin
Determinacin del Perfil Referencial El Perfil Referencial de Validez (PRV) es de Validez la descripcin de la poblacin a medir, define los resultados del aprendizaje que se esperan encontrar en un individuo; es decir, delimitar cules sern las conductas especficas a determinar, y qu se pretende que un sujeto (egresado) tenga al final de un proceso de enseanza aprendizaje.
Especificacin de la finalidad
Metodologa de evaluacin
una relacin por coordenadas que liga los productos del aprendizaje que se desean, con el contenido del curso que se utiliza para provocar estas transformaciones del comportamiento.
Permite En
obtener un producto acabado con las caractersticas especficas. el uso de quien elabora las pruebas, le suministrar una mayor seguridad de que las pruebas que disee habrn de medir los productos del aprendizaje y el contenido a medir est equilibrado.
Reactivos de Ensayo o Abiertos Reactivos de Respuesta Corta o Completamiento Definir el tipo de reactivos a utilizar Reactivos de Falso-Verdadero Reactivos de Aparejamiento
Compre nsin
Conocimientos
Aplicacin
Anlisis
1) 2) 3) 4) 5) 6) 7) 8) 9) 10)
Concepto de nmero Conceptos fundamentales de aritmtica Descripciones cuantitativas Leyes de los gases Aerodinmica Teora cintica de la materia Teora del tomo Electricidad y combustin Electrosttica y magnetismo Electricidad y la naturaleza de la materia TOTAL
6 4 2 3 1 4 1 1 2 1 25
4 4 3 2 2 2 2 1 20
2 3 2 3 4 4 6 3 3 30 2 3 4 2 3 3 3 5 25
Total
10 10 10 10 10 10 10 10 10 10 100
Especificacin de la finalidad
Metodologa de evaluacin
Taxonoma de Bloom
Especificacin de la finalidad
Metodologa de evaluacin
Validacin de Contenido
Prueba Piloto
Validacin Estadstica
Banco de Reactivos
Caractersticas de un examen
Evaluacin criterial
Comprobar el rendimiento de los alumnos basado en la apreciacin del grado en que el egresado ha cubierto los objetivos de enseanza de una disciplina. Se efecta en funcin de las realizaciones de cada alumno respecto al perfil referencial de validez del egresado, determinado en funcin de los atributos que debe poseer para iniciar la prctica profesional Es la especificacin de un conjunto de conductas terminales dentro de un rea del conocimiento perfectamente definida, y un punto de corte o nivel mnimo, que refleja el dominio o no de los objetivos de aprendizaje propios de esa disciplina. Las conductas que el sustentante del examen debe manifestar, enmarcadas dentro de una rea del conocimiento perfectamente definida, constituye el criterio, es decir el punto de referencia de lo que debe saber y saber hacer...
Tipos de aprendizaje
DECLARATIVO saber qu
Hechos Conceptos Principios
Conocimiento declarativo
1. 2. 3.
HECHOS
DATOS REGLAS O PRINCIPIOS
Conocimiento procedimental
Secuencia de actos mentales o psicomotores que producen un resultado
Conocimiento actitudinales
Estado interno que influye o modifica la seleccin Individual hacia un objeto o evento
Taxonomias
HABILIDADES INTELECTUALES INFORMACIN VERBAL DESTREZAS COGNOSCITIVAS DESTREZAS MOTORAS ACTITUDES
DOMINIO COGNOSCITIVO DOMINIO AFECTIVO DOMINIO PSICOMOTOR SABER QU SABER HACER SABER SER
Taxonomia de Bloom
(dominio cognoscitivo)
NIVELES
1. CONOCIMIENTOS
(RECORDAR, INFORMAR)
VERBOS
DEFINIR IDENTIFICAR LISTAR DESCRIBIR EXPRESAR DISTINGUIR
2. COMPRENSIN
(EXPLICAR EL SIGNIFICADO DE LA INFORMACIN)
Taxonomia de Bloom
(dominio cognoscitivo)
NIVELES
3. APLICACIN
(USAR LA INFORMACIN EN SITUACIONES NUEVAS)
VERBOS
DETERMINAR PREPARAR DESARROLLAR
4. ANLISIS
(SEPARAR LA INFORMACIN EN SUS PARTES Y DISTINGUIRLA)
Taxonomia de Bloom
NIVELES
5. SNTESIS
(UNIR LAS PARTES DE LA INFORMACIN PARA FORMAR UN TODO NUEVO)
.
VERBOS
CREAR DISEAR ORGANIZAR CRITICAR COMPROBAR SELECCIONAR
6. EVALUACIN
(JUZGAR EL VALOR DE LA INFORMACIN: IDEAS, MATERIALES O FENMENOS)
.
NOTA: SE DEBEN VINCULAR LOS OBJETIVOS DEL APRENDIZAJE CON EL PERFIL DEL EGRESADO.
Conocimientos
SUPONE
EVOCACIN INFORMACIN
(RECUERDO)
DE
Conocimientos especficos de los trminos, de hechos especficos. Conocimientos relacionados con la formas y medios y secuencias, categoras, criterios, metodologa. Conocimientos universales y abstracciones: principios y generalizaciones, teoras y estructuras.
Comprensin
REPRESENTA
Aplicacin
LA
Anlisis
SUBDIVISIN
DE UNA COMUNICACIN EN SUS ELEMENTOS O PARTES CONSTITUTIVAS Elementos Relaciones Principios organizados
Sintesis
JUNTAR
LAS PARTES Y ELEMENTOS PARA CONSTRUIR UN TODO Produccin de una comunicacin nica
Produccin de un plan de accin
Evaluacin
JUICIOS
ACERCA DEL VALOR DEL MATERIAL Y DE LOS MTODOS PARA DETERMINAR PROPSITOS Emitir juicios en funcin de evidencia interna
Examenes CENEVAL
Prueba objetiva
El sustentante elige la respuesta entre dos o ms opciones. Contiene amplia variedad exigen respuesta nica. de preguntas, que
Los resultados no dependen del criterio del evaluador. Pueden medir diferentes niveles del conocimiento.
Permiten cubrir ms aspectos del conocimiento a medir.
Elaboracin de reactivos
La base principal de los reactivos de opcin mltiple, son los contenidos, as como el nivel de amplitud y profundidad (nivel taxonmico) establecido en la TABLA DE ESPECIFICACIONES correspondiente
Tabla de Especificaciones Elaboracin de reactivos RED DE ASESORES EXTERNOS Piloteo Validacin Tcnica y de contenido
Banco de reactivos
Grado de dificultad de los reactivos Discriminacin de los reactivos Ajuste (Fit analysis) Anlisis de distractores Anlisis de azar.
Estudio Piloto
Calibracin de reactivos
Integracin de reactivos aceptados al Banco General Modificacin de reactivos medianamente aceptados. Eliminacin de reactivos no aceptados.
Qu es?
Integrantes
Son seleccionados posterior a un curso taller de elaboracin de reactivos que destacan por su habilidad en los temas del examen y por su creatividad en la formulacin de reactivos.
Dinmica
Colaborarn con el responsable de cada examen al elaborar reactivos, podrn ser enviados va internet por medio de una carpeta individualizada; el sistema BRAE (Banco de Reactivos de Acceso Externo) cuenta con claves de acceso personalizadas al Sistema Integral de Informacin (intranet) que garantizan la seguridad del examen. http://brae.ceneval.edu.mx
Anlisis de Confiabilidad
Obtener la confiabilidad de cada seccin del Instrumento. Obtener el error de medida Determinar longitud del instrumento y sus partes
Preparar versiones con reactivos comunes (ancla) y reactivos diferentes con grado de dificultad similares Versiones equivalentes con la totalidad de los reactivos (a partir de la Tabla de
Especificaciones)
Para Pruebas con Norma con referencia a una poblacin o curva terica (EXANI) Para Pruebas por Norma con referencia a la poblacin que sustenta el examen (Primeros EGEL) Para Pruebas Criteriales ( EGEL actuales)
Se establece una media tcnica de 1000 en 50% de aciertos (o 0 lgitos) y una estndar de 100 en 16.67% (o 0.7 lgitos). Se establece el puntaje de 1000 en la media poblacional y la desviacin estndar poblacional define 100 puntos.. En funcin de un anlisis del dominio de conocimientos o habilidades, el Consejo Tcnico establece los valores que servirn para indicar un rendimiento satisfactorio (1000 puntos) y un alto rendimiento (1150 puntos o ms). Esto da origen a escalas que fluctan en el intervalo 700 a 1300 puntos, pero que internamente son diferentes para cada prueba.
Construccin de Escalas
A priori
Relacin discriminativa
Revisin de redaccin del reactivo
1
Obtener la discriminacin de los reactivos
<1
Aprobado
Revisado
Eliminado
0.2
El ajuste se hace por medio de aproximaciones sucesivas con ayuda de un programa de cmputo que realiza el ajuste en forma automtica.
El residuo estandarizado Los valores que se emplean para medir el ajuste al modelo son El residuo cuadrtico medio o OUTFIT El promedio ponderado de los residuos estandarizados o INFIT Valor de ajuste X 2 (Chi cuadrada)
Anlisis de Distractores
Anlisis de Azar
Integracin
Puede incluir reactivos de prueba.
1 Versin
Por medio de una prueba de hiptesis de diferencia de medias establecer si la diferencia es significativa entre dichas versiones
Preparacin de la Aplicacin
Definicin de Sedes Capacitacin de aplicadores y supervisores para la aplicacin
Entrega de materiales
Registro de los aspirantes al examen por parte de la Institucin Llenado de la Hoja de Registro del CENEVAL por parte de los aspirantes.
Entrega de Guas de Estudio del Examen Envo de las Hojas de Registro al CENEVAL
Error estndar para la media Error estndar para la mediana Anlisis de Error de Medida Error estndar de medida Error de medida de cada sujeto
Proporciones de reactivos especificadas en la Tabla de Validez Lo decide el Consejo Tcnico
Est en funcin de
Tiempo disponible para la aplicacin Error de medida deseable para dictaminar el nivel de desempeo o dominio del sustentante
De Contenido
Verificar que se cumplan las especificaciones de la Tabla de validez de Contenido Por Jueces Consistencia entre el Perfil Referencial de Validez y la Prueba Revisin lgica (Jueces) Anlisis de consistencia interna
Anlisis de Validez
De Constructo
Predictiva
Bibliografa
BROWN, Frederick. Principios de la medicin en psicologa y educacin. Mxico: Manual Moderno, 2000. CARREO, Fernando. Enfoques y principios tericos de la evaluacin. Mxico: Trillas, 1990. FERMN, Manuel. La evaluacin, los exmenes y las calificaciones. Argentina: Kapelusz, 1992. RODRGUEZ, Hctor. Evaluacin en el aula. Mxico: Trillas, 1992.
Equipo de trabajo:
Juan Pablo Arroyo Ortiz