Você está na página 1de 312

Informe

Tcnico
Simce
2013

Captulo 1

Informe Tcnico Simce 2013

Informe
Tcnico
Simce
2013
Captulo 1

ISBN N 978-956-9484-01-8
Agencia de Calidad de la Educacin
Informe Tcnico 2013
Morand 360, piso 9
Santiago, Chile.
Enero 2015
www.agenciaeducacion.cl
contacto@agenciaeducacion.cl

Informe Tcnico Simce 2013

Agencia de Calidad
de la Educacin

Informe
Tcnico
Simce
2013

Captulo 1

En el presente documento se utilizan de manera inclusiva trminos como el


docente, el estudiante y sus respectivos plurales (as como otras palabras
equivalentes en el contexto educativo) para referirse a hombres y mujeres.
Esta opcin se basa en una convencin idiomtica de nuestra lengua y tiene por
objetivo evitar las frmulas para aludir a ambos gneros en el idioma espaol (o/a,
los/las y otras similares), debido a que implican una saturacin grfica que puede
dificultar la comprensin de lectura.

Informe Tcnico Simce 2013

ndice

Introduccin
Antecedentes
Propsito del Informe Tcnico 2013
Organizacin del Informe Tcnico

Parte I: Diseo y Construccin de Instrumentos

xxi
xxi
xxii

Captulo 1: Diseo y construccin de pruebas Simce 2013


1.1
Antecedentes
1.2
Caractersticas generales de las pruebas Simce
1.2.1
Modelo de medicin

1.2.2 Formato de los tems y de las pruebas

1.2.3 Diseo de pruebas y formas

1.2.4 Tiempo para responder las pruebas
1.3
Caractersticas de las pruebas Simce 2013

1.3.1 Representatividad y cobertura curricular

1.3.2 Cobertura del rango de habilidades de los estudiantes

1.3.3 Comparabilidad entre aos y formas

1.3.4 Alineacin a Estndares de Aprendizaje
1.4
Diseo y construccin de pruebas Simce 2013
1.5
Marco de referencia y especificaciones tcnicas

1.5.1 Lenguaje y Comunicacin: Comprensin de Lectura
1.5.2
Matemtica
1.5.3
Ciencias Naturales
1.6
Elaboracin de tems
1.6.1
Elaboracin de tems

1.6.2
Paneles de expertos

1.6.3 Talleres de elaboracin interna de tems

1.6.4 Revisin de tems jefatura DCP
1.7
Pruebas experimentales
1.8
Anlisis pruebas experimentales

1.8.1 Correccin de preguntas abiertas
1.8.2
Anlisis cuantitativo
1.8.3
Anlisis cualitativo
1.9
Ensamblaje de pruebas definitivas

1.9.1 Caractersticas especficas pruebas regulares Simce 2013
1.9.2
Diseo de equiparacin

1.9.3 Seleccin set tems de anclaje entre aos

3
3
3
3
3
4
5
5
5
6
6
7
7
9
9
12
14
17
17
18
18
18
18
19
19
19
21
22
22
22
22


1.9.4 Seleccin tems comunes o de anclaje entre formas
1.9.5
Seleccin tems restantes

1.9.6 Distribucin de tems por forma

1.9.7 Entrega para diagramado y vistos buenos

23
23
25
25

Captulo 2: Diseo y construccin de pruebas Nuevos Desarrollos Simce

27

2.1
Antecedentes
2.2
Pruebas Simce Discapacidad Sensorial (DS) 2013
2.2.1
Antecedentes

2.2.2 Caractersticas de las pruebas DS 2013
2.2.3
Estudios realizados

2.2.4 Ensamblaje de prueba censal DS

2.2.5 Elaboracin de acomodaciones
2.2.6
Ensamblaje de pruebas

2.2.7 Acomodaciones dispuestas para la aplicacin de las pruebas Simce DS 2013

2.2.8 Anlisis cualitativos y cuantitativos
2.3
Prueba Simce Lenguaje y Comunicacin: Escritura
2.3.1
Antecedentes

2.3.2 Medicin de escritura a gran escala: habilidades evaluadas y formatos
2.3.3
Ejes de habilidad
2.3.4
Matriz de evaluacin
2.3.5
Caractersticas de la prueba
2.3.6
Elaboracin de tems

2.3.7 Criterios y pautas de evaluacin
2.4
Estudio Nacional de Educacin Fsica
2.4.1
Antecedentes
2.4.2
Caractersticas de las pruebas
2.4.3
Aplicacin de la prueba

27
27
27
28
30
32
33
33
34
35
35
35
36
37
38
39
40
41
43
43
45
47

Captulo 3: Diseo y construccin de Cuestionarios de Calidad y Contexto


de la Educacin

49

3.1
Antecedentes
3.2
Objetivos de los Cuestionarios de Calidad y Contexto
3.3
Marco de referencia
3.4
Proceso de construccin de instrumentos

3.4.1 Anlisis cuestionarios 2012 (ao anterior)

3.4.2 Elaboracin de preguntas nuevas y ajuste de preguntas para ser modificadas

3.4.3
Etapa cualitativa
3.4.4
Etapa cuantitativa
3.5
Cuestionario Estudiantes Simce Discapacidad Sensorial
3.6
Caractersticas y diseo de cuestionarios

49
49
51
55
56
56
57
57
58
59

vi

Parte II: Operaciones de campo


Captulo 4: Poblacin objetivo y diseo muestral

63

4.1
Pruebas censales Simce 2013
4.1.1
Antecedentes
4.1.2
Poblacin objetivo

4.1.3 Cobertura pruebas censales Simce 2013
4.1.4
Cobertura pruebas Simce DS
4.2
Pruebas muestrales Simce 2013
4.2.1
Antecedentes
4.2.2
Poblacin objetivo
4.2.3
Metodologa de muestreo

4.2.4 Cobertura Estudio Nacional Educacin Fsica
4.3
Pruebas experimentales 2012
4.3.1
Poblacin objetivo
4.3.2
Metodologa de muestreo

4.3.3 Cobertura pruebas experimentales Simce 2012-2013
4.4
Cuestionarios
4.4.1
Antecedentes

4.4.2
Poblacin objetivo
4.4.3
Tasas de retorno

63
63
63
65
65
65
65
65
66
67
67
67
68
70
70
70
71
71

Captulo 5: Operaciones de campo y logstica

73

5.1
Antecedentes
5.2
Empadronamiento

5.2.1 Empadronamiento Simce Discapacidad Sensorial
5.3
Impresin y mecanizado
5.3.1
Impresin
5.3.2
Mecanizado
5.4
Control de calidad de impresin y mecanizacin
5.5
Distribucin

5.5.1 Distribucin de material de capacitacin (cajas-capacitacin)

5.5.2 Distribucin de material complementario (sobres/cajas-material
complementario)

5.5.3 Distribucin de material de aplicacin (cajas-curso)

5.5.4 Distribucin inversa de material aplicado (retiro desde el centro de

operacin del aplicador y entrega en dependencias de empresas
capturadoras)
5.6
Aplicacin

5.6.1 Reclutamiento y capacitacin de supervisores y examinadores
5.6.2
Visitas previas
5.6.3
Aplicacin en aula

5.6.4 Control de Calidad de la Aplicacin
5.7
Retorno del material y captura

73
75
76
77
77
81
86
86
87
87
88
88
89
90
92
93
94
94

vii

Parte III: Procesamiento y anlisis de datos


Captulo 6: Gestin de Datos

99

6.1
Antecedentes
6.2
Definicin de criterios para el procesamiento de datos

6.2.1 Elaboracin/ajuste del Plan de gestin

6.2.2 Generacin del Diccionario de datos
6.2.3
Creacin de base de datos

6.2.4 Ajustes de los procesos informticos

6.2.5 Actualizacin Sistema de Validacin de Datos (SVD)

6.2.6 Recepcin de informacin de la aplicacin
6.2.7
Pruebas de carga
6.3
Captura
6.3.1
Almacenamiento de material
6.3.2
Preparacin
6.3.3
Digitalizacin
6.3.4
Captura
6.3.5
Digitacin

6.3.6 Administracin de los documentos
6.4
Validacin y correccin de datos

6.4.1 Carga y completitud de datos

6.4.2 Validacin y correccin de datos

6.4.3 Consolidacin y cuadratura de la base de datos validada

6.4.4 Control de Calidad Captura
6.5
Generacin de bases de datos para entrega de resultados

99
99
99
99
100
101
101
101
101
102
102
102
102
102
102
103
103
103
104
106
107
107

Captulo 7: Correccin de Preguntas Abiertas

109

7.1
Antecedentes
7.2
Correccin de pruebas de Comprensin de Lectura, Matemtica y
Ciencias Naturales

7.2.1 Correccin preguntas abiertas pruebas experimentales ciclo 2013

7.2.2 Correccin preguntas abiertas pruebas definitivas Simce 2013
7.3
Correccin de la prueba de Escritura
7.3.1
Proceso de correccin

109

Captulo 8: Anlisis psicomtrico de las pruebas Simce

121

8.1
Antecedentes
8.2
Anlisis psicomtrico pruebas Simce 2013
8.2.1
Revisin de supuestos
8.2.2
Anlisis clsico
8.2.3
Anlisis TRI

8.2.4 Clasificacin de estudiantes segn Estndares de Aprendizaje
8.2.5
Clculo de ndice RP67

8.2.6 Anlisis de Funcionamiento Diferencial de los tems (DIF)

121
121
121
122
123
125
126
127

viii

109
110
113
115
116

8.3
Anlisis psicomtricos pruebas nuevos desarrollos Simce
8.3.1
Prueba Simce DS

8.3.2 Prueba Simce Lenguaje y Comunicacin: Escritura

8.3.3 Estudio Nacional de Educacin Fsica
8.4
Anlisis psicomtrico pruebas experimentales Simce 2013
8.5
Controles de calidad

127
127
129
130
133
134

Captulo 9: Anlisis de datos agregados y tendencias

135

9.1




9.2

135
135
135
136
137
138

Anlisis de datos agregados


9.1.1 Objetivo de anlisis de datos agregados
9.1.2 Clasificacin socioeconmica de establecimientos
9.1.3 Anlisis de datos agregados: pruebas regulares Simce
9.1.4 Anlisis de datos agregados: pruebas de desarrollos Simce
Anlisis de tendencias y brechas

Captulo 10: Anlisis de los Cuestionarios de Calidad y


Contexto de la Educacin
143
10.1
Antecedentes
10.2 Anlisis de datos para la construccin de los Otros Indicadores

de Calidad y factores asociados a resultados de aprendizaje

10.2.1 Actualizacin de la matriz de variables

10.2.2 Anlisis general de la base de datos

10.2.3 Ajuste de la base de datos
10.2.4
Estadsticos descriptivos

10.2.5 Confiabilidad de ndices y escalas
10.2.6
Validez de ndices

10.2.7 Construccin y anlisis de los Otros Indicadores de Calidad
10.3 Anlisis de factores asociados a resultados de aprendizaje

143
143
143
144
145
145
145
145
146
147

Parte IV: Comunicacin de Resultados


Captulo 11: Comunicacin de resultados Simce 2013

151

11.1 Propsitos de la comunicacin de los resultados de aprendizaje


11.2 Publicaciones Simce 2013
11.2.1
Orientaciones
11.2.2
Modelos de prueba
11.2.3
Informes de Resultados
11.2.4
Resmenes Ejecutivos

11.2.5
Bases de datos
11.2.6
Casos irregulares

151
152
152
152
153
155
156
156

Listado de Referencias

159

ix

Anexos

163

Anexo A
Anexo B

Anexo C
Anexo D
Anexo E
Anexo F
Anexo G
Anexo H
Anexo I
Anexo J
Anexo K

165

Ejemplo de rbrica de correccin de preguntas abiertas


Rbricas utilizadas para la correccin de preguntas abiertas de la
prueba Escritura 2013
Curvas de informacin y caractersticas de prueba Simce DS 2013
Cobertura de pruebas Simce 2013
Indicadores de calidad aplicacin 2013
Roles y responsabilidades del personal involucrado en aplicacin Simce 2013
Estadsticos pruebas Simce 2013
Resultados de anlisis factorial exploratorio Simce 2013
Parmetros y curvas caractersticas y de informacin de las pruebas Simce 2013
ndices de confiabilidad y Anlisis Factoriales exploratorios de Cuestionarios
Lista de software mencionados en el informe como parte de las herramientas
utilizadas en proceso 2013

169
181
185
193
215
219
221
241
283
285

Listado de Tablas
1.1
Cronograma de construccin de pruebas regulares Simce 2013
1.2
Eje de habilidades en la prueba Lenguaje y Comunicacin: Comprensin de Lectura
1.3
Tipos de textos utilizados en la prueba Simce Lenguaje y Comunicacin: Comprensin
de Lectura 2013
1.4
Matriz de evaluacin terica para la prueba Simce Lenguaje y Comunicacin:
Comprensin de Lectura 2013
1.5
Matriz de evaluacin terica para seleccin de textos en la prueba Simce Lenguaje

y Comunicacin: Comprensin de Lectura 2013
1.6
Dominios cognitivos prueba Simce Matemtica 2013
1.7
Eje de contenidos pruebas Simce Matemtica 2013: 4 bsico y 6 bsico
1.8
Eje de contenidos pruebas Simce Matemtica 2013: 8 bsico y II medio
1.9
Matriz de evaluacin segn ejes de contenido para pruebas Simce Matemtica 2013
1.10 Matriz de evaluacin segn dominios cognitivos para pruebas Simce Matemtica 2013
1.11 Dominios cognitivos prueba Simce Ciencias Naturales 2013
1.12 Eje de contenidos prueba Simce Ciencias Naturales 2013 4 bsico
1.13 Eje de contenidos pruebas regulares Simce Ciencias Naturales 2013: 8 bsico
1.14 Matriz de evaluacin terica segn eje de contenido para pruebas regulares

Simce Ciencias Naturales 2013, 4 bsico
1.15 Matriz de evaluacin terica segn eje de contenido para pruebas Simce
Ciencias Naturales 2013, 8 bsico
1.16 Matriz de evaluacin terica segn dominios cognitivos para pruebas Simce
Ciencias Naturales 2013
1.17 Nmero de tems experimentados y aprobados pruebas experimentales Simce 2012
1.18 Caractersticas del set de tems de anclaje entre aos
1.19 Seleccin de tems de pruebas definitivas Lenguaje y Comunicacin:
Comprensin de Lectura 201
1.20 Seleccin de tems pruebas definitivas Matemtica 2013
1.21 Seleccin de tems pruebas definitivas Ciencias Naturales 2013
1.22 Caractersticas del posicionamiento de los tems en cada forma
1.23 Caractersticas generales de las pruebas definitivas Simce 2013

8
10

2.1
Formas prueba Simce DS 2013
2.2
Propsitos comunicativos evaluados en la prueba Escritura 2013
2.3
Matriz terica por habilidad, prueba Escritura 6 bsico
2.4
Matriz terica por propsito textual, prueba Escritura 6 bsico
2.5
Matriz terica de ponderacin para la prueba Escritura 6 bsico
2.6
Diseo de bloques para el ensamblaje de cuadernillos, prueba censal
Escritura 6 bsico
2.7
Tiempos estimados en la aplicacin del Estudio Nacional de Educacin Fsica
por grupo curso

34
37
38
38
38

3.1

3.2

3.3

Dimensiones del Marco de Referencia incluidas en Cuestionarios de Calidad y


Contexto 2013 segn nivel de anlisis
Indicadores y dimensiones de Otros Indicadores de Calidad Educativa en los
Cuestionarios de Calidad y Contexto 2013
Formatos de Cuestionarios de Calidad y Contexto 2013

11
11
11
12
12
13
14
14
14
15
15
16
17
17
21
23
24
24
24
25
26

39
47

53
55
60

xi

4.1
Establecimientos evaluados por Simce 2013
4.2
Establecimientos evaluados Simce DS 2013
4.3
Aplicacin censal Simce 2013
4.4
Muestra terica Estudio Nacional de Educacin Fsica 2013
4.5
Cobertura prueba muestral Estudio Nacional de Educacin Fsica 2013
4.6
Resumen pruebas experimentales 2012
4.7
Criterios para rendimiento Simce 2 bsico
4.8
Criterios para rendimiento Simce 4 bsico
4.9
Criterios para rendimiento Simce 6 bsico
4.10 Criterios para rendimiento Simce 8 bsico
4.11 Criterios para rendimiento Simce II medio
4.12 Tasa de retorno 2013 de los Cuestionarios de Calidad y Contexto de la Educacin

63
64
65
66
67
67
68
69
69
69
69
71

5.1
Fechas de aplicacin Simce 2013
5.2
Resumen de tipos de pruebas segn los grados en los que se aplicaron el 2013
5.3
Resumen de los Cuestionarios de Calidad y Contexto de la Educacin,
segn los grados de aplicacin
5.4
Resumen del tipo de material complementario, segn grado de aplicacin y
tipo de prueba
5.5
Cronograma del proceso de distribucin de materiales 2013
5.6
Fechas de entrega del material a captura

73
77

6.1
6.2
6.3
6.4

Variables de identificacin para cada grado educativo


Variables de participacin de estudiantes
Detalle de los datos capturados en la aplicacin 2013
Validaciones de los Cuestionarios de Calidad y Contexto de la Educacin, 2013

7.1
Consistencia de inter-correctores y del corrector-supervisor Agencia.

Correccin preguntas abiertas pruebas experimentales Simce 2013
7.2
Consistencia inter-correctores y corrector-supervisor Agencia.

Correccin preguntas abiertas pruebas definitivas Simce 2013
7.3
Total de respuestas doble corregidas, prueba Escritura censal 2013
7.4
Consistencia inter-correctores. Correccin preguntas abiertas
prueba Escritura 2013

78
79
89
95
100
101
103
105

112
114
115
119

8.1
8.2
8.3
8.4
8.5
8.6
8.7
8.8
8.9

Estndares de Aprendizaje 2 bsico


Estndares de Aprendizaje 4 bsico
Estndares de Aprendizaje 8 bsico
Puntajes de corte para prueba de abdominales cortos
Puntajes de corte para prueba de salto largo a pies juntos
Puntajes de corte para prueba de flexo-extensin de codos
Puntajes de corte para prueba de flexin de tronco adelante
Puntajes de corte para Test de Cafra
Puntajes de corte para Test de Navette

126
126
126
131
131
131
132
132
132

9.1
9.2

Agrupacin de los anlisis agregados


Clasificacin de establecimientos por tamao

137
139

xii

10.1
10.2

Otros Indicadores de Calidad Educativa presentados en resultados Simce 2013


Factores asociados presentados en resultados Simce 2013

147
148

11.1
Orientaciones Simce 2013
11.2 Cuadernillos de preguntas, modelos de pruebas y manuales del profesor Simce 2013
11.3 Informes de Resultados Docentes y Directivos Simce 2013
11.4 Informes de Resultados Padres y Apoderados Simce 2013
11.5 Marcas en Informe de Resultados Simce 2013

152
153
154
155
157

A.1

Ejemplos de pautas de correccin

166

B.1
Pauta de correccin para textos escritos con el propsito de compartir
impresiones sobre lecturas
B.2
Pauta de correccin para textos escritos con el propsito de narrar
B.3
Pauta de correccin para textos escritos con el propsito de informar con infografa
B.4
Pauta de correccin para textos escritos con el propsito de informar

169
172
175
178

D.1
D.2
D.3
D.4
D.5
D.6
D.7
D.8
D.9
D.10
D.11
D.12
D.13
D.14
D.15
D.16
D.17

Cobertura nacional 2 bsico 2013


Cobertura regional 2 bsico 2013
Distribucin de alumnos y establecimientos por regin
Cobertura nacional 4 bsico 2013
Cobertura regional 4 bsico 2013
Distribucin de alumnos y establecimientos por regin
Cobertura nacional 6 bsico 2013
Cobertura regional 6 bsico 2013
Distribucin de alumnos y establecimientos por regin
Porcentaje de asistencia y cobertura Prueba Simce DS 2013
Cobertura nacional 8 bsico 2013
Cobertura regional 8 bsico 2013
Distribucin de alumnos y establecimientos por regin
Cobertura nacional Estudio Nacional de Educacin Fsica 2013
Cobertura nacional II medio 2013
Cobertura regional II medio 2013
Distribucin de alumnos y establecimientos por regin

185
185
186
186
186
187
187
188
188
188
189
189
189
190
190
190
190

E.1
IDC final de seleccin

195

E.2

Pauta multidimensional del proceso de entrenamiento

197

E.3
Ponderacin de dimensiones

197

E.4

Capacitaciones: ponderacin de dimensiones

198

E.5

Proceso de formacin del equipo

198

E.6

Ponderadores por grados Simce 2013

198

E.7
Ponderadores Genricos
E.8
Ponderaciones e IDC subprocesos en la formacin de equipos y en la aplicacin
E.9
Ponderaciones e IDC de aprobacin en TSES-61 y PSE
E.10 IDC obtenido para la aplicacin 2013
E.11 IDC general del proceso de seleccin y capacitacin
E.12
Resultados por cada subproceso

199
199
200
200
200
201

xiii

E.13 Clculo final de la aplicacin 2013


E.14
Resultados generales por aplicador
E.15 Resultados aplicacin 4 bsico nivel nacional
E.16 Hora promedio en que examinador recibe los materiales
E.17 Distribucin hora en que examinador recibe los materiales de 4 bsico
E.18 Hora promedio de inicio de la prueba 4 bsico
E.19 Distribucin hora inicio prueba 4 bsico
E.20 Duracin promedio de aplicacin de la prueba, 4 bsico
E.21 Distribucin duracin mdulo 4 bsico
E.22 Resultados 6 bsico nivel nacional
E.23 Hora promedio en que examinador recibe los materiales
E.24 Distribucin hora en que examinador recibe los materiales 6 bsico
E.25 Hora promedio de inicio de la prueba 6 bsico
E.26 Distribucin hora inicio prueba 6 bsico
E.27 Distribucin promedio de la aplicacin 6 bsico
E.28 Distribucin duracin promedio aplicacin 6 bsico
E.29 Resultados del IDC 2 bsico nivel nacional
E.30 Hora promedio en que examinador recibe los materiales
E.31 Distribucin hora en que examinador recibe los materiales 2 bsico
E.32 Hora promedio de inicio prueba 2 bsico
E.33 Distribucin hora inicio prueba 2 bsico
E.34 Duracin promedio de la aplicacin por mdulo 2 bsico
E.35 Distribucin de la duracin promedio de la aplicacin de la prueba 2 bsico
E.36 Resultados IDC para II medio nivel nacional
E.37 Hora promedio en que examinador recibe materiales
E.38 Distribucin hora en que examinador recibe los materiales II medio
E.39 Hora promedio de inicio de la prueba II medio
E.40 Distribucin hora inicio prueba II medio
E.41 Duracin promedio aplicacin II medio
E.42 Distribucin duracin prueba II medio

201
201
202
203
203
204
204
204
205
205
206
206
207
207
207
208
208
209
209
210
210
211
211
212
212
213
213
214
214
214

G.1
Estadsticos pruebas censales 2013
G.2
Confiabilidades por forma

219
219

H.1
H.2
H.3
H.4
H.5
H.6
H.7
H.8
H.9
H.10
H.11
H.12
H.13

235
236
236
236
236
236
236
237
237
237
237
237
237

xiv

ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma A


ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma B
ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma C
ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma D
ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma G
ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma H
ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma I
ndices de ajuste, 4 bsico, Matemtica, Forma C
ndices de ajuste, 4 bsico, Matemtica, Forma D
ndices de ajuste, 4 bsico, Matemtica, Forma E
ndices de ajuste, 4 bsico, Ciencias Naturales, Forma A
ndices de ajuste, 4 bsico, Ciencias Naturales, Forma B
ndices de ajuste, 6 bsico, Lectura, Forma O

H.14
H.15
H.16
H.17
H.18
H.19
H.20
H.21
H.22
H.23
H.24
H.25
H.26
H.27
H.28
H.29

ndices de ajuste, 6 bsico, Lectura, Forma P


ndices de ajuste, 6 bsico, Lectura, Forma S
ndices de ajuste, 6 bsico, Matemtica, Forma A
ndices de ajuste, 6 bsico, Matemtica, Forma B
ndices de ajuste, 6 bsico, Matemtica, Forma C
ndices de ajuste, 8 bsico, Lectura, Forma E
ndices de ajuste, 8 bsico, Lectura, Forma G
ndices de ajuste, 8 bsico, Matemtica, Forma C
ndices de ajuste, 8 bsico, Matemtica, Forma D
ndices de ajuste, 8 bsico, Ciencias, Forma A
ndices de ajuste, 8 bsico, Ciencias, Forma B
ndices de ajuste, II medio, Lectura, Forma C
ndices de ajuste, II medio, Lectura, Forma D
ndices de ajuste, II medio, Lectura, Forma E
ndices de ajuste, II medio, Matemtica, Forma A
ndices de ajuste, II medio, Matemtica, Forma B

I.1
Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin:

Comprensin de Lectura 2 bsico 2012
I.2
Parmetros preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura 2 bsico 2013
I.3
tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 2 bsico 2013
I.4
Descripciones de campos correspondientes a tablas I.1, I.2 e I.3
I.5
Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin:

Comprensin de Lectura 4 bsico Simce 2013
I.6
Parmetros preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura 4 bsico Simce 2013
I.7
tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 4 bsico
Simce 2013
I.8
Descripciones de campos correspondientes a tablas I.5 a I.7
I.9
Parmetros preguntas seleccin mltiple, Matemtica, 4 bsico Simce 2013
I.10
Parmetros preguntas abiertas, Matemtica 4 bsico Simce 2013
I.11
tems eliminados, Matemtica 4 bsico Simce 2013
I.12
Descripciones de campos correspondientes a tablas I.9 a I.11
I.13
Parmetros preguntas seleccin mltiple, Ciencias Naturales 4 bsico 2013
I.14
Parmetros preguntas abiertas, Ciencias Naturales, 4 bsico 2013
I.15
tems eliminados Ciencias Naturales, 4 bsico 2013
I.16
Descripciones de campos correspondientes a tablas I.13 a I.15
I.17
Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin:

Comprensin de Lectura 6 bsico 2013
I.18
Parmetros preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura 6 bsico 2013
I.19
tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 6 bsico 2013
I.20
Descripciones de campos correspondientes a tablas I.7 a I.19
I.21
Parmetros preguntas seleccin mltiple, Matemtica 6 bsico 2013
I.22
Parmetros preguntas cerradas, Matemtica 6 bsico 2013
I.23
Parmetros preguntas eliminadas, Matemtica 6 bsico 2013
I.24
Descripciones de campos correspondientes a tablas I.21 a I.23

238
238
238
238
238
238
239
239
239
239
239
239
240
240
240
240

241
242
242
242
244
246
246
246
248
250
250
250
252
253
253
253
255
256
256
257
259
260
261
261

xv

I.25
Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin:

Comprensin de Lectura, 8 bsico 2013
I.26
Parmetros preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura, 8 bsico 2013
I.27
tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura, 8 bsico 2013
I.28
Descripciones de campos correspondientes a las tablas I.25 al I.27
I.29
Parmetros preguntas seleccin mltiple, Matemtica 8 bsico 2013
I.30
Parmetros preguntas abiertas, Matemtica 8 bsico 2013
I.31
tems eliminados, Matemtica 8 bsico 2013
I.32
Descripciones de campos correspondientes a las Tablas I.29 a I.31
I.33
Parmetros preguntas seleccin mltiple, Ciencias Naturales, 8 bsico 2013
I.34
Parmetros preguntas abiertas, Ciencias Naturales, 8 bsico 2013
I.35
tems eliminados prueba Ciencias Naturales 8 bsico 2013
I.36
Descripciones de campos correspondientes a Tablas I.33 a I.35
I.37
Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.38
Parmetros preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura II medio 2013
I.39
tems eliminados preguntas cerradas, Lenguaje y Comunicacin:

Comprensin de Lectura II medio 2013
I.40
tems eliminados preguntas abiertas, Lenguaje y Comunicacin:

Comprensin de Lectura II medio 2013
I.41
Descripciones de campos correspondientes a Tablas I.37 a I.40
I.42
Parmetros preguntas de seleccin mltiple, Matemtica II medio 2013
I.43
Parmetros preguntas abiertas, Matemtica II medio 2013
I.44
tems eliminados, Matemtica II medio 2013
I.45
Descripciones de campos correspondientes a Tablas I.42 a I.44
J.1

xvi

ndices de confiabilidad y Anlisis Factoriales exploratorios de Cuestionarios

263
264
264
265
267
268
268
269
271
272
272
272
274
276
276
276
277
279
280
281
281
283

Listado de Figuras
1.1
Flujo construccin de pruebas regulares Simce
1.2
Curva caracterstica del tem

8
20

5.1
Esquema que muestra las etapas de las operaciones de campo regulares al
proceso de aplicacin Simce
5.2
Flujo de distribucin de la prueba Simce 2013

75
87

6.1

Flujo proceso gestin de datos

99

7.1
Flujo de trabajo correccin de preguntas abiertas ciclo pruebas regulares
Simce 2013
7.2
Visin general del proceso de correccin
7.3
Diagrama de las labores diarias de correccin

110
116
117

8.1
Curva emprica del tem

128

9.1
9.2

Evolucin Puntajes Promedio 4 Bsico 2005-2013 en Matemtica


Tendencia grupo socioeconmico Matemtica 8 bsico 2004-2013

140
141

A.1
tem

165

C.1


C.2


C.3

C.4

Curvas caractersticas Prueba Simce 6 bsico Discapacidad Visual Total (DVT),


Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Lenguaje y
Comunicacin: Comprensin de Lectura 2013
Curvas de Informacin Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Lenguaje y
Comunicacin: Comprensin de Lectura 2013
Curvas caractersticas Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Matemtica 2013
Curvas de informacin Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Matemtica 2013

E.1

Evolucin general de la capacitacin

196

H.1
H.2
H.3
H.4
H.5
H.6
H.7
H.8
H.9
H.10
H.11
H.12

Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma A


Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma B
Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma C
Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma D
Scree Plot 4 bsico, Ciencias, Forma A
Scree Plot 4 bsico, Ciencias, Forma B
Scree Plot 4 bsico, Matemtica, Forma C
Scree Plot 4 bsico, Matemtica, Forma D
Scree Plot 4 bsico, Matemtica, Forma E
Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma G
Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma H
Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma I

221
221
222
222
223
223
224
224
225
225
226
226

181
182
182
183

xvii

H.13
H.14
H.15
H.16
H.17
H.18
H.19
H.20
H.21
H.22
H.23
H.24
H.25
H.26
H.27
H.28
H.29

Scree Plot 6 bsico, Matemtica, Forma A


Scree Plot 6 bsico, Matemtica, Forma B
Scree Plot 6 bsico, Matemtica, Forma C
Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma O
Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma P
Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma S
Scree Plot 8 bsico, Ciencias, Forma A
Scree Plot 8 bsico, Ciencias, Forma B
Scree Plot 8 bsico, Matemtica, Forma C
Scree Plot 8. bsico, Matemtica, Forma D
Scree Plot 8 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma E
Scree Plot 8 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma G
Scree Plot II medio, Matemtica, Forma A
Scree Plot II medio, Matemtica, Forma B
Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma C
Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma D
Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma E

I.1
Curva caracterstica de la prueba, 2 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.2
Curva de informacin de la prueba, 2 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.3
Curva caracterstica de la prueba, 4 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura Simce 2013
I.4
Curva de informacin de la prueba, 4 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.5
Curva caracterstica de la prueba, 4 bsico, Matemtica 2013
I.6
Curva de informacin de la prueba, 4 bsico, Matemtica 2013
I.7
Curva caracterstica de la prueba, 4 bsico, Ciencias Naturales 2013
I.8
Curva de informacin de la prueba, 4 bsico, Ciencias Naturales 2013
I.9
Curva caracterstica de la prueba, 6 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.10
Curva de informacin de la prueba, 6 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.11
Curva caracterstica de la prueba, 6 bsico, Matemtica 2013
I.12
Curva de informacin de la prueba, 6 bsico, Matemtica 2013
I.13
Curva caracterstica de la prueba, 8 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.14
Curva de informacin de la prueba 8 bsico, Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.15
Curva caracterstica de la prueba, 8 bsico, Matemtica 2013
I.16
Curva de informacin de la prueba, 8 bsico, Matemtica 2013
I.17
Curva caracterstica de la prueba 8 bsico, Ciencias Naturales 2013
I.18
Curva de informacin de la prueba, 8 bsico, Ciencias Naturales 2013
I.19
Curva caracterstica de la prueba II medio Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.20
Curva de informacin de la prueba II medio Lenguaje y Comunicacin:
Comprensin de Lectura 2013
I.21
Curva caracterstica de la prueba II medio Matemtica 2013
I.22
Curva de informacin de la prueba II medio Matemtica 2013
xviii

227
227
228
228
229
229
230
230
231
231
232
232
233
233
234
234
235

243
244
247
248
251
251
254
255
258
258
262
262
266
266
270
270
273
274
278
278
282
282

22

Informe Tcnico Simce 2013

Introduccin

Antecedentes
El Sistema de Medicin de Logros de Aprendizaje, Simce, administra y aplica pruebas anuales
estandarizadas a los estudiantes chilenos, con el objetivo de contribuir al mejoramiento de la calidad
y equidad de la educacin, informando sobre los logros de aprendizaje en diferentes reas del currculo
nacional, y relacionndolos con el contexto escolar y social en el que los estudiantes aprenden. Simce ha
implementando estas evaluaciones por cerca de 25 aos.
Simce est desde el ao 2012 bajo la administracin de la Agencia de Calidad de la Educacin1. La Agencia,
institucin pblica y dotada de personalidad jurdica, tiene como objetivos la evaluacin y orientacin
del sistema educativo de Chile, y los lleva a cabo trabajando en conjunto con cada parte del Sistema de
Aseguramiento de la Calidad (SAC) para lograr una mayor equidad y mejor calidad en la educacin.
El SAC establece que la Agencia debe disear, implementar y aplicar un sistema de medicin de los
resultados de aprendizaje de los estudiantes, en funcin del grado de cumplimiento de los Estndares de
Aprendizaje, referidos a los objetivos generales sealados en la ley y sus respectivas Bases Curriculares.
Asimismo, se establece que deber evaluar el grado de cumplimiento de los Otros Indicadores de Calidad
Educativa. La ley estipula que las mediciones del cumplimiento de los Estndares de Aprendizaje deben
aplicarse de forma peridica y censal, segn el plan de evaluaciones aprobado por el Consejo Nacional
de Educacin.
La medicin de logros de aprendizaje, en conjunto con la medicin de los Otros Indicadores de Calidad
Educativa (OIC) son obligatorias para todos los establecimientos educacionales reconocidos oficialmente
por el Estado. Los OIC evalan el logro de los objetivos generales de la educacin escolar en el mbito
personal y social, lo cual complementa los resultados de las pruebas Simce, ampliando de este modo
la concepcin de calidad educativa al incluir factores que van ms all del mbito acadmico. De esta
manera, se orienta a las escuelas a desarrollar aspectos no acadmicos en sus estudiantes, tales como
la autoestima acadmica y la motivacin escolar, el clima de convivencia, la participacin y formacin
ciudadana, hbitos de vida saludable, asistencia y retencin escolar, equidad de gnero y titulacin
tcnico-profesional.
Con la entrega de informacin a los establecimientos educacionales sobre sus resultados en los logros de
aprendizaje y los OIC, se pretende que estos puedan reflexionar e identificar desafos y fortalezas con el
fin de elaborar o ajustar sus planes de mejora educativa.

Propsito del Informe Tcnico 2013


La Agencia de Calidad de la Educacin nuevamente fija como objetivo estratgico documentar sus procesos
internos, de manera de poder comunicar sus contenidos y transparentar sus procedimientos y entregar de
este modo informacin que pueda ser til para investigadores y otros actores del mbito educativo.
El objetivo especfico del presente informe es entregar la informacin tcnica relativa a la construccin,
aplicacin y anlisis de las pruebas Simce, siguiendo los estndares para las pruebas educacionales y
psicolgicas AERA, APA, NCME (1999). Describe detalladamente los procedimientos involucrados en
cada ciclo evaluativo, desde el diseo y construccin de instrumentos, la aplicacin de las mediciones,
la recoleccin de datos, al anlisis de estos y la entrega de los resultados, lo que permite realizar
1 Especficamente, la elaboracin y aplicacin de las pruebas estn bajo la responsabilidad de la Divisin de Evaluacin de Logros de Aprendizaje, y
la elaboracin de los Cuestionarios de Contexto y Calidad de la Educacin est bajo la responsabilidad de la Divisin de Estudios.

xxi

interpretaciones vlidas sobre sus resultados. Esta informacin facilita, adems, que los investigadores
puedan llegar a conclusiones basadas en evidencia y puedan informar sobre los alcances de la medicin
y/o sugerir mejoras.
Los resultados de las pruebas Simce no se incluyen en este documento. Para conocer los resultados
de las pruebas y de los Otros Indicadores de Calidad Educativa, se puede consultar la pgina web de
la Agencia2.

Organizacin del Informe Tcnico


El informe consta de once captulos distribuidos en cuatro partes que se organizan segn la secuencia de
los procesos de elaboracin de las pruebas Simce.
La primera parte se refiere al proceso de construccin de los instrumentos aplicados. En el captulo 1
se presentan detalles de cmo se disean y construyen los instrumentos, sus marcos de referencia y el
desarrollo de sus especificaciones. Tambin se mencionan los mtodos para la elaboracin de los tems y el
ensamblaje de las pruebas, tanto experimentales como definitivas.
En el captulo 2 de la primera parte se abordan los procesos de construccin y diseo de las pruebas de
nuevos desarrollos, que corresponden a pruebas incorporadas recientemente al sistema de evaluacin.
Dentro de estas pruebas se incluyen las mediciones para estudiantes con discapacidad sensorial, la
prueba de Lenguaje y Comunicacin: Escritura y el Estudio Nacional de Educacin Fsica.
Los procedimientos para la construccin de los Cuestionarios de Calidad y Contexto de la Educacin son
descritos en el captulo 3, donde se entrega informacin acerca de la construccin del marco conceptual
en que se basan los cuestionarios y las caractersticas de diseo y formato que poseen.
La segunda parte de este informe comienza describiendo la composicin de la cohorte medida en el caso
de las pruebas censales y la muestra para las pruebas experimentales. En el captulo 4 se detallan las
tasas de participacin que se obtuvieron.
El captulo 5 contempla los procesos de aplicacin relativos a las operaciones de campo. Especficamente,
se abordan desde el empadronamiento de estudiantes hasta la administracin de la prueba. Se incluyen
los procesos de recuperacin del material aplicado y de captura de datos.
En la tercera parte del informe se describe el procesamiento y anlisis de los datos. Primero se da cuenta
de la gestin de los datos recolectados, considerando tanto la validacin como los sucesivos chequeos
realizados. El captulo 7 describe los procedimientos utilizados para la correccin de preguntas abiertas.
Luego, en los captulos 8 y 9 se profundiza sobre los anlisis estadsticos que se realizan para todos los
tipos de pruebas, incluyendo la descripcin de los anlisis de los datos agregados y de tendencias. Por
ltimo, el captulo 10 describe los anlisis de los cuestionarios.
Finalmente, la cuarta parte contiene informacin acerca de comunicacin y difusin de los resultados
Simce 2013.
Los anexos de la A a la K entregan informacin detallada de los temas tratados en el Informe Tcnico
Simce 2013.

2 www.agenciaeducacion.cl

xxii

Informe Tcnico Simce 2013

I
Captulo 1

Diseo y
Construccin de
Instrumentos
1

Captulo 1:
Diseo y construccin
de Pruebas Simce 2013

1.1 Antecedentes
Las pruebas Simce tienen como principal propsito evaluar el aprendizaje de los estudiantes en
diferentes asignaturas y grados en los contenidos y habilidades del currculo nacional, con el objetivo
de contribuir al proceso de mejoramiento de la calidad y equidad de la educacin (Agencia de Calidad
de la Educacin, 2012).
Los resultados Simce informan sobre los puntajes promedio a nivel de establecimiento y la distribucin
de estudiantes en cada nivel de los Estndares de Aprendizaje. Esta informacin se pone a disposicin
de los establecimientos con el objetivo de que estos analicen y reflexionen sobre los aprendizajes
alcanzados por sus estudiantes, identificando desafos y fortalezas, contribuyendo al proceso de mejora
de la educacin que imparten.
El presente captulo contiene informacin relevante respecto de las caractersticas de las pruebas Simce
de Comprensin de Lectura, Matemtica y Ciencias Naturales aplicadas en el ao 2013 a los grados 2,
4, 6, 8 bsico y II medio.

1.2 Caractersticas generales de las pruebas Simce


1.2.1 Modelo de medicin
Desde 1998, Simce inici un proceso de transformacin con cambios en las pruebas y con la adopcin
de un nuevo modelo de medicin para el anlisis de los datos obtenidos, pasando de la Teora Clsica al
modelo de medicin de Teora de Respuesta al tem (TRI3). Este modelo es compatible con la evaluacin
en base a criterios o estndares y permite comparar puntajes en el tiempo y en cohortes diferentes
por medio de la aplicacin de un proceso de equiparacin estadstica o equating4 (Mineduc, 2002). Este
cambio se encuentra en lnea con la mayora de pruebas estandarizadas a gran escala internacionales
(PISA, TIMMS y PIRLS, entre otras), las cuales utilizan TRI.

1.2.2 Formato de los tems y de las pruebas


En una prueba, un tem corresponde a la unidad bsica de observacin. Un tem puede ser definido como
un dispositivo para obtener informacin acerca del grado de dominio de conocimientos y/o habilidades
de un estudiante evaluado en relacin a un determinado constructo. La distincin fundamental entre
tems radica en si el examinado debe elegir la respuesta correcta, o elaborarla (Haladyna y Rodrguez,
2013). En las pruebas Simce se trabaja con preguntas de seleccin mltiple, ampliamente utilizadas en
pruebas estandarizadas debido a que reportan informacin del constructo a evaluar en forma efectiva y
eficiente, asegurando la validez, confiabilidad y objetividad del instrumento en su totalidad (Downing y
Haladyna, 2006). En el caso de 2 bsico, las preguntas de seleccin mltiple contienen tres alternativas,
mientras que para los dems niveles evaluados pueden contener tres o cuatro alternativas5. El uso de
tems de tres opciones en 2 bsico permite disminuir la carga de lectura de los estudiantes que la
3 El modelo es ampliamente conocido por su sigla en ingls: Item Response Theory (IRT).
4 Este procedimiento se nombra de manera indistinta en espaol y en ingls.
5 Para el ciclo 2013, las pruebas de 6 bsico tenan tres o cuatro alternativas, mientras que las pruebas de 4, 8 bsico y II medio tenan cuatro
alternativas.

rinden, sin aumentar de manera importante el porcentaje de azar. Adems, favorece la utilizacin de
distractores plausibles, basados en errores comunes (Haladyna y Rodrguez, 2013).
En menor proporcin, se incluyen preguntas abiertas que aportan informacin sobre procesos
cognitivos y contenidos de aprendizaje, que involucran la aplicacin de conocimientos y habilidades
que buscan medir una tarea compleja. Las preguntas abiertas tienen mayor fidelidad al constructo
medido, especialmente cuando se mide una tarea que evala una habilidad cognitiva de orden superior
(Haladyna y Rodrguez, 2013).
Ambos formatos permiten la inclusin de estmulos6 y contextos7. En una pregunta abierta, el estudiante
lee un enunciado y debe escribir, dibujar o graficar su respuesta en un espacio delimitado, y su correccin
se realiza en base a una pauta establecida previamente a la aplicacin censal de la prueba (ver ejemplo
de pregunta abierta en el anexo A). Este tipo de pregunta aporta informacin relevante respecto de los
contenidos y habilidades evaluados, y aumenta la fidelidad al constructo medido (Haladyna y Rodrguez,
2013). A pesar de que la confiabilidad de estas preguntas es menor comparada con las preguntas de
seleccin mltiple, se cuida que estas sean analizadas y revisadas por expertos internos y externos al
Departamento de Construccin de Pruebas (DCP).
Por otra parte, las pruebas Simce 2013 tienen formato de lpiz y papel. Se presentan en la forma de un
cuadernillo impreso, con una portada en donde se indica la informacin del estudiante y las instrucciones
generales para responder la prueba8, y en su interior se encuentran los tems.
Dependiendo del nivel evaluado, las preguntas se responden en el mismo cuadernillo (2 bsico), en una
hoja de respuesta para las preguntas de seleccin mltiple, y las respuestas abiertas en el cuadernillo
de prueba (4 y 6 bsico), o bien en un cuadernillo de respuesta aparte en el cual se consignen tanto
las respuestas a las preguntas de seleccin mltiple como las preguntas abiertas (8 bsico y II medio).
Otro aspecto a destacar de las pruebas para 2 bsico consiste en que estas se rinden en una hoja de
cuadernillo ms grande que el utilizado para los dems niveles, compuesto con una tipografa de mayor
tamao. Adems, los textos deben enfrentar a las preguntas relativas al mismo en caras opuestas del
cuadernillo, de modo que el texto est siempre en la misma plana que las preguntas (Agencia de Calidad
de la Educacin, 2012).

1.2.3 Diseo de pruebas y formas


En el diseo de las pruebas Simce se propone cubrir adecuadamente los objetivos y contenidos de
aprendizaje explicitados en el currculo nacional vigente. Por ello, el nmero de tems necesarios no se
incluye en una sola forma de prueba, ya que debido a su extensin un estudiante no podra responderla
en un tiempo limitado de manera vlida y confiable.
Por esta razn, cada prueba se divide en varias formas, las cuales contienen una proporcin representativa
de tems correspondientes con los objetivos a evaluar, evitando de este modo una extensin excesiva. El
conjunto de formas constituye la prueba completa. Un estudiante responde solo una fraccin del total y
por este motivo los resultados no son reportados a nivel individual.
Cada forma contiene un nmero determinado de tems, el cual se mantiene relativamente estable entre
los distintos aos de aplicacin:

2 bsico: entre 20 y 25 preguntas.


4 bsico: entre 30 y 35 preguntas.
6 y 8 bsico: entre 35 y 40 preguntas.
II medio: entre 40 y 45 preguntas.

6 Un estmulo corresponde a una pieza de material autnomo con contenido y una forma ad hoc (texto, grfico, mapa, etc.) a partir del cual se
construye uno o varios tems que requieren de dicha informacin para ser respondidos correctamente.
7 Un contexto corresponde a una situacin que puede evocar aspectos de la vida cotidiana y contiene elementos especficos (por ejemplo,
personajes, tiempos, espacios, entre otros), los que actan como un marco en el que se desarrolla la o las tareas evaluadas.
8 Las instrucciones consideran: formato de las preguntas, tiempo total para responder la prueba, cmo responder la prueba, y qu hacer en caso de
que el estudiante tenga una duda.

Informe Tcnico Simce 2013

Al ensamblar cada forma de la prueba se resguarda la equivalencia de los tems en trminos de formato,
habilidades y/o contenidos a evaluar y grado de dificultad, para que estas sean estadsticamente
similares. Esta tarea la realiza la Unidad de Anlisis Estadstico (UAE) en paralelo con el DCP.

1.2.4 Tiempo para responder las pruebas


Las pruebas Simce son de tipo potencia, es decir, buscan evaluar habilidades y conocimientos de los
estudiantes y no la velocidad con que responden, por tanto consideran un tiempo suficiente para que
ninguno de ellos deje de responder por falta de tiempo. Esta decisin se debe a que este modelo de
medicin requiere que las respuestas reflejen el nivel de aprendizaje de cada estudiante, y no limitaciones
de tiempo o posible fatiga.
Dadas las caractersticas de la prueba, se estima que los estudiantes estaran en condiciones de responder
en un tiempo inferior a 90 minutos9. Solo la aplicacin de Lenguaje y Comunicacin: Comprensin de
Lectura para 2 bsico, establece una duracin indefinida. Debido a que esta es la primera evaluacin
estandarizada en un nivel inicial, es posible que los estudiantes tengan menos familiaridad con pruebas
de estas caractersticas. Adems, pueden presentar alta variabilidad en su comportamiento en el aula,
independientemente de su habilidad lectora.

1.3 Caractersticas de las pruebas Simce 2013


Adicionalmente a la rigurosidad tcnica de las pruebas, basada principalmente en los estndares para las
pruebas educacionales y psicolgicas (AERA, APA y NCME, 1999), la promulgacin de la Ley N. 20529 de
2011 que crea un Sistema de Aseguramiento de la Calidad de la Educacin hace nfasis en la necesidad
de contar con variados sistemas de control de calidad y una permanente actualizacin de sus criterios
de diseo y construccin, de modo de resguardar que la toma de decisiones asociadas se haga en base a
un instrumento y procedimientos estandarizados, vlidos, confiables, objetivos y transparentes (Ley N.
20529, 2011).
La principal demanda a la que se vio enfrentado el proceso de diseo y construccin de pruebas Simce
2013 fue la implementacin de nuevos referentes curriculares (Agencia de Calidad de la Educacin,
2013b). Para optimizar este proceso se consideraron los siguientes criterios: representatividad y
cobertura curricular, cobertura del rango de habilidades de los estudiantes, comparabilidad entre aos y
formas, y alineacin a Estndares de Aprendizaje.

1.3.1 Representatividad y cobertura curricular


Uno de los objetivos centrales del proceso correspondi a que las pruebas Simce 2013 fueran
representativas del currculo nacional vigente al momento de la aplicacin. El equipo de especialistas del
DCP trabaj intensamente para que estas cubrieran, en extensin y profundidad, los objetivos y contenidos
de cada uno de los niveles evaluados. Durante toda su realizacin, este trabajo fue consensuado con la
Unidad de Currculum y Evaluacin (UCE) del Mineduc.
A continuacin se detallan los currculos implementados el ao 2013.

Ajuste Curricular: D.S. N. 256/2009 que Modifica Decreto Supremo N. 40, de 1996, del Ministerio
de Educacin, que establece los Objetivos Fundamentales y Contenidos Mnimos Obligatorios de la
Educacin Bsica y Fija Normas Generales para su Aplicacin. En marcha blanca desde 2009 y en
vigencia desde 2011, para 5 bsico a I medio, y en marcha blanca desde 2011 para primer ciclo
bsico y II medio10 (Mineduc, 2009).

9 El tiempo mximo para responder una prueba regular Simce 2013 es de 90 minutos.
10 Con respecto al primer ciclo de educacin bsica y II medio, los establecimientos tienen dos alternativas: continuar aplicando los programas de
estudio vigentes, del Mineduc o los propios, o bien iniciar la implementacin del ajuste curricular a modo de marcha blanca. Para esta segunda
alternativa, pueden usar como referentes el Marco Curricular (Decretos 254 y 256 de 2009) y los textos de estudio. Comunicado Mineduc, mayo de
2011.

Captulo 1

Bases Curriculares: D.S. N. 439/2012 que Establece Bases Curriculares para la Educacin Bsica en

Asignaturas que Indica, aprobadas en el ao 2012. Entran en vigencia para los cursos de 1 a 3
bsico en el ao 2012, y en el ao 2013 para los cursos de 4 a 6 bsico.

En caso de que la indicacin implique la evaluacin de ambos currculos, se opta por evaluar los contenidos
comunes entre dichos referentes. La evaluacin de esta interseccin evita que los estudiantes sean
evaluados en contenidos y habilidades a los cuales an no han tenido acceso en el aula, y a su vez permite
asegurar que los resultados de las pruebas sigan siendo comparables entre aos, tanto a nivel cualitativo
(en trminos de contenidos evaluados), como a nivel cuantitativo (respecto del anlisis psicomtrico).
La construccin de pruebas Simce 2013 considera los siguientes referentes curriculares por nivel evaluado:

2 bsico: Bases Curriculares 2012.


4 bsico: Bases Curriculares 2012.
6 bsico: interseccin curricular entre Ajuste Curricular 2009 y Bases Curriculares 2012.
8 bsico: Ajuste Curricular 2009.
II medio: Ajuste Curricular 2009.

Una vez delimitado el currculo a evaluar, el equipo DCP elabora las especificaciones tcnicas, donde
la representatividad y cobertura curricular quedan plasmadas a partir de la operacionalizacin de los
contenidos en la forma de Objetivos de Evaluacin (OE) y su correspondiente matriz de evaluacin terica
para cada nivel y rea a evaluar.

1.3.2 Cobertura del rango de habilidades de los estudiantes


Las pruebas Simce cubren de la manera ms amplia posible el rango de habilidad de los estudiantes con
el objetivo de evitar el efecto piso y el efecto techo de las pruebas. Con ello se busca que la curva de
informacin de la prueba recorra todos los tramos de habilidad evaluados y que no se concentre en el
rango de habilidad promedio de la poblacin. Esto evita el efecto piso, que provoca que los estudiantes de
habilidades ms bajas no puedan demostrar lo que son capaces de hacer, y el efecto techo, que provoca
que para los estudiantes ms hbiles todos los tems sean alcanzables; de manera de que cada prueba
llegue a abarcar, incluso, el tramo ms alto de la prueba del nivel que la antecede y el tramo ms bajo de
la que la sucede.

1.3.3 Comparabilidad entre aos y formas


Para asegurar la comparabilidad entre las pruebas se utiliza un proceso denominado equiparacin (ver
captulo 8), el cual a travs de la seleccin de un conjunto de tems comunes hace posible equiparar las
escalas de habilidad medidas. El diseo de las formas definitivas contempla la equiparacin tanto entre
las formas que se aplican en un mismo ao, como en aquellas que se utilizan en aos sucesivos. Adems,
permite que los puntajes sean comparables tanto entre formas aplicadas un mismo ao, como entre los
puntajes reportados para los estudiantes de un mismo nivel en aos sucesivos.
Este ejercicio es particularmente necesario en el caso de las pruebas Simce, ya que cada una de ellas
est dividida en distintas formas que deben ser comparables entre s, y del mismo modo deben ser
comparables con sus anlogas de aos pasados y venideros.
Para el caso de las pruebas regulares Simce 2013, el conjunto de tems de anclaje11 para hacer la
comparacin entre formas es distinto del set de tems seleccionado para hacer la comparacin entre

11 Los tems de anclaje corresponden al set de tems seleccionado para poder hacer la equiparacin estadstica o equating.

Informe Tcnico Simce 2013

aos12. Este modelo facilita el cumplimiento de los requisitos de cobertura curricular, adems de
resguardar la integridad de la prueba. A continuacin se detalla el proceso de equiparacin entre aos
de las pruebas regulares Simce 2013:

2 bsico Lenguaje y Comunicacin: Comprensin de Lectura se equipara con su equivalente de 2012.


4 bsico Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica se equiparan con sus
pares 2012; y Ciencias Naturales se equipara con su anloga del 2011.

6 bsico Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica son pruebas de lnea


base13 por lo que no se equiparan.

8 bsico Lenguaje y Comunicacin: Comprensin de Lectura, Matemtica y Ciencias Naturales se


equiparan con sus anlogas del 2011.

II medio Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica se equiparan con las


pruebas definitivas 2012 respectivas.

En las pruebas de 2, 4, 8 bsico y II medio, el diseo para el anclaje entre aos implic la distribucin
de los tems en las distintas formas de cada aplicacin del 2013. En el caso del diseo de anclaje entre
formas se seleccion un conjunto de tems diferente al del anclaje entre aos, el cual se reprodujo
ntegramente en las distintas formas de cada prueba. Las pruebas de 6 bsico son de lnea base, lo que
implica que solo se puede elegir un conjunto de tems para establecer la equiparacin entre formas,
pero es igualmente necesario seleccionar cules podran formar parte del proceso de equiparacin entre
aos para la siguiente aplicacin. Para lograrlo, se utilizaron la matriz de evaluacin de cada prueba del
proceso anterior y la matriz de evaluacin de la prueba 2013.

1.3.4 Alineacin a Estndares de Aprendizaje


Los estndares describen lo que los estudiantes deben saber y poder hacer para demostrar determinados
niveles de cumplimiento de los objetivos de aprendizaje estipulados en el currculo vigente, en las
evaluaciones Simce (Mineduc, 2013). En este sentido, las pruebas Simce, sin excepcin para el proceso
2013, deben contar con la informacin ms completa posible respecto de los puntajes de corte, de modo
de incrementar la precisin con la cual se entrega la clasificacin para cada nivel evaluado.

1.4 Diseo y construccin de pruebas Simce 2013


A continuacin se describe el flujo del proceso de diseo y construccin de pruebas regulares Simce para
el ao 2013. En la Figura 1.1 se detallan los procesos de definicin del marco de referencia y preparacin
de las especificaciones; el proceso de elaboracin de los tems de la prueba experimental y su posterior
anlisis; y por ltimo, el proceso de ensamblaje de pruebas definitivas. Todas estas actividades estn a
cargo del Departamento de Construccin de Pruebas (DCP) al interior de la Divisin de Evaluacin de
Logros de Aprendizaje (DELA) de la Agencia de Calidad de la Educacin.

12 En aos anteriores, el set de tems de anclaje se reproduca para la equiparacin entre formas y entre aos (Agencia de Calidad de la Educacin
2013b).
13 Pruebas de lnea base se denominan a aquellas pruebas que se aplican por primera vez. Aunque no hay equiparacin, s se fijan los parmetros
estadsticos para poder hacerlo con pruebas sucesivas (Agencia de Calidad de la Educacin, 2013).

Captulo 1

Figura 1.1 Flujo construccin de pruebas regulares Simce


Ensamblaje y
aplicacin prueba
experimental

Ensamblaje y
aplicacin prueba
experimental

Elaboracin de
tems

Anlisis de
resultados prueba
experimental

Ensamblaje
prueba
definitiva

Nota: La figura muestra el flujo del proceso de diseo y construccin de pruebas regulares Simce para el ao 2013.

El proceso completo de construccin de pruebas regulares Simce tiene una duracin de un ao y medio.
El marco de referencia y las especificaciones son la piedra angular de la cual se desprenden los tems,
principales insumos de las pruebas. Los tems construidos pasan, primero, por una aplicacin experimental
a una muestra representativa de estudiantes, que considera los criterios estadsticos establecidos en
detalle en el captulo 4.
La aplicacin de una prueba experimental permite recoger informacin relevante respecto de aspectos
cuantitativos (anlisis psicomtrico) y cualitativos, tanto de las preguntas abiertas como de las de
seleccin mltiple. Una vez finalizado el anlisis de la prueba experimental se contina con el proceso
de ensamblaje de las pruebas definitivas, las cuales son aplicadas en forma censal a la poblacin de
estudiantes en los niveles correspondientes.
Tabla 1.1 Cronograma de construccin de pruebas regulares Simce 2013
Periodo

Ao

Actividad

Marzo-abril

2012

Revisin del marco de referencia y elaboracin de especificaciones tcnicas

Abril

2012

Reclutamiento y seleccin de elaboradores

Mayo-julio

2012

Proceso de elaboracin

Junio-julio

2012

Paneles de expertos

Septiembre

2012

Ensamblaje pruebas experimentales

Octubrenoviembre

2012

Aplicacin pruebas experimentales

Abril

2013

Ensamblaje pruebas definitivas: seleccin tems de anclaje para equiparacin e tems


restantes (2, 4 y 6 bsico)

Abril

2013

Seleccin de tems restantes y ensamblaje pruebas definitivas (2 y 4 bsico)

Abril-junio

2013

Ensamblaje pruebas definitivas: seleccin tems de anclaje para equiparacin (8 y II


medio)

Mayo

2013

Aprobacin interna, revisiones UCE (2, 4 y 6 bsico)

Mayo-junio

2013

Seleccin de tems restantes y ensamblaje pruebas definitivas (8 y II medio)

Junio

2013

Pruebas piloto Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica (6


bsico)

Junio

2013

Aprobacin interna, revisiones UCE (8 bsico y II medio)

Junio-agosto

2013

Entrega a Unidad de Operaciones de Campo y Logstica14 Agencia (2, 4 y 6 bsico)

Julio

2013

Seleccin de tems restantes y ensamblaje pruebas definitivas (6 bsico)

Septiembre

2013

Entrega a Unidad de Operaciones de Campo y Logstica (8 bsico y II medio)

14

14 Unidad que forma parte de la Divisin de Evaluacin de Logros de Aprendizaje de la Agencia.

Informe Tcnico Simce 2013

1.5 Marco de referencia y especificaciones tcnicas


Los criterios de construccin de instrumentos internacionales indican que el primer paso en el diseo y
construccin de pruebas es la definicin y revisin del marco de referencia, el cual delimita los contenidos
y habilidades del constructo a medir (AERA, APA y NCME, 1999). En este caso el marco corresponde al
currculo vigente.
Debido a que las pruebas Simce tienen un formato de aplicacin de papel y lpiz, es necesario adaptar los
contenidos de aprendizaje del currculo nacional vigente para transformarlos en Objetivos de Evaluacin
(OE). Este ejercicio, conocido como elaboracin de las especificaciones tcnicas, permite que las pruebas
Simce midan los conocimientos y habilidades de los estudiantes de una asignatura particular. Esto
constituye uno de los principales hitos del diseo y construccin de las pruebas Simce.
Las especificaciones de las pruebas Simce distinguen ejes de contenidos y ejes de habilidades. La nica
excepcin es la prueba de Lenguaje y Comunicacin: Comprensin de Lectura, la cual es unidimesional
(eje de habilidades). Los ejes de contenidos hacen referencia a las reas de dominio conceptual a evaluar,
mientras que los segundos refieren al manejo de habilidades de pensamiento que el estudiante necesita
para responder correctamente un tem. El desafo al momento de determinar las especificaciones es
garantizar la cobertura de aprendizajes del currculo nacional vigente, como se ha dicho anteriormente,
adems de evidenciar los Estndares de Aprendizaje aprobados al momento de construir las pruebas Simce.
Entre las actividades que realiz el DCP para el proceso 2013 se sealan la formacin de equipos
disciplinares por rea (Comprensin de Lectura, Matemtica y Ciencias Naturales) y el anlisis curricular
correspondiente, que conlleva la generacin de los OE a medir en cada tem. A partir de este anlisis
se gener un documento preliminar por rea, el cual fue revisado por la jefatura del DCP, y luego por la
Unidad de Currculum y Evaluacin (UCE) del Mineduc. La UCE acta como contraparte externa experta,
retroalimentando esta etapa del proceso.
Las versiones finales de cada documento de especificaciones tcnicas para la elaboracin de tems por
rea y nivel contienen: una introduccin que explicita los referentes curriculares, as como una breve
descripcin de los ejes temticos y dominios cognitivos que sern evaluados; las matrices de evaluacin
que indican los pesos relativos atribuibles a cada uno de los ejes descritos; y por ltimo, los OE con su
respectivo eje de contenido y de habilidad.
A pesar de que se vela por garantizar la cobertura y profundidad del currculo nacional, existen constructos
que, por el formato de la prueba, las caractersticas de los objetivos y contenidos de aprendizaje, y
el proceso de implementacin curricular, resultan complejos de medir. En este sentido, se plantean
desafos y limitaciones que siempre deben tenerse en cuenta al momento de analizar los resultados de
las pruebas.
Cabe destacar que, si bien existen diferencias respecto del currculo utilizado en algunos niveles, se
decidi en conjunto con la UCE utilizar un lenguaje comn para evaluar los dominios cognitivos de cada
rea, en reemplazo de la evaluacin de diferentes habilidades por rea y nivel15. Esta medida se aplic en
las especificaciones de todos los niveles.
A continuacin, se detallan los marcos de referencia y especificaciones para cada rea evaluada, junto
con los ejes temticos, los dominios cognitivos y la matriz de evaluacin con la cual se lleva a cabo el
proceso de construccin de instrumentos.

1.5.1 Lenguaje y Comunicacin: Comprensin de Lectura


Las pruebas Simce son pruebas de papel y lpiz, lo que en ocasiones restringe la posibilidad de
evaluar ciertos constructos. A pesar de que el currculo plantea el trabajo con tres ejes de habilidad
(Comunicacin Oral, Lectura y Escritura), en un principio se opt por construir una prueba censal que
evaluara exclusivamente el eje de Lectura (Agencia de Calidad de la Educacin, 2012b). Recin el ao
2008 se decidi ampliar los ejes de evaluacin de esta asignatura y se comenz a evaluar el eje de
15 En el Ajuste Curricular 2009 se habla de habilidades mientras que en las Bases Curriculares 2012 se habla de dominios cognitivos. Debido a
que para las pruebas Simce 2013 se trabaj con ambos referentes curriculares, se decidi homologar el concepto y utilizar el trmino dominios
cognitivos para todas las reas y niveles evaluados.

Captulo 1

escritura, con una prueba en 4 bsico. Debido a su calidad de prueba nueva, la prueba de escritura fue
desarrollada por la Unidad de Desarrollos y ser descrita ms adelante.
El desarrollo de pruebas que evalen la comprensin lectora ha adquirido gran relevancia en los distintos
sistemas de evaluacin. Sin duda, la habilidad lectora es una herramienta central que el estudiante
adquiere apenas ingresa al sistema educativo. Se constituye como piedra angular para el aprendizaje
de todas las asignaturas y es, a su vez, el instrumento principal mediante el cual las personas obtienen
informacin, aprenden e incluso se recrean (Paris y Stahl, 2005).
Debido a que esta prueba considera exclusivamente la evaluacin de habilidades de comprensin lectora,
las especificaciones tcnicas no evalan directamente los contenidos disciplinares; por el contrario,
consideran las habilidades involucradas en la comprensin de distintos textos.
Tabla 1.2 Eje de habilidades en la prueba Lenguaje y Comunicacin: Comprensin de Lectura
Habilidades en
Comprensin de Lectura

Descripcin

Localizar

Este eje agrupa las tareas de lectura en las que el estudiante debe operar con
los elementos explcitos del texto. Involucra la discriminacin y extraccin
de informacin presente en el texto, como datos puntuales o informacin
especfica, tanto fcil como difcil de rastrear, entre otras.

Relacionar e interpretar

Este eje agrupa las tareas de lectura en las que el estudiante debe operar con
elementos implcitos en el texto, a los cuales se puede acceder estableciendo
conexiones o relaciones entre los elementos que s se encuentran explcitos.
Entre estas habilidades se incluye la realizacin de inferencias, la interpretacin
de lenguaje figurado, el reconocimiento de relaciones de significado, la
comprensin del sentido global, entre otras.

Reflexionar

Este eje agrupa las tareas de lectura en las que el estudiante debe operar
confrontando distintos aspectos del texto, tanto de forma como de contenido,
con su experiencia personal, conocimiento de mundo, lecturas anteriores,
y otros similares. Entre estas habilidades se incluyen: la manifestacin de
la opinin sobre algn aspecto del contenido del texto, la evaluacin de la
eficacia comunicativa del texto, la discriminacin de informacin relevante
de la accesoria en un texto y la comprensin del aporte de los elementos
complementarios -como imgenes o tablas- al sentido de un texto, entre otras.

Nota: Fuente: Mineduc, 2012b.

De manera similar, las pruebas regulares Simce que miden la comprensin lectora entregan informacin
especfica sobre el manejo del estudiante en textos con distintos propsitos. Por ello, el equipo DCP
no solo debe cumplir con la matriz de habilidades, sino tambin debe seleccionar cuidadosamente los
textos con los cuales armar las pruebas definitivas. A continuacin se presentan las descripciones de los
distintos textos utilizados.

10

Informe Tcnico Simce 2013

Tabla 1.3 Tipos de textos utilizados en la prueba Simce Lenguaje y Comunicacin: Comprensin de
Lectura 2013
Tipos de textos

Textos literarios

Textos
no literarios

Descripcin

Narrativos

Se definen como aquellos cuyo principal modo discursivo es la narracin


de acontecimientos. Suelen estar escritos en prosa y presentar
personajes a los cuales les ocurren acontecimientos en un tiempo y
espacio dados, lo cual compone el mundo narrado.

Lricos

Se definen como aquellos cuyo principal modo discursivo es la expresin


del mundo interior del hablante. Suelen estar escritos en verso y utilizar
recursos de figuracin.

Dramticos

Textos cuya principal caracterstica es que estn escritos para ser


representados. Suelen estar escritos en prosa, con modalidad dialgica
y presentar personajes que interactan en pos de la solucin de un
conflicto dado.

Informativos

Textos cuyo propsito es transmitir informacin.

Instruccionales

Textos cuyo propsito es orientar procedimientos.

Persuasivos

Textos cuyo propsito es plantear uno o ms puntos de vista acerca de


un tema en particular, de modo de influir en el lector.

Nota: Los textos literarios dramticos solo estn considerados para II medio, de acuerdo al currculo. Fuente: Mineduc,
2011a. Especificaciones para la elaboracin de tems Simce 2011, 4 bsico (en Informe Tcnico Simce 2012).
Fuente: Mineduc, 2012b.

De esta manera, el equipo DCP consider distintos elementos al momento de proponer una matriz de
evaluacin para iniciar la construccin de pruebas regulares Simce 2013 para el rea de comprensin
de lectura. Con esta matriz se cierra la etapa de diseo de la prueba y se pasa a la construccin
propiamente tal. La Tabla 1.4 presenta las matrices de evaluacin ideales esperadas para cada ciclo
evaluado en Lenguaje y Comunicacin: Comprensin de Lectura de las pruebas regulares Simce 2013,
mientras que la Tabla 1.5 resume la informacin de la proporcin de textos literarios y no literarios
para cada nivel evaluado.
Tabla 1.4 Matriz de evaluacin terica para la prueba Simce Lenguaje y Comunicacin: Comprensin de
Lectura 2013
Eje de habilidades

2 bsico

4 bsico

6 bsico

8 bsico

II medio

Localizar

35%

25%

20%

15%

10%

Interpretar y relacionar

40%

45%

45%

45%

45%

Reflexionar

25%

30%

35%

40%

45%

Total

100%

100%

100%

100%

100%

Nota: Fuente: Mineduc, 2012b.

Tabla 1.5 Matriz de evaluacin terica para seleccin de textos en la prueba Simce Lenguaje y
Comunicacin: Comprensin de Lectura 2013
Tipo de textos

2 bsico

4 bsico

6 bsico

8 bsico

II medio

Literario

60%

55%

55%

50%

50%

No literario

40%

45%

45%

50%

50%

Total

100%

100%

100%

100%

100%

Nota: Fuente: Mineduc, 2012b.

Captulo 1

11

1.5.2 Matemtica
La evaluacin de esta rea ha permitido recoger informacin relevante sobre los contenidos y habilidades
que los estudiantes manejan para desenvolverse en el mbito cuantitativo.
Como ya se ha mencionado, las especificaciones para 4 bsico se basaron en las Bases Curriculares 2012;
las de 6 bsico fueron una interseccin entre el Ajuste Curricular 2009 y las Bases Curriculares 2012; y
para los niveles de 8 bsico y II medio se utiliz el Ajuste Curricular 2009. A continuacin, se presentan
las descripciones para los dominios cognitivos del rea de Matemtica, los cuales se conservan para
todos los niveles.
Tabla 1.6 Dominios cognitivos prueba Simce Matemtica 2013
Dominios cognitivos

Descripcin

Conocimiento

Considera el recordar y reconocer conceptos, propiedades y procedimientos


matemticos. Incluye representaciones simblicas y el conocimiento factual,
conceptual y procedimental que constituye el lenguaje bsico matemtico y los
saberes esenciales para formar el pensamiento matemtico. Este dominio considera
la utilizacin directa de procedimientos que pueden realizarse mecnicamente y que
implica recordar un conjunto de acciones y la forma de llevarlas a cabo.

Aplicacin

Considera la seleccin de un mtodo o estrategia adecuado para resolver un tipo de


situacin problemtica en que haya un algoritmo o mtodo de solucin conocido.
El estudiante se enfrenta a un problema que ha sido ejercitado, y es capaz de
demostrar el grado de desarrollo del pensamiento matemtico haciendo uso del
conocimiento factual, conceptual y procedimental al escoger y aplicar una operacin,
un procedimiento, una representacin o un modelo, sin que se le indique de manera
explcita lo que debe realizar para encontrar la solucin.

Razonamiento

Incluye el razonamiento intuitivo e inductivo necesario para descubrir patrones


y regularidades, para realizar generalizaciones y para la bsqueda de estrategias,
representaciones y modelos que permitan resolver problemas no rutinarios.
Este dominio considera el pensamiento lgico y sistemtico que permite realizar
deducciones basadas en reglas y supuestos especficos, diferenciar afirmaciones
errneas de verdaderas, argumentar la validez de un resultado obtenido, comunicar
ideas y concluir correctamente utilizando la matemtica.

Nota: Fuente: Mineduc, 2012c.

En cuanto al eje de contenidos que evala la prueba regular Simce Matemtica 2013, este difiere
dependiendo del nivel evaluado, dado que se basa en currculos diferentes. Las tablas 1.7 y 1.8 entregan
informacin sobre los ejes de contenidos a evaluar en el nivel de enseanza bsica (4 bsico y 6 bsico)
y en el nivel de enseanza media (8 bsico y II medio), respectivamente.
Tabla 1.7 Eje de contenidos pruebas Simce Matemtica 2013: 4 bsico y 6 bsico
Eje de contenidos

Nmeros y
Operaciones

12

Descripcin
Este eje abarca el desarrollo del concepto de nmero y el uso de algoritmos. Considera
el uso de los conceptos bsicos de los nmeros y las operaciones, el sistema posicional,
las representaciones y las relaciones entre los nmeros para luego dar paso al uso de los
algoritmos de la adicin, sustraccin, multiplicacin y divisin de nmeros naturales, as
como tambin los nmeros racionales (como fracciones, decimales y porcentajes), sus
propiedades y operaciones, segn corresponda, estableciendo relaciones entre s.

Informe Tcnico Simce 2013

[continuacin]
Eje de contenidos

Descripcin

Geometra

Este eje abarca el reconocer, visualizar y comparar figuras 3D y 2D, lneas y ngulos.
Describir caractersticas y propiedades y relacionar representaciones de figuras 3D y
figuras 2D en situaciones estticas y dinmicas, como tambin reconocer y describir el
movimiento de figuras 2D a travs de la reflexin, la traslacin y la rotacin.
Considera, adems, los conceptos para entender la estructura del espacio, describir
con un lenguaje preciso los elementos del entorno y los sistemas de coordenadas
informales.

Patrones y lgebra

Este eje abarca las relaciones como parte del estudio de la Matemtica. Las relaciones
entre nmeros, formas, objetos y conceptos, y el cambio de una cantidad en relacin
con otra y las reglas que generan los patrones.
Considera las ecuaciones e inecuaciones y el transportar los patrones (observables en
secuencias de objetos, imgenes o nmeros que presentan regularidades), de una forma
de representacin a otra, extenderlos, usarlos y crearlos, y modelar situaciones sencillas
con ecuaciones que implican las cuatro operaciones.

Datos y Azar

Este eje abarca el registro, clasificacin y lectura de informacin dispuesta en tablas y


distintos tipos de grficos presentes en la vida cotidiana, como tambin la construccin
de tablas y distintos grficos, conclusiones a partir de estos datos, y el clculo de la
media aritmtica y su interpretacin.
Considera, adems, la iniciacin en temas relacionados con las probabilidades, como
describir la posibilidad de ocurrencia de un evento aleatorio, y comparar probabilidades
de distintos eventos, sin calcularlas.

Medicin

Este eje abarca las caractersticas de los objetos y su cuantificacin, para poder
compararlos y ordenarlos, as como tambin la medicin de las caractersticas de los
objetos, tales como ancho, largo, alto, peso, permetro, superficie, volumen, ngulos,
etc. utilizando unidades de medida no estandarizadas y estandarizadas, como tambin
la medicin del tiempo. Esto incluye seleccionar y usar la unidad apropiada para medir
estas caractersticas y reconocer las herramientas especficas de acuerdo con lo que se
est midiendo.

Nota: Fuente: Mineduc, 2012c.

Tabla 1.8 Eje de contenidos pruebas Simce Matemtica 2013: 8 bsico y II medio
Eje de contenidos

Descripcin

Nmeros

Considera contenidos referidos a la cantidad y el nmero, las operaciones aritmticas


(adicin, sustraccin, multiplicacin y divisin), potencias y races, los diferentes
conjuntos numricos (nmeros naturales, enteros, racionales y reales), sus propiedades
y las relaciones que hay entre ellos.

lgebra

Considera el uso de smbolos para representar y operar con cantidades, expresiones de


relaciones generales y abstractas de la aritmtica y la medicin, y lenguaje abstracto de
la matemtica. Este eje considera las ecuaciones y sistemas de ecuaciones, el concepto
de funcin, los distintos tipos de funciones y su representacin grfica.

Geometra

Considera la imaginacin espacial, el conocimiento de objetos, figuras y cuerpos


geomtricos bsicos y sus propiedades, las relaciones entre formas geomtricas en dos
y tres dimensiones, la construccin y transformacin de figuras, la medicin en figuras
planas y en cuerpos, las transformaciones isomtricas, los vectores y la geometra
cartesiana.

Datos y Azar

Considera diversos tipos de tablas y grficos, los conceptos de muestra y poblacin, y


el anlisis de datos utilizando herramientas como las medidas de tendencia central,
de posicin y dispersin. Adems, considera la teora de probabilidades, con todos los
conceptos asociados a ella, como por ejemplo, espacio muestral, Modelo de Laplace,
principios aditivo y multiplicativo, y la Ley de los Grandes Nmeros.

Nota: Fuente: Mineduc, 2012c.

Captulo 1

13

Finalmente, se presentan las matrices de evaluacin tericas para cada nivel en funcin del eje de
contenidos (Tabla 1.9) y de los dominios cognitivos (Tabla 1.10).
Tabla 1.9 Matriz de evaluacin segn ejes de contenido para pruebas Simce Matemtica 2013
Eje de contenidos

4 bsicoa

6 bsico

8 bsico

II medio

Nmeros

50%

50%

35%

30%

Geometra

20%

10%

25%

20%

lgebra

5%

10%

20%

30%

Datos y Azar

10%

20%

20%

20%

Medicin

15%

10%

-b

Total

100%

100%

100%

100%

Nota:
En 2013 se incorporaron dos nuevos ejes a la matriz de evaluacin de 4 bsico:
lgebra y Medicin; producto de la entrada en vigencia de las nuevas Bases
Curriculares.
b
Las etiquetas de los ejes de contenidos, aunque conservan su nombre, difieren en
su definicin conforme a los diferentes currculos aplicados en cada nivel (2 y 4
bsico: Bases Curriculares 2012; 6 bsico: interseccin entre Ajuste Curricular 2009
y Bases Curriculares 2012; y 8 bsico y II medio: Ajuste Curricular 2009).

Fuente: Mineduc, 2012c.
a

Tabla 1.10 Matriz de evaluacin segn dominios cognitivos para pruebas Simce Matemtica 2013
Dominios cognitivos

4 bsico

6 bsico

8 bsico

II medio

Conocimiento

55%

50%

45%

50%

Aplicacin

30%

40%

45%

30%

Razonamiento

15%

10%

10%

20%

Total

100%

100%

100%

100%

Nota: Fuente: Mineduc, 2012b.

1.5.3 Ciencias Naturales


Las pruebas Simce de Ciencias Naturales se aplican en forma bienal. De acuerdo al Plan de Evaluaciones
Nacionales e Internacionales aprobado en 2011, correspondi evaluar 4 y 8 bsico el ao 2013 y los
niveles de 6 bsico y II medio en el ciclo de evaluacin siguiente (2014). Esta planificacin se reproduce
para los aos siguientes (2015-2016).
Tabla 1.11 Dominios cognitivos prueba Simce Ciencias Naturales 2013
Dominios cognitivos

Descripcin

Conocimiento

Este dominio se refiere a la comprensin de hechos, relaciones, conceptos y procesos


propios de las Ciencias Naturales. Requiere que los estudiantes recuerden o reconozcan
afirmaciones; tengan conocimiento de vocabulario, hechos, informacin, smbolos y
unidades. Este dominio tambin incluye la seleccin de ejemplos ilustrativos de las
afirmaciones, hechos o conceptos.

Aplicacin

Este dominio se refiere a la aplicacin directa del conocimiento y la comprensin de


conceptos y principios cientficos en situaciones sencillas. Requiere que los estudiantes
comparen, contrasten y clasifiquen; interpreten informacin relacionada con algn
concepto o principio de la ciencia; organicen informacin para comunicarla; y den
explicaciones basndose en diagramas o modelos que ilustren estructuras y relaciones.

14

Informe Tcnico Simce 2013

[continuacin]
Dominios cognitivos

Razonamiento

Descripcin
Este dominio se refiere al uso del razonamiento cientfico para resolver problemas,
extraer conclusiones, tomar decisiones fundamentadas y para abordar situaciones
nuevas. Algunas situaciones de resolucin de problemas son poco conocidas o
involucran contextos complejos que requieren que los estudiantes razonen a partir de
principios cientficos para dar una respuesta. Las soluciones a los problemas pueden
demandar que los estudiantes dividan el problema en las partes que lo componen, cada
una de la cuales puede involucrar la aplicacin de un concepto o relacin cientfica.

Nota: Fuente: Mineduc, 2012d.

Tabla 1.12 Eje de contenidos prueba Simce Ciencias Naturales 2013 4 bsico
Eje de contenidos

Descripcin

Ciencias de la Vida

En este eje temtico se incluye el estudio de los seres vivos y del cuerpo humano.
El estudio de los seres vivos, especficamente, considera las caractersticas, ciclos de
vida, el modo en que obtienen alimento y energa, y las interacciones con el ecosistema
de las plantas y los animales. Adems, se incorporan la relacin entre actividad
humana y la conservacin del ecosistema, a travs de la identificacin de medidas de
proteccin.
El estudio del cuerpo humano considera las caractersticas de los sentidos, de los
rganos fundamentales para vivir y de las estructuras del sistema msculo-esqueltico
y del sistema nervioso, as como tambin, la importancia de hbitos de vida saludable
como la alimentacin y la actividad fsica para mantener el cuerpo sano y prevenir
enfermedades.

Ciencias Fsicas y
Qumicas

En este eje se incorpora el estudio de la materia y la energa, expresada a travs de


diversos cambios y fenmenos cotidianos.
En el eje, especficamente, se clasifican objetos de acuerdo a las caractersticas del
material del que estn hechos, relacionndolos con sus usos, y se describen los cambios
producidos en los materiales por distintos agentes como fuerza, luz, calor y agua.
Adems, se consideran las propiedades de la materia, sus estados y transformaciones
y, de manera particular, las caractersticas del agua y el ciclo del agua en la naturaleza,
enfatizando la importancia del cuidado de este recurso.

Ciencias de la Tierra y
el Universo

En este eje se incorporan las caractersticas generales del sistema solar y sus
componentes principales, explicando la sucesin da-noche, as como el ciclo de las
estaciones, con el consiguiente efecto que esto tiene para los seres vivos y el ambiente.
Tambin se incluye en este eje la revisin del tiempo atmosfrico, sus cambios y efectos
sobre los seres vivos y el ambiente.
Por ltimo, se incorporan en el eje la caracterizacin de las principales capas de la
Tierra, as como los cambios producidos en su superficie debido a los movimientos
de placas tectnicas, destacando la importancia de la prevencin frente a riesgos
naturales.

Nota: Fuente: Mineduc, 2012d.

Tabla 1.13 Eje de contenidos pruebas regulares Simce Ciencias Naturales 2013: 8 bsico
Eje de contenidos
Estructura y funcin
de los seres vivos

Descripcin
Para 7 y 8 bsico, en este eje se revisan aspectos fundamentales de la reproduccin
humana (sistemas, funciones, control y prevencin de enfermedades), junto con
el funcionamiento integrado de los sistemas circulatorio, respiratorio, digestivo y
excretor, y su relacin con la clula. Integra tambin conceptos relacionados con los
requerimientos nutricionales y la prevencin frente a los efectos del alcohol y el tabaco
en el organismo.

Captulo 1

15

[continuacin]
Eje de contenidos

Descripcin

Organismo, ambiente
y sus interacciones

Este eje refiere a los procesos bsicos de los ciclos del carbono y el nitrgeno en la
naturaleza, y a los efectos que tiene en ellos la intervencin humana. Del mismo modo,
se consideran algunas interacciones entre organismos de un ecosistema.
En este eje tambin se revisan las principales teoras acerca del origen de la vida y su
impacto junto con el anlisis de los cambios que una especie experimenta a travs del
tiempo geolgico, adems de los principales grupos de seres vivos a travs del tiempo
evolutivo.

Materia y sus
transformaciones

En este eje se revisa el concepto de tomo, modelos atmicos y teora atmica de


Dalton para explicar fenmenos como la conductividad elctrica y calrica, as como
los fenmenos de emisin y absorcin, adems de aplicar la ley de conservacin
de la materia en la representacin de reacciones qumicas que dan lugar a nuevos
compuestos.
Tambin se aplica el modelo cintico corpuscular de la materia, para explicar
fenmenos atmosfricos y el comportamiento de los gases ideales.

Fuerza y Movimiento

En estos niveles, el eje Fuerza y Movimiento se relaciona con la identificacin de las


fuerzas que actan sobre un cuerpo en movimiento y en reposo, y la descripcin de
los efectos que tienen las fuerzas gravitacionales en el movimiento de planetas y
satlites. Del mismo modo, se presenta una revisin del rol que desempean las fuerzas
elctricas en la electrizacin, el movimiento de las cargas y en la estructura atmica y
molecular.
En este eje tambin se considera la descripcin de algunos movimientos peridicos del
entorno mediante algunas magnitudes bsicas.

Tierra y Universo

Este eje se refiere a las caractersticas de algunas estructuras csmicas (cometas,


asteroides, meteoritos, nebulosas, galaxias y cmulos de galaxias) y al anlisis de las
distancias que separan a los cuerpos celestes.
Se considera adems el estudio de la Tierra, los tipos de roca y las trasformaciones que
ha experimentado nuestro planeta a travs del tiempo, del mismo modo, se revisan
algunos fenmenos como temporales, las mareas, los sismos, las erupciones volcnicas
y su impacto sobre la vida

Para finalizar, se presentan las matrices tericas para la construccin de las pruebas definitivas de Ciencias
Naturales, considerando tanto ejes de contenidos (Tabla 1.14), como dominios cognitivos (Tabla 1.15).
Tabla 1.14 Matriz de evaluacin terica segn eje de contenido para pruebas regulares Simce Ciencias
Naturales 2013, 4 bsico
Eje de contenidos

4 bsico

Ciencias de la Vida

55%

Ciencias Fsicas y Qumicas

25%

Ciencias de la Tierra y el Universo

20%

Total

100%

Nota: Recordar que las etiquetas de los ejes de


contenidos, aunque conservan su nombre,
difieren en su definicin conforme a los diferentes
currculos aplicados en cada grado (2 y 4 bsico:
Bases Curriculares 2012; 6 bsico: interseccin
entre Ajuste Curricular 2009 y Bases Curriculares
2012; y 8 bsico y II medio: Ajuste Curricular
2009). Fuente: Mineduc, 2012d.

16

Informe Tcnico Simce 2013

Tabla 1.15 Matriz de evaluacin terica segn eje de contenido para pruebas Simce Ciencias Naturales
2013, 8 bsico
Eje de contenidos

8 bsico

Estructura y funcin de los seres vivos

25%

Organismos, ambiente y sus interacciones

20%

Materia y sus transformaciones

25%

Fuerza y Movimiento

10%

Tierra y Universo

20%

Total

100%

Nota: Fuente: Mineduc, 2012d.

Tabla 1.16 Matriz de evaluacin terica segn dominios cognitivos para pruebas Simce Ciencias Naturales 2013
Dominios cognitivos

4 bsico

8 bsico

Conocimiento

55%

50%

Aplicacin

30%

39%

Razonamiento

15%

11%

Total

100%

100%

Nota: Fuente: Mineduc, 2012d.

1.6 Elaboracin de tems


Este proceso sucede a la definicin de las especificaciones tcnicas y a la matriz de evaluacin terica
para cada nivel y rea. Para el proceso de construccin de pruebas Simce 2013, la elaboracin de tems
tuvo como foco una mayor produccin de estos en los ejes de contenidos y/o dominios cognitivos,
para los cuales hubo menor cantidad de tems previamente disponibles16 (Agencia de Calidad de la
Educacin, 2012b).
A modo de precisar la produccin de tems, el equipo DCP determin con anterioridad cuntos tems se
requeran por eje de contenidos y dominios cognitivos para cada rea y grado, adems del formato de
pregunta a construir (seleccin mltiple o pregunta abierta).
Posteriormente, se evalu si los tems disponibles eran suficientes para la construccin de las pruebas.
Para los casos de 2 y 8 bsico se decidi trabajar con los tems ya disponibles y/o realizar un proceso
de elaboracin interna en el DCP, mientras que para 4 y 6 bsico y II medio se llev a cabo un proceso
de elaboracin interna de tems mediante contrato directo.

1.6.1 Elaboracin de tems


Este proceso comenz el ao 2012 con una convocatoria para elaboradores externos a la Agencia. Los
equipos de trabajo para cada prueba que resultaron del proceso de seleccin se definieron de acuerdo
a un perfil, el que estableca como requisito mnimo contar con conocimientos pedaggicos especficos
para cada rea y grado, y/o experiencia en construccin de instrumentos. Los elaboradores seleccionados
pasaron a formar parte del Centro de Elaboracin, enfocando su desempeo a un rea y grado especficos.
Para cada prueba experimental hubo un especialista del DCP que retroaliment este desarrollo.
El periodo de elaboracin comprendi alrededor de tres meses. Cada equipo de prueba se desempe en
ciclos semanales de produccin. Las actividades consideradas en cada ciclo fueron las siguientes:

16 El DCP cuenta con un banco de tems en el cual es posible encontrar una gran variedad de reactivos. No obstante lo anterior, este banco no ha
logrado tener la amplitud deseable debido a que la emergencia de nuevas pruebas a aplicar en niveles diferentes, en conjunto con las pruebas de
continuidad, ha ido despoblando el banco gradualmente, haciendo siempre necesaria la construccin de nuevos tems.

Captulo 1

17

Elaboracin individual. Cada elaborador tuvo la tarea de desarrollar una cantidad especfica de
tems semanalmente, independiente de los tems producidos en taller.

Revisin de tems elaborados individualmente. Cada encargado debi revisar los tems elaborados
individualmente antes de la siguiente sesin de trabajo. En esta etapa, el encargado de prueba
revis que cada uno de los tems haya sido clasificado correctamente de acuerdo a su OE. Luego, los
tems fueron aprobados o rechazados.

Retroalimentacin. Al inicio de cada sesin de trabajo el encargado realiz una retroalimentacin


del proceso de elaboracin individual, con la cual se fue capacitando a los elaboradores sesin a
sesin. En esta etapa se present un set de tems aprobados y un set de tems rechazados y se
discuti con el resto del equipo de elaboracin cules aspectos eran correctos/incorrectos y cmo
podan realizarse mejoras cuando correspondiera. Los tems rechazados fueron trabajados en forma
grupal y modificados de modo que pudieran incorporarse al total de tems aceptados, para una
futura aplicacin experimental.

Elaboracin grupal. Se realiz un taller de elaboracin donde los encargados guiaron y apoyaron el
proceso de elaboracin.
Para poder concretar su tarea, los elaboradores tuvieron acceso a las especificaciones tcnicas de
la prueba, adems del acceso a un documento que indicaba los criterios de calidad tcnicos para
la elaboracin. Estos criterios guardan relacin tanto con elementos tcnicos de la construccin
misma de un tem (extensin de la pregunta y de las alternativas, caractersticas de un buen
distractor, etc.), as como elementos a considerar, dadas las caractersticas de la poblacin a la cual
se aplica la prueba (por ejemplo, que los tems fueran comprensibles por todos los estudiantes y no
discriminaran positiva ni negativamente su desempeo en la prueba).

1.6.2 Paneles de expertos


Una vez llevada a cabo la elaboracin externa, se realizaron paneles de revisin con expertos de cada
rea (licenciados o profesores), con experiencia en didctica y/o evaluacin, quienes revisaron los tems
aprobados e hicieron observaciones cualitativas de los mismos. Se hicieron paneles por rea y nivel, y
sus integrantes contaron con la facultad de aprobar, rechazar y/o modificar un tem. En el caso de los
tems rechazados se debi incluir el argumento pertinente, mientras que para los tems etiquetados para
modificar, se debi incluir cules cambios hacer y por qu.

1.6.3 Talleres de elaboracin interna de tems


A continuacin se llev a cabo al menos un taller de elaboracin interna (compuesto por especialistas
del DCP y, en algunos casos, tambin por expertos invitados) por cada prueba a aplicarse en el ciclo 2013.
Esto con el fin de dar cumplimiento a la matriz de evaluacin terica en los casos que fuera necesario.

1.6.4 Revisin de tems jefatura DCP


Para finalizar el proceso de elaboracin de tems, el equipo de DCP sistematiz los procesos previos y
formaliz la seleccin de tems para cada prueba Simce 2013, informacin que fue revisada y aprobada
por la jefatura del DCP.

1.7 Pruebas experimentales


Una vez que se cont con todos los tems necesarios para cumplir los requisitos de la matriz terica
para cada prueba, se llev a cabo el proceso de ensamblaje y aplicacin de las pruebas experimentales.
El propsito de las pruebas experimentales Simce 201217 fue recoger informacin cuantitativa y
cualitativa de las preguntas seleccionadas. Los tems que pasaron el anlisis estadstico y cualitativo
17 Se denominan pruebas experimentales 2012 a las evaluaciones que servirn de insumo para las pruebas definitivas del 2013.

18

Informe Tcnico Simce 2013

correspondiente, fueron los que podrn formar parte de una prueba regular de carcter definitiva
(Agencia de Calidad de la Educacin, 2012).
De acuerdo al mtodo de equiparacin, las pruebas experimentales son armadas siguiendo la mtrica
utilizada en aos anteriores de modo de facilitar la comparacin entre los resultados de estas con sus
anlogas de aos anteriores. As, las pruebas experimentales fueron equiparadas con la aplicacin censal
del ciclo anterior correspondiente (Simce 2011 en el caso de las pruebas de 8 bsico y Simce 2012 para
las pruebas en los dems niveles), a partir de los tems de anclaje previamente seleccionados.
Una vez que las pruebas estn armadas, se aplican a una muestra representativa de estudiantes. Para el
ciclo 2013, las pruebas se aplicaron los das 8 de octubre en 4 bsico; 22 de octubre en 6 bsico; 29 de
octubre en 2 bsico; 5 de noviembre en 8 bsico; y 20 de noviembre del ao 2012 en II medio.

1.8 Anlisis pruebas experimentales


El anlisis de los resultados de las pruebas Simce se realiza tanto desde lo cuantitativo como desde lo
cualitativo.

1.8.1 Correccin de preguntas abiertas


Este proceso fue externalizado y consisti en la aplicacin de una rbrica de correccin desarrollada por
el DCP. Adicionalmente, el equipo capacit a los correctores en el uso de estas rbricas y los criterios
con los cuales realizar esta tarea en forma efectiva y eficiente. En el captulo 7 se analiza con mayor
profundidad este tema.
Las preguntas abiertas pueden ser calificadas como correctas o incorrectas, con asignacin de un cdigo
que representa dicha calificacin. Asimismo, existen preguntas a las que se le puede dar una calificacin
parcial. Luego los cdigos se traducen en puntajes a igual escala que las preguntas de seleccin mltiple
para el anlisis psicomtrico de la Unidad de Anlisis Estadstico (UAE).

1.8.2 Anlisis cuantitativo


Una vez incluida la informacin de la correccin de preguntas abiertas, la UAE procede al anlisis
cuantitativo de las pruebas regulares experimentales Simce 2013 (ver captulo 8). De acuerdo al
modelo de medicin TRI, se contempla un modelo logstico de tres parmetros (3PL): dificultad del
tem, discriminacin del tem y azar. En el caso de las pruebas experimentales, para el ciclo de pruebas
regulares Simce 2013 las caractersticas de estos parmetros son los siguientes:

Un ndice de dificultad que se encuentre entre (-2,4) y (+2,4). La relacin de los valores es directamente
proporcional a la dificultad del tem.

Un ndice de discriminacin igual o mayor a 0,6. A mayor ndice de discriminacin es mejor la


capacidad del tem de distinguir entre altos y bajos puntajes.

En cuanto al ndice de azar, para los tems de cuatro opciones, los valores se encuentran entre 0 y
0.35, aunque se recomienda un rango entre 0.15 y 0.25. Por otro lado, los tems con tres opciones,
los valores se encuentran entre 0 y 0.45, pero se recomiendan los tems que estn en el rango de
0.15 y 0.33. Un ndice de azar alto indica que el estudiante tiene ms probabilidades de responder
correctamente el tem contestando al azar (Agencia de Calidad de la Educacin, 2012).

Estos tres parmetros dan como respuesta una funcin especfica que relaciona la probabilidad de
responder correctamente con una habilidad (Agencia de Calidad de la Educacin, 2012). La Figura 1.2
muestra la curva caracterstica del tem.

Captulo 1

19

Figura 1.2 Curva caracterstica del tem

Nota: La figura muestra un ejemplo de CCI de tres tems, con dificultad -1,0, 0 y 1,0 respectivamente.


Aquellos tems que no superan el anlisis cuantitativo son descartados al momento de la calibracin,
conforme al modelo de medicin, aunque igualmente pasan por la etapa del anlisis con la Teora Clsica,
con el cual se recoge informacin relevante respecto del funcionamiento de cada uno. Este anlisis clsico
facilita la toma de decisiones respecto de rechazar o modificar un tem. Algunos de estos indicadores
clsicos son:

ndice clsico de discriminacin (idealmente igual o mayor a 0,2). A mayor discriminacin clsica,
mejor es la capacidad del tem de diferenciar puntajes altos de puntajes bajos.

Correlacin opcin-test distractores (idealmente negativo o al menos igual o inferior a 0,1).


Corresponde al anlisis inverso de la discriminacin clsica, por lo tanto, se espera que sea lo ms
baja posible.

ndice clsico de dificultad (entre 25% y 75%). A mayor ndice de dificultad, menor es la dificultad
del tem.

Porcentaje de eleccin de los distractores (entre 5% y 25%).

Porcentaje de omisin (menor a 5%).

Curva emprica del tem. Este grfico se genera dividiendo la muestra de estudiantes que respondi
el tem en cuatro grupos (25% de estudiantes por cada grupo), los cuales representan cuatro niveles
consecutivos de rendimiento en la prueba. Para cada grupo se calcula el porcentaje de eleccin
de la clave (alternativa correcta) y de los distractores. En un tem que cumple con los requisitos
psicomtricos se espera que a medida que mejora el rendimiento de los estudiantes, los grupos con
mejor rendimiento tengan un porcentaje mayor de la eleccin de la clave y menor porcentaje de
eleccin de los distractores.

Adicionalmente, se realiza un anlisis de Funcionamiento Diferencial del tem (DIF, por sus siglas en ingls),
el cual arroja evidencia de una posible diferencia en el comportamiento del tem para distintos grupos de
alumnos (por ejemplo, por gnero). Esta evidencia es complementada con un anlisis cualitativo con el
fin de que los tems incluidos en una prueba no favorezcan a algn grupo de la poblacin.

20

Informe Tcnico Simce 2013

Toda la informacin del anlisis cuantitativo es entregada al equipo DCP para el anlisis cualitativo de los
tems y la posterior seleccin para conformar las pruebas Simce 2013.

1.8.3 Anlisis cualitativo


Las principales observaciones hechas por los especialistas del DCP se realizaron en base a los datos
mtricos; revisin de la redaccin y comprensin de los enunciados y las alternativas; revisin de la hoja
de registro que los aplicadores completan al momento de la aplicacin y participacin en la aplicacin
por parte del equipo DCP. Todo lo anterior permiti identificar:

Problemas con la comprensin del enunciado. El enunciado podra entregar informacin que facilita/
dificulta la eleccin de la clave. Esto puede incluir desde una eleccin de palabras muy complejas
para el nivel evaluado hasta errores de redaccin.

Preguntas que podran estar evaluando ms de un constructo en su diseo.

Que la eleccin de alternativa correcta cumpla con los criterios de exhaustividad y exclusin, es
decir, que la clave sea la nica alternativa completamente correcta y que los distractores sean
completamente incorrectos.

Distractores que pudieran inducir a su eleccin errneamente. Esto ocurre cuando los distractores
son tan crebles que el estudiante puede llegar a elegirlos por sobre la alternativa correcta.

Distractores poco verosmiles o poco atractivos (Haladyna y Rodrguez, 2013).

A partir del anlisis de las pruebas experimentales se definieron cuntos tems se utilizaran en las
pruebas definitivas Simce 2013. La Tabla 1.16 entrega informacin respecto del nmero de formas
utilizadas en las pruebas experimentales, el total de tems incluidos en las pruebas experimentales y el
nmero de tems aprobados para cada prueba.
Tabla 1.17 Nmero de tems experimentados y aprobados pruebas experimentales Simce 2012
Prueba

N. de
formas

N. de tems
experimentados

N. de tems
aprobados

Lenguaje y Comunicacin: Comprensin


de Lectura

61

36

Lenguaje y Comunicacin: Comprensin


de Lectura

105

66

Matemtica

145

85

Ciencias Naturales

76

42

Lenguaje y Comunicacin: Comprensin


de Lectura

89

28

Matemtica

197

79

Lenguaje y Comunicacin: Comprensin


de Lectura

57

33

Matemtica

79

48

Ciencias Naturales

44

36

Lenguaje y Comunicacin: Comprensin


de Lectura

126

65

Matemtica

207

116

Grado
2 bsico

4 bsico

6 bsico

8 bsico

II medio

Nota: Se debe recordar que el nmero de tems experimentados se divide entre las distintas formas. Adems, hay que
considerar el uso de un set de tems de anclaje entre formas para el posterior anlisis psicomtrico de equiparacin.

Captulo 1

21

1.9 Ensamblaje de pruebas definitivas


Junto con el cumplimiento de los requisitos de representatividad y cobertura curricular, cobertura del
rango de habilidades de los estudiantes y alineacin a los Estndares de Aprendizaje, el ensamblaje de
las pruebas censales definitivas 2013 tuvo particular cuidado con respecto a los siguientes puntos:

Que los tems entregaran evidencia suficiente para la elaboracin de descripciones de logros del
aprendizaje y la fijacin de puntajes en las jornadas de standard setting 18.

Que las pruebas dieran cuenta de las descripciones y puntajes de corte respectivos, minimizando as
los errores de clasificacin.

Que las pruebas aseguraran la evaluacin de los estudiantes en todos los rangos de habilidades,
evitando concentrarse en niveles de habilidad medio. Esto implica reducir paulatinamente tanto el
efecto techo (para los estudiantes ms hbiles los tems ms difciles son fcilmente alcanzables),
como el efecto piso (para los estudiantes con menos habilidades los tems ms fciles son
inalcanzables).

Para asegurar el cumplimiento de estos requisitos, el proceso de ensamblaje de pruebas Simce 2013 da
cuenta del delicado equilibrio entre las distintas exigencias tcnicas del equipo DCP, acompaado por la
UAE, lo cual se logra plasmar en las pruebas Simce para el ciclo de evaluacin 2013.

1.9.1 Caractersticas especficas pruebas regulares Simce 2013


Adems de cumplir con los requisitos y caractersticas generales de las pruebas Simce, las pruebas
correspondientes a este ciclo tienen particularidades:

Las pruebas de Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica, 6 bsico son


instrumentos de evaluacin que se aplicaron por primera vez, por lo que sern la lnea de base para
posteriores anlisis psicomtricos de TRI.

Se realiz una prueba piloto para Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica,
con la cual se probaron nuevos tems en funcin de las recomendaciones de la UCE. Estas pruebas
piloto fueron aplicadas en junio de 2013, y del anlisis cuantitativo y cualitativo de las mismas se
seleccionaron tems para completar las pruebas definitivas en funcin de las matrices. Una parte de
los tems se extrajeron de las pruebas experimentales del ciclo siguiente en curso (2014), mientras
que el resto se elabor internamente en el DCP.

1.9.2 Diseo de equiparacin


La prueba Simce utiliza un diseo de equiparacin (o equating) basado en la seleccin de tems comunes
o de anclaje, que permite equiparar los parmetros y las puntuaciones obtenidas en distintas mediciones.
Para este efecto se emplea un conjunto de tems comunes entre aos que posibilita la comparacin entre
mediciones aplicadas en aos diferentes. Este conjunto de tems, adems, debe ser representativo de la
matriz real de la ltima prueba.

1.9.3 Seleccin set tems de anclaje entre aos


Siguiendo el modelo de medicin TRI, los primeros tems seleccionados son aquellos que sern utilizados
como tems de anclaje entre aos. El principal desafo en esta etapa es la seleccin de tems de la prueba
censal del periodo anterior (para la prueba de 4 bsico Ciencias Naturales y las pruebas de 8 bsico

18 Metodologa de trabajo utilizada para establecer puntajes de corte y su consecuente definicin de Estndares de Aprendizaje. Esta es una
actividad que realiza la UCE utilizando el mtodo Bookmark.

22

Informe Tcnico Simce 2013

corresponden las pruebas Simce 2011; para las dems pruebas corresponden las pruebas Simce 201219),
respetando la matriz terica en las especificaciones tcnicas, adems de cumplir con el referente
curricular evaluado. Lo anterior implica revisar tambin la matriz real con la cual se arm la prueba
anterior y su comparacin con la matriz actual.
De modo similar, es necesario contemplar una renovacin gradual del set de tems comunes entre aos,
ya que algunos tems que han sido utilizados en aplicaciones de aos anteriores van quedando obsoletos
con respecto al currculo nacional vigente y/o pueden estar sobrexpuestos en comparacin con los
tems nuevos. El consenso al interior del DCP es que los tems seleccionados deben cumplir con una serie
de caractersticas imprescindibles y deseables para formar el set de anclaje (Tabla 1.17). Finalmente, el
set de tems de anclaje debe constituir, al menos, un 20% del total de la prueba completa a aplicar20.
Tabla 1.18 Caractersticas del set de tems de anclaje entre aos
Caractersticas imprescindibles

-
-
-
-
-
-

tem de seleccin mltiple.


Contar con informacin de los parmetros TRI.
No presentar problemas de construccin.
Corresponder al referente curricular para el rea y nivel evaluado.
No estar publicado en, ni estar asociado a, un estmulo publicado.
Que, en su conjunto, abarque el rango de dificultad de la prueba.
Caractersticas deseables

-
-

Cumplir con los indicadores TRI lo ms cercanamente a los valores ideales.


Que en su conjunto sean representativos de la matriz terica de la prueba respectiva, y de la prueba definitiva
del ciclo anterior, con la cual se establece la comparacin en cuanto a ejes y pesos porcentuales de los tems.

Nota: Fuente: Mineduc, 2012b.

Una vez seleccionado el conjunto de tems para el anclaje, este se entrega al equipo de la UAE, el cual
revisa si los tems cumplen con la funcin de informacin necesaria. De haber tems que no cumplan con
los indicadores psicomtricos, se vuelve a sugerir un nuevo set. Las iteraciones con la UAE continuaron
hasta que se consolid el set de tems de anclaje.

1.9.4 Seleccin tems comunes o de anclaje entre formas


La prueba Simce utiliza tambin un conjunto de tems comunes entre formas, lo que permite hacer
comparaciones entre los distintos cuadernillos de una misma prueba.
El siguiente paso en el ensamblaje de pruebas definitivas Simce 2013 fue la seleccin de los tems de
anclaje entre formas. Estos debieron cumplir, aunque no restrictivamente, con los mismos requisitos del
set de anclaje entre aos, y debieron cumplir con un mnimo del 20% del total de tems en cada forma.
Como ya se mencion, el set de tems comunes entre formas se reproduce completamente en cada una
de las formas de cada prueba.

1.9.5 Seleccin tems restantes


Una vez que los tems comunes entre aos y entre formas fueron seleccionados, en la elaboracin de la
prueba Simce 2013 fue posible continuar con la seleccin de los tems restantes. En esta etapa se trabaj
con detencin para cumplir con la matriz terica de cada prueba. Tomando como apoyo los documentos
internos de trabajo del DCP, se recurri al banco de tems y/o a la prueba experimental correspondiente.

19 En el caso de las pruebas de 6 bsico, estas son de lnea base, por lo cual solo se fijan los tems para el set de anclaje del ao siguiente.
20 Se debe recordar que la prueba completa se considera con el total de tems a aplicar, distribuidos en sus distintas formas.

Captulo 1

23

La seleccin de tems restantes sigui las caractersticas de los tems de anclaje. De esta manera, se
busc principalmente que los tems completaran la matriz terica de la prueba correspondiente y
aseguraran que la cobertura de los ejes de contenidos estuvieran representados con tems de distintos
grado de dificultad.
Para cumplir con estos objetivos se consider el set de tems comunes entre formas como parte del total
de tems posibles de seleccionar. En el caso de las preguntas abiertas, estas se eligieron considerando que
estuvieran libres de errores conceptuales, de redaccin y comprensin, y que hubieran sido analizadas
psicomtricamente, de manera que contaran con datos sobre los indicadores estadsticos requeridos.
El equipo de la UAE hizo una revisin del conjunto de tems seleccionado para cada prueba, analizando
la funcin de informacin respectiva, y comparndola con la del ao anterior correspondiente. Este
ejercicio se hace cuantas veces sea necesario, en conjunto con el DCP, hasta consolidar el set final de
tems para las pruebas definitivas.
Tabla 1.19 Seleccin de tems de pruebas definitivas Lenguaje y Comunicacin: Comprensin de Lectura 2013
N. total de
items

N. tems anclaje
entre aos

2 bsico

43

4 bsico
6 bsicoa

Grado

N. tems anclaje entre formas

tems restantes

20

14

53

21

11 +21 = 32

41

38

8 bsico

61

16

17

28

II medio

79

14

5+12 = 17

53

Notas:

N. de tems que se extrajo del set de anclaje entre aos.

N. de tems exclusivos al set de anclaje entre formas.

N. total de tems de anclaje entre formas.

Las pruebas de 6 bsico son de lnea base, por lo cual no hay set de anclaje entre aos.

Tabla 1.20 Seleccin de tems pruebas definitivas Matemtica 2013


N. total de tems

N. tems anclaje
entre aos

N. tems anclaje entre


formas

tems restantes

4 bsico

63

20

10a+26b = 36c

17

6 bsico

70

40

30

8 bsico

66

18

39

II medio

77

16

10

51

Grado

Notas:

N. de tems que se extrajo del set de anclaje entre aos.

N. de tems exclusivos al set de anclaje entre formas.

N. total de tems de anclaje entre formas.

Tabla 1.21 Seleccin de tems pruebas definitivas Ciencias Naturales 2013


N. total de tems

N. tems anclaje
entre aos

N. tems anclaje entre


formas

tems restantes

4 bsico

42

11

10a +8b = 18c

23

8 bsico

44

10

10 +11 = 21

23

Grado

Notas:

N. de tems que se extrajo del set de anclaje entre aos.

N. de tems exclusivos al set de anclaje entre formas.

N. total de tems de anclaje entre formas.

24

Informe Tcnico Simce 2013

1.9.6 Distribucin de tems por forma


Una vez seleccionado el set de tems, el equipo DCP sugiere una distribucin de tems por forma,
intentando generar formas equivalentes en trminos cuantitativos y cualitativos, as como tambin
respecto del uso de formatos de pregunta, y la cantidad y tipos de estmulos incluidos. De este modo, se
busca garantizar que los estudiantes respondan cuadernillos de similares caractersticas en su conjunto.
El aspecto principal que se resguarda en este proceso es que cada forma debe cumplir con la matriz
terica para la prueba en cuestin, y que el conjunto de tems seleccionado cumpla con los indicadores
psicomtricos de TRI correspondientes, para lo cual el DCP itera esta etapa con la UAE hasta encontrar
un set de tems que cumpla con todos los requisitos necesarios.
A continuacin, se detallan algunas consideraciones del posicionamiento de las preguntas en cada
cuadernillo de prueba:
Tabla 1.22 Caractersticas del posicionamiento de los tems en cada forma
Caractersticas imprescindibles

-
-
-

No se debe alterar el orden relativo del set de tems de anclaje (entre aos y entre formas).
Debe haber una distancia menor a +/- 5 posiciones en la ubicacin de un mismo tem de anclaje respecto de
su posicin en la prueba definitiva de referencia del ao anterior, e igual distancia con las distintas formas de
la prueba del ciclo en curso.
tems dependientes o encadenados deben ir en formas distintas.
Caractersticas deseables

-
-
-
-

Los primeros tems en cada forma deben ser sencillos y motivadores.


El posicionamiento debe ser consecuente con la lgica de cada disciplina.
Se debe evitar que las preguntas abiertas queden al final de los cuadernillos.
Variedad de claves dentro de cada forma, que no existan patrones evidentes para responder las preguntas, y
el orden de las claves sea similar entre formas.

1.9.7 Entrega para diagramado y vistos buenos


En la etapa final de trabajo del DCP, los especialistas que forman parte del equipo deben iterar el proceso
con los encargados de diseo y diagramacin, resguardando que cada prueba cumpla con las exigencias
que otorgan las caractersticas esenciales a las pruebas Simce 2013. Esto implica chequear si hay errores
tipogrficos, cautelar el tamao y tipo de la fuente, que las ilustraciones que se utilizarn como estmulos
y/o contextos sean adecuadas, que las preguntas tengan la sangra correcta, etc.
Finalmente, el equipo DCP entrega una planilla con toda la informacin necesaria para que la Unidad de
Operaciones de Campo y Logstica (UOCL) de la DELA pueda asumir las responsabilidades de impresin,
distribucin y aplicacin de las pruebas (para ms informacin referirse al captulo 5: Operaciones de
Campo y Logstica).
Los vistos buenos finales, para hacer entrega a la UOCL, pasan por cada encargado de prueba y jefe de
proyecto respectivo (uno para enseanza bsica y otro para enseanza media).
En la siguiente tabla se detallan las pruebas definitivas aplicadas en 2013.

Captulo 1

25

Tabla 1.23 Caractersticas generales de las pruebas definitivas Simce 2013


Grado

rea

2
bsico

Lenguaje y Comunicacin:
Comprensin de Lectura

Ciencias Naturales

Matemtica

4
bsico

Lenguaje y Comunicacin:
Comprensin de Lectura

Matemtica
6
bsico
Lenguaje y Comunicacin:
Comprensin de Lectura

Ciencias Naturales
8
bsico

Matemtica
Lenguaje y Comunicacin:
Comprensin de Lectura
Matemtica

II medio

Nota:

26

Lenguaje y Comunicacin:
Comprensin de Lectura

Forma

N. tems
seleccin
mltiple

N. tems
respuesta
abiertas

Cantidad total
de tems

21

23

21

23

21

23

Da

39

43

29

30

29

30

34

36

34

36

Ea

59

63

30

32

31

33

Ia

49

53

38

40

38

40

Ca

66

70

33

35

33

35

Sa

39

41

31

32

32

33

36

38

35

37

37

39

37

39

41

43

41

44

36

40

38

41

38

41

Forma de prueba extendida, usada para establecimientos con baja matrcula (menos de 10 estudiantes en el nivel
evaluado).

Informe Tcnico Simce 2013

Captulo 2:
Diseo y construccin de pruebas
Nuevos Desarrollos Simce

2.1 Antecedentes
La Unidad de Desarrollos de la Agencia se encarga de la elaboracin de todas aquellas pruebas que se
consideran nuevas, debido a que han sido aplicadas durante los ltimos cinco aos, o bien porque an
se encuentran en etapa de desarrollo. Las pruebas que son elaboradas en esta unidad corresponden
actualmente a Simce Discapacidad Sensorial (DS) 6 bsico, Estudio Nacional de Educacin Fsica y la
Prueba de Escritura. A continuacin, se detallan las etapas de construccin de los instrumentos para
estas pruebas, las cuales siguen una lgica diferente en cuanto a su diseo y al constructo medido.

2.2 Pruebas Simce Discapacidad Sensorial (DS) 2013


2.2.1 Antecedentes
En la actualidad existe una tendencia que busca generar espacios escolares cada vez ms inclusivos,
de lo cual ha resultado un aumento de la diversidad de estudiantes que asisten a los establecimientos
educacionales. En este contexto, estas instituciones han ido asumiendo la atencin de aquellos
estudiantes que presentan algn tipo de necesidad educativa especial (en adelante NEE), sea esta
derivada de una discapacidad o de alguna dificultad de aprendizaje.
Las respuestas educativas de los establecimientos educacionales dirigidas a los estudiantes con NEE
estn respaldadas por un conjunto de normativas legales que han abierto la posibilidad de su desarrollo
y aprendizaje:

Ley General de Educacin N. 20370 del ao 2009, que determina la educacin especial o diferencial
como una modalidad educativa, la que se establece como una opcin organizativa y curricular de
la educacin regular.

Ley N. 20201 del ao 2007, y el Decreto Supremo N. 170/2009 del Mineduc, que determina
los alumnos que sern beneficiarios de la subvencin de educacin especial, diferenciando las
necesidades educativas especiales en transitorias (NEET) y permanentes (NEEP). Las NEET se
refieren a aquellas que requieren apoyos y recursos extraordinarios para asegurar el aprendizaje y la
participacin en el sistema educativo en algn momento especfico de su vida escolar; y las NEEP son
aquellas barreras para aprender y participar, que determinados estudiantes experimentan durante
toda su escolaridad como consecuencia de una discapacidad. Dentro de estas ltimas se encuentran
las discapacidades sensoriales, trastorno autista, discapacidad intelectual y el multidficit.

Ley de la Discapacidad (N. 20422) promulgada el ao 2010, seala que los instrumentos utilizados
para las mediciones de la calidad de la educacin deben considerar las adecuaciones necesarias
para que los estudiantes con NEE puedan participar en ellas.

En concordancia con lo anterior, entre las posibilidades que seala este conjunto de normativas para
la atencin de los estudiantes que presentan NEE se contemplan los establecimientos comunes de
enseanza con programas de integracin, escuelas especiales y aulas hospitalarias.
Si bien las distintas normativas vigentes y las orientaciones entregadas por el Ministerio de Educacin
han permitido un avance, an existen desafos asociados al acceso, calidad y equidad de la educacin

27

para los alumnos con NEE. En este sentido, varios aspectos son relevantes: robustecer las estadsticas que
den cuenta de cifras confiables de la poblacin que presenta NEE; establecer criterios u orientaciones de
adecuaciones curriculares que respondan a la diversidad de estudiantes; avanzar en la actualizacin de
planes y programas para la educacin especial; y, en el caso especfico del Simce, promover la igualdad
de oportunidades mediante el aumento del nmero de investigaciones sobre la progresin del logro
de los objetivos de aprendizaje, tanto de los estudiantes con discapacidad que estn en el sistema de
educacin regular, como de aquellos que asisten a escuelas especiales.

i.

Inclusin de los estudiantes con discapacidad sensorial en evaluaciones Simce

A partir del ao 2009 los estudiantes con NEE se integran a las evaluaciones Simce, comenzando de
este modo una etapa de inclusin educativa que reconoce su idoneidad para participar en los mismos
procesos evaluativos que sus pares sin discapacidad. Asimismo, su incorporacin entrega una visin
ms amplia de los aprendizajes a nivel nacional, adems de entregar herramientas para avanzar en la
inclusin de los estudiantes con NEE en el acceso al currculo general (Thurlow, Elliot y Ysseldyke, 2002;
Elliot y Thurlow, 2006).
La participacin de los estudiantes con discapacidad sensorial en las evaluaciones de logros de aprendizaje
requiri implementar cambios en los materiales y en los procedimientos de las pruebas, con el objetivo
de propender a la medicin de un constructo nico y no a caractersticas asociadas a la discapacidad.
Estos cambios se denominan acomodaciones, y sus objetivos son: permitir en las evaluaciones la
participacin autnoma de estudiantes con discapacidad sensorial, conservar los contenidos evaluados
y eliminar las barreras de acceso.
Una acomodacin es un cambio basado en una necesidad individual, que no produce una alteracin en el
constructo medido y que resulta efectivo para estudiantes que necesitan este cambio. Estos cambios, a
gran escala, buscan colaborar con mediciones que sean ms justas y equitativas, de manera tal que estas
den cuenta de los logros reales alcanzados por todos los estudiantes, incluidos aquellos que presentan
NEE (Hanna, 2005; Thompson y Thurlow, 2002). En general, las acomodaciones se clasifican en cuatro
categoras: presentacin, respuesta, contexto de aplicacin, y tiempo y horario (Thompson, Morse, Sharpe
y Hall, 2005; Thurlow, Elliot y Ysseldyke, 2002).
El ao 2009 se realiz la primera experiencia de evaluacin para los estudiantes de 4 bsico que
presentaban discapacidad sensorial en las regiones Metropolitana y de Valparaso, en las reas de
Matemtica y Lenguaje y Comunicacin: Comprensin de Lectura. Durante los aos 2011 y 2012 esta
evaluacin continu con caractersticas similares, y se incluy al proceso la Regin de Biobo.
Desde el ao 2013 se producen cambios en la aplicacin de las pruebas Simce para estudiantes con
discapacidad sensorial. Se comienza con la evaluacin censal de los estudiantes que cursan 6
bsico, tanto en escuelas regulares como especiales, aplicndose pruebas en las reas de Lenguaje y
Comunicacin: Comprensin de Lectura, y Matemtica. La modificacin en el nivel evaluado se bas en
la normativa de la Ley 20370, que fija ese curso como finalizacin de la educacin bsica. Se espera que
esta informacin ample los resultados de aprendizaje existentes hasta el ao 2012 en esta rea, y de
este modo permita entregar un panorama ms acabado de los aprendizajes alcanzados y su contexto en
la modalidad de educacin especial.
Todas las pruebas de discapacidad sensorial que se han aplicado a lo largo de estos aos incorporan
nicamente preguntas de seleccin mltiple, conservando las habilidades y contenidos evaluados, as
como la dificultad presente en las pruebas regulares Simce. Asimismo, las preguntas de las pruebas
presentan distintos grados de dificultad, con el fin de recoger informacin para clasificar y describir los
distintos niveles de desempeo de los estudiantes con discapacidad.

2.2.2 Caractersticas de las pruebas DS 2013


Los estudiantes con discapacidad sensorial que rindieron esta evaluacin corresponden a aquellos que
presentan discapacidad visual total o parcial y discapacidad auditiva21:
21 Discapacidades definidas en el Decreto N. 170 de 2010 del Ministerio de Educacin.

28

Informe Tcnico Simce 2013

Discapacidad visual total o ceguera (DVT): se presenta cuando la visin del estudiante no es funcional
para la vida cotidiana, considerando siempre la visin del mejor ojo y con la mejor correccin, por lo
que su desempeo se basa en el uso del resto de los sentidos.

Discapacidad visual parcial o baja visin (DVP): consiste en una disminucin de la visin que se
presenta de diferentes modos, sin embargo, la capacidad visual resulta funcional para la vida
cotidiana. Aun cuando la realizacin de acciones que implican el uso de la percepcin visual se ve
perjudicada, resulta posible realizarla mediante la utilizacin de ayudas pticas.

Discapacidad auditiva (DA): corresponde a la alteracin de la senso-percepcin auditiva en diversos


grados, que se caracteriza por presentar limitaciones cuantitativas y cualitativas de la recepcin,
integracin y manejo de la informacin auditiva, fundamental para el desarrollo y la adaptacin. Se
considera en esta categora a aquellos estudiantes que tienen una prdida auditiva igual o superior
a 40 decibeles.

Las pruebas Simce DS 2013 aplicadas con acomodaciones correspondieron al rea de Lenguaje y
Comunicacin: Comprensin de Lectura, y a Matemtica. Estas pruebas, al igual que las pruebas Simce
regulares, evaluaron las habilidades y conocimientos establecidos en los Objetivos de Aprendizaje de 5
y 6 bsico de las Bases Curriculares, que son comunes a los conocimientos y habilidades incluidos en el
Marco Curricular anterior (Decreto N. 256, 2009).
Tanto para la asignatura de Lenguaje y Comunicacin, como para la asignatura de Matemtica, se conservaron
las mismas categoras en cuanto a los ejes de contenidos y dominios cognitivos de las pruebas regulares.

i.

Seleccin de preguntas y textos para pruebas Simce DS 2013

Para evaluar los ejes y habilidades de Lenguaje y Comunicacin: Comprensin de Lectura y Matemtica,
mediante las preguntas y textos presentes en las evaluaciones Simce DS, se llevaron a cabo los
siguientes procedimientos.
El proceso de inclusin de los tems en las pruebas censales Simce DS 2013 se inici el ao 2012 con
la aplicacin de las pruebas experimentales. En estas se incluyeron tems para la aplicacin regular en
conjunto con otro grupo, que inclua cambios en la accesibilidad a estas preguntas. Esto permiti efectuar,
posteriormente, una comparacin del funcionamiento que alcanzaban estos grupos de tems. Para ello,
el Equipo de NEE plante una serie de criterios de accesibilidad, basados en bibliografa especializada,
que guiaron el proceso de modificacin de preguntas. Estos criterios buscaron procurar el acceso a la
informacin de la prueba y, de este modo, generar una mayor posibilidad de acomodacin para los grupos
de estudiantes con discapacidad.
Para determinar el nivel de accesibilidad de los tems originales y efectuar los cambios, se sigui una
serie de lineamientos (que se exponen a continuacin), los cuales se agruparon en los mbitos referidos
al lenguaje utilizado, a los elementos visuales y al diseo empleado en el tem.

Lenguaje:
Presentar las instrucciones y los procedimientos de manera simple y clara, fcil de comprender,
redactado en enunciados de estilo positivo y en voz activa.
Evitar usar palabras poco frecuentes, salvo que estas sean evaluadas o explicadas
contextualmente.
Evitar usar palabras ambiguas, terminologa especializada o extranjerismos, salvo que estos
sean evaluados o explicados contextualmente.
Presentar las opciones de respuesta en la forma ms breve posible.
Evitar utilizar nombres de personas o personajes que sean extensos o de difcil pronunciacin.

Captulo 2

29

Elementos visuales:
Incluir elementos visuales en los tems, solo si son necesarios para evaluar el contenido descrito.
No incluir elementos visuales abarrotados o atestados.
Presentar los elementos visuales con claridad y contraste suficiente.
No utilizar escalas de grises con poco contraste, particularmente en la informacin esencial.
Evitar elaborar preguntas que estn interferidas por habilidades de percepcin visual, en
elementos visuales incluidos.

Diseo:
Evitar textos en reas sombreadas.
Evitar textos presentados de manera vertical o inclinada, o de cualquier otra forma que no sea
de manera horizontal.
No incluir textos de fondo negro con letras blancas.
Evitar tablas con muchas columnas y/o filas.
Evitar un tipo de fuente que pueda confundir visualmente los componentes del enunciado en
un mismo tem (por ejemplo: O y Q; I y l).
Evitar el uso de textos extensos con maysculas.
Evitar el uso de fuentes itlicas, letras decorativas o cursivas.

Asimismo, se consideraron los aportes que reporta la teora de la carga cognitiva, planteada en sus
inicios por John Sweller. Esta teora se centra principalmente en la reduccin de la carga de informacin
en la memoria de trabajo, aumentando la eficacia de la comprensin. Este concepto aplicado a los
instrumentos de medicin apunta a facilitar una adecuada decodificacin de la pregunta, mediante la
evitacin de elementos que sobrecarguen la memoria.
De esta manera, en el proceso de mejora de accesibilidad de las pruebas para la aplicacin experimental
Simce, se desarrollaron dos formas de prueba para Lenguaje y Comunicacin: Comprensin de Lectura,
y una para Matemtica, las cuales incorporaron los tems con modificaciones, de modo de asegurar una
mayor accesibilidad.

2.2.3 Estudios realizados


La elaboracin de las pruebas Simce DS 2013 de 6 bsico se caracteriz por ser un nuevo grado de
evaluacin no solo para los estudiantes con discapacidad sensorial, sino tambin para los estudiantes
sin discapacidad. Por tal motivo, se llev a cabo una etapa de investigacin que tena como fin obtener
informacin sobre el funcionamiento de las acomodaciones en las poblaciones sealadas. Para esto, el
equipo NEE realiz tres estudios que entregaron datos para realizar el ensamblaje de las pruebas Simce
DS del ao 2013.
El primero se llev a cabo con la tcnica pensamiento en voz alta (PVA en adelante) con estudiantes que
presentaban discapacidad visual total (DVT). El objetivo era averiguar la accesibilidad de las imgenes
tctiles relacionadas a los contenidos de Matemtica. En conjunto con esto, se realizaron entrevistas
semiestructuradas a docentes de esta asignatura para conocer las estrategias de enseanza al utilizar
este tipo de imgenes. Un segundo estudio se realiz para identificar el nivel lector de estudiantes con
discapacidad visual total de 6 y 8 bsico; y finalmente, el tercer estudio recopil antecedentes sobre
la cobertura curricular alcanzada por los docentes de las escuelas especiales que atienden a estudiantes
con discapacidad sensorial.

30

Informe Tcnico Simce 2013

A continuacin se presenta una sntesis de cada uno de los estudios sealados:

i.

Barreras de acceso en estudiantes con DVT a las imgenes tctiles en los contenidos de
Matemtica

Durante el ao 2012 se realizaron estudios con el objetivo de evaluar cmo se enfrentan los estudiantes
con discapacidad a las pruebas a gran escala de nuestro pas22. Se estudi el comportamiento de alumnos
de 6 bsico ante pruebas de Matemtica y Lenguaje y Comunicacin, entregando valiosa informacin
acerca de cmo hacer ms accesibles aquellas evaluaciones. Luego, en abril de 2013 se quiso profundizar
en el rea de Matemtica, especficamente con respecto a las imgenes tctiles, motivo por el cual
se trabaj nicamente con estudiantes que presentaran discapacidad visual total. Este estudio indag
en cmo los estudiantes con discapacidad visual total se enfrentan a los aspectos especficos de las
evaluaciones a gran escala en nuestro pas, en esta rea del currculo. Participaron ocho estudiantes de
6 y 8 bsico de dos escuelas especiales, y dos docentes de la asignatura.
A los estudiantes con DVT se les present informacin que permitiera conocer las barreras de acceso a la
informacin visual, esta consisti en imgenes tctiles que abarcaran contenidos relacionados con planos
cartesianos, rectas numricas, medidas estandarizadas, grficos y tablas. Estas propuestas surgieron
a partir de la revisin de los libros escolares, en los que se evidenci una falta de uniformidad para
presentar este tipo de informacin. Mediante la tcnica de PVA, estos estudiantes fueron identificando y
reportando las caractersticas contenidas que les dificultaban la accesibilidad a las imgenes.
Entre las conclusiones referidas a esta investigacin, se encuentran:

Desconocimiento del plano cartesiano, ya que no haba sido una temtica trabajada anteriormente.
Sin embargo, si se explicaba este concepto los estudiantes eran capaces de identificar las
coordenadas, los puntos y las figuras geomtricas dispuestas sobre el plano. Igualmente, los
estudiantes presentaron dificultades para reconocer la recta numrica, y los puntos que se incluan
en esta.

Capacidad de calcular longitudes, a partir de una referencia de medida estandarizada, ya que los
estudiantes haban tenido oportunidades de aprendizaje en las que usaban elementos concretos,
como una regla.

Reconocimiento de grficos de barras, siendo ms clara la informacin cuando las lneas horizontales
que hacan referencia a las cantidades se encontraban por debajo de la barra. Por otra parte, la
leyenda del grfico (informacin que permite diferenciar las barras) les resultaba ms clara cuando
se presentaba en la parte superior de este. Los estudiantes tambin reconocieron los grficos de
crculo, identificando y operando con su informacin. Con respecto a las tablas, los estudiantes
desconocieron el trmino, aunque fueron capaces de identificar la informacin, extraer datos de
esta y operar con ella.

Dificultades para identificar parte de la signografa matemtica, escrita en braille, de porcentaje


(%), smbolo de grado () de los ngulos confundindolos con un cero, y las letras del alfabeto
griego alfa () y beta ().

En relacin a las entrevistas semiestructuradas para los docentes, estos sealaron las dificultades que
tienen para trabajar con imgenes tctiles, como tambin la falta de material para cumplir con este
objetivo. Asimismo, indicaron que el tiempo empleado en la enseanza del plano cartesiano y la recta
numrica es insuficiente, y coincidieron en la falta de uniformidad para presentar la informacin de
tablas y grficos, al utilizar diferentes estrategias para ensear su interpretacin.

22 Consulte el Informe Tcnico Simce 2012 para profundizar en esta informacin.

Captulo 2

31

ii.

Velocidad lectora

Desde el inicio de la aplicacin de la prueba Simce para estudiantes con DVT ha existido cierta
incertidumbre sobre el nivel de dominio lector que presentan los evaluados. Al respecto, cada ao ha
aumentado de manera gradual la cantidad de preguntas incorporadas en esta prueba, ello debido a la
evidencia recopilada a travs de los formularios de control de discapacidad sensorial, en los cuales se
detect que estos estudiantes son capaces de leer mayor cantidad de preguntas que las estimadas
inicialmente en la evaluacin piloto de Simce Discapacidad Visual 2009, aplicada por Mide UC23.
Cabe destacar que no existen investigaciones a nivel nacional que den cuenta del problema descrito
anteriormente. El referente ms prximo corresponde a estudios internacionales, que sealan que la
cantidad de tiempo destinado para leer en braille es mayor a la que se necesita para leer en impresin
convencional de tinta (Ochata, Rosa, Fernndez, y Huertas, 1988).
Considerando que la cantidad de estudiantes por grado que accede a la informacin escrita a travs de
braille es muy baja a nivel nacional, para obtener la informacin descrita anteriormente fue necesario
realizar estudios de caso.
En abril de 2013 se realiz un estudio de velocidad lectora con el objetivo de tener una referencia
sobre la cantidad de palabras que los estudiantes con discapacidad visual total pueden leer por
minuto. Se realiz en dos escuelas especiales de Santiago y consider a ocho estudiantes a quienes
se les aplic el Test de Dominio Lector de Fundacin Educacional Arauco (Marchant, Recart, Cuadrado,
y Sanhueza, 2009).
En relacin a los resultados obtenidos en velocidad de lectura oral promedio, esta correspondi a 33
palabras por minuto.

iii.

Recopilacin de antecedentes de cobertura curricular

En el ao 2013, adems de ahondar en los estudios anteriores, se decidi explorar en la cobertura curricular
de las rea de Lenguaje y Comunicacin y Matemtica, con alumnos con discapacidad visual total y
discapacidad auditiva. El objetivo del estudio fue reportar si existen diferencias en la cobertura del currculo
de estos alumnos, y las complejidades que pueden tener tanto ellos como sus docentes en estas reas. En el
estudio participaron seis docentes pertenecientes a escuelas especiales de la Regin Metropolitana: cuatro
de ellos realizaban clases a estudiantes con DVT, y dos enseaban a estudiantes con DA.
La metodologa de recopilacin de la informacin consisti en un cuestionario en lnea y se refiri a
los contenidos que se impartieron durante el ao 2012. La cantidad de encuestados no permite hacer
generalizaciones al respecto, pero posibilita tener una aproximacin de la labor realizada.
En este cuestionario se consult por los distintos ejes referidos al rea de Lenguaje y Comunicacin,
y a los contenidos y dominios cognitivos contemplados en la asignatura de Matemtica. Asimismo, se
consult sobre el desarrollo alcanzado en cada una de las asignaturas y el nivel de dificultad para ensear
en estas reas del aprendizaje.
Al sealar el nivel de dificultad de enseanza que mostraban los docentes en el rea de Lenguaje,
el eje que present mayor problema fue el de escritura, y el que present menor dificultad fue el de
comunicacin oral. En relacin a las habilidades de Matemtica, las que representaron mayor limitacin
fueron las de argumentar y comunicar, y la habilidad de resolver problemas mostr el menor grado de
dificultad. En relacin a los ejes temticos, el que present menor complejidad en su enseanza fue el de
nmeros y operaciones, y el que present una mayor complejidad fue el eje de medicin.

2.2.4 Ensamblaje de prueba censal DS


Para el ensamblaje de las pruebas censales, tanto en su formato regular como para los estudiantes con
discapacidad sensorial, se establecieron reuniones tcnicas con el DCP. En base a los datos que arroj
la aplicacin experimental, en estas instancias se fueron seleccionando los tems que, cumpliendo con
determinados criterios psicomtricos, fueran ms accesibles para los estudiantes, y, a su vez, facilitaran
23 Mide UC (2008). Resultados aplicacin pre piloto tems Simce 4 bsico adaptados para estudiantes con discapacidad auditiva o visual.

32

Informe Tcnico Simce 2013

el proceso de acomodacin a la poblacin con discapacidad. As, este proceso posibilitara que se
obtuvieran de las pruebas regulares los tems para la prueba Simce DS 2013, evitando la realizacin
de modificaciones posteriores, y centrando las acomodaciones del instrumento en la eliminacin de
barreras que impidieran su acceso universal.

2.2.5 Elaboracin de acomodaciones


La elaboracin de acomodaciones se realiz una vez llevada a cabo la revisin de accesibilidad de los tems
regulares y una vez realizados los estudios sobre la accesibilidad de estudiantes con DVT. A diferencia
de los ciclos anteriores24, en esta ocasin la prueba Simce DS 2013 estuvo constituida por preguntas
que, en sus inicios, fueron revisadas con criterios de accesibilidad. Por lo tanto, las acomodaciones que
se dispusieron para las pruebas DS fueron especficas para los distintos tipos de discapacidades que
presentan los estudiantes.
Las acomodaciones que finalmente se incorporaron al instrumento fueron las siguientes:

Formato de la prueba en braille: presentacin de las pruebas a los estudiantes con discapacidad
visual total a travs de cdigos impresos por puntos en relieve.

Imgenes tctiles: presentacin de imgenes, grficos, diagramas o ilustraciones en relieve,


hacindolas accesibles a los estudiantes con discapacidad visual total a travs del tacto.

Formato de la prueba en macrotipo: presentacin de la informacin (textos, instrucciones y notas


al pie de la pgina) en letra Arial 24 para los estudiantes con discapacidad visual parcial. Tambin
considera la ampliacin, reubicacin o ajuste de las imgenes.

Omisin y/o ajuste de imgenes: en los casos pertinentes en los que no se viera afectado el
constructo evaluado, se simplificaron los detalles de las imgenes, se modific la ubicacin espacial
de estas, o se eliminaron las que no eran posibles de acomodar al formato braille o al macrotipo.

2.2.6 Ensamblaje de pruebas


El proceso de ensamblaje de las pruebas Simce DS se desarroll de forma posterior al proceso de seleccin
y ensamblaje de cuadernillos que realiz el DCP, debido a que era necesario contar con informacin certera
sobre los textos y preguntas consideradas en la prueba Simce.
A continuacin, se procedi a elaborar una matriz de las pruebas de manera similar a la existente en la
prueba regular. Para ello, el equipo de NEE ejecut las siguientes tareas:

Seleccin de preguntas: se procur que la evaluacin para discapacidad sensorial fuera una subprueba
representativa de la prueba regular. Para esto, se consider que las formas de las subpruebas de
discapacidad sensorial tuvieran el mismo porcentaje de distribucin de los ejes de habilidades y
contenidos evaluados. Esto tuvo por objetivo que las habilidades medidas en los estudiantes con
discapacidad sensorial fueran similares a las de los estudiantes sin discapacidad.

Posicionamiento de las preguntas de equiparacin: se consider la posicin de las preguntas en la


prueba regular definitiva 2013, realizndose un clculo para mantener las posiciones de las pruebas
para estudiantes con discapacidad sensorial con no ms de 5 posiciones de diferencia. Para esto, se
consider la totalidad de preguntas de la prueba regular, su posicin original y la cantidad similar
de preguntas de alguna de las formas de la prueba regular.

Simulacin de las curvas estadsticas y de informacin: se realiz para las pruebas de Matemtica
y Lenguaje y Comunicacin: Comprensin de Lectura de las tres subpoblaciones25 evaluadas (ver
anexo C). Estas simulaciones permitieron obtener informacin sobre los niveles de dificultad de cada

24 Refirase al Informe Tcnico Simce 2012 para los ciclos de evaluacin anteriores.
25 Estudiantes con discapacidad visual total, parcial y discapacidad auditiva.

Captulo 2

33

una de las subpruebas DS, al compararlas con las curvas caractersticas de las pruebas regulares,
procurando que la dificultad fuera similar a la de estas ltimas.

Cabe sealar que los datos referenciales psicomtricos utilizados en las simulaciones anteriormente
descritas corresponden a la prueba Simce regular, por lo tanto, una posible desventaja de estos
datos es que han sido experimentados solamente con la poblacin total.

Posicionamiento final de las preguntas y textos: una vez aprobadas las simulaciones, se posicionaron
las preguntas de menor dificultad al inicio y al final de cada prueba, mientras que las preguntas de
mayor dificultad quedaron ubicadas en posiciones intermedias, lgica de ensamblaje que se aplica
en las otras pruebas Simce.

Una vez finalizadas estas tareas se armaron tres formas de prueba, de acuerdo al tipo de discapacidad
objetivo, las cuales contenan entre 33 y 36 preguntas de seleccin mltiple, tal como se muestra a
continuacin:
Tabla 2.1 Formas prueba Simce DS 2013
Discapacidad
Visual parcial
Visual total
Auditiva

rea

Cantidad de preguntas

Comprensin de Lectura

34

Matemtica

35

Comprensin de Lectura

33

Matemtica

34

Comprensin de Lectura

34

Matemtica

36

2.2.7 Acomodaciones dispuestas para la aplicacin de las pruebas Simce DS 2013


Para que los estudiantes con discapacidad sensorial contaran con igualdad de condiciones para rendir
las pruebas, en las capacitaciones26 dirigidas a los examinadores se inform sobre las acomodaciones
permitidas durante la evaluacin:

Acomodaciones de presentacin, las cuales permiten a los estudiantes el acceso a la informacin de


la prueba sin recurrir a la comprensin de lectura visual estndar. Las utilizadas fueron:
Formato de la prueba en braille: los contenidos de las pruebas son presentados a los estudiantes
con discapacidad visual total a travs de cdigos impresos en puntos en relieve.
Imgenes tctiles: imgenes, grficos, diagramas o ilustraciones son presentados en relieve,
accesibles al estudiante con discapacidad visual total a travs del tacto.
Formato de la prueba en macrotipo: los textos, instrucciones y notas al pie de pgina para
los estudiantes con discapacidad visual parcial son presentados en letra arial de 24 puntos.
Tambin se incorpora la ampliacin de imgenes.
Uso de dispositivos de aumento: a los estudiantes con discapacidad visual parcial o auditiva se
les presenta la opcin de usar durante la prueba algunas ayudas tcnicas, tales como equipos
FM, lupas, atriles, lentes con aumento, entre otros.
Lengua de seas: el examinador, a travs de la lengua de seas, entrega a los estudiantes con
discapacidad auditiva las instrucciones al inicio de la prueba.

26 Los examinadores de la prueba Simce DS participaron de una capacitacin especfica sobre los procedimientos correspondientes a esta evaluacin.
Para mayores detalles, consulte la parte II del presente informe: Operaciones de Campo.

34

Informe Tcnico Simce 2013

Acomodaciones de respuesta, las que permiten a los estudiantes completar las evaluaciones de
diferentes maneras, o resolver y organizar problemas utilizando algn tipo de dispositivo:
Escritura en braille: los estudiantes con discapacidad visual total escriben con este sistema, en
una hoja de respuestas, el nmero de la pregunta y la letra de la alternativa. Para esto, cada
estudiante utiliza la mquina de escribir braille, o bien la regleta y el punzn.
Uso del baco: los estudiantes con discapacidad visual total utilizan el baco como dispositivo
de clculo. El uso de esta herramienta es equivalente al uso del lpiz y el papel para los
estudiantes sin discapacidad visual.
Responder en el cuadernillo de prueba: los estudiantes con discapacidad visual parcial y auditiva
responden directamente en el cuadernillo de la prueba y no en una Hoja de Respuestas.

Acomodaciones del contexto de aplicacin, que se refieren a los cambios en la localizacin o


en las condiciones del lugar que el estudiante ocupa para desarrollar la evaluacin. La principal
acomodacin de este tipo es:
Ubicacin del estudiante: en los establecimientos regulares los estudiantes con discapacidad
sensorial son ubicados delante de la primera fila en la sala de clases, con el fin de permitir un mejor
acceso a las instrucciones de la prueba; tambin facilita el uso de ayudas tcnicas, y permite una
mejor iluminacin y un mejor espacio para su desenvolvimiento durante la aplicacin.

2.2.8 Anlisis cualitativos y cuantitativos


La Unidad de Anlisis Estadstico entreg curvas empricas del porcentaje de respuestas correctas
logrado por los estudiantes con discapacidad visual parcial y auditiva para las pruebas de Lenguaje y
Comunicacin: Comprensin de Lectura y Matemtica. A travs de las curvas fue posible analizar el
rendimiento que tuvieron los estudiantes en cada una de las preguntas, el que trajo consigo un anlisis
cualitativo posterior. En el caso de los estudiantes con discapacidad visual total no se realizaron las curvas
empricas, debido a la cantidad insuficiente de alumnos que rindieron las pruebas. En esta situacin, se
realiz un anlisis cualitativo apoyado en la revisin de los porcentajes de respuestas correctas.
Una vez finalizado este proceso, y a modo de conclusin, se seala la relevancia de los avances en la
inclusin de los principios de accesibilidad al momento de contemplar los tems que seran incorporados
a las pruebas de discapacidad sensorial, permitiendo, adems, que aquellas preguntas que incorporan
cambios basados en la accesibilidad fueran incluidas en las pruebas regulares. Este aspecto facilit el
proceso de desarrollo de las acomodaciones y la reduccin de estas para las preguntas de los estudiantes
con discapacidad sensorial.
Por ltimo, se proyecta para los prximos ciclos una tarea desafiante: integrar el enfoque de accesibilidad
desde el momento de la elaboracin de los tems, de manera de posibilitar la eliminacin de barreras de
acceso y la minimizacin del uso de acomodaciones.

2.3 Prueba Simce Lenguaje y Comunicacin: Escritura


2.3.1 Antecedentes
La prueba Simce Lenguaje y Comunicacin: Escritura 2013, tiene como referencia conceptual las Bases
Curriculares que se encuentran en vigencia (Decreto N. 439 de 2012), por lo que, en concordancia con
lo que en ellas se plantea, la escritura se entiende como una habilidad general que permite satisfacer
mltiples necesidades en diferentes mbitos: desde el mbito de la persona, a travs de la expresin de
la interioridad y el orden del pensamiento; hasta la esfera interpersonal, en la que intervienen aspectos
como la construccin de una memoria social, comn y, crucialmente, la comunicacin.

Captulo 2

35

El foco en lo comunicativo se refuerza en las Bases Curriculares 2012, al declarar que se escribe para
algo y para alguien, lo que permite instalar el propsito y la audiencia como parmetros que deben estar
presentes al momento de escribir, y que, por lo tanto, deben ser considerados en el diseo de la prueba.
As tambin, el eje de escritura en las Bases 2012 busca que los estudiantes dominen las habilidades
necesarias para expresarse eficazmente y usen la escritura como herramienta para aprender. De este
modo, la mayora de los Objetivos de Aprendizaje que presentan las Bases Curriculares se orientan a la
adquisicin de herramientas que permitan al estudiante usar la escritura de manera eficaz para lograr
variados propsitos.
Por otra parte, la definicin que se hace de escritura tambin se enmarca en una visin de proceso, en
la que se toma en consideracin que la escritura no es solo el producto, sino tambin todas las acciones
que se movilizan para llegar a este. La perspectiva de la escritura como proceso permite al alumno
establecer propsitos, profundizar las ideas, trabajar con otros, compartir sus creaciones y centrarse
en diferentes tareas necesarias para la produccin. () En consecuencia, los Objetivos de Aprendizaje
referidos al proceso de escritura estn orientados a que el alumno adquiera las herramientas para
convertirse en un escritor cada vez ms independiente, capaz de usar la escritura de manera eficaz para
lograr diversos propsitos y expresar su creatividad, su mundo interior, sus ideas y conocimientos (Bases
Curriculares, 2012, p. 20).

2.3.2 Medicin de escritura a gran escala: habilidades evaluadas y formatos


La medicin a gran escala de la escritura es un tema en desarrollo en el mbito educacional, ya que
presenta una serie de desafos en su implementacin. En Chile, en el ao 2008 se realiz una primera
aproximacin con estudiantes de 4 bsico mediante una evaluacin de tipo muestral, lo que entreg
las primeras luces acerca de esta habilidad en la poblacin estudiantil. En el ao 2012 nuevamente se
aplic una prueba de escritura a una muestra representativa, pero en esta oportunidad a estudiantes de
6 bsico. Esta ltima medicin tuvo un carcter exploratorio, y tuvo el fin de entregar un diagnstico de
las habilidades de produccin escrita de los estudiantes en su ltimo ao de ciclo bsico.
La prueba Simce Escritura 2013 evala la planificacin, produccin, revisin y edicin de textos
-principalmente a travs de tems de produccin escrita y, en algunos aspectos especficos, de opcin
mltiple y ordenacin cuyo principal objetivo es dar solucin a un dilema comunicativo, lo cual implica
que el escritor ponga sus habilidades al servicio del propsito y de la audiencia como elementos de base.
Las habilidades que se evalan en los tems estn presentes en los objetivos de aprendizaje esperados
para un estudiante desde 2 a 6 bsico. De esta manera, se espera que los estudiantes puedan
demostrarlas produciendo textos con ideas coherentes y referidas a un tema, desarrollando las ideas,
incorporando vocabulario preciso y variado, incorporando elementos de cohesin, cumpliendo con las
convenciones de la lengua escrita, a partir de lo descrito en las Bases Curriculares. Adems, se espera que
sean capaces de resolver problemas de planificacin, edicin y revisin propuestos mediante preguntas
de otros formatos.
En el ao 2013 se aplic, por primera vez, la prueba Simce Escritura de manera censal. Para disear la
prueba se cont con la asesora de ETS (Educational Testing Service), organizacin sin fines de lucro lder
en medicin educacional. La asesora arroj las siguientes recomendaciones:

Foco en la produccin masiva y en el pilotaje de estmulos.

Adopcin de un modelo holstico con el mayor nmero de categoras posibles.

Ensamblaje de cuadernillos que incluyan dos estmulos de produccin escrita y un par de bloques de
preguntas de seleccin mltiple (3 o 4 opciones).

Doble correccin del 100% de las respuestas, teniendo una calibracin diaria previa. La resolucin
de inconsistencias mayores a un nivel de la rbrica, deba resolverse va juez externo.

Uso de teora clsica.

36

Informe Tcnico Simce 2013

La equiparacin entre formas a travs de un diseo de grupo aleatorio, e tems repetidos para la
equiparacin entre aos.

Publicacin de modelos de pruebas con mltiples ejemplos, y liberacin masiva de tems.

2.3.3 Ejes de habilidad


Para la prueba Simce Escritura 2013 se consideraron cuatro habilidades centrales: produccin,
planificacin, revisin y edicin.

Habilidad de produccin de textos

i.

Con respecto a la produccin escrita de los estudiantes, se contemplaron tres propsitos comunicativos
que guan el texto que los estudiantes producen y sobre el cual deben poner en prctica sus habilidades
de produccin textual, que se desprenden de las Bases Curriculares 2012. Estos propsitos comunicativos
fueron: narrar, informar y compartir impresiones sobre sus lecturas (ver Tabla 2.2).
Tabla 2.2 Propsitos comunicativos evaluados en la prueba Escritura 2013
Propsito textual

Descripcin

Compartir opiniones sobre


sus lecturas

Agrupa aquellas tareas de escritura concebidas para producir textos en los


que se comparten opiniones fundamentadas sobre un texto ledo.

Informar

Agrupa aquellas tareas de escritura concebidas para producir textos en los


que se presenta o proporciona informacin de diversa ndole. En algunos
casos, deben producir textos en los que exponga informacin que se les
presenta en el estmulo a modo de infografa, y en otras ocasiones solo
deben usar conocimientos previos.

Narrar

Considera la habilidad para producir textos que se refieren a


acontecimientos, reales o ficticios.

Se desarroll una matriz de evaluacin para determinar la cantidad de tems de produccin escrita
para cada uno de los propsitos, lo cual se acord con los profesionales de la Unidad de Currculum
del Mineduc.

ii.

Habilidades de planificacin, revisin y edicin

La planificacin, revisin y edicin son parte fundamental del proceso de escritura. La literatura nos dice
que estos procesos no ocurren en forma secuencial, sino ms bien suceden simultneamente, con mayor
o menor presencia en uno u otro momento de la escritura (Rijlaarsdam y Van den Bergh, 2006). Por
ejemplo, la planificacin se usa principalmente al inicio de la escritura, sin embargo, mientras se escribe
se modifica la planificacin o se puede redisear la misma. Por lo tanto, la primera consideracin es que
el proceso no es lineal y que hay que considerar que la planificacin, edicin y revisin no son procesos
que se suceden linealmente.
Para esta prueba se considera que la planificacin es la habilidad de organizar las ideas que componen
un escrito, dado que otros aspectos de la planificacin no son posibles de ser evaluados, por el momento,
mediante una prueba a gran escala. En cuanto a la revisin de textos, se entiende que esta involucra
todos los procedimientos que realiza un estudiante para asegurar que el texto se comprenda y que
est organizado de manera coherente. Adems, en la revisin se contempla la incorporacin de ms
informacin. Finalmente, en la edicin se observan principalmente las convenciones de la lengua
(puntuacin y ortografa), y las modificaciones que requiere un texto para que est mejor cohesionado.
La planificacin, revisin y edicin se evalan indirectamente en las preguntas diseadas para evaluar la
produccin escrita de los estudiantes. Sin embargo, para tener una evaluacin directa de las habilidades

Captulo 2

37

de planificar, revisar y editar, y as ampliar la evaluacin del constructo de Escritura, se incorporaron


preguntas de seleccin mltiple y ordenacin, las que permitieron abordar estas habilidades.
Dadas las caractersticas del constructo y la necesidad de evaluar una poblacin muy amplia, la
construccin de esta prueba tiene algunas limitaciones. En primer lugar, se hace complejo evaluar el
proceso completo de la escritura de un texto, debido a que no se evala la hoja de planificacin, porque
no hay registro de los borradores previos, ni la de las revisiones y cambios que realiza el estudiante, etc.,
las que permitiran mejorar la evaluacin del constructo. Sin embargo, el formato seleccionado es el que
mejor se adeca al objetivo de evaluar, considerando la poblacin y las restricciones que se tienen.

2.3.4 Matriz de evaluacin


El proceso de definicin de la matriz de evaluacin27 se inici con el establecimiento de las tareas de
escritura posibles de evaluar. Estas se asociaron a cada habilidad de escritura, concluyendo en la definicin
de las matrices de acuerdo a la representatividad de cada habilidad y de los propsitos textuales de las
Bases Curriculares 2012, de 2 a 6 bsico, con foco en 5 y 6.
La decisin de realizar dos matrices obedece a que, dado que esta es una prueba de escritura, los dos
primeros tems son de produccin textual y los tems restantes son de otros formatos. En cuanto a la
relacin entre cantidad de tems y puntuacin, los tems de produccin textual son los que ms peso
tienen (70%)28. No pueden ser ms de dos, pues la escritura significa un esfuerzo cognitivo mayor para
los estudiantes. Una matriz es para la produccin textual, que est divida en propsitos; y la otra es para
las habilidades de planificacin y de revisin/edicin.
Tabla 2.3 Matriz terica por habilidad, prueba Escritura 6 bsico
Matriz terica por subproceso prueba censal 2013

Porcentaje

Planificacin

20%

Revisin y edicin

80%

Nota: Las Tablas 2.3, 2.4 y 2.5 presentan el porcentaje de ponderacin de cada habilidad,
propsito y seccin evaluada en la prueba Escritura, 6 bsico.

Tabla 2.4 Matriz terica por propsito textual, prueba Escritura 6 bsico
Matriz terica por propsito textual prueba censal 2013

Porcentaje

Narrar

45%

Informar

45%

Compartir impresiones sobre lecturas

10%

Tabla 2.5 Matriz terica de ponderacin para la prueba Escritura 6 bsico


Matriz terica de ponderacin de las dos secciones de la prueba

Porcentaje

Parte I: Produccin escrita

70%

Parte II: Planificacin, revisin y edicin

30%

Es importante mencionar que cada una de las matrices corresponde a la representacin de la prueba
total y no de cada forma.

27 En la matriz de evaluacin se establecen los objetivos de evaluacin que se considerarn y las ponderaciones que cada uno de los objetivos, o
grupos de objetivos, tiene en la prueba. Esto permite determinar las cantidades de preguntas de cada objetivo que se incorporan en las formas de
la prueba.
28 Las ponderaciones de la prueba se establecieron mediante procedimientos de juicio de expertos, para lo cual fueron consultados los profesionales
de la Unidad de Currculum y Evaluacin.

38

Informe Tcnico Simce 2013

Diseo de equiparacin

i.

Para el ensamblaje de la prueba se utiliz el diseo de equiparacin de grupos aleatorio, el que consisti
en asignar al azar las distintas formas de la prueba al grupo de examinados. Las formas de la prueba
fueron ocho en total, denominadas por las letras: D, E, G, H, I, K, L y M.
Adicionalmente, la prueba se dise en bloques para implementar una equiparacin entre formas a travs
de contrabalanceo de bloques, con la finalidad de realizar un chequeo externo y un estudio posterior
sobre otro posible diseo de equiparacin.
Los bloques que se disearon fueron los siguientes:

B1 a B8: conjunto de tems referidos a los OE de produccin textual. Cada bloque estaba compuesto
por dos tems, los cuales alternaban su posicin segn el propsito textual al que apuntaba la
produccin (narrar, informar y compartir impresiones sobre lecturas).

B9 y B11: bloques compuestos por cuatro tems cada uno, referidos al OE de planificacin.

B10 y B12: bloques compuestos por diez u once tems cada uno, referidos a los OE de revisin y
edicin de textos.

Las formas fueron ensambladas para crear un balance entre bloques relativos a dominios cognitivos y
a un tipo de formato de tem. Los dos primeros bloques de cada forma (B1 a B8), correspondieron a dos
preguntas de produccin escrita; luego, dentro de los bloques de planificacin, se incluyeron tems con
formato de seleccin mltiple y de ordenacin.
Respecto de la equiparacin entre formas, esta sigui una lgica de repeticin y balanceo de los bloques
de planificacin y de revisin/edicin. Por ello, encontraremos que en las formas D, G, I, L, los tem del 3 al
6 corresponden al OE de planificar y los tems restantes a los OE de revisar/editar; a la inversa de lo que
ocurre con las formas E, H, K, M, en las que los tems del 3 al 13 o del 3 al 14 refieren a los OE de revisar/
editar y los ltimos cuatro al OE planificar.
El diseo de bloques para el ensamblaje se muestra en la siguiente tabla:
Tabla 2.6 Diseo de bloques para el ensamblaje de cuadernillos, prueba censal Escritura 6 bsico
Formas
Bloques

B1

B2

B3

B4

B5

B6

B7

B8

B9

B10

B11

B12

B9

B12

B11

B10

B10

B11

B12

B9

B12

B11

B10

B9

2.3.5 Caractersticas de la prueba

La prueba est dividida en dos partes: en la primera, se ubican los dos tems de desarrollo que
evalan la produccin escrita; en la segunda, los tems de otros formatos (entre 14 y 15 tems) que
evalan el proceso de planificacin y revisin/edicin de textos.

Portada y portadillas: se elabor una portada con las instrucciones generales de la prueba. Luego,
antes de cada parte de la prueba, se incluy una portadilla con las instrucciones especficas sobre
cmo responder cada uno de los tems. Para cada tipo de tem, se puso un ejemplo de respuesta.

Espacio para planificar y organizar ideas: para esta prueba se incorpor por primera vez un espacio
para que los estudiantes pudieran planificar sus ideas antes de escribirlas. Este espacio se acompaa
con dos sugerencias de tcnicas para planificar (lluvia de ideas y anotar las ideas previamente). Este
espacio no es evaluado, y por ende, su uso no es obligatorio.

Preguntas para la revisin de los textos escritos: al igual que el espacio y las tcnicas de planificacin,
en esta prueba se incluyeron por primera vez preguntas para la revisin de textos, con el objetivo de

Captulo 2

39

que los estudiantes pudieran revisar y editar sus propios textos en base a cuatro criterios: propsito,
organizacin, desarrollo de ideas y claridad.

2.3.6 Elaboracin de tems


Para la elaboracin de tems se contrat a ocho profesionales con experiencia en elaboracin de
tems para las preguntas de produccin textual y de otros formatos, en ocho sesiones de trabajo.
Cada elaborador fue seleccionado de acuerdo al cumplimiento de perfil indicado por la Agencia, y
fue capacitado en una primera instancia. Es as, como cada elaborador entreg una cantidad de tems
semanales que fueron revisados y retroalimentados por profesionales de la Agencia, de acuerdo a los
siguientes criterios de calidad.

i.

Criterios de calidad de los estmulos

Los elaboradores recibieron un documento de especificaciones tcnicas para la elaboracin de los tems.
En l se especificaba que los estmulos deban plantear:

Un dilema comunicativo que se resolviera normalmente por escrito y que fuera plausible para los
estudiantes.

Una situacin autntica, significativa y no traumtica o violenta para los estudiantes de 6 bsico.

Una situacin libre de valoraciones negativas o estereotipadas de grupos tnicos, religiosos, de


gnero u otros, y que evitara referirse a acciones controversiales y/o polmicas.

Adems, se esperaba que un estmulo:

Entregara, de manera explcita o claramente sugerida, el propsito comunicativo, y que este


concordara con los objetivos de la evaluacin.

Especificara la audiencia que deba considerar el escritor para su texto, cuando la situacin lo
ameritara.

Indicara el tema del texto, y que este fuera adecuado e interesante para los estudiantes de 6 bsico.

Entregara de manera explcita o claramente sugerida el gnero discursivo a cuyas caractersticas se


deba adscribir el texto, cuando la situacin lo ameritara.

ii.

Criterios de calidad de un estmulo sugeridos por el panel de expertos

Adems de los criterios de calidad descritos en el documento Especificaciones tcnicas para la


elaboracin de tems de Escritura, para la seleccin y mejora de los tems que se incluiran en la prueba,
se realizaron sesiones consultivas con paneles de expertos. Tras estas sesiones, los expertos29 sugirieron
incorporar los siguientes lineamientos:

Planteamiento de una situacin comunicativa en el estmulo: cada estmulo deba contener siempre
el propsito para el que se escriba y, tambin, el tema y la audiencia (salvo en casos como narrar
a travs de un cuento). Adems, siempre que fuera necesario, se deba indicar el gnero discursivo
(aunque no se evaluara la estructura textual).

Uso de instrucciones simples: redaccin de las instrucciones con una sintaxis y un lxico simples,
para disminuir la dificultad de comprensin del estmulo.

29 Los expertos consultados fueron: Soledad Concha, Doctora en Educacin (EDD), Universidad de Boston, EE.UU., profesora de la Facultad de Educacin,
Universidad Diego Portales; Alejandra Medina, quien trabaj en el Ministerio de Educacin en enseanza de lengua materna, y ha publicado sobre
evaluacin de escritura y otros aspectos de la literacidad; Guillermo Soto, quien es profesor asistente del Departamento de Lingstica y Centro de
Estudios Cognitivos, Universidad de Chile; Carmen Sotomayor, Doctor en Pedagoga de la Lengua Materna, Universidad Catlica de Lovaina, Blgica,
quien trabaja en el Centro de Investigacin Avanzada en Educacin (CIAE).

40

Informe Tcnico Simce 2013

Utilizacin de gneros y temas familiares para los estudiantes: motivar la escritura y disminuir
el sesgo cultural. Consideracin de algunos gneros como el correo electrnico, que permitieran
ciertas convenciones del uso de la lengua (como emoticones o abreviaciones), que son difciles de
evaluar en una prueba estandarizada como esta.

Incorporacin de ideas para escribir: en algunos tems que lo requiran, se incorporaron ideas para
escribir a modo de ayuda (por ejemplo, para aquellos textos con propsito informativo que no tenan
un texto del cual se pudiera desprender informacin). Estas ideas se separaron de la instruccin del
estmulo, para facilitar su comprensin por parte de los estudiantes.

iii.

Pilotos

Luego de la elaboracin de los tems, se llevaron a cabo dos pilotos.


El primer piloto tuvo como foco seleccionar aquellos tems que tuvieran un buen comportamiento
mtrico. Este piloto fue realizado en julio del 2013 a una muestra representativa de estudiantes de la
Regin Metropolitana, probndose 49 tems en total.
Un segundo piloto fue realizado en agosto del mismo ao, con el propsito de indagar sobre el efecto de la
inclusin de las ayudas para planificar, y las preguntas de revisar/editar las respuestas de produccin escrita.
Adicionalmente, se realizaron cuatro grupos focales para ahondar en estos aspectos. Dicho piloto arroj
que la inclusin de estas preguntas de ayuda no afectaba la calidad de las respuestas, adems se concluy
cul era la mejor posicin dentro del formato de la prueba que facilitaba la comprensin de los estudiantes.

2.3.7 Criterios y pautas de evaluacin


i.

Puntuacin de la prueba Simce Escritura

En la prueba Simce Escritura 2013, con el propsito de asignar un puntaje a la seccin de produccin
escrita, los textos fueron corregidos usando una Pauta Holstica, dado que esta entrega informacin
general sobre la calidad de la escritura y es til en evaluaciones a gran escala.
Por lo tanto, el puntaje promedio que se report a los establecimientos se obtuvo de la siguiente manera:

Produccin escrita de los estudiantes corregida mediante la Pauta Holstica, 70% del puntaje.

Preguntas en otros formatos (seleccin mltiple y ordenacin), 30% del puntaje.

ii.

Pauta Analtica

Asimismo, para que los establecimientos pudieran visualizar debilidades y fortalezas en los textos escritos
por sus estudiantes, el panel de expertos sugiri tambin analizar las respuestas de los estudiantes con
una Pauta Analtica, que identificara y evaluara diferentes indicadores de los textos, y entregara mayor
informacin a las escuelas para la toma de decisiones didcticas. De esta manera, los docentes pueden
visualizar qu aspectos son relevantes para la mejora de la escritura de sus estudiantes y focalizarse en
aquellos aspectos que consideren prioritarios. La puntuacin obtenida en la Pauta Analtica no influye
en el puntaje, pero se correlaciona cercanamente con el puntaje obtenido mediante la Pauta Holstica.

iii.

Criterios de evaluacin para la Pauta Analtica y elaboracin de rbricas30


Elaboracin de rbricas:
El proceso de correccin comenz con la elaboracin de rbricas. Para la prueba de escritura se
utilizaron dos rbricas de correccin: una holstica y una analtica. Se opt por este procedimiento,
dado que el panel de expertos que asesor la elaboracin de las rbricas estim que, aunque la Pauta
Holstica era necesaria para hacer una evaluacin estandarizada, tambin era necesario entregar

30 Para una descripcin completa de la elaboracin de pautas y de la correccin, o para consultar las rbricas, revise el anexo B de este documento.

Captulo 2

41

informacin ms detallada a las escuelas, que les permitiera tomar decisiones pedaggicas. La
literatura revisada apoya esta recomendacin (Persky, 2012; Swain S. y Le Mathieu, 2012; Bacha, 2001;
White, 2009).
La Pauta Holstica fue utilizada para corregir las preguntas de produccin escrita, segn cada
propsito comunicativo evaluado (narrar, informar y comentar lecturas). La Pauta Analtica
fue utilizada para corregir las preguntas de produccin escrita, y consider cinco indicadores:
adecuacin a la situacin comunicativa, desarrollo de ideas, coherencia, cohesin y convenciones
ortogrficas (puntuacin). Las rbricas utilizadas se adjuntan en el anexo B.
Las pautas para la produccin escrita fueron desarrolladas en conjunto con un equipo de expertos
de escritura desde el 10 de diciembre del 2013 al 6 de enero del 2014. Las pautas (que incluyen una
holstica y una analtica por cada propsito de escritura) contemplan cinco niveles: 1 al 4 (donde 1
es el criterio menor y 4 el criterio mejor logrado), y 0 (respuesta ilegible).
Se desarrollaron tres pautas, cada una para un propsito textual diferente: narrar, informar a partir
de una infografa y opinar sobre un texto. Durante el ajuste de la rbrica, al contrastar con los textos
escritos por los estudiantes, se evidenci que era necesario agregar una pauta ms para corregir los
estmulos que solicitaban informar sin entregar infografas a los estudiantes.
Por otra parte, se normaliz que las preguntas de produccin escrita tuvieran ocho puntos mximo
cada una y las preguntas de respuesta breve se corrigieran de forma dicotmica: 0 para las incorrectas
y 1 punto para las respuestas correctas. Para evaluar las respuestas de prueba de Escritura segn la
Pauta Analtica, el panel de expertos sugiri utilizar los siguientes indicadores de calidad:
Adecuacin al propsito: cada uno de los estmulos de la prueba de Escritura plantea un
problema comunicativo que el estudiante debe resolver mediante produccin escrita. Estos
proponen al estudiante una situacin comunicativa que debe tomar en consideracin al
elaborar su texto. Por ejemplo: si en el estmulo se le pide que informe sobre las tradiciones
de Chile, el estudiante, en el texto, debe cumplir con este propsito de la manera ms efectiva
posible.
Al medir la adecuacin al propsito, se promueve que el escritor se adece a la situacin
comunicativa, aborde el tema que se le propone en el estmulo, y as logre cumplir con lo
solicitado.
Desarrollo de ideas y vocabulario: uno de los aprendizajes de un escritor es comprender que
el interlocutor no posee los mismos conocimientos y experiencias que l. Para comunicarse
de manera efectiva, es necesario transmitir suficiente informacin como para que el lector
sea capaz de recrear una situacin, comprender una informacin o entender cmo se
fundamenta una opinin.
Al evaluar el desarrollo de ideas, se considera que el estudiante sea capaz de incorporar toda la
informacin relevante que el lector necesita para comprender el tema que se desarrolla.
Coherencia: un texto coherente es aquel que se comprende fcilmente, y que establece
relaciones de sentido entre las distintas partes del texto para asegurar su interpretacin.
Para evaluar la coherencia, se toma en cuenta si las ideas estn bien estructuradas, si el texto
es autnomo o necesita de otros elementos para ser comprendido, si las ideas estn enfocadas
al tema, o si el texto contiene digresiones que interrumpen o cortan la progresin de las ideas.
Cohesin: un texto cohesivo es aquel que el lector puede seguir con facilidad y que est bien
hilado, porque el lenguaje es usado de manera efectiva para guiar la lectura del destinatario.
Para que un texto est bien cohesionado es necesario utilizar procedimientos gramaticales y
lxicos que permiten y marcan la construccin de las relaciones de sentido que estn presentes
en el texto. Para evaluar el uso de estos, se consideraron el empleo de marcadores textuales,
conectores, elisiones y sustitucin (sinnimos y/o pronombres).
Convenciones ortogrficas (ortografa puntual): En convenciones ortogrficas se evala el uso
de la puntuacin de los estudiantes, considerando maysculas, comas y puntos. La puntuacin

42

Informe Tcnico Simce 2013

es crucial para la eficacia comunicativa de un texto, ya que establece lmites entre ideas y, al
utilizarla o emplearla de manera equivocada, se puede cambiar el sentido de un texto.
Para evaluar las convenciones ortogrficas se consideraron los usos de la puntuacin que estn
presentes en las Bases Curriculares 2012 y que aportan claridad a los textos escritos por los
estudiantes.

Ajuste de rbricas:
Una vez desarrolladas las rbricas se elaboraron manuales para la correccin de cada una de las
preguntas abiertas. Estos documentos tienen como objetivo guiar la correccin de las preguntas
aplicadas. Cada manual incluy la pauta que corresponde a cada pregunta, definida por propsito
textual, y cinco ejemplos de textos escritos por alumnos representativos para cada uno de los
niveles de la Pauta Holstica. Cada uno de los ejemplos fue comentado con fundamentacin de por
qu se ubica en el nivel seleccionado.
Durante la creacin de estos manuales se hicieron los ajustes necesarios a las pautas, de manera
que reflejaran el desempeo de los estudiantes y fueran aplicables a una muestra extensa. Tambin
durante la creacin de estos manuales se verific que la aplicacin de la pauta y el uso de los
manuales posibilitaran una correccin con una alta consistencia entre correctores (al menos 60%
de consistencia de cdigo exacto entre correctores).
Los productos de este proceso son las rbricas ajustadas y los manuales de correccin, que llevan
la pauta y ejemplos de respuestas de cada uno de los niveles de la Pauta Holstica, comentados. Se
crearon 16 manuales, correspondientes a 16 preguntas corregidas, denominadas por la inicial de la
forma (D, E, G, H, I, K y M) ms la posicin de la pregunta (1 o 2).
Este proceso se llev a cabo entre el 20 de enero hasta el 28 de febrero del 2014, y participaron
diez profesionales que trabajaron en pares. Estos profesionales fueron seleccionados de acuerdo al
cumplimiento del perfil requerido, es decir, profesionales de la educacin con especializacin en el
rea de Lenguaje y Comunicacin, y experiencia en ajuste de rbricas. Luego de ser seleccionados,
fueron capacitados para realizar los manuales de correccin.

2.4 Estudio Nacional de Educacin Fsica


2.4.1 Antecedentes
La promulgacin de la Ley del Deporte el ao 2001 (Ley N. 19712) indica en su artculo 5 que: El
Ministerio de Educacin establecer un Sistema Nacional de Medicin de la Calidad de la Educacin
Fsica y Deportiva para ser aplicado al finalizar la educacin bsica, debiendo consultar previamente al
Instituto Nacional de Deportes.
Este marco legal determina que el Mineduc tiene como misin elaborar los planes y programas de estudio
de Educacin Fsica, que incluyen objetivos y contenidos de aprendizaje orientados a fomentar la prctica
de actividad fsica y deportiva, y asimismo instaurar un sistema de medicin nacional de la asignatura.
El sistema de medicin propuesto por la ley busca incentivar la preocupacin de la comunidad educativa
por esta materia, y constituye una seal respecto de la importancia del cuidado fsico y la alimentacin,
dirigida tanto al sistema educativo como a la comunidad en general. Adicionalmente, los resultados
de esta medicin posibilitan que docentes y directivos diagnostiquen a los estudiantes evaluados y
reflexionen sobre sus prcticas pedaggicas, as como tambin permite promover la retroalimentacin
de las polticas pblicas en esta materia.
El Instituto Nacional del Deporte (IND) tiene el rol de colaborador en el Estudio Nacional de Educacin
Fsica, y las obligaciones de este con la Agencia de Calidad quedan explicitadas en el Convenio de
Colaboracin que ambas partes acordaron. En dicho convenio queda establecido que dentro de las

Captulo 2

43

obligaciones del IND est la de promover y difundir el proceso del Estudio, y participar tanto en la
validacin de la prueba como en el anlisis de los resultados, entre otras funciones.
La primera aplicacin del Estudio de Educacin Fsica a una muestra representativa de estudiantes de
8 bsico fue en el ao 2010. Esta evaluacin contempl la aplicacin de diversas pruebas para medir
objetivos y contenidos del currculo de Educacin Fsica, tales como: ndice de masa corporal, flexibilidad,
fuerza muscular, resistencia muscular y condicin aerbica.
La segunda aplicacin de este estudio se hizo el 2011, e incluy algunas modificaciones. Una de ellas
consisti en realizar la medicin de los siguientes componentes fsicos: antropometra, rendimiento
muscular, flexibilidad y resistencia cardiorrespiratoria.

i.

La condicin fsica

Tal como en el ao 2012, el constructo medible del Estudio Nacional de Educacin Fsica 2013
corresponde a la condicin fsica de los estudiantes del sistema educativo chileno. Es necesario recordar
que la condicin fsica es un conjunto de atributos fsicos evaluables que tienen o logran las personas,
y que se relaciona con la capacidad de realizar actividad fsica (Caspersen, Powell y Christenson, 1985).
A su vez, la actividad fsica se define como un movimiento corporal producido por la accin muscular
voluntaria, que aumenta el gasto de energa. Se trata de un trmino amplio, que engloba el concepto
de ejercicio fsico, el cual implica una actividad fsica planificada, estructurada y repetitiva, y que con
frecuencia se realiza con el objetivo de mejorar o mantener la condicin fsica de la persona (Aznar y
Webster, 2006). Segn Caspersen et al. (1985), los componentes de la condicin fsica pueden agruparse
en dos: los relacionados con la salud y los relacionados con el rendimiento deportivo.
En el mbito educativo, en el caso del Estudio Nacional de Educacin Fsica, la condicin fsica es vinculada
a la salud, considerando los componentes que son afectados favorable o negativamente por el nivel de
actividad fsica, y que estn relacionados directamente con un estado de vida saludable (Lamela, 2009).
Desde esta perspectiva, la condicin fsica se entiende como la capacidad de realizar tareas con vigor y
efectividad, y considera suficiente energa para disfrutar del tiempo libre y la recreacin, previniendo la
fatiga y la aparicin de lesiones (Arnold, Barnaby, Bieniarz, Carranza, Fuster, y Hernandez, 1986; Caspersen
et al., 1985; Clarke, 1971; De la Cruz y Pino, 2009; Lamela, 2009; Martnez, Del Valle y Cecchiani, 2003).
Los componentes de la condicin fsica relacionados con la salud abarcan: la composicin corporal, la
resistencia cardiorrespiratoria, la flexibilidad y la resistencia/fuerza muscular (Caspersen et al., 1985;
Pate, 1983), los cuales son precisamente los evaluados, y que permiten medir la tendencia que existe
en el pas al respecto. Estos factores son mejorables con el entrenamiento sistemtico, lo que permite
disminuir la probabilidad en los estudiantes de presentar factores de riesgo o enfermedades relacionadas
con el sedentarismo.
El Currculo Nacional de Educacion Fsica (Mineduc, 2002) promueve la prctica equilibrada y diversificada
de la actividad fsica y deportiva. All se menciona que uno de los criterios generales orientadores de
las actividades de esta rea de aprendizaje es: La promocin de la actividad fsica y un estilo de vida
saludable, para lo cual los estudiantes deben ser orientados a realizar actividad fsica y participar en
actividades que desarrollen su salud, flexibilidad, fuerza muscular y resistencia.
En el currculo de segundo ciclo bsico se promueve el desarrollo de programas de ejercicios fsicos.
Especficamente, en el de 8 bsico (2002) se sealan los siguientes OF y CMO: Realizar programas
de ejercicios y actividades fsicas, reconociendo los progresos personales en aquellas cualidades fsicas
asociadas a la salud y la calidad de vida; Ejercitacin de planes de trabajo fsico individuales o colectivos
para el progreso de la aptitud fsica: evaluacin y comparacin de los progresos personales obtenidos por
los alumnos.
Considerando estos antecedentes, el Estudio Nacional de Educacin Fsica 2013 evalu la condicin fsica
de los estudiantes de 8 bsico, manteniendo los lineamientos tcnicos del 2012, as como el tamao
muestral. Se realiz la medicin de los siguientes componentes fsicos:

44

Antropometra: aspectos relacionados con las dimensiones corporales de una persona. Las pruebas
aplicadas para evaluar este componente permiten determinar la relacin entre el peso y la estatura,
y la acumulacin de grasa en la zona central del cuerpo.

Informe Tcnico Simce 2013

Rendimiento muscular: capacidad de trabajo de los msculos. Dentro de este componente se evalu
la fuerza y la resistencia muscular. La fuerza muscular es la capacidad de un msculo o de un grupo
de msculos para generar tensin; la resistencia muscular hace referencia a la capacidad de los
msculos para aplicar una fuerza submxima de forma repetida, o de mantener una contraccin
muscular durante un periodo de tiempo prolongado (Lamela, 2009; Nogueira, 2002).

Flexibilidad: capacidad funcional de las articulaciones de moverse en todo su rango de movimiento


o bajo la influencia de fuerzas externas, sin daar msculos ni articulaciones. Est determinada por
dos componentes: la movilidad articular y la elasticidad muscular (Lamela, 2009).

Resistencia cardiorrespiratoria: capacidad del organismo para suministrar el oxgeno necesario a


los msculos y posponer la aparicin de la fatiga en una actividad fsica. Se basa en la capacidad
funcional de los aparatos circulatorio y respiratorio de ajustarse y recuperarse de los efectos del
ejercicio muscular (Lamela, 2009).

2.4.2 Caractersticas de las pruebas


Los test utilizados el ao 2013 fueron los mismos que se administraron el ao anterior, los cuales fueron
diseados y aplicados con la colaboracin del IND. Este ltimo organismo defini el conjunto de pruebas
luego de un arduo trabajo. Se convoc a un grupo de expertos31 en el rea para definir el conjunto de
pruebas que se aplicaran. Esta eleccin consider tambin criterios referidos a la capacidad de evaluar
grupos numerosos, es decir, que fueran pruebas sencillas, reproducibles, de bajo costo y que pudieran
aplicarse en un tiempo determinado.
Cabe destacar que la batera de pruebas aplicadas para medir la condicin fsica, se bas principalmente
en la batera del test Eurofit, la cual ha sido ampliamente utilizada en los pases de la Comunidad Europea.
Redondo, Gonzlez, Moreno y Garca (2010) citan a Adam, Klissouras, Ravazollo, Renson y Tuxworth
(1988) en Actividad Fsica, Deporte, Ejercicio y Salud de Nios Adolescentes (2010), quienes definen al
test Eurofit como: una batera ampliamente usada entre nios y adolescentes de toda Europa desde
1988. Fue desarrollado como un mecanismo de medida estandarizado para comprobar la eficiencia de la
educacin fsica y la condicin fsica relacionada con la salud.
La batera Eurofit surgi a partir de una serie de investigaciones coordinadas por los institutos de
investigacin en deporte de los 22 pases del Consejo Europeo, bajo el alero del Comit para el Desarrollo
del Deporte del Consejo Europeo, en 1995, y se encuentra validada por este mismo. Su objetivo es la
evaluacin de la condicin fsica de los escolares europeos, recomendndose su aplicacin en estudiantes
de entre 6 y 18 aos.
La mesa de expertos convocada por el IND en 2010 recomend aplicar la batera Eurofit adaptada para
llevar a cabo el primer Estudio Nacional de Educacin Fsica en nuestro pas. Posteriormente, se agregaron
nuevas adaptaciones a la batera original, siguiendo las recomendaciones de la mesa de expertos, a partir
de las aplicaciones 2010 y 2011.
Las pruebas seleccionadas han sido validadas y los puntos de corte fueron modificados el 2011 por una
mesa de trabajo compuesta por profesionales del IND, del Mineduc y los expertos antes mencionados.
Las pruebas fueron definidas como:

i.

Pruebas para medir antropometra


Estimacin del ndice de Masa Corporal (IMC): se refiere a la determinacin del IMC o ndice de
Quetelet, que se obtiene con el peso y la talla de las personas.
Especficamente el IMC se calcula como el resultado de la divisin del peso por la altura al cuadrado.

31 Los expertos seleccionados fueron: Jorge Cancino, Cecilia Bahamondes y Rodrigo Vargas. Jorge Cancino es profesional del laboratorio de Fisiologa
del Centro Alto Rendimiento (CAR) y Doctor en Perspectiva Actual de las Ciencias de la Actividad Fsica y el Deporte, Universidad de las Palmas
de Gran Canaria, entre otros ttulos y cargos. Cecilia Bahamondes es profesora titular de Pedagoga en Educacin Fsica de la Universidad
Metropolitana de Ciencias de la Educacin, y Doctora en Nuevas Perspectivas de Investigacin en Ciencias de la Actividad Fsica, de la Universidad
de Granada, entre otros ttulos y cargos. Rodrigo Vargas es profesor titular de la Universidad Catlica del Maule y Doctor en Ciencias de la
Educacin, Mencin en Diseo Curricular y Evaluacin Educativa, Universidad de Valladolid, entre otros ttulos y cargos. Para mayor informacin,
ver Informe de Resultados Docentes y Directivos Simce 8 Educacin Fsica 2012.

Captulo 2

45

ii.

Permetro de cintura: estima la acumulacin de grasa en la zona central del cuerpo. Se determina
con una cinta mtrica flexible y milimetrada, al medir la zona abdominal en centmetros. Para medir
el factor de riesgo cardiovascular, se considera la razn cintura-estatura (RCE), que se obtiene al
dividir el permetro de cintura (cm) por la estatura (cm). Una razn mayor o igual a 0.55 indica un
mayor riesgo cardiovascular (Arnaiz, P., Acevedo, M., Daz, C., Bancalari, R., Barja, S., Aglony, M., Cavada,
G. y Garca, H. (2010).

Pruebas para medir rendimiento muscular

Abdominales cortos: evala la resistencia de la musculatura flexora del tronco, donde el estudiante
debe realizar abdominales cortos a un ritmo constante (indicado por un metrnomo de 50 batidas
por minuto) hasta que no pueda completar un abdominal a ese ritmo. Se debieran realizar 25
flexiones en 60 segundos.

Salto largo a pies juntos: evala la fuerza explosiva del tren inferior a travs de un salto longitudinal,
partiendo de la posicin del pie, piernas flectadas y pies juntos. A travs de un impulso el estudiante
debe lograr la mayor distancia de desplazamiento horizontal. El ndice obtenido se refiere a la
medicin (en cm) de la distancia saltada por el estudiante.

Flexo-extensin de codos: mide la fuerza extensora de la musculatura del codo.


El estudiante debe ubicarse en paralelo a la superficie del suelo con el punto de apoyo en las manos y
en los pies, para hombres; y con el punto de apoyo en las manos y rodillas para las mujeres. Se deben
realizar flexo-extensiones de codo, la mayor cantidad de veces que sea posible en 30 segundos. El
ndice que se obtiene corresponde al nmero completo de extensiones realizadas en 30 segundos
ininterrumpidamente.

iii.

iv.

Prueba para medir flexibilidad


Flexin de tronco adelante (test de Wells-Dillon adaptado): tiene como objetivo el determinar
el rango de movimiento de la articulacin coxofemoral y de la columna lumbar; determinar la
capacidad de elongacin de las musculaturas isquiotibial y gltea, y determinar la capacidad flexora
de la columna vertebral. Al estudiante se le pide que se siente en el piso frente a un cajn, descalzo,
con pies juntos y las plantas de las manos apoyadas en la parte frontal del cajn, con las rodillas
completamente extendidas. El estudiante debe inclinar el tronco hacia delante y extender los
brazos, con las manos extendidas hasta el mximo que le permita su flexin de tronco. El resultado
corresponde al punto en que logra tocar con los dedos durante 2 segundos, registrando el punto
alcanzado en centmetros.

Pruebas para medir resistencia cardiorrespiratoria

Test de Cafra: sus tres objetivos son determinar la potencia aerbica de los estudiantes a partir de
cargas de trabajo de mediana intensidad durante la marcha, estimar el consumo de oxgeno de un
individuo durante el trabajo aerbico y estimar el rendimiento cardiovascular usando la frecuencia
cardaca y el consumo de oxgeno (ml/kg/min) para cada una de las cargas asignadas. En esta prueba
se le pide al estudiante que camine en un espacio debidamente demarcado, manteniendo una
velocidad constante (6 km/h) durante 3 minutos, y al trmino de la carga se controla y anota la
frecuencia cardaca. Si al trmino de la prueba el estudiante tiene una frecuencia cardaca igual o
mayor a 160 pulsaciones por minutos, no debe rendir el test de Navette.

Test de Navette: tiene como objetivo evaluar la resistencia aerbica mxima, por lo tanto, busca
medir la habilidad que tiene el cuerpo para suministrar el oxgeno necesario a los msculos.
Caminando, trotando y corriendo, el estudiante evaluado debe desplazarse por un carril entre dos
lneas paralelas ubicadas a 20 cm entre s, a un ritmo que acelera progresivamente. Se debe registrar
el nmero de ciclos completos que pueda realizar el estudiante sin salirse del ritmo y la frecuencia
cardaca que se obtiene al trmino de la prueba.

46

Informe Tcnico Simce 2013

Cabe destacar que todo estudiante que presente alguna contraindicacin mdica para desarrollar
actividad fsica por riesgo cardiovascular, no podr rendir la aplicacin de Educacin Fsica, previo
certificado que avale dicho diagnstico.

2.4.3 Aplicacin de la prueba


Luego de la definicin de la muestra (ver captulo 4), se inici el proceso de empadronamiento para
poder contar con una muestra definida y consolidada, el cual dur alrededor de un mes.
Para que los objetivos de la prueba se cumplieran fue fundamental que esta se aplicara en condiciones
similares a todos los estudiantes seleccionados del pas, para garantizar que los resultados obtenidos
fuesen vlidos, comparables y reflejaran la condicin fsica que poseen los estudiantes evaluados en esta
medicin.
La aplicacin de la prueba total por grupo curso considera una duracin aproximada de 140 minutos (ver
Tabla 2.7). Para realizar la aplicacin de las pruebas descritas anteriormente se utilizan seis formularios
de registro y uno de supervisin, el cual contiene de forma preimpresa informacin acerca del estudiante
y un nmero de serie asignado. En estos formularios quien hace la aplicacin debe anotar los ndices
obtenidos por cada estudiante correspondientes a cada prueba, de acuerdo a las indicaciones dadas en
el Manual de Aplicacin Simce Educacin Fsica 2013.
Tabla 2.7 Tiempos estimados en la aplicacin del Estudio Nacional de Educacin Fsica por grupo curso
Pruebas

Tiempo de aplicacin

Medidas antropomtricas

30 minutos

Abdominales

15 minutos

Salto largo a pies juntos

15 minutos

Flexo-extensin de codos

15 minutos

Pruebas

Tiempo de aplicacin

Flexin de tronco adelante

15 minutos

Test de Cafra y test de Navettea

20 a 40 minutos

Tiempo total estimado


Nota:

140 minutos

El test de Navette es realizado solo por los estudiantes que aprueban el Test de Cafra.

Para la aplicacin de las pruebas descritas fueron necesarios ciertos materiales que fueron otorgados por
el IND. Estos materiales son:

Cinta engomada de papel blanco.

33 conos de demarcacin en colores fosforescentes.

1 huincha de medir de 30 cm.

2 CD grabados con estmulos sonoros.

Sets de 50 nmeros autoadhesivos.

5 colchonetas de 100 x 50 x 5 cm.

2 huinchas de medir de 5 cm.

1 caja de tiza blanca.

1 flexmetro (cajn de 68 x 35 x 39 cm, con una huincha adherida que sobresale 25 cm hacia el
estudiante evaluado, y 50 cm hacia el interior).

Captulo 2

47

1 tallmetro de madera de 2 x 15 x 150 cm.

2 balanzas digitales.

1 set de 12 pilas.

1 huincha de medir de 2 m (para circunferencia abdominal).

2 cronmetros.

3 colchonetas de goma eva.

Silbato.

48

Informe Tcnico Simce 2013

Captulo 3:
Diseo y construccin de Cuestionarios
de Calidad y Contexto de la Educacin

3.1 Antecedentes
Los Cuestionarios de Calidad y Contexto abordan el contexto, las percepciones y actitudes de estudiantes,
profesores, y padres y apoderados de diversos aspectos de la comunidad escolar, con el objetivo de
conocer estas percepciones en relacin a la calidad educativa del establecimiento y recopilar informacin
descriptiva sobre caractersticas demogrficas, socioculturales, tcnico pedaggicas, entre otras, del
proceso educativo. Dentro de esto, su principal propsito es evaluar el logro de los objetivos generales de
la educacin escolar en el mbito personal y social mediante los Otros Indicadores de Calidad Educativa.
La informacin recogida ayuda a la Agencia a realizar comparaciones justas y precisas entre
establecimientos escolares y entre distintas agrupaciones de estudiantes. As tambin esta informacin
permite identificar aquellos factores o variables que tienen un efecto en los aprendizajes, y ver de qu
manera se relacionan.
De esta manera los Cuestionarios contribuyen a ampliar el concepto de calidad de la educacin ms all
del dominio cognitivo y el conocimiento acadmico.
Los Cuestionarios de Calidad y Contexto son los siguientes: Cuestionario Estudiantes, Cuestionario
Docentes y Cuestionario Padres y Apoderados. Este captulo describe la elaboracin de los cuestionarios
aplicados el ao 2013.

3.2 Objetivos de los Cuestionarios de Calidad y Contexto


En el marco de la nueva institucionalidad, los Cuestionarios de Calidad y Contexto tienen dos objetivos
principales:

Levantar informacin que permita medir y evaluar a los establecimientos en trminos de los Otros
Indicadores de Calidad Educativa (OIC)32, complementarios a los resultados de aprendizaje.

Recoger informacin de contexto que permita analizar los resultados educativos obtenidos por los
estudiantes y los establecimientos, en funcin de variables internas y externas a estos ltimos, que
podran resultar relevantes.

Respecto del primer objetivo, cabe sealar que los OIC fueron elaborados por el Ministerio de Educacin,
aprobados por el Consejo Nacional de Educacin el ao 2013, y dictados mediante Decreto Supremo33.
Sin embargo, el Mineduc comenz su proceso de elaboracin en 2011. De esta manera, a partir de ese
ao se comenzaron a incorporar en los cuestionarios tems relativos a los temas considerados, para ser
incluidos dentro de tales indicadores con el fin de evaluar su funcionamiento. En los cuestionarios 2013,
los tems que se incorporaron cumplieron con los criterios tcnicos necesarios para construir ndices
vlidos y confiables.

32 Los OIC son uno de los aspectos que el Sistema de Aseguramiento de la Calidad aborda como parte de los indicadores, para apoyar a los
establecimientos a travs de una herramienta del sistema cuyo propsito es realizar una evaluacin ms integral de la calidad de la educacin
impartida. Para mayor conocimiento sobre el SAC, visitar la pgina web de la Agencia, www.agenciaeducacion.cl.
33 Una descripcin ms completa se recoge en el documento Otros Indicadores de Calidad Educativa, realizado por Mineduc, disponible en
www.agenciacalidad.cl.

49

Los Otros Indicadores de Calidad que se evalan mediante cuestionarios son: Autoestima acadmica
y motivacin escolar, Clima de convivencia escolar, Participacin y formacin ciudadana, y Hbitos de
vida saludable34.
A continuacin se realiza una breve descripcin de las dimensiones que cada uno de ellos aborda:

i.

Autoestima acadmica y motivacin escolar

Considera, por una parte, la autopercepcin y la autovaloracin de los estudiantes en relacin con su
capacidad de aprender y, por otra parte, las percepciones y actitudes que tienen hacia el aprendizaje y el
logro acadmico (Ministerio de Educacin, 2014, p. 18).
Este indicador evala la autoestima y la motivacin de los estudiantes en relacin con el mbito
acadmico. Se limita a esta esfera, porque es en ella donde el establecimiento tiene mayor influencia y,
por lo tanto, una mayor responsabilidad en su desarrollo (Ministerio de Educacin, 2014, p. 18).
En este marco, las dimensiones que se miden son Autopercepcin y autovaloracin acadmica y
Motivacin escolar.

ii.

Clima de convivencia escolar

Considera las percepciones y las actitudes que tienen los estudiantes, docentes, y padres y apoderados
con respecto a la presencia de un ambiente de respeto, organizado y seguro en el establecimiento
(Ministerio de Educacin, 2014, p. 26).
Las dimensiones que se miden son: Ambiente de respeto, Ambiente organizado y Ambiente seguro.
El clima de convivencia escolar es una cualidad relativamente estable del establecimiento, que se
refiere a cmo la comunidad educativa experimenta la convivencia escolar. Es decir, corresponde a
una percepcin colectiva sobre el ambiente en el que se desarrollan las actividades escolares, las
relaciones interpersonales que se generan en el establecimiento y el contexto en que se producen tales
interacciones (Ministerio de Educacin, 2014, p. 26).

iii.

Participacin y formacin ciudadana

Considera las actitudes de los estudiantes frente a su establecimiento, las percepciones de estudiantes,
y padres y apoderados sobre el grado en que la institucin fomenta la participacin y el compromiso
de los miembros de la comunidad educativa, y por ltimo, las percepciones de los estudiantes sobre el
grado en que se promueve la vida democrtica (Ministerio de Educacin, 2014, p. 36).
Este indicador mide las dimensiones Sentido de pertenencia, Participacin y vida democrtica. Evala
en qu medida el establecimiento promueve que los miembros de la comunidad se sientan identificados
y comprometidos con la escuela, estn informados de las actividades que ah se llevan a cabo y
se involucren en estas, y desarrollen las habilidades y actitudes necesarias para la vida compartida
(Ministerio de Educacin, 2014, p. 36).

iv.

Hbitos de vida saludable

Hbitos de vida saludable evala las actitudes y conductas autodeclaradas de los estudiantes en relacin
con la vida saludable, y tambin sus percepciones sobre el grado en que el establecimiento promueve
hbitos beneficiosos para la salud (Ministerio de Educacin, 2014, p. 46).
Las dimensiones que mide el indicador son: Hbitos alimenticios, Hbitos de vida activa y Hbitos de
autocuidado. Debido a la influencia que tiene el entorno en la formacin de hbitos, y al hecho de que un
nio promedio asiste al menos doce aos de su vida a un establecimiento educacional, la escuela surge
como un espacio clave para la adquisicin y consolidacin de hbitos de vida saludable (Ministerio de
Educacin, 2014, p. 48).
Adems el indicador Hbitos de vida saludable evala la influencia del establecimiento sobre los hbitos
de sus estudiantes relacionados con la alimentacin saludable, vida activa y autocuidado, para lo cual
34 Tambin son parte de los Otros indicadores de Calidad: Asistencia escolar, Retencin escolar, Titulacin tcnico-profesional y Equidad de Gnero.
Estos se calculan sobre la base de la informacin obtenida de los registros del Ministerio de Educacin y de la Agencia de Calidad.

50

Informe Tcnico Simce 2013

considera la opinin y las actitudes que estos tienen respecto de la importancia de la vida sana, y su
percepcin sobre el grado en que el establecimiento promueve estos hbitos (Ministerio de Educacin,
2014, p. 49).
En consideracin a los objetivos antes sealados, los cuestionarios aplicados a diferentes actores que
conforman la comunidad educativa (estudiantes, docentes, y padres y apoderados), recogen informacin
de contexto que abarca aspectos demogrficos, sociales y culturales, en relacin con los estudiantes y
sus familias, el establecimiento educacional y la comunidad a la que pertenecen.
Los Cuestionarios de Calidad y Contexto se definen en primera instancia bajo los lineamientos del Plan
de Evaluaciones Nacionales e Internacionales, el cual establece los grados a evaluar y los propsitos de la
evaluacin. Para el ao 2013, los grados en los cuales se incluy la aplicacin de cuestionarios junto a las
pruebas fueron 2 bsico, 4 bsico, 6 bsico, 8 bsico y II medio. Tambin se elaboraron cuestionarios
para la aplicacin Simce Discapacidad Sensorial.
Los Cuestionarios de Calidad y Contexto se elaboraron en base a dos documentos institucionales: el
Marco de referencia de componentes y factores de la calidad de la educacin (MR)35, y Fundamentos
de los Otros Indicadores de Calidad, documento elaborado por la Unidad de Currculum y Evaluacin
del Ministerio de Educacin de Chile. El MR entrega una propuesta respecto de los componentes que
se deberan tener presentes al momento de hablar de calidad de la educacin, y de esta forma busca
orientar la seleccin de factores que se relacionan con ello, abarcando un amplio espectro de variables
de contexto asociadas al aprendizaje.
El MR contiene un captulo para los OIC, sin embargo, estos se encuentran descritos con mayor profundidad
en los Fundamentos de los Otros Indicadores de Calidad, que contiene los antecedentes, fundamentos,
definiciones y la descripcin de la elaboracin de los Otros Indicadores de Calidad Educativa.

3.3 Marco de referencia


La primera elaboracin del MR se llev a cabo durante 2009 en el contexto del proyecto Elaboracin de
Marco de Referencia de Informacin de Contexto para la Evaluacin Simce y el Diseo de Cuestionarios,
realizado en conjunto con el Centro de Polticas Pblicas de la Pontificia Universidad Catlica de Chile.
En este proyecto, el Marco de Referencia pas por la validacin de expertos, con participacin de
investigadores, acadmicos, jefaturas de diversas divisiones del Ministerio de Educacin, y otros actores
relevantes sostenedores, directores de establecimientos y directores de departamentos de educacin
municipales. El 2012, con la entrada en vigencia de la Agencia de Calidad de la Educacin y la aprobacin
de los OIC, este documento entr en un proceso de reedicin y ajuste.
Como se ha sealado, el Marco de Referencia contribuye al cumplimiento de las funciones de la
Agencia, en la medida en que proporciona informacin para: i) identificar y validar los factores internos
y externos al establecimiento educativo, que inciden en los resultados acadmicos y no acadmicos de
los estudiantes y en los resultados del establecimiento; y, ii) establecer comparaciones justas y precisas,
dentro de lo posible, dada la naturaleza de las pruebas Simce y de la informacin de contexto que se
recoge, entre establecimientos educacionales y distintos grupos de estudiantes.
En concordancia con lo anterior, en el MR se consideraron los OIC, los factores que tienen algn nivel de
asociacin con los resultados de aprendizaje y con los OIC; y las caractersticas y condiciones del sistema
educativo chileno y de los distintos actores involucrados en el proceso educativo.
Los criterios de priorizacin para la seleccin de variables que constituyen la informacin de contexto
respondieron a los factores mencionados y consideraron adems las variables cuya asociacin al proceso
educativo se pretende estudiar, todo esto enmarcado en una lgica que intenta identificar formas de
mejorar la calidad y equidad de la educacin a travs de la intervencin de dichos factores.
En este contexto, tal como indican Cook, T. y Godard, S. (2007), la seleccin de variables de contexto no
pretende insinuar en todos los casos causalidad de dichos factores sobre el proceso educativo, sino ms
35 Con la creacin de la Agencia de Calidad de la Educacin, se est llevando a cabo una revisin y actualizacin del MR, acorde a los objetivos y
funciones de esta nueva institucin.

Captulo 3

51

bien determinar el impacto que dichos factores podran tener sobre los resultados de aprendizaje. De este
modo, se busca identificar aquellos que son posibles de modificar a travs de polticas educacionales, o
bien con el trabajo de los establecimientos educativos o de los estudiantes y sus familias.
El MR distingue, adems, variables que son factibles de medir a travs de cuestionarios autoaplicados,
ya que las posibilidades de definir variables factibles de obtener mediante registros pueden ser muy
extensas.
De esta manera, se establecieron cinco criterios principales de seleccin de variables a medir mediante
Cuestionarios:

Alineacin con objetivos de la Agencia de Calidad de la Educacin.

Aporte a la comprensin de resultados de aprendizaje y de los OIC, fundada en la evidencia.

Aporte a la contextualizacin de los resultados de aprendizaje y de los OIC.

til al diseo de polticas y a la toma de decisiones de los establecimientos.

Factibilidad de ser modificada, en caso de ser necesario.

Aceptacin pblica y el no atentar contra la privacidad ni la dignidad de las personas.

Adems, en el MR se establecen cuatro criterios principales de seleccin de variables de informacin de


contexto, a partir de consideraciones metodolgicas:

Factibilidad de obtencin de la informacin mediante cuestionarios autoaplicados.

Cumplimiento de estndares profesionales de confiabilidad y validez.

Variabilidad y relevancia de la informacin de contexto de un periodo a otro.

Extensin de los cuestionarios y restriccin presupuestaria de la Agencia.

Con el fin de ordenar la revisin de variables y la informacin de contexto incluidas, en el MR se propone


una organizacin en funcin de las unidades o niveles de anlisis: estudiante, curso y establecimiento.
Respecto de este ordenamiento, es necesario tener en cuenta que:

Este ordenamiento es consistente con la propuesta de clasificacin de variables de marcos de


referencia de pruebas, como TIMSS 2011 y PISA 2012.

El esquema propuesto asume que las unidades o niveles de anlisis son las que pueden reportar
resultados de desempeo, tanto en logro de Estndares de Aprendizaje, como de los OIC.

Es relevante explicitar que los factores asociados a la calidad y equidad de la educacin se refieren a
un proceso dinmico en el tiempo, y que por lo mismo, conforme a los avances de la investigacin y el
desarrollo de nuevas evidencias, el MR requerir a futuro nuevas revisiones y ajustes.
Otro aspecto a considerar es que la seleccin de preguntas en los cuestionarios se funda en criterios
legales y tcnicos. El espacio disponible permite incluir un nmero limitado de preguntas, y estas se
definen segn su uso y prioridad para la Agencia. Un bloque de preguntas de primera prioridad son
las preguntas para los OIC, otro bloque de primera prioridad son las preguntas para la clasificacin
socioeconmica de los establecimientos; luego hay preguntas de factores asociados a resultados
de aprendizaje, algunas que refieren al contexto, y otras son de inters especfico para estudios de la
Agencia. Todas ellas se incorporan segn el espacio disponible, y siguiendo una rotacin a travs de
los aos que permita cubrir distintas temticas del MR. Es por esto que algunas de las dimensiones y
preguntas incluidas varan de un ao a otro.
Considerando todo lo anterior, en los cuestionarios Simce 2013 se incluy el siguiente listado de
dimensiones del Marco de Referencia, segn los tres niveles de anlisis descritos:

52

Informe Tcnico Simce 2013

Tabla 3.1 Dimensiones del Marco de Referencia incluidas en Cuestionarios de Calidad y Contexto 2013
segn nivel de anlisis
Dimensiones

Cuestionarios de Calidad y Contexto


2013

Estudiante

Caractersticas del estudiante (gnero y edad)

Cuestionario Estudiantes (4, 6 y 8


bsico, 6 bsico Discapacidad Sensorial,
y II medio)a

Estudiante

Caractersticas de los padres y apoderados


(gnero y edad)

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)b

Estudiante

Relacin con el estudiante

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Escolaridad de la madre y del padre

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Ingreso promedio del hogar

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Antecedentes educacionales del estudiante

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Sentido de pertenencia del estudiante al


establecimiento

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Hbitos de alimentacin

Cuestionario Estudiantes (8 bsico)

Estudiante

Realizacin de actividad fsica

Cuestionario Estudiantes (8 bsico)

Estudiante

Actitud familiar hacia actividad fsica, deporte


y alimentacin saludable

Cuestionario Estudiantes (8 bsico)

Estudiante

Prcticas familiares de apoyo al proceso


educativo

Cuestionario Estudiantes (4, 6 y 8


bsico, 6 bsico Discapacidad Sensorial,
II medio)

Estudiante

Recursos educativos disponibles en el hogar

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Satisfaccin de los padres con el


Cuestionario Padres y Apoderados (2, 4,
establecimiento (aspectos acadmicos,
6 y 8 bsico, 6 bsico Discapacidad
aspectos formativos, sistema de comunicacin,
Sensorial, II medio)
calidad de la enseanza e infraestructura)

Estudiante

Expectativas de los padres y apoderados sobre


el nivel de estudio que alcanzar el estudiante

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Estudiante

Prcticas de lectura en el hogar

Cuestionario Padres y Apoderados (2


bsico)

Estudiante

Autoconcepto acadmico

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Estudiante

Incentivos y refuerzos al estudiante

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Estudiante

Disposicin al estudio

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Estudiante

Identificacin con el establecimiento

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Nivel de anlisis

Captulo 3

53

[continuacin]
Nivel de anlisis

Dimensiones

Cuestionarios de Calidad y Contexto


2013

Curso

Antecedentes del docente (gnero y edad)

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Formacin del docente

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Condiciones contractuales del docente

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Expectativas de los docentes sobre el nivel


educacional que alcanzarn los estudiantes

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Metodologas de trabajo en aula

Cuestionario Docentes (4, 6 y 8


bsico, II medio)
Cuestionario Estudiantes (6 bsico
Discapacidad Sensorial)

Curso

Prcticas de retroalimentacin

Cuestionario Estudiantes (4, 6 y 8


bsico, 6 bsico Discapacidad Sensorial,
II medio)
Cuestionario Docentes (4, 6 y 8
bsico, II medio)

Curso

Prcticas de evaluacin

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Preparacin del docente para su desempeo


laboral profesional

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Sentido de pertenencia del docente al


establecimiento

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Curso

Orden y disciplina en el aula

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Curso

Relaciones en el aula

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Establecimiento

Requisitos para matrcula

Cuestionario Padres y Apoderados (2, 4,


6 y 8 bsico, 6 bsico Discapacidad
Sensorial, II medio)

Establecimiento

Liderazgo organizacional

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Establecimiento

Apoyo tcnico pedaggico

Cuestionario Docentes (4, 6 y 8


bsico, II medio)

Establecimiento

Orden y disciplina en el establecimiento

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Establecimiento

Relaciones en el establecimiento

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Establecimiento

Seguridad en el establecimiento

Cuestionario Estudiantes (6 bsico


Discapacidad Sensorial)

Curso

Notas:




El Cuestionario Estudiantes 6 bsico Discapacidad Sensorial tiene tres versiones: para estudiantes con
discapacidad auditiva (DA), discapacidad visual parcial (DVP) y discapacidad visual total (DVT). Para facilitar la
lectura, esta tabla se refiere a los tres de manera general.
El Cuestionario Padres y Apoderados 6 bsico Discapacidad Sensorial se aplica en escuelas especiales y en
establecimientos regulares que atiendan a estudiantes que respondan la prueba Simce Discapacidad Sensorial
de 6 bsico.

Adems, se evaluaron los Otros Indicadores de Calidad Educativa, tal como se muestra en la siguiente
tabla:

54

Informe Tcnico Simce 2013

Tabla 3.2 Indicadores y dimensiones de Otros Indicadores de Calidad Educativa en los Cuestionarios de
Calidad y Contexto 2013
Indicador
Autoestima acadmica y
motivacin escolar

Clima de convivencia escolar

Participacin y formacin
ciudadana

Hbitos de vida saludable

Notas:


b
c

Dimensin

Cuestionarios de Calidad y Contexto 2013

Autopercepcin y
autovaloracin acadmica

Cuestionario Estudiantesa

Motivacin escolar

Cuestionario Estudiantes

Ambiente de respeto

Cuestionario Estudiantes
Cuestionario Docentesb

Ambiente organizado

Cuestionario Estudiantes
Cuestionario Padres y Apoderadosc
Cuestionario Docentes

Ambiente seguro

Cuestionario Estudiantes
Cuestionario Padres y Apoderados
Cuestionario Docentes

Sentido de pertenencia

Cuestionario Estudiantes

Participacin

Cuestionario Estudiantes
Cuestionario Padres y Apoderados

Vida democrtica

Cuestionario Estudiantes

Hbitos alimenticios

Cuestionario Estudiantes

Hbitos de vida activa

Cuestionario Estudiantes

Hbitos de autocuidado

Cuestionario Estudiantes

Las dimensiones que se aplican en el Cuestionario Estudiantes estn disponibles en 4, 6 y 8 bsico y en


II medio.
Las dimensiones que se aplican en el Cuestionario Docentes estn disponibles en 4, 6 y 8 bsico y en II medio.
Las dimensiones que se aplican en el Cuestionario Padres y Apoderados estn disponibles en 2, 4, 6 y 8

bsico y en II medio.

3.4 Proceso de construccin de instrumentos


Para la construccin de los Cuestionarios de Calidad y Contexto 2013, en primer lugar se defini el plan
de elaboracin de cuestionarios en el que se establecieron los temas a abordar y los actores que seran
consultados, segn lo sealado en el Marco de Referencia y los Fundamentos de los Otros Indicadores
de Calidad. Luego se definieron y organizaron en una planilla de operacionalizacin las preguntas que se
debieran incuir en cada cuestionario, sealando si cada pregunta se mantiene de aos anteriores, si se
mantiene pero requiere modificaciones, o si se requiere elaborar una pregunta nueva.
Como se sealara anteriormente, se pueden distinguir distintos tipos de pregunta segn su uso, lo que se
relaciona con su permanencia en los cuestionarios:

De uso para la clasificacin socioeconmica. Estas no varan en el tiempo y se mantienen en todos


los Cuestionarios de Padres y Apoderados.

De uso para los OIC. Las dimensiones no varan, pero algunas preguntas pueden cambiar en funcin
de mejorar la medicin. No obstante, hay preguntas ancla que se mantienen para la comparabilidad
entre aos y actores.

De uso para anlisis de factores asociados a resultados de aprendizaje e informacin de contexto.


Estas son las que pueden variar ms de ao en ao.

Captulo 3

55

Las preguntas aplicadas en aos anteriores y con buenos resultados de validez y confiabilidad son la
principal fuente de tems de los cuestionarios. Si la pregunta requiere modificaciones o es una pregunta
nueva, se elabora siguiendo un proceso que garantiza la calidad de las nuevas preguntas mediante un
estudio piloto.
Los principales insumos para la construccin de los cuestionarios 2013 fueron los anlisis
correspondientes a los Cuestionarios de Calidad y Contexto aplicados en el ao 2012 y los resultados
del estudio piloto que se describen a continuacin.
Los procesos que se detallan en el siguiente apartado fueron realizados por los profesionales del
Departamento de Estudios de la Calidad de la Educacin, entre los meses de marzo y julio de 2012.

3.4.1 Anlisis cuestionarios 2012 (ao anterior)


El anlisis de los datos de los cuestionarios se realiz bajo el modelo de Teora Clsica (TR), ya que son
instrumentos relativamente nuevos. Esta considera un anlisis ms simple que la Teora de Respuesta
al tem (TRI), y por lo tanto, sus resultados son ms fciles de comunicar a la comunidad educativa. Esto
ltimo es particularmente importante para la difusin de los OIC, puesto que estos ndices recin se estn
dando a conocer. En el futuro, la Agencia realizar los estudios necesarios para incorporar el anlisis de
los cuestionarios bajo el modelo de TRI, con el propsito de agregar complejidad a las tcnicas de anlisis
estadstico empleadas.
El anlisis que se lleva a cabo tiene como fin determinar la confiabilidad y validez de las preguntas del
cuestionario. Se evala cada pregunta y cada tem tanto en su tasa de respuesta, variabilidad, como en
asociacin a resultados de aprendizaje, si corresponde. Adems, para constructos como los OIC y otros
ndices, se evala su validez mediante un anlisis factorial y su confiabilidad mediante el clculo de
Alfa de Cronbach. Finalmente, se evala el funcionamiento general de los cuestionarios y se identifican
aquellos aspectos especficos que deberan ajustarse en procesos futuros.

3.4.2 Elaboracin de preguntas nuevas y ajuste de preguntas para ser modificadas


Cuando se requiere incorporar preguntas nuevas a los cuestionarios, por ejemplo, para robustecer
constructos de los OIC o incorporar otras variables del MR, se realiza una revisin de evidencia y de
teora de la literatura disponibles en investigacin de la calidad de la educacin y en otros cuestionarios
validados internacionalmente. Las preguntas se validan con apoyo de expertos del equipo de profesionales
de la Agencia y externos, y se prueban en estudios piloto y experimentales.
Para los cuestionarios 2013 no se realiz un proceso de elaboracin de preguntas nuevas, ya que se
construy por primera vez el Cuestionario Estudiantes 6 bsico, en base al de 4 bsico del ao anterior.
No obstante, se hace perentorio realizar un estudio piloto con este instrumento.
Por otra parte, se modificaron algunas preguntas existentes en el Cuestionario Estudiantes de los otros
grados y en el Cuestionario Padres y Apoderados. Los ajustes de las preguntas no cambian el constructo
que evalan. Consisten, principalmente, en modificaciones en la redaccin del enunciado, de las
alternativas de respuesta o de las indicaciones.
En el estudio piloto que se describe a continuacin, se detallan las pruebas realizadas para preguntas
nuevas y modificadas. El objetivo de este estudio piloto es evaluar la comprensin y adecuacin de las
preguntas y el comportamiento mtrico de los tems modificados o nuevos.
El estudio se realiza en dos etapas: una cualitativa y una cuantitativa. Para la elaboracin de los
Cuestionarios de Calidad y Contexto 2013 se probaron preguntas modificadas y el Cuestionario
Estudiantes 6 bsico en ambas etapas.

56

Informe Tcnico Simce 2013

3.4.3 Etapa cualitativa


El objetivo de esta etapa es evaluar la comprensin y adecuacin de las preguntas piloto, adems de
obtener una aproximacin respecto de la pertinencia y comprensin del instrumento en general. En
particular, se aplica a los actores a los que estn destinados los instrumentos (padres o apoderados,
estudiantes, docentes). Adems, se focaliza en la seleccin de establecimientos de distintos grupos
socioeconmicos (GSE) y dependencia. Se utilizan tcnicas cualitativas, principalmente entrevistas
cognitivas individuales o grupos focales. Todas las entrevistas son grabadas y transcritas, entonces se
realiza anlisis cualitativo de los registros.
Entre los meses de abril y mayo se realizaron grupos focales en diversos grados: cinco con estudiantes,
cuya distribucin fue: tres en 4 bsico, uno en 6 bsico y uno en 8 bsico; cinco con padres y
apoderados, uno en cada grado evaluado (2, 4, 6 y 8 bsico, y II medio); y tres con docentes, en los
que participaron profesores de todos los grados evaluados, excepto de 2 bsico. Estos grupos focales se
realizaron en establecimientos municipales y particulares subvencionados de la Regin Metropolitana
de Santiago, considerando establecimientos de GSE medio y medio bajo, con el objetivo de evaluar
en grupos que han presentado baja comprensin lectora en las ltimas mediciones Simce, y as poder
distinguir los problemas ms frecuentes de comprensin y pertinencia.
Los resultados de estas conversaciones con los actores de la comunidad escolar entregaron informacin
para ajustar las preguntas de los cuestionarios y hacerlas ms comprensibles. En base a estos resultados,
se prepar un cuestionario piloto para probar en la etapa cuantitativa con estudiantes de 6 bsico, y se
realizaron ajustes menores a los cuestionarios de los dems actores.

3.4.4 Etapa cuantitativa


En esta etapa los cuestionarios son aplicados a una muestra de la poblacin de estudio (estudiantes,
docentes y/o padres y apoderados), con el objetivo de analizar el comportamiento mtrico de los tems,
especialmente con indicadores estadsticos de validez y confiabilidad. La muestra y los procedimientos
de anlisis son similares a la aplicacin definitiva de los Cuestionarios de Calidad y Contexto.
En particular, se realiz la aplicacin del cuestionario piloto de estudiantes de 6 bsico. La muestra
contempl 19 establecimientos y 406 estudiantes. Estos establecimientos fueron seleccionados de
forma aleatoria dentro de los municipales y particulares subvencionados de la Regin Metropolitana de
Santiago. La aplicacin se realiz durante las dos ltimas semanas de mayo.
El anlisis que se llev a cabo tuvo como propsito determinar la confiabilidad y validez de las preguntas
del cuestionario. Se evalu cada pregunta y cada tem, tanto en su tasa de respuesta, como en su
variabilidad. Adems, como se ha mencionado, para constructos como los OIC y otros ndices, se evalu su
validez mediante anlisis factorial y su confiabilidad mediante clculo de Alfa de Cronbach. Finalmente,
se evalu el funcionamiento general de los cuestionarios y se identificaron aquellos aspectos especficos
que deberan ajustarse en procesos futuros36.
Los anlisis realizados expusieron niveles adecuados de tasa de respuesta, variabilidad de cada tem y de
validez, y confiabilidad de los ndices probados. Esta segunda fase del estudio piloto permiti, adems,
recoger informacin cualitativa de la aplicacin en aula de los cuestionarios. Para ello, se tom registro
de lo observado en aula y de las preguntas que los estudiantes les hacan a los evaluadores mientras
contestaban los cuestionarios.
Con la informacin recogida del estudio piloto en sus dos etapas, y los respectivos anlisis de
resultados, se continu con el proceso de elaboracin, llevando a cabo los ajustes finales a los
instrumentos en construccin.

36 Para ms detalles de este proceso de anlisis, ver seccin de Anlisis Cuestionarios 2013.

Captulo 3

57

3.5 Cuestionario Estudiantes Simce Discapacidad Sensorial


Estos cuestionarios se construyen en base al Marco de Referencia, en el cual se especifican los factores
o variables a nivel de escuela, familia o del propio estudiante, que tienen un efecto en los aprendizajes
y contextualizan sus resultados. Adems, se elaboran siguiendo las directrices del Plan de Evaluaciones
Nacionales e Internacionales, por lo que el ao 2013 se desarrollaron para 6 bsico. Todo el proceso
de construccin de cuestionarios Discapacidad Sensorial (DS) se realiza en conjunto con el equipo de
profesionales de Necesidades Educativas Especiales de la Agencia.
Los cuestionarios para estudiantes con discapacidad sensorial (auditiva, visual parcial y visual total) se
construyen con acomodaciones que permiten el acceso autnomo del estudiante al cuestionario. Estas
acomodaciones son similares a las de las pruebas Simce Discapacidad Sensorial:

Ajustes en los textos: se incorpora, omite o sustituye informacin escrita de los cuestionarios,
conservando los constructos evaluados.

Evitar tablas con muchas columnas y/o filas. Los tems se diagraman de manera que se responden
individualmente y no en formato de tablas con varios tems juntos y una escala en comn.

Formato de la prueba en braille: presentacin del cuestionario a los estudiantes con discapacidad
visual total a travs de cdigos impresos por puntos en relieve.

Formato de la prueba en macrotipo: presentacin del cuestionario en letra Arial 24 para los
estudiantes con discapacidad visual parcial.

Indicaciones en lengua de seas: el examinador, a travs de la lengua de seas chilena, entrega a los
estudiantes con discapacidad auditiva las instrucciones al inicio de la aplicacin del cuestionario.

Los principales insumos para la construccin de los Cuestionarios Discapacidad Sensorial 2013 fueron
los anlisis de resultados correspondientes a los Cuestionarios de Calidad y Contexto aplicados en
2012, los resultados del estudio piloto aplicado con estudiantes sin discapacidad sensorial de 6
bsico descrito anteriormente (apartado 3.4.3) y un estudio piloto con alumnos con discapacidad
visual total de 6 bsico.
Los Cuestionarios Discapacidad Sensorial del proceso 2012 fueron aplicados en 4 bsico, por lo que
sus resultados fueron utilizados con cautela para la elaboracin del Cuestionario de Estudiantes de
6 bsico.
Los resultados de la aplicacin 2012 muestran altas tasas de respuesta, y aunque se observan problemas
de variabilidad (tems que presentan una concentracin de respuestas mayor al 90% en una o en dos
categoras con la misma tendencia), en algunos tems esto es esperable por la reducida cantidad de
estudiantes que consider esta aplicacin (en total, 125 estudiantes contestaron los cuestionarios 2012:
4 estudiantes con discapacidad visual total, 37 con discapacidad visual parcial y 84 con discapacidad
auditiva). Tambin se analiza el tiempo de respuesta a partir de los formularios de aplizacin, el cual
oscila entre 14 y 22 minutos. Se concluye que es posible aumentar el nmero de preguntas de 25 a 34
manteniendo la validez del instrumento para los cuestionarios 2013.
Los resultados del estudio piloto con estudiantes de 6 bsico sin discapacidad sensorial permiten ver
los ajustes necesarios, principalmente con respecto a la pertinencia de los tems con su realidad escolar
y etapa de vida.
El estudio piloto con estudiantes con discapacidad visual total de 6 bsico se realiz en el mes de abril
a una muestra de estudiantes que contest un cuestionario de 11 pginas en braille, y luego respondi
una entrevista. Los resultados arrojaron informacin respecto de la forma de acceder y de responder de
estos estudiantes, sealando una alta comprensin del formato de las preguntas, alta pertinencia de
las temticas de las preguntas, y una velocidad de respuesta adecuada para la aplicacin. Esto permiti
considerar el aumento del nmero de preguntas.

58

Informe Tcnico Simce 2013

3.6 Caractersticas y diseo de cuestionarios


Los cuestionarios contienen principalmente preguntas cerradas con dos o ms alternativas de respuesta
(generalmente con una escala Likert de cuatro alternativas) y, en menor medida, preguntas en las que se
solicita escribir un nmero (por ejemplo, la edad).
Dados los pasos de construccin descritos, finalmente en el ao 2013 se aplicaron los siguientes
cuestionarios:

Cuestionario Estudiantes: respondido por los estudiantes evaluados en la prueba Simce, en los
grados 4, 6 y 8 bsico, II medio, y los estudiantes evaluados en las pruebas Simce Discapacidad
Sensorial de 6 bsico, con discapacidad visual parcial, discapacidad visual total y discapacidad
auditiva. El proceso contempl aplicacin de cuestionarios en escuelas especiales.

Cuestionario Docentes: respondido por los docentes de los cursos evaluados por la prueba
Simce. Para el caso de 4 bsico se consider un cuestionario para el docente/profesor jefe,
que normalmente ensea todas las asignaturas evaluadas; no obstante, en este cuestionario se
realizaron preguntas especficas sobre la enseanza de Matemtica. Para el caso de 6 bsico se
consider un cuestionario para el docente que ensea Matemtica. En cuanto a 8 bsico y II medio
se construyeron cuestionarios para los docentes de Matemtica y Lenguaje y Comunicacin. Para
8 bsico tambin se elabor un cuestionario para Docentes de Ciencias Naturales.

Cuestionario Padres y Apoderados: respondido por los padres o apoderados de cada estudiante
evaluado. En el caso de Simce 2013, correspondi a los padres y apoderados de los estudiantes
de 2, 4, 6 y 8 bsico, II medio, y los padres y apoderados de los estudiantes evaluados en las
pruebas Simce Discapacidad Sensorial de 6 bsico, con discapacidad visual parcial, discapacidad
visual total y discapacidad auditiva. Esto contempl la aplicacin de cuestionarios en escuelas
especiales y establecimientos regulares.

Especficamente, el ao 2013 se disearon veinte cuestionarios en total, dirigidos a estudiantes,


docentes, padres y apoderados (ver Tabla 3.3). Los procesos de edicin y diagramacin de los
cuestionarios se realizan mediante el contrato de servicios externos a la Agencia con la supervisin
permanente de profesionales del departamento a cargo. Luego de diagramados y aprobados por la
Jefaturas del Departamento de Estudios de la Calidad de la Educacin, son entregados a la Unidad
de Operaciones de Campo y Logstica junto con un archivo con todas las especificaciones para su
impresin, aplicacin y captura.
Para el caso del Cuestionario Padres y Apoderados de 4, 6 y 8 bsico, y 6 bsico Simce Discapacidad
Sensorial, los ejemplares son enviados con el estudiante a sus casas el primer da de aplicacin Simce, y
se espera que sean devueltos el segundo da del proceso a travs de los mismos. En cuanto a 2 bsico
y II medio, estos cuestionarios son enviados con el estudiante el da de la visita previa que realiza el
examinador de la aplicacin Simce al establecimiento, y se espera su devolucin el da de la prueba.
En ambos casos, los cuestionarios son enviados dentro de un sobre abierto, sealando que deben ser
devueltos dentro del sobre sellado con el adhesivo que se incluye para este propsito. De esta manera,
se resguarda la confidencialidad de las respuestas.
Respecto del Cuestionario Docentes, los ejemplares son entregados por el examinador Simce a cada
docente el da de la visita previa que realiza el examinador de la aplicacin Simce al establecimiento, y
se espera que los devuelvan dentro de los das de la misma.
Por ltimo, en cuanto al Cuestionario Estudiantes, los ejemplares son aplicados junto con las pruebas
Simce como un mdulo ms de evaluacin, siguiendo los mismos protocolos de aplicacin.

Captulo 3

59

Tabla 3.3 Formatos de Cuestionarios de Calidad y Contexto 2013


N. de
N. de tems
preguntas

N. de
pginas

Formato

Duracina

102

12

215,9 x 279,4

29

94

12

215,9 x 279,4

Cuestionario Docentes

28

146

12

215,9 x 279,4

4 bsico

Cuestionario Estudiantes

22

110

215,9 x 279,4

6 bsico

Cuestionario Padres y
Apoderados

60 minutos
mximo

29

94

12

215,9 x 279,4

6 bsico

Cuestionario Docentes

28

146

12

215,9 x 279,4

Grado

Cuestionario

2 bsico

Cuestionario Padres y
Apoderados

31

4 bsico

Cuestionario Padres y
Apoderados

4 bsico

6 bsico

Cuestionario Estudiantes

25

117

10

215,9 x 279,4

6 bsico DSb

Cuestionario Padres y
Apoderados

60 minutos
mximo

29

94

12

215,9 x 279,4

6 bsico DS Cuestionario Estudiantes DVP

34

34

20

215,9 x 279,4

6 bsico DS Cuestionario Estudiantes DA

34

34

12

215,9 x 279,4

6 bsico DS Cuestionario Estudiantes DVT

34

34

11

Braille

29

94

12

215,9 x 279,4

28

146

12

215,9 x 279,4

28

146

12

215,9 x 279,4

28

146

12

215,9 x 279,4

40

180

15

215,9 x 279,4

60 minutos
mximo

29

97

12

215,9 x 279,4

28

146

12

215,9 x 279,4

28

146

12

215,9 x 279,4

39

170

14

215,9 x 279,4

60 minutos
mximo

8 bsico
8 bsico
8 bsico
8 bsico
8 bsico
II medio
II medio
II medio
II medio

Cuestionario Padres y
Apoderados
Cuestionario Docentes
Lenguaje y Comunicacin
Cuestionario Docentes
Matemtica
Cuestionario Docentes
Ciencias Naturales
Cuestionario Estudiantes
Cuestionario Padres y
Apoderados
Cuestionario Docentes
Lenguaje y Comunicacin
Cuestionario Docentes
Matemtica
Cuestionario Estudiantes

60 minutos
mximo
60 minutos
mximo
60 minutos
mximo

Notas: a Se refiere al tiempo mximo que el estudiante tiene permitido utilizar para responder, informacin explicitada en

las instrucciones de cada cuestionario. Los espacios en blanco corresponden a cuestionarios aplicados fuera de la

sala de clases, por lo tanto, sin restriccin de duracin.
b

6 bsico DS se refiere a la aplicacin Simce Discapacidad Sensorial de 6 bsico.

60

Informe Tcnico Simce 2013

II
Captulo 1

Operaciones
de
Campo
61

II

Captulo 4:
Poblacin objetivo
y diseo muestral

4.1 Pruebas censales Simce 2013


4.1.1 Antecedentes
La prueba Simce ha sido definida como censal a lo largo de los aos. La poblacin objetivo ideal a medir
para el caso de estas pruebas corresponde a todos los estudiantes de educacin regular que cursan el
grado definido para ellas. Para el caso de la medicin 2013, correspondi a los estudiantes matriculados
que cursaban 2 bsico, 4 bsico, 6 bsico, 8 bsico y II medio.
En este contexto, la definicin de los grados que se someten a evaluacin, y su periodicidad, son
establecidos por la Ley General de Educacin en su artculo 37, lo cual se refleja en el Plan de Evaluaciones
Nacionales e Internacionales diseado por Mineduc y UCE, y aprobado por el Consejo Nacional de
Educacin (Mineduc, 2011e).

4.1.2 Poblacin objetivo


A nivel de establecimientos educacionales

i.

De acuerdo al artculo 37 de la Ley General de Educacin: las evaluaciones nacionales peridicas sern
obligatorias, y a ellas debern someterse todos los establecimientos educacionales de enseanza regular
del pas (Ley N. 20370, 2009, p. 13). Los establecimientos estn representados segn las categoras
del cdigo SIGE (Sistema de Informacin General de Estudiantes), en el cual el Mineduc inscribe a
los establecimientos educacionales del pas. Asimismo, la ley indica que solo se evala a aquellos
establecimientos de enseanza regular, lo cual implica la exclusin de las escuelas especiales, nocturnas
y de adultos. En la Tabla 4.1 se detallan los cdigos SIGE evaluados el 2013.
Tabla 4.1 Establecimientos evaluados por Simce 2013
Cdigo SIGE de establecimientos educacionales evaluados
110

Educacin bsica

310

Educacin media Humanista-Cientfica

410

Educacin media Tcnico-Profesional Comercial

510

Educacin media Tcnico-Profesional Industrial

610

Educacin media Tcnico-Profesional Tcnica

710

Educacin media Tcnico-Profesional Agrcola

810

Educacin media Tcnico-Profesional Martima

910

Educacin media Artstica

Cabe destacar que las pruebas se aplican a todos los establecimientos educacionales del pas que tengan
al menos un (1) alumno matriculado en el grado definido.

63

ii.

A nivel de estudiantes

Si bien se espera que toda la poblacin objetivo rinda la prueba, sin exclusiones de ningn tipo, existen
ciertas situaciones que pueden eximir a un estudiante. Los criterios para determinar esas excepciones
son los siguientes:

Estudiantes que presenten algn problema de salud, y que por lo tanto no asisten a la escuela el da
de la aplicacin.

Estudiantes que presenten algn problema fsico temporal: algn estudiante podra presentar
problemas de salud temporal, tales como problemas en la extremidad superior dominante (ejemplo:
traumatismos en la clavcula, el brazo o mano dominante) o problemas visuales temporales que
dificulten la lectura (por ejemplo, contusiones oculares, irritaciones oculares graves, etc.).

Estudiantes que no hablen espaol: se refiere a aquellos estudiantes cuya lengua nativa no
corresponda al espaol, que han recibido menos de un ao de enseanza escolar en el idioma y/o
cuyo manejo es limitado.

En el caso particular de los estudiantes que presentan necesidades educativas especiales permanentes
(NEEP), quienes de acuerdo al Decreto N. 170 deben rendir las pruebas Simce, se excluyen sus puntajes
de los resultados del establecimiento debido a que el instrumento an no cuenta con las adecuaciones
necesarias que permitiran comparabilidad.

iii.

Inclusin de estudiantes con Necesidades Educativas Especiales

Para la Agencia de Calidad de la Educacin es prioritario realizar las adecuaciones necesarias en las
pruebas Simce, para que los estudiantes con necesidades educativas especiales puedan participar en
ellas en igualdad de condiciones. Debido a que a estos estudiantes sus necesidades educativas especiales
no les permiten rendir las pruebas de manera autnoma, sus evaluaciones exigen estas adecuaciones, las
cuales adems estn obligadas por ley segn lo indicado en el artculo 36 de la LGE: El Ministerio de
Educacin deber hacer las adecuaciones necesarias para que los alumnos y alumnas con necesidades
educativas especiales puedan participar en las mediciones de la calidad de la educacin (Ley N. 20422,
2010, p. 9). En este contexto, y tal como se mencion en el captulo 2 de este informe, la Agencia ha
tomado el desafo de realizar las adecuaciones necesarias para conseguir este objetivo.
Desde el ao 2012, a travs de las pruebas Simce de Discapacidad Sensorial (Simce DS), se incluyen en las
reas curriculares de Lenguaje y Comunicacin: Comprensin de Lectura y Matemticas a los estudiantes
con discapacidad visual y auditiva que estn matriculados en los siguientes establecimientos:
Tabla 4.2 Establecimientos evaluados Simce DS 2013
Establecimientos educacionales evaluados
Cdigo SIGE

Glosa

110

Educacin bsica

211

Educacin Especial Discapacidad Auditiva

213

Educacin Especial Discapacidad Visual

La evaluacin Simce DS del ao 2013 se defini como una de tipo censal para los estudiantes con
discapacidad auditiva y visual (parcial o total) que estuvieran cursando 6 bsico, exceptuando a aquellos
que presentaban multidficit y asistan a escuelas especiales.

64

Informe Tcnico Simce 2013

4.1.3 Cobertura pruebas censales Simce 2013


Uno de los objetivos de esta prueba es obtener un gran nmero de respuestas de la poblacin objetivo,
con el fin de lograr una estimacin vlida de los logros de aprendizaje de los estudiantes, para entregar
resultados a todos los establecimientos educacionales. Por ello, se busca asegurar una cobertura
adecuada tanto a nivel de establecimientos como a nivel de estudiantes.
Simce 2013 evalu a 1.112.974 estudiantes, de 1.195.532 estudiantes vlidos para rendir la prueba a
nivel nacional, lo cual representa un 93% de cobertura a nivel de estudiantes.
Con respecto a la cobertura de establecimientos educacionales, a nivel nacional se destaca que en
todos los grados supera el 98%, y en promedio alcanza un 99%. El porcentaje de establecimientos
que no rindi las pruebas obedece a casos en que hay una discrepancia con respecto a la base SIGE
(por ejemplo, establecimientos cerrados o que no correspondan a la evaluacin), o bien escuelas que
administrativamente no estaban en funcionamiento por fuerzas mayores, o por motivos de dificultades
de traslado por fuerza mayor (por ejemplo, clima). El detalle por grado se presenta en la Tabla 4.3.
Tabla 4.3 Aplicacin censal Simce 2013
Estudiantes
evaluados

Estudiantes
matriculados

Establecimientos
evaluados

% cobertura
nacional
establecimientos

Asistencia da
aplicacin

2 bsico

215.512

234.961

7.593

98,3%

91,7%

4 bsico

224.421

234.770

7.630

98,7%

95,6%

6 bsico

238.378

250.530

7.567

98,9%

95,1%

8 bsico

230.400

241.963

5.957

99%

95,2%

II medio

204.263

233.308

2.818

99,1%

87,6%

Grado

4.1.4 Cobertura pruebas Simce DS


Las pruebas Simce DS, rendidas por todos los estudiantes de 6 bsico del pas con discapacidad
visual total, discapacidad visual parcial o baja visin, y discapacidad auditiva, tuvo una cobertura de
330 estudiantes en 195 establecimientos regulares, y 19 establecimientos especiales (214 en total), y
represent al 86,8% de los estudiantes matriculados con alguna de las discapacidades sealadas.

4.2 Pruebas muestrales Simce 2013


4.2.1 Antecedentes
Junto con las pruebas censales Simce, el sistema de evaluacin contempla pruebas muestrales que
se aplican a una parte de la poblacin objetivo, lo cual implica que debe determinarse la muestra
previamente. El ao 2013 se realiz solo una prueba muestral: el Estudio Nacional de Educacin Fsica,
rendida por los alumnos de 8 bsico. A continuacin se describe el diseo de muestra realizado, y luego
se indican los datos de su cobertura.

4.2.2 Poblacin objetivo


El Estudio Nacional de Educacin Fsica se aplic a una muestra representativa de establecimientos
educacionales del pas para todas las regiones, exceptuando las localidades de la isla Juan Fernndez,

Captulo 4

65

Isla de Pascua y la Antrtica, debido a su difcil acceso37. Los criterios de seleccin fueron dos: (1) todos
los estudiantes de 8 bsico (alumnos de trece, catorce o quince aos de todo el pas), exceptuando las
zonas antes mencionadas; (2) la exclusin de los establecimientos con menos de diez alumnos en 8
bsico, y de los establecimientos que fueron evaluados el ao anterior38.

4.2.3 Metodologa de muestreo


La estimacin de la muestra es de alta relevancia, ya que debe ser representativa y adems debe asegurar
la validez de los datos obtenidos. Los criterios para establecerla fueron los siguientes:

Unidad de muestreo: las aplicaciones muestrales consideraron como unidad de muestreo el


establecimiento educacional, debido a que las pruebas son construidas para reportar resultados a
un nivel de agregacin mnimo de establecimientos y no a nivel de estudiantes.

Marco muestral: corresponde al listado de todos los establecimientos de las regiones


correspondientes en funcionamiento que tienen probabilidad de ser escogidos dentro de la
muestra, y que cuenten con estudiantes en el grado que debe ser evaluado. Este listado contiene
la identificacin del establecimiento (RBD, nombre, ubicacin geogrfica), descripcin del grado
evaluado (nmero de cursos y estudiantes) y las variables de estratificacin.

Tipo de muestreo: un muestreo estratificado que se ajusta adecuadamente a las caractersticas de


la poblacin educacional chilena, en el cual se utilizan tanto variables explcitas (que definen los
estratos), como implcitas (se verifica su distribucin una vez seleccionada la muestra).

La muestra de esta prueba est estratificada por regin. Hay algunas comunas o localidades que se
excluyen por difcil acceso: Isla de Pascua e isla Juan Fernndez y la Antrtica; y por la variable de
dependencia administrativa (establecimiento municipal, subvencionado y particular pagado)39.

Tamao de la muestra: los tamaos muestrales fueron consensuados entre la Unidad de Desarrollos
y la Unidad de Anlisis Estadstico, de acuerdo al criterio de no sobrepasar los 700 establecimientos,
1.000 cursos y 30.000 estudiantes, ya que esta cantidad se acepta como suficiente para garantizar
resultados representativos, con una holgura de un 5%40.

La siguiente tabla indica el nmero de estudiantes que rindi el Estudio Nacional de Educacin Fsica
2013.
Tabla 4.4 Muestra terica Estudio Nacional de Educacin Fsica 2013
Gnero

N. de estudiantes

Porcentaje

Femenino

8.028

51

Masculino

7.849

49

Total

15.877

100

37 Cuatro establecimientos no participaron en el proceso de seleccin, los cuales suman 89 estudiantes en ese grado, que corresponde a menos del
1% del total nacional.
38 Se excluyen debido a la complejidad logstica que implica, y no se repiten los establecimientos para dar cuenta de una representatividad mayor
cada ao.
39 Para esta prueba, el estrato dependencia administrativa particular pagado estuvo desierto en la regin de Aysn en 2013.
40 Si bien en un comienzo se dise una muestra similar a la evaluacin 2012, es decir, compuesta de 700 establecimientos, la muestra final fue
reducida debido a que en la aplicacin 2013 un estudiante sufri un accidente. La muestra se redujo tomando los resguardos necesarios para
asegurar la representatividad a nivel regional.

66

Informe Tcnico Simce 2013

4.2.4 Cobertura Estudio Nacional Educacin Fsica


La aplicacin de la prueba de Educacin Fsica se realiz a una muestra representativa de 11.981
estudiantes de 8 bsico, lo que signific una cobertura del 75,46% con respecto a la muestra terica.
Los alumnos provenan de 401 establecimientos de todo Chile.
Tabla 4.5 Cobertura prueba muestral Estudio Nacional de Educacin Fsica 2013
Gnero

N. de estudiantes

Porcentaje

Femenino

5.884

49%

Masculino

6.097

51%

Total

11.981

100%

4.3 Pruebas experimentales 2012


Las pruebas experimentales son pruebas que tienen como fin la obtencin de datos psicomtricos
(desde la Teora Clsica y TRI) para cada tem contestado. Estos datos psicomtricos son utilizados para
preseleccionar tems y retroalimentar el ensamblaje de las pruebas definitivas Simce. Las experimentales
son de carcter muestral y su aplicacin se realiza con anterioridad al ensamblaje de las definitivas. Para
el caso de las censales del 2013, todas las pruebas experimentales correspondientes se rindieron con las
censales del 2012.
Tabla 4.6 Resumen pruebas experimentales 2012
Grado
2 bsico

4 bsico

6 bsico

8 bsico

II medio

rea

N. de formas

Comprensin de Lectura

Comprensin de Lectura

Matemtica

Ciencias

Comprensin de Lectura

Matemtica

Comprensin de Lectura

Matemtica

Ciencias

Lectura

Matemtica

4.3.1 Poblacin objetivo


Para el ao 2012, la aplicacin de las pruebas experimentales consider una muestra de estudiantes de
2, 4, 6, 8 bsico y II medio, de las regiones de Coquimbo, Metropolitana y del Biobo.
Para esta muestra se contempl, a nivel de establecimientos, a aquellos que imparten educacin regular
(cdigos SIGE: 110, 310, 410, 510, 610, 710, 810 y 910), y dentro de estos, a los estudiantes matriculados
en los grados mencionados. No se consideraron los puntajes de los estudiantes con algn problema fsico
temporal, con NEEP, que no hablaran espaol, o que estuvieron ausentes el da de la prueba.

Captulo 4

67

4.3.2 Metodologa de muestreo


La seleccin de la muestra cumple un rol importante, ya que la hace representativa y cautela la validez
de las interpretaciones dadas por los datos obtenidos. Sin embargo, la metodologa TRI postula que no
es necesario contar con una muestra representativa para analizar los datos. De todas formas, resulta
valioso contar con una muestra desde la perspectiva de los anlisis cualitativos de los tems, ya que
la hace ms robusta.
Para obtener la muestra se definieron con anterioridad los siguientes criterios:

i.

Unidad de muestreo

Las aplicaciones experimentales consideraron en su elaboracin al establecimiento educacional, y no al


estudiante como unidad de muestreo, en concordancia con el modo en que se entregan los resultados
de las pruebas.
En trminos logsticos, se vuelve ms difcil el muestreo a nivel de estudiante, ya que requiere un listado
SIGE validado y actualizado, y supone que los estudiantes deban separarse de sus compaeros para
rendir la prueba, lo cual a su vez exige una sala especial para ello. Asimismo, las pruebas censales son
construidas para reportar resultados mnimos a nivel de agregacin curso y establecimiento. Por estas
razones, el 2012 la unidad de muestreo consider al establecimiento, y de este modo la evaluacin de
todos los grados y cursos correspondientes.

ii.

Marco muestral

En el caso de las pruebas experimentales, el marco consisti en un listado de todas las unidades que
tienen probabilidad de ser escogidas dentro de la muestra, es decir, un listado con los establecimientos
de las regiones correspondientes que estuvieran en funcionamiento y que contaran con estudiantes
en el grado evaluado. Este listado se compuso con la identificacin del establecimiento (RBD, nombre,
ubicacin geogrfica), la descripcin del grado evaluado (nmero de cursos y estudiantes), y variables de
estratificacin.
En el caso de que en el establecimiento se estuviera llevando a cabo un estudio paralelo en el grado
(PISA, ICILS u otro tipo de evaluacin), fue posible solicitar que este fuera eliminado del marco muestral,
y evitar de este modo una posible sobrecarga de evaluaciones.

iii.

Tipo de muestreo

El muestreo estratificado se ajusta adecuadamente a las caractersticas de la poblacin educacional


chilena, dado que en l se utilizan variables explcitas que definen los estratos, y tambin variables
implcitas que verifican su distribucin una vez seleccionada la muestra.
A su vez, en este tipo de muestreo se distinguen variables distintas de los estratos segn la prueba
(experimental), y asimismo se distingue si el establecimiento es de enseanza bsica o media.
Para las pruebas experimentales de educacin bsica (2, 4, 6 y 8 bsico) los estratos se conformaron
segn las siguientes variables: dependencia (municipalizado, particular subvencionado y particular
pagado), ruralidad (urbano o rural), y rendimiento Simce (variable dividida en tres categoras).
Tabla 4.7 Criterios para rendimiento Simce 2 bsico
rea
Comprensin de Lectura

68

Categora 1

Categora 2

Categora 3

X 229 puntos

229 < X 279 puntos

X > 279 puntos

Informe Tcnico Simce 2013

Tabla 4.8 Criterios para rendimiento Simce 4 bsico


rea

Categora 1

Categora 2

Categora 3

Comprensin de Lectura

X 239 puntos

239 < X 290 puntos

X > 290 puntos

Matemtica

X 230 puntos

230 < X 282 puntos

X > 282 puntos

Ciencias Naturales

X 233 puntos

233 < X 278 puntos

X > 278 puntos

Tabla 4.9 Criterios para rendimiento Simce 6 bsico


rea

Categora 1

Categora 2

Categora 3

Comprensin de Lectura

X 225 puntos

225 < X 275 puntos

X > 275 puntos

Matemtica

X 225 puntos

225 < X 275 puntos

X > 275 puntos

Historia, Geografa y Ciencias


Sociales

X 234 puntos

234 < X 283 puntos

X > 283 puntos

Escritura

X 145 puntos

145 < X 155 puntos

X > 155 puntos

Tabla 4.10 Criterios para rendimiento Simce 8 bsico


rea

Categora 1

Categora 2

Categora 3

Comprensin de Lectura

X 230 puntos

230 < X 280 puntos

X > 280 puntos

Matemtica

X 238 puntos

238 < X 286 puntos

X > 286 puntos

Ciencias Naturales

X 248 puntos

248 < X 296 puntos

X > 296 puntos

Para educacin media, los estratos se conformaron con las siguientes variables: dependencia
administrativa (municipalizado, particular subvencionado y particular pagado), modalidad educacional
(establecimiento cientfico-humanista, tcnico-profesional y polivalente) y rendimiento Simce.
Tabla 4.11 Criterios para rendimiento Simce II medio
rea

Categora 1

Categora 2

Categora 3

Comprensin de Lectura

X 226 puntos

226 < X 282 puntos

X > 282 puntos

Matemtica

X 235 puntos

235 < X 300 puntos

X > 300 puntos

Ciencias Naturales

X 235 puntos

235 < X 283 puntos

X > 283 puntos

Tanto para la enseanza bsica como para la media es relevante sealar que, en el caso de que en la
formacin de estratos se detectara una cantidad considerable de establecimientos nuevos (alrededor de
100 casos) que no contaran con resultados Simce de la medicin anterior, se procedi a crear un estrato
adicional que los agrupara: establecimientos nuevos. Adems, se destaca que se procur que todos los
estratos tuvieran una representacin de al menos 1%. En caso contrario, estos ltimos fueron agrupados
con el estrato ms afn de acuerdo a sus variables de estratificacin.

iv.

Tamao de la muestra

Para las pruebas experimentales, el criterio de tamao de muestra no se determin utilizando las
frmulas habituales presentadas en la literatura especializada. Este se calcul a partir de la metodologa
de anlisis de los datos TRI, especficamente el Modelo Logstico de 3 parmetros (3PL). Este requiere

Captulo 4

69

un mnimo de 1.500 respuestas efectivas en cada pregunta para obtener una estimacin robusta41.
Considerando la amplia gama de anlisis posibles de realizar a travs de subgrupos de la poblacin, y
que la tasa de omisin de las pruebas experimentales se encuentra generalmente bajo el 5%, se estim
un mnimo de 2.500 estudiantes por pregunta para asegurar resultados vlidos.
A partir de este dato, considerando adems el nmero de formas que tiene cada asignatura y la tasa de
estudiantes por establecimiento, se determin el nmero de escuelas que compondran la muestra.
La metodologa de extraccin de la muestra en las pruebas experimentales sigui una serie de pasos:

Se determin el nmero de estudiantes necesario en cada muestra (nmero de formas mximo por
asignatura o rea, por 2.500).

Se calcul la tasa de estudiantes por establecimiento dentro de cada uno de los estratos.

Se sigui con el clculo del nmero de establecimientos por estrato que seran muestreados,
considerando los valores obtenidos anteriormente.

Se realiz la seleccin de los establecimientos a travs de un muestreo aleatorio simple al interior


de cada estrato, resguardando que la cantidad total de estudiantes fuera estimada.

Con el conjunto de establecimientos restantes del marco muestral, se realiz la seleccin de los
establecimientos de la muestra para la siguiente asignatura o rea.

4.3.3 Cobertura pruebas experimentales Simce 2012-2013


El detalle de la cobertura nacional para las pruebas experimentales aplicadas el ao 2012, es el siguiente:

Pruebas 2 bsico. Participaron 11.228 estudiantes, lo que representa un 94,0% de cumplimiento


de la muestra terica.

Pruebas 4 bsico. Participaron 36.898 estudiantes, lo que representa un 74,6% de la muestra


terica.

Pruebas 6 bsico. Participaron 14.781 estudiantes, lo que representa un 84,1% de la muestra


terica.

Pruebas 8 bsico. Participaron 11.796 estudiantes, lo que representa un 91.4% de la muestra


terica.

Pruebas II medio. Participaron 12.283 estudiantes, lo que representa un 74% de la muestra terica.

Para ms detalles sobre la muestra terica y la muestra efectiva, revisar el anexo D, en donde se detalla
esta informacin a nivel regional y nacional, tanto para estudiantes como para establecimientos.

4.4 Cuestionarios
4.4.1 Antecedentes
Con el fin de recabar informacin de los Otros Indicadores de la Calidad Educativa y de los factores
contextuales que podran estar asociados a los logros de aprendizaje, se estableci que la poblacin
objetivo debe estar involucrada con las aplicaciones censales de las pruebas Simce.

41 Existe variada informacin con respecto al mnimo necesario para estimaciones robustas. El valor ms alto encontrado para un modelo de 3
parmetros es de 1.000-1.500 casos por tems, presente en Murphy y Elliot (1991) y Ricker (2006). Tambin puede considerarse el modelo de un
parmetro de 200 casos, segn Hambleton y Swaminathan (1985).

70

Informe Tcnico Simce 2013

Al respecto, de acuerdo al decreto 381/2013 del Ministerio de Educacin, la construccin de los Otros
Indicadores de Calidad Educativa se basa en la informacin recogida de los Cuestionarios de Calidad y
Contexto de la Educacin de estudiantes, de docentes y de padres y apoderados. Estos cuestionarios son
autorreportados y se aplican en conjunto con la evaluacin Simce.

4.4.2 Poblacin objetivo


La poblacin objetivo para la aplicacin del Cuestionario Estudiantes, correspondi a todos los estudiantes
que rindieron pruebas censales Simce en 4, 6, 8 bsico y II medio. Tambin los estudiantes que
rindieron Simce Discapacidad Sensorial en 6 bsico.
En cuanto al Cuestionario Padres y Apoderados, la poblacin objetivo correspondi a todos los padres y
apoderados de los estudiantes que rindieron pruebas censales Simce en 2, 4, 6, 8 bsico y II medio
en el ao 2013. Tambin los padres y apoderados de los estudiantes que rindieron Simce Discapacidad
Sensorial en 6 bsico.
Respecto al Cuestionario Docentes, la poblacin objetivo correspondi a los docentes que impartieron
clases en 4, 6, 8 bsico y II medio en las asignaturas evaluadas. Para el caso de 4 bsico, se consider
un cuestionario para el docente/profesor jefe que normalmente ensea todas las asignaturas evaluadas;
no obstante, en este cuestionario se realizaron preguntas especficas sobre la enseanza de Matemtica.
Para el caso de 6 bsico se consider un cuestionario para el docente que ensea Matemtica. Para el
caso de 8 bsico y II medio se construyeron cuestionarios para los docentes de Matemtica y Lenguaje
y Comunicacin. Para 8 bsico tambin se elabor un cuestionario para docentes de Ciencias Naturales.
El objetivo fue que los docentes que respondieran los cuestionarios fueran los que imparten las
asignaturas correspondientes a la poblacin objetivo de estudiantes, sin exclusin de ningn tipo e
independientemente de las horas trabajadas en las asignaturas correspondientes.

4.4.3 Tasas de retorno


A continuacin, se presenta la tasa de retorno de los cuestionarios aplicados con las pruebas censales
Simce 2013. La tasa de retorno de los cuestionarios seala la proporcin de cuestionarios retornados en
relacin a los cuestionarios aplicados.
La tasa de retorno del Cuestionario Estudiante se calcula en base a los cuestionarios retornados (presentes
en la base de datos), con respecto al nmero total de estudiantes asistentes al mdulo de aplicacin.
La tasa de retorno del Cuestionario Padres y Apoderados se calcula en base a los cuestionarios retornados
(presentes en la base de datos), respecto del nmero total de estudiantes asistentes el da y al mdulo en
que se entregaron estos cuestionarios para ser llevados a sus hogares. 4, 6 y 8 bsico correspondi al
segundo mdulo del primer da de aplicacin Simce. En 2 bsico y II medio el cuestionario se entreg
en la visita previa del examinador al establecimiento, por lo que se tom como referencia la matrcula
empadronada de estudiantes de estos grados).
La tasa de retorno del Cuestionario Docentes se calcula en base a los cuestionarios retornados (presentes
en la base de datos), respecto del nmero total de cursos registrados que aplican Simce en cada grado.
Tabla 4.12 Tasa de retorno 2013 de los Cuestionarios de Calidad y Contexto de la Educacin
Grado

Cuestionario

Total de cuestionarios
aplicados/ entregados

Total cuestionarios
retornados

Tasa de retorno

4 bsico

Cuestionario
Estudiantes

220.073

219.637

99,8%

6 bsico

Cuestionario
Estudiantes

229.031

219.863

96,0%

Captulo 4

71

[continuacin]
Grado

Cuestionario

Total de cuestionarios
aplicados/ entregados

Total cuestionarios
retornados

Tasa de retorno

8 bsico

Cuestionario
Estudiantes

221.712

216.158

97,5%

II medio

Cuestionario
Estudiantes

192.565

174.824

90,8%

2 bsico

Cuestionario Padres
y Apoderados

242.934

189.405

78,0%

4 bsico

Cuestionario Padres
y Apoderados

220.971

202.586

91,7%

6 bsico

Cuestionario Padres
y Apoderados

222.665

193.554

86,9%

8 bsico

Cuestionario Padres
y Apoderados

224.504

191.768

85,4%

II medio

Cuestionario Padres
y Apoderados

248.645

157.929

63,5%

4 bsico

Cuestionario
Docentes

10.212

9.923

97,2%

6 bsico

Cuestionario
Docentes

10.246

9.337

91,1%

8 bsico

Cuestionario
Docentes Lenguaje
y Comunicacin

8.780

8.206

93,5%

8 bsico

Cuestionario
Docentes
Matemtica

8.780

8.236

93,8%

8 bsico

Cuestionario
Docentes Ciencias
Naturales

8.780

8.151

92,8%

II medio

Cuestionario
Docentes Lenguaje
y Comunicacin

7.174

5.582

77,8%

II medio

Cuestionario
Docentes
Matemtica

7.174

5.918

82,5%

72

Informe Tcnico Simce 2013

II

Captulo 5:
Operaciones de campo
y logstica

5.1 Antecedentes
Con el objetivo de asegurar la validez de la prueba Simce y minimizar errores en la puntuacin de los
resultados de los estudiantes, los procedimientos de administracin de las pruebas cumplen con criterios
de estandarizacin internacional. Los manuales de administracin, las instrucciones de aplicacin y todas
las condiciones en que se rinde la prueba son preparadas y se aplican de forma consistente para todos los
estudiantes. Con el mismo nivel de rigurosidad, los procedimientos para resguardar la seguridad de los
materiales aplicados son coordinados de manera que el almacenamiento, distribucin y recuperacin de
estos sean realizados de forma segura y adecuada.
Para optimizar la calidad de la aplicacin y el que todos los estudiantes rindan en igualdad de condiciones,
existen procesos que la Agencia de Calidad externaliza. Este proceso se realiza a travs de licitaciones
de servicios42 reguladas por bases que contienen tanto las especificaciones tcnicas que debe ofrecer
el servicio, y las tareas definidas sobre este, como tambin especificaciones de tipo administrativas,
como son las responsabilidades y multas estipuladas en caso del no cumplimiento de los servicios.
Cabe destacar que cada contrato contempla clusulas que aseguran la confidencialidad y seguridad
del material, que involucran a todo el personal que participa en las etapas de impresin, distribucin,
aplicacin, retiro del material y en el proceso de captura.
La aplicacin de la prueba Simce constituye un desafo importante en trminos operativos, si se consideran
los volmenes de material que se debe imprimir, almacenar y trasladar. La coordinacin de este proceso
logstico implica una serie de pasos operacionales y administrativos, llevados a cabo colaborativamente
entre todas las partes involucradas. La coordinacin la realiza principalmente la Divisin de Evaluacin
de Logros de Aprendizaje (DELA) de la Agencia de Calidad de la Educacin, a travs de la Unidad de
Operaciones de Campo y Logstica (UOCL).
En la Tabla 5.1 se observan todas las pruebas aplicadas en el periodo 2013 segn su tipo, la fecha en que
se realizaron y el grado evaluado, as como los Cuestionarios de Calidad y Contexto de la Educacin.
Tabla 5.1 Fechas de aplicacin Simce 2013
Grado a
evaluar

Fecha

Tipo de prueba

Prueba
Ciencias Naturales

Censal
4 bsico

8 y 9 de
octubre

Matemtica
Comprensin de Lectura

Cuestionarios a aplicar
Padres y Apoderados

Estudiantes

Docentes (Profesor Jefe)

Comprensin de Lectura
Experimental

Matemtica

No aplica

Ciencias Sociales

42 El proceso de externalizacin se ha estado realizando gradualmente desde 2006, ao en que Simce estuvo a cargo del Ministerio de Educacin.

73

[continuacin]
Grado a
evaluar

Fecha

Tipo de prueba

Prueba
Matemtica

Censal

Escritura
Comprensin de Lectura

6 bsico

22 y 23 de
octubre

Cuestionarios a aplicar
Padres y Apoderados

Estudiantes

Docentes (profesor de
Matemtica)

Comprensin de Lectura
Experimental

Escritura
Matemtica

No aplica

Ciencias Naturales
Matemtica

Padres y Apoderados

Comprensin de Lectura

Estudiantes

Censal

Comprensin de Lectura

Padres y Apoderados

Experimental

Comprensin de Lectura

No aplica

Censal Discapacidad
Sensorial
2 bsico

29 de octubre

Ciencias Naturales
Matemtica
Censal
8 bsico

Comprensin de Lectura

5 y 6 de
noviembre

Padres y Apoderados
Estudiantes
Docentes (profesores
de todas las asignaturas
evaluadas)

Comprensin de Lectura
Experimental

Matemtica

No aplica

Ciencias Sociales
Matemtica
20 de
noviembre

Censal

Comprensin de Lectura

II medio

8 bsico

Padres y Apoderados
Estudiantes
Docentes (profesores
de todas las asignaturas
evaluadas)

Comprensin de Lectura

21 de
noviembre

Experimental

Entre el 18
y el 25 de
noviembre

Muestral

Matemtica

No aplica

Ciencias Naturales
Estudio de Educacin Fsica

No aplica

La Agencia aplic las siguientes modalidades de pruebas Simce en 2013:

Prueba censal: en los grados de 2, 4, 6 y 8 bsico y II medio.

Prueba extendida: aplicada a nivel nacional, en los grados de 2, 4, y 6 bsico, en los cursos cuya
matrcula de alumnos fue igual o inferior a diez alumnos.

Prueba experimental: aplicada a una muestra de establecimientos en las regiones IV, VIII y RM, en los
grados de 2, 4, 6 y 8 bsico y II medio.

74

Informe Tcnico Simce 2013

Prueba Discapacidad Sensorial: rendida por los estudiantes de 6 bsico a nivel nacional que
presentaron NEE derivadas de una discapacidad sensorial (discapacidad visual total, visual parcial y
auditiva), en cuyo caso la aplicacin incluy pruebas con acomodaciones43.

Pruebas piloto braille: aplicada a estudiantes de II medio de cinco establecimientos de la regin


Metropolitana, que presentaron discapacidad visual total (DVT).

Para la aplicacin de las distintas pruebas descritas, la Agencia efectu los siguientes procedimientos:
Empadronamiento; Impresin y Mecanizado, Distribucin, Aplicacin, y Entrega del material aplicado a
Captura. Los procesos de control de calidad fueron aplicados en el proceso de impresin (control de
calidad en imprenta) y durante la aplicacin (procesos de observacin de aplicacin en aula y construccin
de indicadores de calidad; y Plan de Control en Centros de Operaciones) (ver Figura 5.1).

Figura 5.1 Esquema que muestra las etapas de las operaciones de campo regulares al proceso de
aplicacin Simce
Empadronamiento

Impresin
Mecanizado

Distribucin

Observacin de
Aplicacin en Aula
e Indicador de
Calidad

Aplicacin

Entrega a Captura

Plan de Control
Centros de
Operaciones

A continuacin se describe cada una de las etapas de operaciones de campo, con los sistemas de calidad,
de control, procedimientos de estandarizacin y procesos para garantizar la seguridad y seguimiento de
los materiales de la prueba, segn corresponda.

5.2 Empadronamiento
El empadronamiento corresponde al proceso de construccin de la base de datos consolidada de los
establecimientos educacionales. Permite identificar la cantidad de estudiantes por curso, grado y
establecimiento y verificar datos especficos de cada una, tales como nombre del contacto, direccin,
telfono, nombre del establecimiento y RBD44, que son datos primordiales para la coordinacin y
ejecucin de los procesos de impresin, mecanizado, distribucin, aplicacin y captura.
Este proceso comienza con la entrega oficial de la base de datos del Sistema de Informacin General
de Estudiantes (SIGE) por parte de Mineduc a la Agencia de Calidad. Esta base es generada por el mismo
ministerio a partir del reporte de la matrcula informada por los directores de los establecimientos
educacionales del pas. La base es entregada a la Unidad de Tecnologa, Informacin y Comunicacin
(TIC) de la Agencia y luego enviada a la Unidad de Operaciones de Campo y Logstica (UOCL), que debe
validarla bajo un procedimiento que contempla al menos un contacto con cada escuela, ya sea a travs
del director, el subdirector o el jefe de UTP.
El proceso de empadronamiento es crucial para la validacin del total de estudiantes sujetos a evaluacin
Simce, como tambin para identificar aquellos estudiantes con NEE, debido a que son evaluados con
pruebas construidas con acomodaciones; asimismo, ello implica un procedimiento especial en su
aplicacin. Adems, permite identificar a otros alumnos que no rindieron las pruebas porque llevaban

43 Se entiende por acomodaciones aquellos cambios introducidos en el diseo de una prueba o en su administracin, que no alteran el instrumento
medido inicialmente ni la estandarizacin de su aplicacin.
44 Rol de Base de Datos, nmero nico de identificacin del establecimiento educacional.

Captulo 5

75

menos de un ao viviendo en Chile y no haban integrado el idioma cabalmente, o porque su idioma


nativo es el ingls, en el caso de los estudiantes de III medio que rinden esta prueba.
La base de datos final de empadronamiento contempla, entre otra informacin, el RBD de los
establecimientos, cantidad de grados, cursos y estudiantes por cursos, entre otros.
Debido a que esta base es una gua a partir de la cual la Agencia determina qu tipo de instrumentos
aplicar y bajo qu condiciones, se procur iniciar el proceso de empadronamiento con la mayor
antelacin posible a la aplicacin. Para el ao 2013, el proceso de empadronamiento comenz en abril,
fecha en que el Mineduc hizo llegar las bases de datos a la Agencia, y finaliz con la validacin de UOCL,
en el mes de julio del 2013.
Para llevar a cabo el empadronamiento, la UOCL dispuso de personal externo contratado por la Agencia,
como tambin de personal de la unidad Centro de Gestin Operacional (CGO) del Mineduc.
El primer contacto con cada establecimiento fue telefnico. Una vez realizado al menos un contacto,
se efectu una revisin de la desviacin de la informacin (diferencia entre la base SIGE y de los datos
obtenidos telefnicamente), para luego realizar un segundo llamado a todos las escuelas que presentaron
diferencias significativas. Tambin se hicieron iteraciones de llamados a establecimientos, en los casos
en que no fue posible contactarlos en la primera fase de este proceso.
Finalizada esta etapa, el CGO solicit apoyo de los departamentos provinciales del Mineduc, para obtener
informacin de los establecimientos que no lograron ser contactados.
Una vez construida la base, fue validada en un proceso comparativo con informacin de aos anteriores
para obtener una versin definitiva. El resultado de esta construccin fue enviado a la Unidad de Gestin
de Datos de la Agencia para aprobacin final.

5.2.1 Empadronamiento Simce Discapacidad Sensorial


Para la aplicacin Simce DS tambin se realiz el empadronamiento correspondiente, el que consisti en
identificar a los estudiantes que presentan una NEEP derivada de una discapacidad visual total o parcial
y/o discapacidad auditiva. Para ello, la Agencia solicit al Ministerio de Educacin la base de datos de los
estudiantes en Proyecto de Integracin Escolar (PIE). Esta base, al igual que la base SIGE, constituy un
insumo para el empadronamiento DS. Este proceso fue desarrollado a cabalidad por la UOCL en conjunto
con el equipo de evaluacin de estudiantes con NEE, y fue llevado a cabo entre junio y agosto de 2013.
El equipo de la UOCL dispuso para esta tarea de los agentes del CGO del Mineduc y de personal externo
contratado especialmente con este fin. El personal fue capacitado en la deteccin de estudiantes con
discapacidad sensorial mediante un protocolo para contactar a los establecimientos, con el propsito de
identificar fcilmente a los estudiantes de esta categora, a travs de la definicin de un script o guin
de llamada. Durante todo este periodo de contacto con los establecimientos, hubo un apoyo constante
desde el equipo de evaluacin de estudiantes con NEE hacia los agentes telefnicos con esta tarea,
respondiendo a dudas y situaciones extraordinarias. El empadronamiento de estos estudiantes involucr
tambin la deteccin de alumnos asistentes a escuelas regulares, ya que el mismo proceso, pero en
escuelas especiales, fue realizado ntegramente por el equipo de evaluacin de estudiantes con NEE de
la Agencia.
Una vez concluido el empadronamiento en las tareas correspondientes al CGO del Mineduc, este actor
traspas la base de datos lograda al equipo de evaluacin de estudiantes con NEE de la Agencia, desde
donde se realiz la validacin de cada uno de los casos registrados, a travs del contacto con los
establecimientos para verificar las discapacidades declaradas, los datos personales de los estudiantes
registrados, los apoyos requeridos para la aplicacin45 y el sistema de comunicacin al que est
acostumbrado el estudiante46.

45 Los apoyos indicados en este punto se refieren a las herramientas e instrumentos para apoyo de estudiantes con discapacidad visual total, parcial
y auditiva, como bacos, atriles, regletas y punzones.
46 Por ejemplo, estudiantes que se comunican a travs de lengua de seas chilena.

76

Informe Tcnico Simce 2013

Por ltimo, el equipo de evaluacin de estudiantes con NEE incorpor a esta base los registros de los
estudiantes con esta condicin, derivadas de una discapacidad sensorial, con matrcula en escuelas
especiales de aprendizaje, dando as por finalizada la construccin del empadronamiento DS para la
aplicacin en 6 bsico en establecimientos regulares y especiales de educacin.

5.3 Impresin y mecanizado


El servicio de la ejecucin del proceso de impresin y mecanizado del material Simce 2013 fue contratado
por la Agencia de Calidad de la Educacin a travs del convenio Marco, conforme a la normativa de
la Ley N. 19886, de Bases sobre Contratos Administrativos de Suministro y Prestacin de Servicios y
su Reglamento contenido en el Decreto Supremo N. 250, de 2004, del Ministerio de Hacienda y sus
modificaciones.
El servicio se desarroll entre los meses de julio y noviembre del 2013, para todos los grados de
aplicacin: 2 bsico, 4 bsico, 6 bsico, 6 bsico Discapacidad Sensorial, 8 bsico, 8 bsico Estudio
de Educacin Fsica, II medio y II medio piloto braille.
La variacin en la calidad de impresin puede afectar la captura correcta de la informacin por parte de los
estudiantes que rinden la prueba. Si un cuadernillo presenta una falla de impresin (por ejemplo, un color
indeterminado o un desperfecto de impresin que involucre una prdida de legibilidad del documento),
podra invalidar las interpretaciones sobre los resultados de los estudiantes. Debido a esto, la atencin es
rigurosa en esta etapa de impresin y mecanizado, con el objetivo de asegurar la consistencia y precisin
en la lectura de las respuestas de los estudiantes, as como la asignacin correcta de los documentos de
aplicacin al establecimiento y curso correspondiente (mecanizacin).
En este proceso, la Agencia de Calidad de la Educacin contrat los servicios de un consultor en materias
de control de calidad47 para elaborar las pautas de calidad de impresin y mecanizacin del proceso,
y supervisar su cumplimiento en dependencias de la imprenta. Las pautas de calidad elaboradas y
supervisadas por el consultor estn directamente relacionadas a las directrices de calidad contenidas en
la Norma Chilena NCh 44.Of. 2007.
La supervisin de la aplicacin del control de calidad en dependencias de imprenta fue ejecutada entre
los meses de agosto y octubre de 2013, efectundose por parte del consultor 24 visitas de inspeccin,
levantndose por cada una de ellas un reporte de cumplimiento de los estndares de calidad observados.

5.3.1 Impresin
Para la aplicacin Simce 2013 se imprimi una serie de documentos, incluyendo el material de aplicacin
(pruebas definitivas o censales y experimentales), cuestionarios, material complementario (tal como
formularios de aplicacin, listas de curso, entre otros) y materiales correspondientes a la capacitacin. El
resumen de los materiales impresos se detallan en las tablas 5.2 a 5.4.
Tabla 5.2 Resumen de tipos de pruebas segn los grados en los que se aplicaron el 2013
Grado
2 bsico

4 bsico

Prueba censal

Prueba experimental

Lenguaje y Comunicacin:

Lenguaje y Comunicacin: Comprensin de

Lenguaje y Comunicacin:

Lenguaje y Comunicacin: Comprensin de

Comprensin de Lectura

Lectura

Comprensin de Lectura,
Matemtica,
Ciencias Naturales.

Lectura,

Matemtica,
Historia, Geografa y Ciencias Sociales.

47 Este servicio se realiz a travs de la licitacin pblica N. 721703-11-LP13.

Captulo 5

77

[continuacin]
Grado

Prueba censal

Prueba experimental

Lenguaje y Comunicacin:

Comprensin de Lectura,
Lenguaje y Comunicacin: Escritura,
Matemtica.

6 bsico
6 bsico
Discapacidad
Sensorial

Lenguaje y Comunicacin:

Lenguaje y Comunicacin: Comprensin de


Lectura,

Matemtica,
Historia, Geografa y Ciencias Sociales.

Medidas antropomtricas,
Test de abdominales cortos,
Test de salto a pie juntos,
Test de flexo-extensin de codos,
Test de flexin de tronco adelante,
Test de Cafra,
Test de Navette.
Lenguaje y Comunicacin:

8 bsico
Educacin
Fsica

Comprensin de Lectura,
Matemtica.

II medio

II medio piloto
braille

Lectura,

Matemtica,
Ciencias Naturales.
No aplica.

Comprensin de Lectura,

Matemtica.
Lenguaje y Comunicacin:
Comprensin de Lectura,
Matemtica,
Ciencias Naturales.

8 bsico

Lenguaje y Comunicacin: Comprensin de

No aplica.

Lenguaje y Comunicacin: Comprensin de


Lectura,

Matemtica,
Ciencias Naturales.

Lenguaje y Comunicacin:

No aplica.

Comprensin de Lectura,

Matemtica.

Tabla 5.3 Resumen de los Cuestionarios de Calidad y Contexto de la Educacin, segn los grados de aplicacin
Grado
2 bsico
4 bsico

6 bsico

Prueba censal

Cuestionario Padres y Apoderados.


Cuestionario Padres y Apoderados,
Cuestionario Estudiantes,
Cuestionario Docentes para profesor jefe.
Cuestionario Padres y Apoderados,
Cuestionario Estudiantes,
Cuestionario Docentes para profesor de

Prueba experimental

No aplica.
No aplica.
No aplica.

Matemtica.

6 bsico Discapacidad
Sensorial

8 bsico

Cuestionario Padres y Apoderados,


Cuestionario Estudiantes con

No aplica.

Cuestionario Padres y Apoderados,


Cuestionario Estudiantes,
Cuestionario Docentes asignaturas de

No aplica.

No aplica.

No aplica.

Cuestionario Padres y Apoderados,


Cuestionario Estudiantes,
Cuestionario de Docentes asignaturas de

No aplica.

acomodaciones.

Lenguaje, Matemtica y Ciencias Naturales.

8 bsico Estudio Nacional


de Educacin Fsica
II medio

Lenguaje, Matemtica y Ciencias Naturales.

III medio piloto braille

78

Cuestionario Estudiante con acomodaciones No aplica.


en braille.

Informe Tcnico Simce 2013

En cuanto al material complementario, este est constituido por una serie de documentos destinados a
ser utilizados por examinadores y supervisores Simce, desde la visita previa a los establecimientos, hasta
la aplicacin en aula:

Formulario lista de curso: es el documento gua para la aplicacin. Su diseo e impresin permiten
su captura, es decir, el reconocimiento y registro de marcas e informacin contenida. Contiene
preimpreso el detalle de los identificadores asociados a las pruebas para cada curso correspondiente,
el RBD y nombre del establecimiento, letra y cdigo del curso correspondiente, nombre de los
alumnos, RUN y fecha de nacimiento y sexo de los mismos. El formulario contempla el registro
de hasta 48 estudiantes. Permite la posibilidad de que los examinadores completen a mano este
documento, por ejemplo, para la reasignacin de identificacin. Para cada curso aplicado, ya sea si
su aplicacin se efectu en un da o dos, existe un solo formulario asociado.

Formulario de aplicacin: corresponde al documento sobre el cual el examinador registra los datos
del establecimiento y curso (RBD y nombre establecimiento, letra, cdigo del curso y asignaturas
de aplicacin). Este instrumento adems permite tanto al examinador como al director del
establecimiento dejar registro escrito respecto a cualquier situacin anmala ocurrida durante la
aplicacin. Esta seccin del formulario se denomina Acta de Control de Eventos.

Formulario de supervisin: es el documento que utiliza el supervisor durante la visita previa al


establecimiento. All debe quedar registrada la firma del director, que valida la visita efectuada. Este
documento tambin contiene los antecedentes del establecimiento (RBD y nombre, letra, cdigo
del curso y asignaturas aplicadas).

Formulario discapacidad sensorial: cumple el mismo objetivo que el Formulario de Aplicacin


regular, pero aplicado a los cursos de escuelas especiales, cuyos estudiantes responden la prueba
Simce Discapacidad Sensorial.

Tabla 5.4 Resumen del tipo de material complementario, segn grado de aplicacin y tipo de prueba
Grado
2 bsico

4 bsico
6 bsico

6 bsico discapacidad
sensorial
8 bsico
8 bsico Educacin
Fsica
II medio
II medio piloto braille

Prueba censal

Prueba experimental

Formulario lista de curso,


Formulario de aplicacin,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin DS,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.
Formulario de supervisin.

Formulario lista de curso,


Formulario de aplicacin,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.

Formulario lista de curso,


Formulario de aplicacin,
Formulario de supervisin.
No aplica.

Formulario lista de curso,


Formulario de aplicacin,
Formulario de supervisin.
No aplica.

Captulo 5

No aplica.
Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin.
No aplica.

79

En cuanto a los materiales de capacitacin, se imprimieron varios materiales destinados al proceso de


seleccin y capacitacin de los examinadores, como lo son los manuales de aplicacin, las pruebas de
seleccin de examinadores y otros materiales de apoyo.
El Manual de Aplicacin es el documento dirigido al examinador asignado para la aplicacin de las
pruebas Simce. Estos manuales fueron generados por la Unidad de Operaciones de Campo y Logstica
(UOCL) considerando las distintas modalidades de aplicacin, y por lo mismo constituyen documentos
independientes de acuerdo a su propsito. A pesar de compartir una estructura general acorde, incluyeron
caractersticas particulares segn la prueba aplicada. Para el ao 2013, los manuales elaborados fueron
los siguientes:

Manual de Aplicacin Pruebas Censales y Experimentales.

Manual de Aplicacin Discapacidad Sensorial 6 bsico.

Manual de Aplicacin Estudio Nacional de Educacin Fsica 8 bsico.

En estos manuales estn consignadas las caractersticas de la aplicacin segn la prueba evaluada, las
responsabilidades y funciones del examinador, los procedimientos referentes a lo que debe efectuar
antes, durante y despus de la aplicacin, como tambin las consideraciones especiales para la aplicacin
de algunas pruebas.
Las pruebas de seleccin de examinadores son evaluaciones destinadas a ser aplicadas durante el proceso
de seleccin de examinadores, constituidas por una prueba de conocimientos y una de manejo grupal.

Prueba de conocimientos: tiene el propsito de medir el nivel de dominio de los candidatos a


examinadores y/o supervisores con respecto a los conceptos y orientaciones que la Agencia define
para ser cumplidas durante la aplicacin Simce.

Test de manejo grupal: tiene el propsito de medir competencias o habilidades conductuales en los
postulantes a examinadores y supervisores de acuerdo al perfil que deben cumplir, que es definido
por la Agencia en el contrato de servicio de aplicacin. Especficamente, debe ser capaz de medir las
siguientes capacidades en los postulantes:
Capacidad para identificar, plantear y resolver problemas.
Capacidad para tomar decisiones.
Capacidad de adaptacin a nuevas situaciones.
Capacidad de aplicar conocimientos tericos en la prctica.
Capacidad para trabajar en equipo.
Capacidad de autonoma.
Compromiso por la calidad y la mejora del trabajo.
Habilidades interpersonales (empata, respeto, atencin y escucha activa, etc.).
Capacidad de motivacin por lo que hace o realiza.
Compromiso tico.
Capacidad de organizacin y planificacin.

Por ltimo, el material de apoyo est constituido por una credencial de identificacin (tarjeta impresa)
y un lpiz pasta (entregado por la Agencia), para que el examinador complete los formularios que utiliza
durante la aplicacin: Formulario lista de curso y Formulario de aplicacin.

80

Informe Tcnico Simce 2013

5.3.2 Mecanizado
El mecanizado corresponde al proceso de ordenamiento y colocacin del material de aplicacin en cajas
y sobres contenedores asociados a cada curso. Cada sobre o caja est identificado en forma nica a travs
de un nmero de cdigo de barra GS1-128, impreso en una etiqueta, cuya informacin est constituida
por los datos del establecimiento, el nombre y direccin del destinatario (centro de operaciones), y en el
caso de las cajas contenedoras, el nmero de unidades contenidas por tipo de material.
De acuerdo al proceso que corresponda (visita previa o aplicacin), el mecanizado se divide en dos segmentos:

i.

Mecanizado de caja/sobre complementario (material complementario)

Corresponde al material administrativo (complementario) utilizado como conductor del proceso de


aplicacin de la prueba Simce. Se utiliza durante la visita previa a los establecimientos, en la cual se
chequea la informacin preimpresa contenida en estos. El empaque debe contener todo el material
que el examinador necesita para realizar la visita al establecimiento (un documento de cada tipo), y
recepcionarse en una fecha previa a la aplicacin de la prueba. Cabe sealar que el material de cada
establecimiento es preimpreso y se utiliza en el o los das de aplicacin.
Un sobre o caja es equivalente a la aplicacin a un curso, por grado y tipo de prueba (censal o experimental),
y contiene los siguientes elementos:

Caja con material complementario 2 bsico censal 2013:


Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin,
Cuestionario Padres y Apoderados con sobres,
Credencial examinador y supervisor,
Lpiz pasta.

Sobre con material complementario 2 bsico experimental 2013:


Formulario Lista de Curso,
Formulario de Aplicacin,
Formulario de Supervisin,
Credencial examinador y supervisor,
Lpiz pasta.

Sobre con material complementario 6 bsico censal 2013:


Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin,
Cuestionario docentes,
Credencial examinador y supervisor,
Lpiz pasta.

Captulo 5

81

Sobre con material complementario 6 bsico experimental 2013:


Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin,
Credencial examinador y supervisor,
Lpiz pasta.

Sobre con material complementario 6 bsico Discapacidad Sensorial 2013 escuela especial:
Formulario Discapacidad Sensorial,
Credencial examinador y supervisor,
Lpiz pasta.

Sobre con material complementario 8 bsico censal 2013:


Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin,
Cuestionario Docentes,
Credencial examinador y supervisor,
Lpiz pasta.

Sobre con material complementario 8 bsico experimental 2013:


Formulario lista de curso,
Formulario de aplicacin,
Formulario de supervisin,
Credencial examinador y supervisor,
Lpiz pasta.

ii.

Mecanizado de caja-curso

De acuerdo al grado y el tipo de prueba aplicada, las cajas-curso armadas (mecanizadas) son las siguientes:

Caja-curso para la aplicacin de 2 bsico censal:


Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura;
Hoja de actividades del estudiante (para el total del curso);
Bolsa de retorno Cuestionario Padres y Apoderados;
Set de lpices mina, goma y sacapuntas;
Sello de seguridad para caja-curso da: retorno;
Sello de seguridad de las cajas-curso 2 bsico (revisin).

82

Informe Tcnico Simce 2013

Caja-curso para la aplicacin de 2 bsico experimental:


Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Hoja de actividades del estudiante (para el total del curso),
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 4 bsico censal:


Material caja-curso da 1:
Mdulo de Ciencias Naturales,
Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Bolsa de retorno para preguntas cerradas de la asignatura,
Cuestionarios Padres y Apoderados con sobres de retorno,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.
Material caja-curso da 2:
Mdulo Matemtica,
Bolsa de retorno para preguntas cerradas de la asignatura,
Bolsa de retorno de Cuestionarios Padres y Apoderados,
Mdulo de Cuestionario Estudiantes,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 4 bsico experimental:


Mdulo Lenguaje y Comunicacin: Comprensin de Lectura, Matemtica o Historia, Geografa y
Ciencias Sociales, segn corresponda a la aplicacin,
Bolsa de retorno para hojas de respuesta de la asignatura,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 6 bsico censal:


Material caja-curso da 1:
Mdulo de Lenguaje y Comunicacin: Escritura,
Mdulo de Matemtica,
Bolsa de retorno para preguntas cerradas de la asignatura,
Cuestionarios Padres y Apoderados con sobres de retorno,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Captulo 5

83

Material caja-curso da 2:
Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Bolsa de retorno para preguntas cerradas de la asignatura,
Bolsa de retorno de cuestionarios de padres y apoderados,
Mdulo de Cuestionario Estudiantes con sobres de retorno,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 6 bsico experimental:


Material caja-curso:
Mdulo Lenguaje y Comunicacin: Comprensin de Lectura, Escritura, Matemtica o Ciencias
Naturales, segn corresponda a la aplicacin,
Bolsa de retorno para hojas de respuesta para la asignatura,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de las pruebas Discapacidad Sensorial de 6 bsico:


Material caja-curso da 1:
Mdulo de Matemtica,
Hojas de respuesta adicionales con el sobre correspondiente,
Material de apoyo,
Cuestionario Padres y Apoderados con el sobre de retorno (para escuelas especiales),
Sello de seguridad para caja-curso da: retorno.
Material caja-curso da 2:
Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Hojas de respuesta adicionales con el sobre correspondiente,
Bolsa de retorno de Cuestionario Padres y Apoderados,
Mdulo Cuestionario Estudiantes con sobres de retorno (segn discapacidad),
Material de apoyo (segn discapacidad),
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 8 bsico censal:


Material caja-curso da 1:
Mdulo de Ciencias Naturales,
Mdulo Matemtica,
Bolsa de retorno de cuadernillos de respuesta para cada asignatura,
Modulo Cuestionario Padres y Apoderados con sobres de retorno,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

84

Informe Tcnico Simce 2013

Material caja-curso da 2:
Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Bolsa retorno cuadernillos de respuesta,
Mdulo Cuestionario Estudiante con sobres de retorno,
Bolsa de retorno Cuestionario Padres y Apoderados,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de 8 bsico experimental:


Material caja-curso:
Mdulo Lenguaje y Comunicacin: Lectura, Historia, Geografa y Ciencias Sociales o Matemtica,
Bolsa de retorno de cuadernillos de respuesta para la asignatura,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de II medio censal:


Material caja-curso:
Mdulo Lenguaje y Comunicacin: Comprensin de Lectura,
Mdulo de Matemtica,
Bolsa de retorno para hojas de respuesta de la asignatura,
Cuestionario Padres y Apoderados con sobres de retorno,
Mdulo de Cuestionario Estudiante,
Bolsa de retorno de Cuestionario Estudiante,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin de II medio experimental:


Material caja-curso:
Mdulo Lenguaje y Comunicacin: Comprensin de Lectura, Educacin Matemtica o Ciencias
Naturales,
Bolsa de retorno para hojas de respuesta de la asignatura,
Set de lpices mina, goma y sacapuntas,
Sello de seguridad para caja-curso da: retorno.

Caja-curso para la aplicacin piloto de II medio Discapacidad Sensorial (DVT):


Material caja-curso da 1:
Mdulo de Lenguaje y Comunicacin: Comprensin de Lectura,
Mdulo de Matemtica,

Captulo 4

85

Cuestionario Estudiantes,
Sello de seguridad para caja-curso da: retorno.

Caja de contingencia en aplicacin regular, experimental y Discapacidad Sensorial: constituye una


caja simulada con el mismo material indicado para cada caja-curso segn el tipo de aplicacin
(censal, experimental, y Discapacidad Sensorial). No est asociada a establecimientos y alumnos,
por ende su utilizacin es libre al producirse un hecho de contingencia como, por ejemplo, cajacurso malograda, fallos de impresin del material interno o similares.

5.4 Control de calidad de impresin y mecanizacin


Para el proceso de aplicacin Simce 2013, la Agencia aplic un proceso de control de la calidad a
los procesos de impresin y mecanizacin, para lo cual se formularon planes de muestreo para el
aseguramiento de la calidad de impresin y mecanizacin bajo la Normativa Chilena de Calidad N.44. El
detalle de este control de calidad se describe en el anexo E.

5.5 Distribucin
Una vez impresos los documentos de aplicacin y mecanizados en sus respectivas cajas-curso, se efectu
su distribucin. La ejecucin del proceso de distribucin (imprenta-aplicador) y distribucin-inversa
(aplicador-captura) del material Simce 2013, fue un servicio contratado por la Agencia de Calidad de
la Educacin a travs del convenio marco, conforme a la normativa de la Ley N. 19886, de Bases sobre
Contratos Administrativos de Suministro y Prestacin de Servicios y su Reglamento contenido en el
Decreto Supremo N. 250, de 2004, del Ministerio de Hacienda y sus modificaciones.
El servicio se desarroll entre los meses de julio y diciembre de 2013 para todos los grados de aplicacin,
vale decir: 2 bsico, 4 bsico, 6 bsico, 6 bsico Discapacidad Sensorial, 8 bsico, 8 bsico Estudio
de Educacin Fsica, II medio y II medio piloto braille.
Para la distribucin del material de aplicacin, la Agencia instruy el siguiente esquema de trnsito del
material, con nfasis en el empleo de uso de cdigos para identificar la trazabilidad durante todo el
proceso de aplicacin (ver Figura 5.2).

86

Informe Tcnico Simce 2013

Figura 5.2 Flujo de distribucin de la prueba Simce 2013

Una vez impresos y mecanizados los materiales en la imprenta, se procedi a su distribucin hacia los
distintos Centros de Capacitacin y de Operaciones (CO) de los aplicadores (sedes para el caso de la
aplicacin con Deprov), y sus Centros de Capacitacin (CC). Estos CO y sedes fueron bodegas y casas
que sirvieron para la recepcin, revisin, almacenamiento, manipulacin y despacho del material de
aplicacin de todos los establecimientos asociados al mismo. Por otra parte, los CC fueron los lugares
donde se enviaron los materiales para las capacitaciones a examinadores y supervisores Simce.
La distribucin del material desde la salida de imprenta hasta su llegada a empresas capturadoras, ya
completa la aplicacin, se dividi en cuatro etapas:

5.5.1 Distribucin de material de capacitacin (cajas-capacitacin)


Este proceso contempl la distribucin del material de capacitacin (cajas con material de capacitacin,
Tabla 5.5) a los centros definidos por los aplicadores, en los cuales se efectuaron las sesiones de
capacitacin de examinadores. A nivel nacional, fueron 37 puntos de entrega, distribuidos desde Arica a
Punta Arenas.

5.5.2 Distribucin de material complementario (sobres/cajas-material complementario)


Este proceso contempl la distribucin de material complementario (sobres y cajas con material
complementario) a los centros de operacin definidos por los aplicadores, desde los cuales trabajaron
los examinadores en las etapas de visita previa a establecimientos (y aplicacin). Con el envo de este
material el aplicador pudo efectuar dichas visitas, enviando a sus examinadores a efectuar este proceso
junto a sus respectivos supervisores.

Captulo 5

87

5.5.3 Distribucin de material de aplicacin (cajas-curso)


Este proceso contempl la distribucin de material de aplicacin (cajas-curso) a los centros de operacin
definido por los aplicadores, desde los cuales operaron los examinadores durante las fechas de las
pruebas. Con el envo de este material, el encargado, a travs de examinadores y supervisores, pudo
efectuar el proceso con xito.
A nivel nacional fueron 338 puntos de entrega (centros de operacin), distribuidos desde Arica a Punta
Arenas.

5.5.4 Distribucin inversa de material aplicado (retiro desde el centro de operacin


del aplicador y entrega en dependencias de empresas capturadoras)
Este proceso contempl la distribucin inversa del material aplicado (cajas-curso) desde los centros
de operacin de los aplicadores hacia los centros de captura de las empresas que se adjudicaron el
servicio48 (capturadores de documentos en Simce 2013). Con el envo de este material, estas empresas
capturadoras iniciaron el proceso de almacenaje.
A nivel nacional fueron 338 puntos de retiro (centros de operacin), distribuidos desde Arica a Punta
Arenas, y dos puntos de entrega correspondientes a bodegas de las empresas capturadoras, en la Regin
Metropolitana. A nivel nacional, fueron 37 puntos de entrega distribuidos de Arica a Punta Arenas.
En resumen, el material complementario para efectuar las visitas previas a los cursos y el material de
aplicacin requerido para las rendiciones efectivas, fueron distribuidos a 338 centros de operacin desde
las dependencias de imprenta en la regin Metropolitana. Se distribuy un promedio de 12.000 sobres
complementarios y 13.000 cajas-curso por grado de aplicacin.
Cada uno de estos materiales seriados bajo los estndares GS1 de Trazabilidad Global (GTS por sus
siglas en ingls)49 cont con un sistema de trazabilidad en una Plataforma Integrada de Trazabilidad
(PIT), que permiti a la Agencia incorporar de forma inmediata la informacin referente al tracking de
cada material. El reporte que aliment esta plataforma, consider como insumos planillas producidas en
Excel, a travs de las cuales cada actor que entregaba y reciba un material (caja o sobre) que registraba
la captura (pistoleo) del nmero de serie presente en cada etiqueta, cuyos datos daban cuenta de la
siguiente informacin:

RBD,

Nombre EE,

Direccin EE,

Comuna EE,

Regin EE,

Grado,

Serie caja-curso,

Da de aplicacin,

Tipo de prueba (censal o experimental),

Centro de Operacin (CO) o sede,

Direccin CO,

Comuna CO,

Series de pruebas (desdehasta),

Cdigo de barra nico de la caja-curso da.

48 Licitacin pblica N. 721703-3-LP13.


49 El sistema GS1 GTS es un conjunto de normas de codificacin y etiquetado de productos que tiene como objetivo poder identificar y singularizar
ciertos productos dentro de una cadena logstica de produccin y distribucin. El sistema de codificacin de Simce se encuentra de acuerdo a la
Norma Chilena NCh 44. Of. 2007.

88

Informe Tcnico Simce 2013

Tabla 5.5 Cronograma del proceso de distribucin de materiales 2013


Cronograma del proceso de capacitacin
Etapa
Etapa 1: Distribucin de cajas con
material de capacitacin

Etapa 2: Distribucin de sobres o cajas


con material complementario

Etapa 3: Distribucin de material de


aplicacin (cajas-curso)

Etapa 4: Distribucin inversa de


material aplicado

Grado

Fecha de inicio de
retiro desde imprenta

Fecha del fin de la


entrega en centros de
operacin

N/C

23/08/2013

30/08/2013

2 bsico

30/09/2013

21/10/2013

4 bsico

10/09/2013

12/09/2013

6 bsico

02/10/2013

16/10/2013

8 bsico

17/10/2013

29/10/2013

8 bsico
Est. de Ed. Fsica

21/10/2013

30/10/2013

II medio

29/10/2013

15/11/2013

2 bsico

02/10/2013

28/10/2013

4 bsico

16/09/2013

04/10/2013

6 bsico

04/10/2013

21/10/2013

8 bsico

23/10/2013

04/11/2013

8 bsico
Est. de Ed. Fsica

N/C

N/C

II medio

04/11/2013

13/11/2013

2 bsico

31/10/2013

29/01/2014

4 bsico

11/10/2013

29/01/2014

6 bsico

25/10/2013

29/01/2014

8 bsico

11/11/2013

20/12/2013

8 bsico
Est. de Ed. Fsica

04/12/2013

20/12/2013

II medio

22/11/2013

20/12/2013

Nota: N/C: no corresponde.

5.6 Aplicacin
El proceso de aplicacin Simce 2013 se realiz bajo la responsabilidad de la UOCL, en dos modalidades
administrativas:

Aplicacin a travs de licitaciones pblicas: para las regiones al norte de la Regin del Biobo, incluida
la Metropolitana de Santiago.

Aplicacin a travs de los Departamentos Provinciales de Educacin (Deprov), en el caso de la regin


de la Araucana, Isla de Pascua y Juan Fernndez. La rendicin de Simce fue efectuada con apoyo de
las Deprov, con la asistencia de la UOCL.

La aplicacin fue un servicio contratado por la Agencia de Calidad de la Educacin a travs de licitacin
pblica conforme a la normativa de la Ley N. 19886, de Bases sobre Contratos Administrativos de
Suministro y Prestacin de Servicios y su Reglamento contenido en el Decreto Supremo N. 250, de 2004,
del Ministerio de Hacienda y sus modificaciones.
Este servicio se desarroll entre los meses de julio y diciembre de 2013 para los grados de aplicacin 2
bsico, 4 bsico, 6 bsico, 6 bsico Discapacidad Sensorial, 8 bsico, II medio y II medio piloto braille.

Captulo 5

89

No obstante, la modalidad administrativa empleada para la contratacin del servicio de aplicacin en s


implic una serie de etapas: reclutamiento y seleccin de examinadores, visitas previas a los establecimientos
y cursos, y aplicacin en el aula. Estas etapas son consideradas especialmente importantes, debido a que
las variaciones entre las condiciones de rendimiento pueden afectar el resultado de los estudiantes en la
prueba, lo cual repercute a su vez la validez de las interpretaciones de la misma. La Agencia orienta, a travs
de las obligaciones, responsabilidades y multas estipuladas en los contratos de servicio con los aplicadores,
que las condiciones de aplicacin de las pruebas sean las mismas para todos y durante toda la jornada.
Dada su importancia, la Agencia estipul detalladamente todas las condiciones y procedimientos a
efectuar por los aplicadores en Manuales de Aplicacin. Estos manuales describen de forma exhaustiva
los procesos a realizarse antes, durante y despus de la aplicacin de las pruebas Simce 2013, y tienen
como principal objetivo asegurar que todos los estudiantes rindan la prueba de forma consistente y
comparable; es decir, que las condiciones ambientales para rendir las pruebas, el tiempo de inicio y
trmino de estas, la trazabilidad de los materiales aplicados y la asignacin de cada forma de la prueba
(cuadernillos), sean de forma estandarizada.
Para esta etapa del proceso, en el ao 2013 la Agencia efectu controles de calidad con la finalidad
de verificar y monitorear la calidad de los procesos, mediante observaciones de aplicacin en aula y
observacin y control de los centros de operaciones, ambos servicios contratados por la Agencia a travs
de licitacin pblica.
La observacin de la aplicacin en aula contempl distintas ciudades a lo largo del pas. Los observadores
debieron emplear un instrumento de evaluacin llamado Formulario de observacin Simce, el cual
midi una serie de aspectos como la hora de llegada y de salida del examinador, las condiciones del
espacio fsico (iluminacin, espacio, sillas y mesas, temperatura, ruidos), recepcin a tiempo del material
evaluativo, gestin de materiales en caso de imprevistos, aplicacin de los procedimientos indicados
en el Manual de Aplicacin, distribucin de pruebas, entrega de instrucciones, verificacin de identidad
del estudiante, problemas en la impresin de las pruebas, instrucciones para el Cuestionario Simce,
aplicacin de procedimientos en caso de indisciplina, llenado correcto de los formularios, seguridad y
conteo del material, etc.
Por otra parte, el plan de control de los centros de operaciones vel por el fiel cumplimiento de las
caractersticas tcnicas solicitadas a cada centro, conjuntamente con todos los procedimientos
operativos asociados a cada etapa, los cuales se encuentran estandarizados.

5.6.1 Reclutamiento y capacitacin de supervisores y examinadores


El reclutamiento y preseleccin de examinadores corresponde al proceso en que el aplicador (SimceDeprov o proveedor del servicio, segn la regin) efecta una preseleccin de candidatos a examinadores
acorde al perfil que determina y especifica la Agencia en las bases de licitacin para este servicio.
En cuanto a la capacitacin, la Agencia estipul detalladamente en las bases de licitacin del servicio los
roles y responsabilidades de las partes involucradas50. La Agencia proporcion el material de aprendizaje
(manuales), de modo que las capacitaciones fueran estandarizadas en cuanto a la informacin recibida.
Estos manuales fueron desarrollados de modo que fueran de fcil comprensin y comunicaran informacin
detallada sobre los procedimientos que cada examinador deba realizar al momento de la aplicacin de
las pruebas.
Asimismo, la Agencia efectu la capacitacin inicial al equipo de relatores de los aplicadores, y particip
de forma activa en el diseo de los procesos de seleccin y capacitacin de examinadores y supervisores.
Para asegurar que los examinadores seleccionados cumplieran con el perfil deseado, se privilegi a
aquellos postulantes con experiencia previa en las funciones requeridas (experiencia en aplicacin de
pruebas Simce).
El perfil de los examinadores requeridos fue el siguiente:

50 Para conocer las caractersticas y deberes de todo el personal involucrado en la aplicacin de Simce, ver anexo F.

90

Informe Tcnico Simce 2013

Profesionales universitarios y de instituciones de educacin superior (titulados, egresados o


estudiantes que cursaran tercer ao en adelante) de carreras de las ciencias sociales, educacin y
salud, tales como:
Pedagoga bsica o media.
Psicologa.
Educacin parvularia.
Educacin diferencial.
Psicopedagoga.
Trabajo social.
Enfermera.

Profesores y docentes de instituciones universitarias o de establecimientos educacionales que no


impartieran enseanza en los niveles evaluados.

Tener al menos veinte aos de edad.

Manejar herramientas computacionales, nivel usuario.

No poseer antecedentes delictivos, haber sido mal evaluado en aplicaciones Simce anteriores, o
tener conflictos de inters con el establecimiento donde se aplica la prueba.

No tener relacin directa con el establecimiento a examinar (no ser profesor o tener alguna relacin
directa con el alumnado a evaluar)51.

El reclutamiento se realiz mediante un llamado masivo a travs de los medios de comunicacin


regionales que cada aplicador estim conveniente, dirigido a candidatos que cumplieran con el perfil
indicado. Una vez capacitados, la seleccin final de los examinadores y supervisores se efectu en
consideracin a los resultados obtenidos por ellos en las ruebas de seleccin (de conocimientos y
test de habilidades conductuales). De acuerdo a lo exigido por la Agencia, se seleccionaron aquellos
postulantes que cumplieron con el perfil requerido y que obtuvieron el 100% de respuestas correctas
en las pruebas mencionadas.
Los aplicadores seleccionados por la Agencia mediante licitacin pblica presentaron un equipo
multidisciplinario encargado de elaborar, implementar, ejecutar y supervisar los instrumentos de
capacitacin, apoyar a la mesa de ayuda, al proceso de postaplicacin y en los das de aplicacin, y
ayudar a solucionar problemas de contingencia administrativa. En los Deprov esta figura recay en un
encargado de aplicacin Simce por departamento provincial.
Para asegurar que no existieran variaciones en esta etapa de capacitaciones a examinadores y supervisores
que pudiesen derivar en fallas sistemticas o aleatorias que afectasen los resultados de la aplicacin, la
Unidad de Operaciones de Campo y Logstica realiz visitas de control de calidad a las capacitaciones
realizadas por los aplicadores, con el fin de asegurar que se efectuaran segn lo estipulado en las bases
tcnicas y administrativas del servicio. Se busc asegurar que los examinadores pudieran practicar con el
material dispuesto para as disminuir posibilidades de error en los llenados de los formularios de control.
La capacitacin efectuada incluy a una mayor cantidad de examinadores que las plazas existentes, de
modo de asegurar as la disponibilidad de examinadores adicionales para asignacin de casos emergentes
o contingencias.

i.

Capacitacin de examinadores Simce Discapacidad Sensorial

Para la prueba de Discapacidad Sensorial, la capacitacin de los examinadores requiri, de parte de los
aplicadores, de un equipo multidisciplinario de profesionales del rea. Este elabor, ejecut y supervis

51 Las condiciones inhabilitantes para supervisores, examinadores o personal similar que participan directa o indirectamente del proceso, son
mencionadas en el anexo F.

Captulo 5

91

los instrumentos de capacitacin, evalu las competencias de los examinadores, apoy el centro de
gestin operacional y el proceso de post aplicacin.
Tal como sucedi en la aplicacin 2012, en relacin con el material de capacitacin de los examinadores, la
informacin para todas las aplicaciones se fusion en un nico manual, que incluy un detallado apartado
de anexos, para dar cuenta de todos los procedimientos necesarios para ejecutar eficientemente las
pruebas en cuestin, proceso que se desarroll desde junio a septiembre de 2013.
Este manual compil toda la informacin necesaria para cada examinador, independiente del tipo de
establecimiento en que deba desempearse: especial o regular.
La prueba de seleccin para examinadores Simce DS se elabor a partir de la informacin presente
en el manual DS respectivo, estableciendo categoras segn las competencias presentadas por la(s)
discapacidad(es) de los estudiantes.
Otro aspecto relevante para esta aplicacin consisti en que los examinadores cursaran y aprobaran
la capacitacin Simce regular previamente a una evaluacin especfica que permitiera determinar el
nivel de conocimientos y competencias para atender a estudiantes con discapacidad. Esto se realiz para
resguardar que dominaran eficientemente la aplicacin Simce DS. Finalmente, los examinadores rindieron
una prueba que determin el nivel de conocimiento del proceso, para capacitarse en los procedimientos
especficos de la evaluacin Simce DS.
El proveedor del servicio de aplicacin entreg propuestas para la evaluacin de conocimientos y
competencias segn discapacidad, siendo cada una de ellas revisadas y retroalimentadas por el equipo de
evaluacin de estudiantes con NEE de la Agencia. Situacin similar se desarroll con las presentaciones
para la capacitacin de los examinadores. Una vez que se lleg a la versin final, con visto bueno del
equipo, se autoriz su uso para el proceso de seleccin de examinadores.

5.6.2 Visitas previas


El paso siguiente a la seleccin de supervisores y examinadores fue la preparacin y ejecucin de visitas
previas por parte del supervisor y los examinadores, correspondientes a establecimientos y cursos.
Esta visita constituye el primer contacto entre supervisores y examinadores con los establecimientos,
busca preparar las condiciones para la aplicacin y verificar y validar los datos de los estudiantes que
participan en la evaluacin. El examinador que efecta la visita previa al curso designado tiene como
funcin principal informar al director sobre los procedimientos de la aplicacin y solicitar su colaboracin
para generar las condiciones ptimas para la realizacin de la prueba, en los siguientes trminos:

Designar un profesor encargado de colaborar durante los das de aplicacin (para formar/ordenar a
los estudiantes, mantener un ambiente tranquilo en torno al sector donde se aplicarn las pruebas).

Entregar un plan de emergencia del establecimiento ante eventos como sismos o incendios,
entre otros.

Enviar a los padres y apoderados una comunicacin que informe sobre los detalles de la evaluacin,
tales como fecha, horarios de aplicacin de las pruebas y cuestionarios.

Proporcionar un nmero telefnico del establecimiento para tomar contacto con el profesor
colaborador, en caso que ocurra alguna emergencia durante la aplicacin.

Dada la importancia de la colaboracin de los directores de los establecimientos, previamente la Agencia


les enva un documento en formato digital e impreso denominado Orientaciones para Directores de
Educacin Bsica u Orientaciones para Directores de Educacin Media, segn corresponda. En ellos se
establecen los detalles del proceso Simce a efectuar en el establecimiento y las actividades en que se
requiere se colaboracin durante la visitas previa y la misma aplicacin:

92

Informe Tcnico Simce 2013

Asegurarse de la idoneidad del examinador.


Carecer de lazos consanguneos con el personal del establecimiento.
No ser exalumno del establecimiento.
No haber tenido vnculo contractual alguno con el establecimiento durante el ao 2013.
No haber realizado prctica profesional el ao 2013 en el establecimiento.

Verificar el formulario Lista de curso.

Comunicar al examinador el plan de emergencia del establecimiento.

Autorizar la visita del examinador a la sala de clases.

Colaborar en la entrega del Cuestionario Docentes y Cuestionario Padres y Apoderados.

Programar el horario de llegada el da de la aplicacin.

Firmar el acta de visita previa.

Una vez presentados el supervisor con sus examinadores al respectivo establecimiento, y entregadas
todas las indicaciones del proceso a su director, con la autorizacin de este ltimo, proceden las
actividades propias de la visita previa, en la cual el examinador debe:

Verificar la informacin impresa en el formulario Lista de curso (nombre, RUN, sexo) con la informacin
contenida en el Libro de Clases.

Verificar los casos de estudiantes que hayan sido retirados del establecimiento.

Completar segn corresponda, el formulario Lista de curso.

Indicar al director el cronograma de aplicacin correspondiente para cada da.

Entregar el Cuestionario Docentes y sobres de retorno (para los niveles que corresponda).

Entregar el Cuestionario Padres y Apoderados y sobres de retorno.

5.6.3 Aplicacin en aula


En trminos generales, en cada grado se evala una o ms asignaturas en diferentes pruebas y cada una
de ellas se aplica por separado. La aplicacin de cada prueba regular tiene una duracin mnima de 45
minutos y mxima de 90. Junto con las pruebas por asignatura se aplica el Cuestionario Estudiantes, el
que corresponde solo para las pruebas censales (en todos los grados, a excepcin de 2 bsico) y tiene
un tiempo de respuesta menor que el de una prueba.
Durante el proceso pueden definirse cuatro etapas que se repiten durante cada da de aplicacin de la prueba:

Retiro por parte del examinador y/o del supervisor del material de aplicacin (caja-curso da) desde
el Centro de Operaciones o sede (solo para el caso de los Deprov), asociado al establecimiento.

Aplicacin en aula propiamente tal.

Devolucin del material al Centro de Operaciones o sede y cuadratura de este.

Entrega del material al distribuidor.

Adems, durante estas etapas se destaca como elemento clave la comunicacin entre las partes
involucradas, ya que en caso de un imprevisto debe darse curso a planes de contingencia, segn sea el
caso. Es por esto que se contempl material para aplicar de forma adicional, como tambin examinadores
extras en caso de ausencias.

Captulo 5

93

Para la aplicacin Simce 2013 las fechas fueron definidas por la Agencia de acuerdo a las diferentes
demandas del calendario escolar, con el objetivo de no interrumpir las actividades programadas, y
para que la aplicacin no estuviera cercana al trmino del ao escolar ni que coincidiera con fechas de
conmemoracin o feriados.
De esta manera, la Agencia defini el calendario de aplicacin para el proceso Simce 2013 en las
siguientes fechas:

4 bsico: 8 y 9 de octubre.

6 bsico regular y DS: 22 y 23 de octubre.

2 bsico: 29 de octubre.

8 bsico: 5 y 6 de noviembre.

8 bsico Estudio Nacional de Educacin Fsica: entre el 18 y 25 de noviembre.

II medio: 20 y 21 de noviembre.

Para cada una de las fechas programadas, el inicio de aplicacin estipulado fue a las 9:00 horas. Para
cumplir con ello y mantener los resguardos necesarios se estipul que cada examinador llegara al
establecimiento una hora antes de la aplicacin (como mnimo). Con respecto al material de aplicacin
y su traslado desde los Centros de Operacin a los establecimientos y cursos, se contempl que
tanto el supervisor como el examinador asegurasen integridad y absoluta confidencialidad de cada
material a cargo. Para lograr esto, se establecieron procesos normados de manipulacin, restringiendo
estrictamente el acceso al material, y utilizando un procedimiento de sellado definido y controlado en
forma permanente.
Durante la aplicacin en aula, la primera tarea del examinador fue hacer una revisin del material recibido
y reportar inmediatamente al supervisor eventuales inconsistencias. Luego, preparar la sala de clases con
los criterios de ordenacin de puestos y asignacin de cuadernillos, de acuerdo a lo estipulado en el
Manual de Aplicacin. Consecutivamente, ingresar a los estudiantes a la sala de clases, privilegiando en
primer lugar a aquellos que tuviesen una discapacidad sensorial. Luego de verificar la asistencia, aplicar
los instrumentos correspondientes.
Dentro de las indicaciones para la aplicacin de la prueba, en el manual del proceso se estipula como
paso inicial la lectura en voz alta de instrucciones generales insertas en la portada. De esta manera, se
asegura que todos los estudiantes conozcan las condiciones generales para responder su prueba. Adems
estipula dejar registro de cualquier situacin o acontecimiento irregular en el punto Acta de control de
eventos que se encuentra en el Formulario de Aplicacin. Esta acta es firmada por el examinador y el
director del establecimiento al trmino de la aplicacin (existan o no situaciones irregulares).
Concluido el tiempo mximo para responder la prueba, el examinador retira la totalidad del material,
teniendo en cuenta que cualquier inconsistencia debe ser informada de manera inmediata al supervisor.
Una vez finalizada la aplicacin, los examinadores proceden al retiro de las pruebas y realizan una
cuadratura, sellando en el aula la caja con las pruebas en su interior, para su posterior retorno al Centro
de Operacin respectivo.
Cabe considerar que para la aplicacin de 2 bsico, cuando un curso sobrepasa los veinte alumnos, la
normativa del proceso asigna a dos examinadores.

5.6.4 Control de Calidad de la Aplicacin


En el ao 2013, y con el propsito de evaluar la calidad del proceso de aplicacin, se elabor un indicador
de calidad del proceso (IDC), el cual fue calculado a partir del concepto central de adherencia al
cumplimiento de las exigencias y estndares en la ejecucin de cada proceso asociado. Para mayores
detalles de la elaboracin y contruccin de este ndice, consultar el anexo E.

94

Informe Tcnico Simce 2013

5.7 Retorno del material y captura


El retorno del material desde los centros de operacin de los aplicadores hacia las empresas de captura
es un procedimiento de alta importancia, donde la seguridad es prioritaria. Para el 2013 se defini
que, inmediatamente despus de cada aplicacin, se procediera a retirar primero el material aplicado
en la regin Metropolitana (dada la cercana geogrfica con las dependencias de los capturadores),
y posteriormente desde regiones hacia la capital. Este proceso tuvo una duracin de veinte das
aproximadamente por cada grado evaluado, en lo que respecta al 99% del material aplicado, y el saldo
restante fue retornado con posterioridad.
Una vez retornado este material (cajas-curso) desde las salas de clases a los centros de operaciones
de los aplicadores se efectu la distribucin-inversa, instancia en que el distribuidor del proceso retir
las cajas aplicadas (selladas) para entregarlas a los centros de captura de las empresas contratadas.
El servicio de captura ptica de las pruebas fue un servicio contratado por la Agencia de Calidad de la
Educacin a travs de licitacin pblica, conforme a la normativa de la Ley N. 19886, de Bases sobre
Contratos Administrativos de Suministro y Prestacin de Servicios, y su Reglamento contenido en el
Decreto Supremo N. 250, de 2004, del Ministerio de Hacienda y sus modificaciones.
El servicio se desarroll entre los meses de octubre y marzo de 2013, sin perjuicio de que ambos
capturadores debieran almacenar todas las pruebas en su material fsico, as como otros insumos, por
un mnimo de seis meses. Esto tuvo como objetivo tener un respaldo sobre el material aplicado, en
caso de que se necesitara para verificar la respuesta original que marc el estudiante, debido a alguna
discrepancia. Una vez que la Agencia valida la base de datos de captura, las empresas capturadoras
deben destruir todo el material en presencia de un notario pblico.
Las fechas de entrega de bases de datos de captura a la Agencia fueron las siguientes:
Tabla 5.6 Fechas de entrega del material a captura
Grado

Fecha de entrega de captura


Fecha de inicio

Fecha de trmino

2 bsico

04-11-2013

12-11-2013

4 bsico

10-10-2013

15-10-2013

6 bsico

24-10-2013

28-10-2013

8 bsico

08-11-2013

16-11-2013

8 bsico Estudio de Educacin Fsica

09-12-2013

13-12-2013

II medio

22-11-2013

30-11-2013

Captulo 5

95

III
Captulo 1

Procesamiento
y anlisis
de datos
97

III

Captulo 6:
Gestin de Datos

6.1 Antecedentes
Este captulo describe todos los procesos implementados para llevar a cabo las bases de datos
desarrolladas en el proceso Simce 2013. Para la construccin de las base de datos es necesario asegurar
que los datos reflejen acertadamente la informacin plasmada en la documentacin recibida. Para
cumplir con este objetivo y para que las bases de datos cumplieran con las exigencias, se utilizaron
estrictos controles de calidad. Para el procesamiento de los datos se sigui el flujo de proceso que se
describe a continuacin:
Figura 6.1 Flujo proceso gestin de datos
Validacin
y correccin
de datos de
captura

Definicin de
criterio para
procesamiento de
datos

Carga y
chequeo de
datos

Validacin
y correccin
de datos

Generacin de
productos de
resultados

Consolidacin
y cuadratura
BD validada

Nota: La figura muestra un diagrama de flujo de gestin de datos.

6.2 Definicin de criterios para el procesamiento de datos


Este proceso se ejecuta antes de la aplicacin Simce y tiene como referencia el protocolo de aos
anteriores. El primer paso para el procesamiento de los datos se refiere a la elaboracin de los
requerimientos fsicos y tcnicos para la validacin, de modo de asegurar que estos estn disponibles en
las fechas correspondientes. La definicin de criterios contempla varias etapas y depende de la entrega
de maquetas o insumos base y de la retroalimentacin de evaluacin del proceso anterior. De este modo,
se verifica que los errores de los aos anteriores no se vuelvan a repetir.

6.2.1 Elaboracin/ajuste del plan de gestin


Este proceso de definicin de criterios comienza con la elaboracin de un plan de gestin de datos
que involucra los compromisos de mejora establecidos en la evaluacin del proceso anterior, y nuevos
requerimientos surgidos por parte de los proveedores de captura como clientes internos. En este plan se
describe cmo se abordar el procesamiento de datos de la entrega de resultados del ciclo evaluativo
del ao correspondiente, pasando por la aprobacin del jefe de la divisin.

6.2.2 Generacin del diccionario de datos


Consecutivamente, se genera el llamado diccionario de datos a partir de las maquetas definidas
como formularios de control. El diccionario establece la norma y codificacin de cada uno de los
campos y los rangos permitidos, los que posteriormente sern utilizados en el proceso de captura.
En la generacin de este producto se contemplan los materiales que sern usados en la aplicacin

99

como los formularios de control (listas de curso, formularios de aplicacin, Cuestionarios de Calidad
y Contexto y hojas de respuestas), los cuales contienen los cdigos identificadores del estudiante,
curso y establecimiento evaluado.

6.2.3 Creacin de base de datos


Una vez aprobado el diccionario de datos, se generan las rutinas para la construccin de las bases de
datos, para lo cual se consideran los estndares definidos en las polticas de gestin.
Cada estudiante es identificado a travs de un nmero de folio nico dentro de la base de datos, al que
se asocian todas sus pruebas y cuestionarios. Este folio aparece impreso en las pruebas y cuestionarios
que corresponde evaluar segn el nivel del estudiante.
Asimismo, los establecimientos educacionales poseen un nmero nico asignado por el Mineduc,
el Rol de Base de Datos (RBD). Adicionalmente, para un mismo establecimiento se asignan nmeros
identificatorios para cada curso segn el grado y la letra de curso correspondiente. La variable grado es
un nmero de dos dgitos, dentro del cual el primero corresponde al nivel educativo y el segundo seala
si el curso pertenece a la educacin bsica (0) o media (2), tal como se muestra en la siguiente tabla.
Tabla 6.1 Variables de identificacin para cada grado educativo
Grado

Variable

2 bsico

20

4 bsico

40

6 bsico

60

8 bsico

80

II medio

22

III medio

32

Finalmente, la letra de curso designa el aula especfica a la cual los estudiantes de un mismo nivel
pertenecen dentro del establecimiento. Esta nomenclatura es organizada por letras del alfabeto
(2 bsico A, 2 bsico B, etc.) y adems se cataloga con un nmero nico a cada curso. Este nmero
correlativo es llamado CLN Curso (Cdigo de Localizacin Nmero Curso).
Dentro de los materiales de aplicacin de la prueba que dan cuenta de estos nmeros de identificacin, el
principal documento es la lista de curso. Esta contiene aspectos como el detalle acerca de la asistencia,
si el estudiante est retirado, si es necesario anular una prueba o si hubo que hacer modificaciones en
los datos personales, como el RUN del estudiante, entre otros. Las categoras para los posibles motivos
de anulacin de una prueba se detallan en la Tabla 6.2. Esta lista sirve tambin como medida de control
del material de la prueba.

100

Informe Tcnico Simce 2013

Tabla 6.2 Variables de participacin de estudiantes


Variables de participacin de estudiantes
Presente

Estudiante asiste el da de la prueba.


Estudiante atrasado, llega despus de que se leen las instrucciones.
Estudiante abandona por enfermedad (vmitos, nuseas, dolor de cabeza, dolor
abdominal, diarrea, etc.).
Error en las pruebas (mala compaginacin, impresin, legibilidad, etc.).

Anulado

Estudiante con mala conducta.


Estudiante no habla espaol.
Estudiante presenta un impedimento temporal, motor o sensorial (brazo enyesado,
problema ocular, etc.).
Anulacin Cuestionario Estudiantes.
Otro que considere motivo de anulacin.

No rinde

Estudiante no asiste el da de aplicacin.

Retirado

Estudiante retirado del establecimiento.

6.2.4 Ajustes de los procesos informticos


Por ltimo, se establece una serie de ajustes de los procesos informticos, donde se revisa cada una de
las rutinas y paquetes de carga/descarga de informacin, contemplando la implementacin de rutinas en
la base de datos, validaciones, controles de calidad de captura, carga de puntajes, chequeos y revisiones
de las bases de datos de produccin, entre otros pasos. Todos estos pasos estn descritos en detalle en
el Plan de Gestin de Datos Simce 2013.
Luego de los pasos descritos, se reciben las bases de datos de imprenta con toda la informacin del
material que se imprimi para la aplicacin por parte de la Unidad de Operaciones de Campo y Logstica.
Con esta informacin se realizan los ingresos de informacin de establecimientos, cursos y listas de
curso. Estos son la base para el proceso de completitud y cuadratura de las bases de datos de validacin
y consolidacin.

6.2.5 Actualizacin Sistema de Validacin de Datos (SVD)


Cada ao se realiza la actualizacin del software que se utiliza para la validacin y correccin de los
datos que estn fuera del rango esperado y pertinente, de acuerdo a las nuevas estructuras de datos, que
pudiesen cambiar, y que estn directamente relacionadas con la modificacin de formularios de control,
pruebas y cuestionarios a aplicar en el ao en curso.

6.2.6 Recepcin de informacin de la aplicacin


Corresponde a una base de datos proporcionada por la Unidad de Operaciones de Campo y Logstica.
Esta base de datos contiene la informacin de todos los establecimientos, cursos y estudiantes, para la
impresin de material a aplicar, y es el insumo principal para los procesos de completitud y cuadratura
de los datos.

6.2.7 Pruebas de carga


Una vez que los procedimientos y paquetes de carga de datos estn implementados, se realizan las
pruebas de carga. Estos archivos son entregados por el proveedor de captura con un set de datos para cada
nivel, en un formato establecido y con el fin de verificar que las estructuras y contenidos cumplan con las
especificaciones entregadas al inicio del contrato. La finalidad de este proceso es poder retroalimentar
al proveedor con las inconsistencias detectadas para que este realice las correcciones indicadas a sus
procedimientos de exportacin de datos.

Captulo 6

101

6.3 Captura
Luego de la recuperacin del material aplicado, comienza el proceso de captura, que consiste en leer,
a travs de un software, la informacin contenida en distintos documentos y convertir una imagen en
datos. Esta labor es designada a proveedores externos, entidades que se adjudicaron la licitacin52 para
participar en el proceso de captura y digitacin del proceso Simce. A los proveedores adjudicados se les
exige cumplir con criterios de calidad, plazos, confidencialidad y seguridad, antes, durante y hasta la
finalizacin del servicio.
Cada proveedor realiza la implementacin de un centro de procesamiento que considera bodega para
el almacenamiento de las cajas-curso, preparacin de material, digitalizacin (escaneado), captura,
digitacin y administracin de los documentos Simce.
A continuacin se describen los subprocesos que intervienen en captura:

6.3.1 Almacenamiento de material


Previo a la aplicacin, la empresa proveedora de captura debe recepcionar y organizar en pals cada cajacurso para ingresar al proceso de preparacin del material. Despus de la aplicacin, el almacenamiento
de la informacin se realiza por un mnimo de seis meses hasta que se encuentre cerrado el procesamiento
de los datos Simce por parte de la Agencia.

6.3.2 Preparacin
Durante este subproceso se rompe el sello que mantiene la caja-curso desde su recoleccin en el
momento de la aplicacin, para luego proceder a la verificacin del contenido de cada caja. En este
manejo fsico se revisan y ordenan los documentos de los siguientes tipos: listas de curso, hoja de
respuestas, formularios de supervisin, formularios de aplicacin, Cuestionario Estudiantes y Cuestionario
Padres y Apoderados. Luego se chequea visualmente que los documentos correspondan a las caja-curso,
as como tambin su existencia. Posterior a esto, se guillotinan los documentos segn se requiera para el
proceso de escaneado.

6.3.3 Digitalizacin
Los documentos son agrupados por tipo y son ingresados al escner para su digitalizacin. El escner
genera las imgenes por grupo de documentos, y adems un archivo de control con informacin de los
documentos digitalizados.

6.3.4 Captura
A travs de un software de captura se reconoce el tipo de documento y se rescata la informacin contenida
en l, utilizando la metodologa ICR (Reconocimiento de Caracteres Inteligente), OCR (Reconocimiento
ptico de Caracteres) y OMR (Lectura de Marcas pticas). Esta tecnologa proporciona a los sistemas la
habilidad de convertir una imagen de caracteres digitales a caracteres en un archivo de datos. Los datos
extrados son almacenados en una base de datos y asociados a la imagen capturada.

6.3.5 Digitacin
Este proceso permite la revalidacin de los tipos de documentos que no fueron identificados por el
proceso de captura, es decir, en los que no se produjo una correcta interpretacin del carcter que est
en el papel. Tambin se somete al 100% de digitacin la seccin de acta de control de eventos del
formulario de aplicacin, y la seccin de consultas de estudiantes de pruebas experimentales, ambas
digitadas desde el formulario de aplicacin respectivo.
52 Licitacin pblica ID 721703-3-LP13 Digitalizacin, captura, digitacin y validacin de datos y destruccin de documentos de la aplicacin de
pruebas Simce ao 2013.

102

Informe Tcnico Simce 2013

6.3.6 Administracin de los documentos


Una vez identificados los caracteres junto a su imagen, los documentos son formateados en archivos
de datos con formato CSV (Valores Separados por Comas), para ser entregados a la Agencia de
Calidad de la Educacin, de acuerdo a las especificaciones consignadas en el diccionario de datos. Los
profesionales de la Unidad de Gestin de Datos tienen la labor de validar la integridad y completitud
de la informacin capturada.

6.4 Validacin y correccin de datos


6.4.1 Carga y completitud de datos
Ya realizada la entrega de los archivos capturados (registros electrnicos y archivos de imgenes) por
parte del proveedor de captura, se da comienzo al proceso de carga y completitud de los datos. El proceso
de carga consiste en importar a la base de datos los registros de las listas de curso, las respuestas de los
estudiantes (preguntas cerradas y preguntas abiertas), los cuestionarios, los formularios de aplicacin y
los formularios de supervisin (ver Tabla 6.3) entregados por el proveedor de captura en archivos planos
(archivos formados exclusivamente por texto, solo caracteres), y de acuerdo a la estructura estipulada en
el diccionario de datos.
Tabla 6.3 Detalle de los datos capturados en la aplicacin 2013
Formularios
Grado

Lista
Curso
(LC)

Aplicacin
(FA)

Supervisin
(FS)

Preguntas

Cuestionarios

Cerradas Abiertas
(PC)
(PA)

Padres
(CPA)

Estudiantes
(CEST)

Profesores
(PRO)

Prof. LEN
(PLEN)

Prof.
MAT
(PMAT)

Prof.
NAT
(PNAT)

2 bsico
4 bsico
6 bsico
6 bsico
DS*
8 bsico
8 bsico
Ed. Fsica
II medio
Nota: La tabla muestra el detalle de los datos capturados en la aplicacin Simce 2013. LC: Lista de curso; FA: Formulario
de aplicacin; FS: Formulario de supervisin; PC: Preguntas cerradas; PA: Preguntas abiertas; CPA: Cuestionario
Padres y Apoderados; CEST: Cuestionario Estudiantes; PRO: Profesores; PLEN: Profesor de Lenguaje; PMAT: Profesor
de Matemtica; PNAT: Profesor de Ciencias Naturales; * DS corresponde a las pruebas para estudiantes con
Discapacidad Sensorial.

El proceso de completitud es una etapa muy importante, ya que tiene como objetivo primordial revisar si
todo el material impreso fue capturado y entregado a la Agencia por la empresa de captura. El proveedor
de captura es el encargado de digitalizar toda la informacin una vez concluido el proceso de aplicacin
y es el responsable de traspasarla a registro electrnico, segn el diccionario de datos proporcionado por
la Agencia.
Al finalizar el proceso de completitud, se realiza un registro del material extraviado a nivel de curso. Para
esto, se llena en la lista de curso un campo llamado completitud, el que corresponde a caracteres, que

Captulo 6

103

asignan un cero (0) si es que se tiene el material y uno (1) si es que falta material. Para finalizar esta etapa
se realizan tres tipos de reporte de completitud:

Reporte de completitud global: correspondiente a un totalizador, contrastando lo recibido versus lo


que debi llegar, con detalles por regin, comuna y establecimiento.

Reporte de completitud detallado: reporte en que se define un producto para el proveedor de


captura, en el cual se encuentra el detalle del material faltante.

Reporte de completitud gestin: consiste en un reporte que permite visualizar el estado de base de
datos a nivel macro, que establece rangos de porcentaje de prdida que impliquen problemas en la
entrega de resultados.

6.4.2 Validacin y correccin de datos


i.

Validacin de pruebas

El proceso de validacin consiste en revisar la consistencia e integridad de los datos de captura enviados
por el proveedor y corregir de acuerdo a las reglas de validacin. Una vez ejecutado el proceso de carga
de datos, y con ms de un 90% de completitud, se ejecutan las rutinas de validacin, las cuales marcan
los registros con los errores detectados. Los errores estn clasificados segn formulario y prioridad, y son
agrupados con un cdigo de error.
La correccin de los errores se divide en dos subprocesos: la correccin masiva de datos y la correccin
registro a registro, a travs del Sistema de Validacin de Datos (SVD). La correccin masiva se realiza
cuando un conjunto de registros marcados con error presentan un patrn idntico. Frente a estas
condiciones, un profesional de la Unidad de Gestin de Datos de la Agencia debe realizar la transaccin
que permita corregir masivamente el error de todos los registros afectados.
Para realizar el subproceso de correccin registro a registro, se contrata a un equipo de validadores, a los
cuales se les asigna una serie de errores de validacin para su correccin. Estos errores son designados
de manera aleatoria con el motivo de que los validadores tengan una misma carga de trabajo. A cada uno
de ellos se les entrega el acceso a la imagen digitalizada de la prueba, la lista de curso, los cuestionarios
y formularios obtenidos de la aplicacin, y a partir de esta imagen se resuelve la discrepancia. En caso
de ser necesario, se contempla el acceso al material fsico para una revisin ms exhaustiva. Para cada
correccin que se realiza en la base de datos, se genera una copia del registro antes de la modificacin,
con el fin de poder auditar los cambios realizados, y quitar el error del registro, lo que disminuye el
porcentaje de errores encontrados. Sin embargo, la reasignacin de errores a los validadores se genera al
final del da, para equiparar la carga de trabajo.
Sumado al proceso de correccin de datos, se valida la marca de estudiantes integrados, es decir, con
Necesidades Educativas Especiales Permanentes (NEEP)53. Esta marca viene preimpresa en la lista de
curso. Posteriormente, se reciben los datos con los estudiantes NEEP rezagados (aquellos estudiantes
cuyos certificados que indicaban su situacin, no alcanzaron a ser validados previamente a la aplicacin).
Se debe destacar que la marca de los estudiantes integrados es informada por el equipo de NEE de la
Unidad de Desarrollos, por lo cual la marca o desmarca de este campo corresponde a la informacin
validada por dicho equipo.
El proceso de validacin de datos 2013 finaliz cuando se logr alcanzar el 100% de la correccin de
los errores detectados modificables, y en el caso de errores detectados no modificables, la tasa de error
aceptable es del 8% (5% de error para establecimientos con un curso por grado evaluado y 3% para
establecimientos con ms de un curso por grado evaluado).
El proceso de correccin de los datos provenientes de las preguntas abiertas aplicadas a los estudiantes
se describe en detalle en el captulo 7 del presente informe.
53 Esta validacin se realiza a travs del proceso de recepcin de certificados que validan las situaciones particulares de cada estudiante. En este,
los directores de establecimientos deben ingresar a la pgina web de la Agencia y realizar el trmite de ingreso de certificados o informacin
correspondiente.

104

Informe Tcnico Simce 2013

ii.

Validacin de cuestionarios

Posterior a la validacin de las preguntas cerradas de las pruebas regulares aplicadas, se realiza la
validacin de los cuestionarios Simce, que consiste en revisar que exista respuesta y que la serie del
cuestionario corresponda al estudiante, al curso y al establecimiento, como se muestra en la Tabla 6.4.
Tabla 6.4 Validaciones de los Cuestionarios de Calidad y Contexto de la Educacin, 2013
Validacin de completitud y cuadratura
Carga y completitud.
Tasa de retorno.
Encabezados.
Cuadraturas.

Validacin de la calidad de los datos


Frecuencias.
Valores fuera de rango.
Mltiples marcas.
Cuestionarios en blanco.
Cuestionarios con tems con 1, 2 o 3 marcas aleatorias.

Los cuestionarios validados durante 2013 fueron los siguientes:

Cuestionario Padres y Apoderados, 2 bsico censal.

Cuestionario Padres y Apoderados, Cuestionario Estudiantes y Cuestionario Docentes para 4 bsico


censal.

Cuestionario Padres y Apoderados, Cuestionario Estudiantes, Cuestionario Docentes Matemtica,


6 bsico censal.

Cuestionario Padres y Apoderados, Cuestionario Estudiantes, Cuestionario Docentes Lenguaje y


comunicacin, Matemtica y Ciencias Naturales, 8 bsico censal.

Cuestionario Padres y Apoderados, Cuestionario Estudiantes, Cuestionario Docentes Lenguaje y


Comunicacin y Matemtica, II medio censal.

Debido a que estos instrumentos miden los llamados Otros Indicadores de Calidad (OIC), el proceso
de validacin de cuestionarios Simce y el estudio de las tasas de retorno de estos es crucial. La lista
de empadronamiento entrega el nmero total de cuestionarios de Estudiantes, Docentes y Padres y
Apoderados, impresos y capturados. Esta lista debe ser comparada con los cursos que efectivamente
rindieron las pruebas Simce en el ao 2013, y con los cuestionarios que retornaron.
Tal como se ha hecho en aos anteriores, el paso siguiente en este proceso de validacin es ratificar
las bases de datos de los cuestionarios, incluyendo la validacin de los encabezados (RBD, cdigo curso
y letra). Adicionalmente, el anlisis de la cuadratura de los datos y el corroborar que no existan casos
duplicados de series o folios en cualquiera de los cuestionarios.
Una vez validados los encabezados, es necesario revisar caso a caso cada set de cuestionarios, para no
incluir en el anlisis los que no correspondan. En el caso del Cuestionario Estudiantes hay que verificar
que cada estudiante presente en el momento de la aplicacin tenga el correspondiente cuestionario.
Si no es as, se debe comprobar qu estudiantes estuvieron presentes para la prueba, pero no para la
completacin del cuestionario, de los que estuvieron presentes tanto al momento de rendir la prueba
como de contestar el cuestionario. Por otra parte, se identifican los alumnos ausentes en la lista curso
que s tienen datos para el cuestionario, distinguiendo entre los que adems tienen datos para la prueba
y los que no.
Por otra parte, se espera que cada alumno que rindi la prueba tenga asociado un Cuestionario Docentes.
Hay que ratificar que esto sea as, para lo cual primero se identifican los cursos con datos para el
cuestionario, pero sin resultados de estudiantes. En este caso, es necesario confirmar si no se aplic
la prueba o si los resultados del estudiante estn extraviados. Asimismo, se identifican los cursos con
resultados, pero sin Cuestionario Docentes, lo que afecta diversos anlisis que realiza la Divisin de
Estudios de la Agencia con la informacin reportada por los docentes.

Captulo 6

105

Por ltimo, es necesario verificar la correspondencia entre la lista de curso y los datos de los cuestionarios
retornados por Padres y Apoderados. Se deben identificar los alumnos que rindieron la prueba, que se
les envi el Cuestionario Padres y Apoderados, pero que no tienen datos para este. Luego se consideran
los casos en que los alumnos estn ausentes en la lista de curso, pero presentan resultados para el
cuestionario. En este ltimo caso, se debe distinguir entre los alumnos que efectivamente no tienen
resultados para la prueba y los que s los tienen, para corregir estos datos.
Una vez ratificados todos los datos, la Unidad de Gestin de Datos le entrega al equipo de Estudios
por la Calidad de la Educacin, encargado del anlisis de los cuestionarios, el reporte de frecuencias,
desde el que se puede distinguir la cantidad y porcentaje de ocurrencia para cada campo capturado. Esta
informacin permite tener una visin general de omisin y mltiples marcas, e identificar valores fuera
de rango. Una vez identificados estos valores, se definen los campos que es necesario revisar y corregir.
Con el fin de confirmar que no hubo errores de captura, luego de la revisin anterior, se reportan las
preguntas que resultaron con ms de un 5% de mltiples marcas; las preguntas que tuvieron entre
5% y 10% de casos en blanco; y preguntas con distribuciones no esperables. Asimismo, se identifican
los cuestionarios 100% en blanco y los que, posiblemente por problemas de captura, entregan datos
para 1, 2, o 3 tems de manera aleatoria. De esta manera, se logra monitorear las tasas de respuesta,
identificando el nmero de cuestionarios vlidos del total de cuestionarios retornados.
Adicionalmente a este proceso, el equipo de gestin de datos debe asegurar la calidad de los datos
entregados por el proveedor. Para esto, se utiliza el Sistema de Validacin de Datos (SVD), a travs del
cual los validadores deben comparar la imagen capturada con lo que indica el sistema. Finalmente, cabe
sealar que el proceso antes descrito se llev a cabo de manera ntegra con los cuestionarios regulares
de Estudiantes, Docentes y Padres y Apoderados (2, 4, 6 y 8 bsico, y II medio), y su ejecucin es
responsabilidad del equipo de gestin de datos en conjunto con el Departamento de Estudios de Calidad
de la Educacin, de la Agencia.

6.4.3 Consolidacin y cuadratura de la base de datos validada


Una vez finalizado el proceso de validacin, se procede a transformar una base de datos de trabajo en una
base de datos relacional. Para ello se genera un subproceso de preconsolidacin y otro de consolidacin
de los datos de captura.

i.

Preconsolidacin

Este proceso se inicia una vez finalizada la validacin y consiste en transformar una base de datos
de trabajo en una base relacional. La preconsolidacin traspasa los datos correctos desde la base
de validacin hacia la base consolidada a travs de cuadraturas y un conjunto de procedimientos
almacenados (respecto a las respuestas por pruebas, cuestionarios Simce y la lista de curso) y las
respectivas iteraciones con el fin de eliminar los descuadres las veces que sea necesario. Esta contiene
la informacin de los estudiantes que estuvieron presentes y ausentes durante la aplicacin, as como
a los que se les anul la prueba por alguna razn. Tambin se incluyen los establecimientos que por
algn motivo no participaron del proceso, y finalmente se vuelven a agregar las marcas para los
alumnos con NEEP y los que no hablan espaol.
Finalmente, la base de datos preconsolidada contiene las respuestas de las pruebas y cuestionarios por
estudiante, lista para ser puntuada y para calcular el grupo socioeconmico (GSE) por establecimiento,
proceso que es liderado por la Unidad de Anlisis Estadstico.

ii.

Proceso de consolidacin

Este proceso consiste en adjuntar a las bases de datos la puntuacin de la prueba de cada estudiante,
basada en las respuestas de las preguntas de seleccin mltiple como de las preguntas abiertas, en
los casos que corresponda. Tambin involucra cargar los datos del grupo socioeconmico y los anlisis
agregados correspondientes a cada establecimiento. Los clculos asociados se describen en el captulo
de anlisis estadstico.

106

Informe Tcnico Simce 2013

6.4.4 Control de calidad captura


En paralelo al proceso de validacin, se realiz el control de calidad de captura, que consiste en
un mecanismo de verificacin del trabajo realizado por el proveedor de captura en lo referente al
material obtenido como producto de la aplicacin de la prueba Simce 2013. Este proceso es licitado
pblicamente54 por un proveedor externo y su labor es bsicamente volver a capturar los datos de las
pruebas y cuestionarios para llevarlos a un registro electrnico que permita realizar la comparacin del
registro electrnico entre ambos proveedores, buscando inconsistencias en el proceso de captura, y a
la vez permita visualizar la imagen escaneada en las diferencias que estas produzcan. Este control de
calidad se realiza en paralelo al proceso de validacin.
Para el ao 2013, se realiz un control de calidad al material de listas de curso, preguntas cerradas y
cuestionarios Simce para las pruebas censales de 2, 4, 6, 8 bsico y II medio. Se seleccion una
muestra de trescientos cursos por grado, y adicionalmente se estipul una cantidad de cursos de
reemplazo en el caso de no tener la completitud a la hora de realizar este chequeo. Como resultado de
este proceso se estipulan las tasas de error por campo y material para las listas de curso y las preguntas
cerradas. Todos los errores de captura detectados son corregidos finalmente.
Luego, se cargan los datos a una nueva base de datos. Al recibirlos, se realiza la completitud, es decir la
verificacin de que el 100% de los datos electrnicos, de ndice e imgenes, estn segn lo estipulado.

6.5 Generacin de bases de datos para entrega de resultados


Luego de los procesos descritos, finalmente se generan dos productos:

Una base de datos unificada, la cual incluye la informacin necesaria para los productos
comunicacionales como el Informe de Resultados para Docentes y Directivos, Informe de Resultados
para Padres y Apoderados y ficha de establecimiento web. Estos informes contienen los resultados a
nivel de establecimiento y curso, por lo tanto, no entregan informacin a nivel individual (estudiante).

Una base de datos para fines de investigacin que contiene los resultados a nivel de estudiante.
Esta base de datos es de uso restringido y nicamente se utiliza para propsitos de investigacin.
Adems integra resultados con otras agregaciones, como regin, comuna, departamento provincial y
establecimiento, informacin que es de uso pblico y no restringido. Los resultados a nivel individual
(de alumno) se entregan con un tratamiento de datos in-nominados, lo que permite la restriccin de
la identificacin de los estudiantes que hayan participado en esta evaluacin.

54 Licitacin pblica ID 721703-22-LE13 Captura digitalizacin, digitacin y validacin de datos, asociados a una muestra de documentos de pruebas
censales SIMCE 2013.

Captulo 6

107

III

Captulo 7:
Correccin de
Preguntas Abiertas

7.1 Antecedentes
Las pruebas Simce 2013 requirieron la correccin de preguntas abiertas en las pruebas de Lenguaje y
Comunicacin: Lectura y Escritura, Matemtica y Ciencias Naturales, en los distintos niveles en que se
aplicaron.
Ms de setenta correctores y once supervisores participaron en este proceso, liderado por profesionales
expertos de la Agencia. Debido a que las preguntas abiertas son diseadas para medir constructos o
habilidades ms complejas, el proceso de correccin es del mismo modo ms complejo, ya que para
corregirlas es necesario contar con rbricas que son utilizadas por especialistas en el rea para juzgar
las respuestas de los estudiantes. Esto significa un gran esfuerzo por asegurar la confiabilidad de la
correccin a travs de la capacitacin de los expertos en las rbricas, como tambin, en el monitoreo
constante de los porcentajes de acuerdo entre los distintos correctores (consistencia inter-correctores).
Tal como en aos anteriores, el sistema de correccin de preguntas abiertas es distribuido entre equipos
de correccin de manera eficiente para maximizar la consistencia y confiabilidad de los datos.
Administrativamente, el proceso de correccin se divide en dos grupos: las pruebas de Comprensin de
Lectura, Matemticas y Ciencias Naturales, y por otra parte la prueba de Escritura. Estos procesos se
describen a continuacin.

7.2 Correccin de pruebas de Comprensin de Lectura, Matemtica y


Ciencias Naturales
Las pruebas Simce de Comprensin de Lectura, Matemtica y Ciencias Naturales contienen dos tipos
de preguntas: seleccin mltiple y preguntas abiertas. Mientras las primeras son fcilmente corregibles
mediante captura y correccin computarizada, las ltimas presentan desafos para asegurar la validez y
estandarizacin del proceso de correccin.
Las preguntas abiertas se componen de un enunciado a partir del cual el estudiante debe producir una
respuesta. Este formato de pregunta, como cualquier otro, presenta ventajas y desventajas. Entre sus
ventajas est la posibilidad de analizar habilidades/dominios cognitivos complejos; tienen alta validez
aparente, entregan informacin rica respecto del proceso cognitivo mediante el cual el estudiante
responde; y, a partir de ellas, es posible una retroalimentacin ms completa de los resultados. Por otro
lado, entre sus desventajas, se evidencia un mayor tiempo de respuesta; puede ser difcil de responder
por personas con bajas habilidades verbales; la correccin es menos costo eficiente (toma ms tiempo y
es ms cara) que en el caso de respuestas cerradas (como las de seleccin mltiple); y se requiere de un
equipo de correctores alineados y consistentes entre s para la correccin (ISTAT, FSO, INE y ZUMA, 2006).
El proceso de correccin de preguntas abiertas se dividi en dos etapas: correccin de preguntas abiertas
en pruebas experimentales y correccin de preguntas abiertas de las pruebas definitivas. La primera etapa
se aplic en el ao 2012 y se llev a cabo mediante la licitacin de un servicio externo de correccin. En
el caso de la segunda etapa, se realiz por una empresa externa, y se corrigieron paralelamente con las
preguntas abiertas en las pruebas experimentales del ciclo de pruebas regulares Simce 2014. Debido a
que el presente informe reporta respecto de las pruebas Simce 2013, a continuacin se detalla el proceso
de correccin de preguntas abiertas para las pruebas experimentales y definitivas correspondientes al
ciclo 2013. La Figura 7.1 muestra el flujo de trabajo del proceso de correccin de preguntas abiertas.

109

Figura 7.1 Flujo de trabajo correccin de preguntas abiertas ciclo pruebas regulares Simce 2013

Nota: La figura muestra un diagrama de flujo del trabajo de correccin de preguntas abiertas de las pruebas Simce
2013.

7.2.1 Correccin preguntas abiertas pruebas experimentales ciclo 2013


Luego de la construccin de los tems se debe decidir cules preguntas pasarn a la aplicacin
experimental. En el caso de las pruebas Simce 2013, se experimentaron 28 preguntas abiertas55.
Luego de la aplicacin experimental, el primer paso consisti en la digitalizacin de imgenes56 de
las respuestas de cada uno de los estudiantes, material que fue recibido por la Unidad de Gestin de
Datos (UGD) de la Agencia.

55 Cinco preguntas en 2 bsico; 13 preguntas en 4 bsico (cinco en la prueba experimental de Lenguaje y Comunicacin: Comprensin de Lectura;
seis en Matemtica; dos en Ciencias Naturales); 10 preguntas en 6 bsico (cuatro en la prueba del eje de Comprensin Lectora y seis en
Matemtica).
56 La digitalizacin de las respuestas corresponde al proceso de obtencin de una imagen digital de la hoja de respuesta redactada por un estudiante
de su puo y letra.

110

Informe Tcnico Simce 2013

El paso siguiente correspondi a la elaboracin de una rbrica primaria de correccin en base a


informacin terica sobre qu se espera que los estudiantes respondan en las preguntas abiertas. Se
establecieron escalas descriptivas de puntuacin, delimitando las categoras de respuesta para lo que se
considerara correcto o incorrecto y, si corresponda, se agreg la clasificacin parcialmente correcta57.
Las rbricas fueron elaboradas por los especialistas de rea del DCP.
Para llevar a cabo la elaboracin de los manuales de correccin, se necesitan la rbrica de cada pregunta
y un porcentaje de las imgenes de respuestas vlidas58 para cada una de las 28 preguntas abiertas en
las pruebas experimentales del ciclo de pruebas regulares 2013, copia de la que hace entrega la UGD.
De acuerdo a estimaciones estadsticas, considerando una muestra aproximada de dos mil quinientas
respuestas, con el 10% de estas ya se obtendra representatividad para corregir. No obstante, para el
proceso de correccin de preguntas abiertas de las pruebas experimentales Simce 2013 se decidi
trabajar con el 20% de las imgenes de respuesta vlida, de modo de resguardar dicha representatividad
y disminuir las posibilidades de no recoger todas las opciones posibles de respuesta.
Conforme a lo anterior, de este 20% correspondiente a aproximadamente quinientas imgenes
de respuestas vlidas para cada pregunta abierta experimentada se extrajeron doscientas para la
construccin del manual de correccin de cada una de las preguntas. Especialistas de rea y nivel del DCP
elaboraron los manuales de correccin, los cuales permiten modificar y/o ratificar la rbrica primaria en
forma ms amplia, e incorporan tantos cdigos como sean necesarios para cada categora de respuesta59
y ejemplos de respuesta de base para el momento de corregir.
Luego, mediante el uso de un software especialmente diseado para esta tarea (Corrector 1.0), dos
especialistas de rea (distintos de quienes elaboraron el manual) corrigieron las trescientas imgenes
de respuestas vlidas restantes para cada una de las 28 preguntas abiertas experimentadas en 2013,
utilizando el manual de correccin como principal insumo. Adicionalmente, el responsable del manual de
correccin supervis el proceso de correccin.
Las medidas de control de la correccin son: consistencia inter-correctores igual o superior al 80%, y
productividad. La consistencia inter-corrector corresponde al porcentaje entre dos o ms correctores que
asignan el mismo cdigo en una respuesta60, mientras que la productividad es una medida asociada a la
consistencia y guarda relacin con la rapidez con la cual se corrige, esperando que a mayor consistencia
se logre mayor rapidez de la correccin, e igual de modo inverso. Adems, el especialista DCP que ha
construido el manual es quien supervisa el proceso de ajuste de cada manual.
Finalmente, mediante licitacin pblica se contrat al proveedor que llev a cabo la correccin61. Una
vez entregados los manuales, el equipo DCP capacit tanto a los supervisores como a correctores de
la contraparte, de modo de alinear los criterios de correccin y prever la presencia de posibles errores
de correccin. Preferentemente, quien gui las capacitaciones fue el mismo especialista que arm el
manual respectivo. En el caso de la correccin de preguntas abiertas de las pruebas experimentales
2013, se trabaj con dos supervisores y 17 correctores.
El proceso de reclutamiento y seleccin, tanto de supervisores como de correctores, fue llevado a cabo
por el proveedor del servicio adjudicado de correccin de preguntas abiertas. El proveedor, a partir de
una base de datos propia, consistente en correctores con experiencia en procesos similares, seleccion
a correctores interesados y capacitados, los cuales rindieron una prueba de seleccin de conocimientos
tcnicos entre los das 4 y 6 de febrero de 2014. Luego, el da 8 de febrero de 2014 el proveedor envi una
lista a la Agencia con las personas seleccionadas para su aprobacin. Finalmente, se seleccionaron dos

57 Algunas preguntas pueden tener respuestas correctas o incorrectas, mientras que otras pueden tener respuestas correctas, parcialmente correctas
o incorrectas.
58 Respuestas vlidas se refiere a todas aquellas imgenes de respuesta que contienen algn tipo de marca efectuada por los estudiantes que
contestaron las preguntas.
59 Una pregunta puede tener una o mltiples respuestas correctas, es decir, depende del enunciado y si se requiere de un estmulo y/o contexto para
responder si cada una de las categoras de respuesta utilizan uno o ms cdigos. Se asignan cdigos hasta que se satura la categora de respuesta
respectiva.
60 Consistencia exacta entre correctores.
61 Licitacin pblica adjudicada ID: 592-24-LP12.

Captulo 7

111

supervisores con experiencia en supervisin de procesos de correccin de preguntas abiertas, mientras


que se conformaron dos equipos de ocho correctores cada uno para asumir la correccin de las pruebas
de Comprensin de Lectura (primer equipo) y de Matemtica y Ciencias Naturales (segundo equipo).
Para evitar problemas de consistencia a futuro, se realiz una correccin en marcha blanca del 20% de
las preguntas a corregir, adems de una doble correccin al 10% por parte del supervisor del proveedor.
En estos momentos se realizan los ajustes respectivos del manual para dar paso al proceso de correccin
de preguntas abiertas de las pruebas experimentales del ciclo de evaluacin 2013.
En resumen, el trabajo desde la Agencia consisti en supervisar como contraparte tcnica la relacin
con el proveedor, con el apoyo de un supervisor para cada una de las 28 preguntas experimentadas. El
organigrama del proveedor lo constituy un jefe de proyecto, contraparte que acta como representante
y se relaciona directamente con la Agencia, y un supervisor para cada equipo de correctores.
La ltima etapa del proceso de correccin de preguntas abiertas consisti en la validacin de los manuales
ajustados por parte del proveedor. Esta validacin se hizo mediante una doble correccin al 50% (los
mismos correctores del proveedor deben volver a corregir un 50% del total de respuestas corregidas
inicialmente) y la correccin en paralelo del supervisor (se exigi la correccin del 10% de lo corregido
por los equipos de correctores). Adems, los supervisores de cada pregunta abierta corrigieron el 25%
del 50% doblemente corregido (tercera correccin). Todas las correcciones descritas deban lograr una
consistencia exacta mnima del 80%. En la siguiente tabla se indican los porcentajes de consistencia
alcanzada entre correctores, y entre los correctores y el supervisor de cada pregunta en la Agencia.
Tabla 7.1 Consistencia de inter-correctores y del corrector-supervisor Agencia. Correccin preguntas
abiertas pruebas experimentales Simce 2013
Prueba

Grado

Lenguaje y
Comunicacin:
2 bsico
Comprensin de Lectura

Lenguaje y
Comunicacin:
Comprensin de Lectura

4 bsico
Matemtica

Ciencias Naturales

112

Preguntas
abiertas

Consistencia intercorrectores

Consistencia correctorsupervisor Agencia

98,65%

97,91%

92,95%

92,20%

93,70%

92,78%

86,11%

86,83%

87,51%

83,52%

94,27%

91,05%

95,03%

95,75%

88,35%

87,80%

89,29%

92,06%

92,52%

93,07%

97,80%

99,55%

92,78%

91,82%

93,57%

95,22%

96,81%

94,50%

97,05%

95,37%

84,06%

85,41%

84,68%

87,13%

92,47%

93,07%

Informe Tcnico Simce 2013

[continuacin]
Prueba

Grado

Lenguaje y
Comunicacin:
Comprensin de Lectura

6 bsico
Matemtica

Preguntas
abiertas

Consistencia intercorrectores

Consistencia correctorsupervisor Agencia

88,30%

86,85%

76,46%

77,78%

85,77%

85,29%

90,67%

90,04%

96,43%

93,01%

91,25%

90,31%

92,77%

89,03%

92,12%

94,90%

95,79%

96,38%

92,61%

90,58%

Nota: La tabla muestra la consistencia de inter-correctores y del corrector supervisor de las pruebas experimentales
Simce, considerando la consistencia de cdigos exactos.

Una vez analizados los datos arrojados tras la correccin de preguntas abiertas, se procedi a decidir
cules preguntas pasaran a formar parte de las pruebas regulares definitivas 2013. Los criterios para
tomar esta decisin fueron:

Cumple con la matriz terica para cada prueba.

Tasa de omisin (una alta tasa de omisin podra estar indicando problemas con el enunciado).

Tasa de respuestas incorrectas (un alto porcentaje de error podra implicar problemas de comprensin
del enunciado).

7.2.2 Correccin preguntas abiertas pruebas definitivas Simce 2013


Los insumos para llevar a cabo la correccin de preguntas abiertas en las pruebas Simce 2013 son
los manuales de correccin ajustados, aprobados y validados por la Agencia, junto con los datos de
consistencia y productividad para cada pregunta. Al momento de licitar este servicio se deben considerar
estos datos estadsticos, ya que los oferentes estiman sus costos en funcin de ellos.
Una vez realizada la licitacin pblica del servicio, se procede con la etapa de capacitacin de supervisores
y correctores de la contraparte. Al igual que al momento de la correccin de preguntas abiertas de las
pruebas experimentales, el especialista del DCP que ha trabajado desde el inicio en la confeccin del
manual, es quien capacita en su respectiva pregunta abierta al equipo de correctores y el supervisor
respectivo del proveedor.
Luego de la capacitacin se inicia la correccin en marcha blanca. Esta corresponde al 10% del total de
respuestas a corregir de cada pregunta abierta aplicada. Este 10% se corrige al 100%. Si no se logra el
80% mnimo de consistencia exacta entre correctores, se anula esa correccin y se vuelve a comenzar. Se
realiza una nueva capacitacin a los supervisores y correctores y, si es necesario, se ajustan los ejemplos
en el manual de correccin. Adems, en caso de ser necesario, la Agencia pide el cambio de uno o dos
correctores62.
Despus de la marcha blanca se corrige el 90% restante con doble correccin al 10%, y una tercera
correccin por parte del equipo del DCP correspondiente al 10% del 10% de la doble

62 Estipulado en bases de licitacin pblica del servicio a contratar.

Captulo 7

113

correccin, como contraparte del servicio. Se exige un 80% mnimo de consistencia entre correctores;
entre el supervisor del proveedor con los correctores63, y entre el equipo del DCP y los correctores.
Al finalizar la correccin de preguntas abiertas de las pruebas regulares definitivas 2013 se recoge la
consistencia exacta, informacin especificada en la Tabla 7.2.
Tabla 7.2 Consistencia inter-correctores y corrector-supervisor Agencia. Correccin preguntas abiertas
pruebas definitivas Simce 2013
Prueba

Lenguaje y Comunicacin:
Comprensin de Lectura

Lenguaje y Comunicacin:
Comprensin de Lectura

Matemtica

Ciencias Naturales
Lenguaje y Comunicacin:
Comprensin de Lectura

Matemtica

Grado

2 bsico

4 bsico

4 bsico

4 bsico
6 bsico

6 bsico

Lenguaje y Comunicacin:
Comprensin de Lectura

8 bsico

Matemtica

8 bsico

Ciencias Naturales

8 bsico

Lenguaje y Comunicacin:
Comprensin de Lectura

Matemtica

II medio

II medio

Preguntas
abiertas

Consistencia intercorrectores

Consistencia correctorsupervisor Agencia

98,35%

98,07%

87,58%

87,78%

98,87%

96,30%

98,49%

98,34%

91,39%

89,27%

88,40%

87,59%

86,76%

83,22%

97,08%

93,62%

97,19%

97,16%

91,62%

87,72%

93,92%

92,72%

86,63%

85,20%

89,90%

90,68%

84,06%

81,55%

88,27%

83,58%

95,91%

95,29%

87,34%

82,86%

94,10%

92,74%

88,35%

82,45%

85,17%

87,48%

81,10%

80,76%

95,73%

94,15%

83,26%

80,10%

89,25%

89,50%

88,84%

86,97%

86,56%

83,93%

88,74%

86,04%

91,45%

88,67%

83,03%

80,54%

88,77%

84,00%

86,56%

80,47%

88,98%

86,47%

92,31%

88,52%

97,17%

96,08%

Nota: La tabla muestra la consistencia de los inter-correctores y del corrector supervisor de las pruebas definitivas Simce 2013.

63 El supervisor del proveedor es responsable de contrastar lo corregido por sus equipos de correctores y se espera que corrija, aproximadamente, el
10% del total en forma paralela.

114

Informe Tcnico Simce 2013

Para finalizar el proceso, los cdigos asignados se traducen en un puntaje de la misma escala de las
preguntas de seleccin mltiple, informacin con la cual posteriormente el equipo UAE lleva a cabo el
anlisis estadstico correspondiente.

7.3 Correccin de la prueba de Escritura


La prueba de Escritura, tal como se ha indicado antes, se compone en su totalidad de 16 preguntas de
produccin escrita. A cada estudiante se le aplic una forma, la cual contena dos preguntas de produccin
escrita. Las preguntas de produccin escrita fueron denominadas con la letra de la forma aplicada ms el
orden de la pregunta, es decir, la pregunta nmero 2 de la forma, fue denominada E2.
La correccin de preguntas abiertas de las pruebas censales fue un proceso que abarc cuatro meses. Este
fue diseado y guiado por profesionales internos de la Agencia y se externaliz mediante una licitacin
pblica64.
El ao 2013, entre el 19 de febrero y el 19 de junio, se corrigieron las siguientes preguntas censales:
Tabla 7.3 Total de respuestas doble corregidas, prueba Escritura censal 2013

D1

Total respuestas doble


corregidas
27.525

D2

25.892

E1

26.097

Pregunta

E2

23.078

G1

26.834

G2

24.314

H1

27.396

H2

26.447

I1

28.592

I2

26.129

K1

25.455

K2

26.490

L1

25.029

L2

24.852

M1

26.751

M2

24.315

Total general

415.196

% Omisin

7,4%

Nota: La tabla muestra el total de respuestas


corregidas de la prueba Escritura 2013.

El proceso administrativo de correccin estipula una serie de requisitos tcnicos que debe cumplir
el oferente para la correccin de las pruebas censales y experimentales 2013. Se estableci que el
servicio otorgado deba garantizar la correcta aplicacin de las rbricas, y su aplicacin fue realizada por
correctores externos debidamente capacitados para ello.

64 Servicio de correccin de respuestas de produccin escrita y de respuesta breve de Simce Escritura 2013, ID 721703-20-LP13.

Captulo 7

115

7.3.1 Proceso de correccin


El proceso de correccin censal fue llevado a cabo por nueve supervisores, 54 correctores y un jefe de
proyecto.

i.

Seleccin y capacitacin de los correctores

Los correctores y supervisores son contratados por quien se adjudica la correccin de las preguntas
Simce Escritura. Como mnimo, deben cumplir con los siguientes requisitos:

Ser titulados, egresados o estudiantes de ltimo ao de Pedagoga Bsica con mencin en Lenguaje
y Comunicacin, o Licenciatura en Letras. Tambin podrn ser titulados, egresados o estudiantes de
educacin superior de ltimo ao de carreras afines (periodismo, filosofa, pedagoga en ingls u
otro idioma, etc.), las que debern ser aprobadas por la Agencia.

Ser responsables, puntuales, persistentes y tener disposicin para trabajar consistentemente a un


mismo ritmo por periodos largos de tiempo.

Poseer habilidad para descifrar las formas de expresin y la caligrafa de los estudiantes, la cual se
medir con la prueba de seleccin entregada por la contraparte tcnica de la Divisin de Evaluacin
de Logros de Aprendizaje.

Demostrar capacidad idnea en el manejo de sistemas informticos a nivel usuario para la tarea
de correccin de preguntas de produccin escrita y de respuesta breve, que garantice una buena
productividad en el tiempo requerido.

Haber aprobado la prueba de seleccin entregada por la Agencia.


Figura 7.2 Visin general del proceso de correccin
Capacitacin en la
correccin del estmulo
(cada estmulo tiene su
propia capacitacin).

Marcha blanca del 10%


de las imgenes totales.
Evaluacin de la marcha
blanca.

Correccin del total de las


imgenes del estmulo.

Nota: La figura muestra un diagrama de flujo de la visin general del proceso de correccin.

ii.

Capacitacin

Para salvaguardar los estndares de calidad del proceso de correccin, los supervisores y correctores son
capacitados por un especialista de la Agencia con respecto a la aplicacin de las rbricas. La capacitacin
se realiza de manera secuencial (primero un da completo a los supervisores y luego a los correctores).
Previo a la capacitacin, el jefe de proyecto conforma los grupos de trabajo y asigna un supervisor a cada
uno de estos. Este procedimiento fue crucial, dado que permiti capacitar a cada grupo con el manual de
la pregunta con la cual trabajara en una primera instancia.
Antes de la correccin de cada una de las preguntas se capacita a los supervisores, quienes, a su vez,
capacitan a sus correctores con la supervisin de profesionales de la Agencia. Durante la capacitacin
se entregan los manuales que utilizar cada grupo al corregir y se realizan ejercicios guiados por un
profesional de la Agencia, para aunar criterios y modelar cmo se aplica la Pauta Holstica y cmo se
utiliza la Pauta Analtica. Se capacita a cada corrector con la pauta que utilizar, esto no se hace de
manera general, ya que cada manual tiene ejemplos diferentes.
Durante la marcha blanca se realizaron cambios a la pauta y a los manuales en los casos que fue necesario.
Estos cambios solo los realizan los profesionales encargados de la prueba de Escritura de la Agencia y
basndose en evidencia contundente presentada por los supervisores.
Por otra parte, se acord qu informacin deba incorporarse en los informes diarios que deben ser
entregados por los supervisores. Los informes estn diseados para monitorear la consistencia diaria
116

Informe Tcnico Simce 2013

entre los correctores, la productividad, los problemas surgidos durante la jornada, etc. De esta manera, se
hace un seguimiento cercano y se abordan oportunamente los problemas, lo que da mayor confiabilidad
a la correccin.
Adicionalmente, se capacita a los supervisores y correctores en el uso del software de correccin.

iii.

Software de correccin

Antes de la capacitacin, se entregaron al jefe de proyecto los programas Corrector 1.0 (software de
correccin de preguntas abiertas) y Corrector 2.0 (adaptacin del software 1.0) a la correccin de
produccin escrita. Ambos fueron creados y diseados por la Agencia. Adicionalmente, se le entregaron
las imgenes para que fueran cargadas.

iv.

Marcha blanca

Una vez realizada la capacitacin de las pautas y el piloto de uso del software, comienzan las jornadas de
correccin de cada una de ellas.
Al inicio de la correccin de cada pregunta diferente se realiza una marcha blanca, la cual implica realizar
una doble correccin del 10% de las imgenes de respuestas vlidas de cada pregunta. Esta marcha
blanca tiene por finalidad lograr una buena calibracin entre los correctores y realizar posibles ajustes a
las pautas. Estos ajustes son propuestos por los supervisores, pero realizados solo por los expertos de la
Agencia. La marcha blanca se puede considerar como parte del proceso de correccin solo si se logran los
estndares de consistencia requeridos. Tambin se puede considerar una parte de esta como parte de la
correccin efectiva, dependiendo de los porcentajes de consistencia diarios obtenidos.
Resumen de las actividades diarias de correccin:
Figura 7.3 Diagrama de las labores diarias de correccin
Los supervisores corrigen
el 10% de las imgenes
que revisa su grupo

Calibracin diaria de
los supervisores con los
correctores (20 a 40
preguntas diariamente)

Los correctores que


logran un 60% de
consistencia comienzan
a corregir

Los supervisores
califican las imgenes
para la calibracin del
da siguiente

Los correctores que


no logran el 60% de
consistencia corrigen con
el supervisor

Nota: La figura muestra un diagrama de las labores diarias de correccin.

v.

Calibracin de los correctores de produccin escrita diaria

Con el objetivo de asegurar la consistencia, todos los das, antes de empezar su trabajo, los correctores
deben corregir un total de veinte respuestas (de la pregunta que van a corregir durante el da), midindose
con la correccin hecha previamente por el supervisor, debiendo obtener un nivel de consistencia de
cdigo exacta de un 60%65. En caso que un corrector no logre el nivel de consistencia exigido, debe
recibir apoyo del supervisor y volver a corregir otras veinte respuestas de alumnos (estas no deben ser
las mismas que se corrigieron inicialmente), debiendo obtener un nivel requerido con la correccin hecha
previamente por el supervisor.

65 Este criterio vara al de las preguntas abiertas de las otras pruebas Simce, principalmente porque el constructo medido es distinto y por las
caractersticas de la prueba.

Captulo 7

117

vi.

Doble correccin

Para las preguntas de produccin escrita se realiza una doble correccin sobre el 100% de las respuestas.
Cuando las inconsistencias son mayores a nivel de la pauta (rbrica), se determinan los valores a digitar
a travs de la correccin adicional (tercera correccin) de un supervisor o el profesional a cargo de
Escritura del Simce. Se considera para la puntuacin la respuesta del experto o supervisor, y la respuesta
ms cercana a la establecida por el experto Simce o supervisor entre las dos de los correctores.
Cuando las dos correcciones se encuentren equidistantes de la entregada por el experto Simce o
supervisor, para la puntuacin se considera la correccin ms alta junto con la del supervisor.

vii.

Correccin diaria

Cada da, una vez realizado el proceso de calibracin, se procede a la correccin de respuestas de los
estudiantes. Cada corrector logra corregir aproximadamente 165 diariamente (codifican durante un
mximo de cinco horas diarias). Los supervisores, mediante el software, monitorean la consistencia de
los correctores. Cada vez que se detecta una baja o algn problema con algn ejemplo, los supervisores
hacen una reunin con sus correctores para discutir algn ejemplo y estar de este modo constantemente
capacitndolos.

viii.

Estndar de consistencia

La calidad de la correccin depende, en gran parte, de la correcta aplicacin de las rbricas. Como
estndar de calidad satisfactorio mnimo, se exige que las respuestas de preguntas de produccin escrita
sean corregidas con el siguiente nivel de consistencia:

Entre correctores: 60% de consistencia exacta de cdigo y 90% de consistencia de cdigos


adyacentes.

Entre correctores y supervisor o experto Simce (segn lo defina la contraparte tcnica): 60% de
consistencia exacta de cdigo y 90% de consistencia de cdigos adyacentes. Esta correccin se
hace para evitar que los correctores hagan acuerdos que no estn en la pauta y para mantener un
estndar de correccin homlogo entre los diferentes grupos de correctores.

La consistencia del total de las respuestas corregidas diariamente se calcula sobre la base de respuestas
doblemente corregidas a nivel grupal. La informacin se obtiene, en forma automatizada, mediante el
software de correccin.

118

Informe Tcnico Simce 2013

Tabla 7.4 Consistencia inter-correctores. Correccin preguntas abiertas prueba Escritura 2013
Pregunta

Consistencia inter-correctores

D1

75,4

D2

74,2

E1

72,4

E2

71,7

G1

74,8

G2

72,4

H1

74,1

H2

71,7

I1

79,9

I2

80,3

K1

67,5

K2

78,6

L1

76,7

L2

76,3

M1

76,8

M2

76,2

Promedio

74,94

Nota: La tabla muestra la consistencia inter-correctores


en preguntas abiertas de la prueba de Escritura.

Captulo 7

119

III

Captulo 8:
Anlisis psicomtrico
de las pruebas Simce

8.1 Antecedentes
El anlisis psicomtrico de las pruebas Simce 2013 sigue un riguroso plan que genera la Unidad de
Anlisis Estadstico y aprueba el jefe de la DELA. El objetivo del anlisis es evaluar un rasgo latente por
medio del logro curricular de los estudiantes.
A continuacin se describirn los procesos que se llevaron a cabo para realizar el anlisis psicomtrico
de todas las pruebas aplicadas el ao 2013, los que siguieron estrictos controles de calidad, y adems las
recomendaciones de Educational Testing Service (ETS) en su asesora para optimizar los procedimientos
psicomtricos Simce, durante el ao 2010, a la Agencia. Cabe mencionar que, adicionalmente, los
procedimientos para llevar a cabo dichos anlisis estadsticos consideran los lineamientos entregados
por los estndares de AERA, APA y NCME (1999).
Dentro del proceso de anlisis hay tres etapas, segn el tipo de prueba y el tipo de anlisis que requiera:
anlisis de las pruebas censales regulares66, de las pruebas de nuevos desarrollos67 y los anlisis que
refieren a las pruebas experimentales.

8.2 Anlisis psicomtrico pruebas Simce 2013


Como ya se ha mencionado en captulos previos, las pruebas Simce son aquellas que miden las reas de
aprendizaje bsicas en algunos grados de la poblacin general de estudiantes. Para el ao 2013, estas
pruebas correspondieron a Lenguaje y Comunicacin: Comprensin de Lectura, y a las asignaturas de
Matemtica y Ciencias Naturales68.
Antes de ejecutar los anlisis se elaboran los programas que son requeridos para su procesamiento,
utilizando como insumo el archivo denominado Planilla Maestra. La Planilla Maestra es un documento
Excel que contiene informacin de los tems aplicados, tales como la identificacin del tem, los
objetivos de evaluacin correspondientes, la clave correcta y la identificacin de la posicin del
tem en las aplicaciones anteriores, entre otros datos. Para las pruebas Simce, tanto definitivas como
experimentales, los formatos de preguntas son seleccin mltiple (SM) y preguntas de respuesta abierta
(RA). Cada pregunta SM tiene una puntuacin de 0 (incorrecta) o 1 (correcta). Para las preguntas RA, las
puntuaciones pueden ser 0 (incorrecta) o 1 (correcta), o bien, 0 (incorrecta), 1 (parcialmente correcta) y 2
(correcta), si es que la pregunta muestra parcialidad.
En la etapa de ejecucin de los anlisis psicomtricos se procesan los datos originales, con el objetivo de
que se conviertan en indicadores de rendimiento individual.

8.2.1 Revisin de supuestos


Desde 1998 para Simce se ha tomado la opcin de calibrar las pruebas mediante modelos de
anlisis basados en TRI (Teora de Respuesta al tem), especficamente en el Modelo Logstico de Tres
Parmetros (3PL), para los tems de seleccin mltiple (SM, en adelante) y el Modelo de Crdito Parcial
Generalizado (MCPG), para las preguntas abiertas. En primer lugar, fue necesario revisar el cumplimiento
66 Pruebas regulares son aquellas con ms historia dentro del Simce, por lo que cuentan con una mayor estandarizacin de procesos.
67 Las pruebas de nuevos desarrollos corresponden a las evaluaciones cuya aplicacin es ms reciente, por lo que responden a una construccin
distinta y evalan constructos diferentes. Para el ao 2013 estas pruebas fueron Escritura, Discapacidad Sensorial y el Estudio Nacional de
Educacin Fsica.
68 Ciencias Naturales e Historia, Geografa y Ciencias Sociales se alternan ao por medio.

121

de los supuestos bajo los cuales este modelo resulta eficiente y robusto. Se revisaron los supuestos de
unidimensionalidad (las pruebas evalan una dimensin de rendimiento predominante), independencia
local (para los alumnos evaluados con un mismo nivel de rendimiento no existen otros factores distintos
del nivel de rendimiento de este que expliquen su respuesta a los tems), y monotonicidad creciente (que
la probabilidad de responder correctamente a un tem aumenta progresivamente para los alumnos con
mayor nivel de rendimiento).
Para la revisin del supuesto de unidimensionalidad se utiliz el Anlisis Factorial Exploratorio (AFE)
(DeVellis, 2012), utilizando para ello el software MPLUS, el cual analiza la informacin a travs de la
magnitud de los valores propios resultantes y el porcentaje de varianza que estos entregan en el modelo.
Estos resultados son posibles de visualizar en un scree plot69, el cual sirve para cumplir con el supuesto
de presentar una diferencia significativa entre el primer y segundo factor, verificando as la tendencia
a la unidimensionalidad para cada una de las pruebas. De esta manera, en cada uno de los grficos por
medio de los cuales se evidencian los resultados, es posible notar la existencia de un factor dominante,
dado que se produce un quiebre significativo entre la magnitud del primer y segundo factor. Los screen
plot se adjuntan en el anexo H.
Para Independencia local se realiza una revisin cualitativa para verificar que no existan tems
encadenados, o que la respuesta correcta o incorrecta de un tem no influya en la respuesta correcta o
incorrecta de otro. Adicionalmente, de acuerdo a las recomendaciones dadas por ETS70, se verifica dentro
de cada testlet71 la existencia de tems con valores inusualmente altos en el parmetro de discriminacin,
procediendo a recalibrar la prueba sin uno de ellos. Si la estimacin de los parmetros de discriminacin
restantes ya no corresponde a valores altos, se est en presencia de dependencia local y por tanto se
elimina el tem. En caso contrario, se debe eliminar otro tem del conjunto y realizar nuevamente el
procedimiento.
Para la revisin del supuesto de Monotonicidad creciente, se observan las curvas empricas de cada tem,
en especfico que la curva correspondiente a la clave aumente progresivamente su probabilidad en todos
los tems considerados para el anlisis y su puntuacin. Adems, se verifican las curvas caractersticas y
curvas de informacin72.

8.2.2 Anlisis clsico


El anlisis clsico cumple un rol informativo respecto de la etapa de calibracin. Para la realizacin de este
tipo de anlisis para los tems SM y RA, se utilizan los software SAS 9.1 (2006) y TIAPLUS: build 307 (2010).
Para el caso de los tems SM, se analiza:

El porcentaje de respuesta para cada alternativa.

La correlacin tem-total de cada alternativa.

El ndice de dificultad del tem (porcentaje de aciertos).

La capacidad discriminativa del tem (correlacin tem-total corregida).

Las curvas empricas de respuesta al tem.

El porcentaje de omisin por tems.

69 Mtodo grfico que muestra los valores propios de la matriz de correlacin en orden descendente, esto es, se comienza con el valor propio de
mayor magnitud, y se finaliza con el menor.
70 Report 1: Review of Methodologies Used by SIMCE for Equating, Including Recommendations, p.14, recomendacin 11.
71 Testlet se refiere a un conjunto de tems que comparten un estmulo, pasaje u objeto en comn, por ejemplo, en la prueba de Comprensin de
Lectura varios tems se refieren al mismo texto.
72 Los parmetros de los tems y curvas caractersticas y de informacin de las pruebas se adjuntan en el anexo I.

122

Informe Tcnico Simce 2013

Para el caso de los tems RA, se analiza:

La distribucin de respuestas por cdigo de puntuacin.

La capacidad discriminativa del tem (correlacin tem-total, corregida).

Sumado a esto, se realiza una revisin de la correlacin tem-total de cada alternativa, con el objetivo de
detectar posibles errores en la asignacin de claves y remediar la situacin antes de la etapa de calibracin.

8.2.3 Anlisis TRI


Para el anlisis psicomtrico de las pruebas regulares, Simce utiliza como metodologa base el TRI,
especficamente el Modelo Logstico de 3 Parmetros73. El objetivo del anlisis TRI es seleccionar el
primer conjunto de tems para cada asignatura evaluada en la equiparacin de puntuaciones con la
ltima medicin de la serie, esto es:

En el caso de 2 bsico, la prueba definitiva 2012.

En el caso de 4 bsico, la prueba definitiva 2012 para Comprensin de Lectura y Matemtica, y la


definitiva 2011 para Ciencias Naturales.

En el caso de 6 bsico no hay prueba anterior, por lo que esta prueba es lnea de base.

En el caso de 8 bsico, la prueba definitiva 2011.

En el caso de II medio, la prueba definitiva 2012.

Para la puntuacin de los estudiantes se emplea la estimacin Expected A Posteriori (EAP). De acuerdo
a lo planteado por Bock y Mislevy (1982) existen diversas ventajas de este mtodo por sobre otros
estimadores como los basados en Mxima Verosimilitud (ML) o Mxima Verosimilitud a Posteriori (MAP).
Entre estos destacan: la facilidad de clculo, dado que no es un proceso iterativo y no es necesario obtener
la derivada de la funcin de verosimilitud, y por otro lado, la estabilidad para pruebas con extensiones
diversas.
Por otra parte, dentro de las recomendaciones realizadas por ETS se encuentra que este tipo de
estimacin no posea contradicciones entre el mtodo utilizado para equiparacin y el mtodo utilizado
para estimar la habilidad. Adicionalmente, de acuerdo a la asesora realizada por ACER (2013), la estimacin
EAP, dentro de las existentes, es la que estima con mayor precisin el promedio de agrupamiento de
estudiantes (establecimientos).
Para el modelamiento inicial se contempla que la probabilidad de responder correctamente en 3PL est
dada por:

73 Aunque este modelo exige que se cumplan varios supuestos, se utiliza debido a que es un modelo completo, robusto y que ajusta mejor que el
resto de los modelos.

Captulo 8

123

En donde ai, bi y ci son los parmetros del tem i y D es la constante de escalamiento. As, la probabilidad
de respuesta Xi a un tem est dada por:

Si se consideran las respuestas de N examinados a los K tems, la funcin de verosimilitud es la siguiente:

As, para obtener las estimaciones de las habilidades y de los parmetros es necesario resolver las
siguientes ecuaciones:

A continuacin se describe el anlisis bajo los criterios de una prueba Simce censal, aplicados a todas las
asignaturas y grados correspondientes.

i.

Primera etapa

Se selecciona el primer conjunto de tems que ser utilizado en la equiparacin de puntuaciones, con la
ltima medicin de la serie. Para cumplir con este objetivo se realiza una estimacin de parmetros de
las pruebas sin considerar ningn anclaje de la medicin anterior (en caso de que exista). En trminos
de equiparacin entre formas de la prueba, se opta por una calibracin concurrente mediante tems
comunes entre ellas.
Para los tems de SM se utiliza una calibracin bajo el modelo logstico 3PL, con constante de escalamiento
1,7, dado que para este valor el modelo se aproxima a la curva normal acumulada (Martnez, 2005).
Conjuntamente, los tems de RA se analizan bajo el MCPG. En el caso de las preguntas abiertas con pauta
dicotmica, el MCPG se reduce al modelo 2PL, que resulta apropiado dado que el efecto azar no necesita
ser corregido.
Todo lo anterior se realiza con el software PARSCALE 4.1 (2003). Desde el punto de vista tcnico, la
calibracin se realiza con el mtodo ML, a travs del algoritmo EM (Expectation Maximization),

124

Informe Tcnico Simce 2013

especificando un mximo de 100 iteraciones, con 41 puntos de cuadratura74 y un criterio de convergencia


de 0,005. Cada tem RA se especifica en un bloque distinto (comando BLOCK)75.
Los criterios que se deben satisfacer para determinar la solucin son los siguientes: (a) la funcin converge
en menos de 100 iteraciones, y (b) no existen errores estndar de dificultad mayores a 0,210.

ii.

Segunda etapa

En esta etapa se comparan, en el caso de los tems empleados para llevar a cabo la equiparacin entre
mediciones, los parmetros estimados mediante la calibracin libre (primera etapa) y los parmetros
obtenidos en el anlisis de las pruebas anteriores. Este anlisis de variacin de los parmetros (conocido
como drift, por su denominacin en ingls) permite determinar cmo los parmetros de los tems se
pueden ver afectados con el paso del tiempo. Para detectar la posible presencia de un efecto drift, se
utiliza la metodologa de distancias perpendiculares (Crocker y Algina, 1996). Un tem es removido del
conjunto de equiparacin si la distancia estandarizada a la recta, en valor absoluto, es mayor a 2 para los
parmetros de dificultad o de discriminacin. Los tems desanclados sern incorporados al anlisis de la
prueba como tems libres.

iii.

Tercera etapa

Una vez obtenido el conjunto de tems de equiparacin que no presentan drift entre las dos mediciones
comparadas, se inicia la etapa de equiparacin de las pruebas definitivas.
Con el propsito de conseguir estimaciones en una mtrica comparable a la serie de mediciones
anteriores, se procede a equiparar los parmetros de las pruebas definitivas con la ltima medicin de la
serie. Para ello se recalibr la prueba, importando como parmetros fijos los parmetros de los tems de
anclaje de las pruebas definitivas, y los restantes tems se ajustaron a la mtrica de estos.
Para obtener la calibracin ptima de las pruebas definitivas con parmetros anclados a la medicin
anterior, se requiere que el conjunto de preguntas satisfaga criterios an ms exigentes que los utilizados
en la calibracin libre, esto es: (a) convergencia de la funcin en menos de 100 iteraciones, (b) errores
estndar de la dificultad, menores a 0,210; (c) dificultades entre -2,4 y 2,4; (d) azar menor o igual a 0,35
cuando poseen 4 alternativas, y 0,45 para 3 alternativas, y discriminacin mayor o igual a 0,676.

iv.

Cuarta etapa

Por ltimo, luego de obtener estimaciones estables en los parmetros de las pruebas anclados a la ltima
medicin de la serie, se procede al clculo de la puntuacin de cada estudiante. Esta se realiza a partir
del patrn de respuestas individual, fijando los parmetros de todos los tems ajustados y utilizando la
estimacin bayesiana EAP (Expected A Posteriori).
Para cada uno de los niveles y asignaturas, la habilidad estimada y su respectivo error de estimacin
sern transformados a la escala Simce anclada, a su vez, a la media de habilidad obtenida en la ltima
medicin de la serie. Cabe considerar que la escala Simce para cada nivel se defini en su ao de origen77
en una media de 250 puntos y una desviacin estndar de 50 puntos y, posteriormente, vara de acuerdo
a los resultados obtenidos por cada cohorte de estudiantes.

74 Si bien dentro de las recomendaciones hechas, ETS considera bajar los puntos de cuadratura de 41 a 30, esto es evaluado en el momento, en conjunto con los expertos, resolviendo dejar sin cambio esta recomendacin, pues el volumen de datos que se requiere no presenta diferencias entre
los dos valores.
75 Report 1: Review of Methodologies Used by SIMCE for Equating, Including Recommendations, p.17, recomendaciones 12, 13 y 14.
76 Dentro de las recomendaciones hechas, ETS considera relajar estos criterios; sin embargo, en el momento y en conjunto con los expertos, no se
considera coherente bajar el nivel de calidad de los puntos de corte para los tems, por lo cual se mantuvo el nivel de exigencia.
77 La escala Simce se defini cuando comenz la implementacin del anlisis bajo TRI; especficamente en 1998 para II medio, 1999 para 4 bsico y
para el caso de 8, en el ao 2000. A medida que se han incorporado nuevas evaluaciones (por ejemplo 2 bsico en 2012 y 6 en 2013), su media
se fij en la misma escala de 250 y desviacin estndar de 50 puntos.

Captulo 8

125

8.2.4 Clasificacin de estudiantes segn Estndares de Aprendizaje


Los Estndares de Aprendizaje son referentes que describen lo que los estudiantes deben saber y poder
hacer para demostrar, en las evaluaciones Simce, determinados niveles de cumplimiento de los objetivos
de aprendizaje estipulados en el currculo nacional vigente.
En nuestro sistema educacional, los Estndares de Aprendizaje comprenden tres niveles que permiten
categorizar a los estudiantes segn el grado de cumplimiento de lo estipulado en el currculo. Estos
son: Adecuado, Elemental e Insuficiente. Los niveles son inclusivos, es decir, un estudiante que alcanza
el Adecuado no solo demuestra que cumple con los requisitos establecidos para dicho nivel, sino que
adems cumple con los requisitos correspondientes del Elemental. La elaboracin de los Estndares de
Aprendizaje consisti en un proceso sistemtico de consulta y validaciones que estuvo a cargo de un
equipo de especialistas del Ministerio de Educacin. Estos fueron revisados y aprobados por el Consejo
Nacional de Educacin78.
Este procedimiento fue aplicado en 2, 4 y 8 bsico, debido a que los estndares de 6 bsico y II
medio a la fecha de los anlisis todava estaban en desarrollo por parte de Mineduc, y an no haban sido
publicados. Los puntajes de corte que definen los Estndares de Aprendizaje para 2, 4 y 8 bsico se
presentan en las tablas 8.1 a 8.3.
Tabla 8.1 Estndares de Aprendizaje 2 bsico
rea

Insuficiente

Elemental

Adecuado

X < 215 puntos

215 X < 265 puntos

X 265 puntos

Insuficiente

Elemental

Adecuado

Comprensin de Lectura

X < 241 puntos

241 X < 284 puntos

X 284 puntos

Matemtica

X < 245 puntos

245 X < 295 puntos

X 295 puntos

Historia, Geografa y Ciencias


Sociales

X < 241 puntos

241 X < 290 puntos

X 290 puntos

Ciencias Naturales

X < 247 puntos

247 X < 282 puntos

X 282 puntos

Insuficiente

Elemental

Adecuado

Comprensin de Lectura

X < 244 puntos

244 X < 292 puntos

X 292 puntos

Matemtica

X < 247 puntos

247 X < 297 puntos

X 297 puntos

Historia, Geografa y Ciencias


Sociales

X < 243 puntos

243 X < 296 puntos

X 296 puntos

Ciencias Naturales

X < 248 puntos

248 X < 297 puntos

X 297 puntos

Comprensin de Lectura

Nota: X: Puntaje obtenido por el estudiante.

Tabla 8.2 Estndares de Aprendizaje 4 bsico


rea

Nota: X: Puntaje obtenido por el estudiante.

Tabla 8.3 Estndares de Aprendizaje 8 bsico


rea

Nota: X: Puntaje obtenido por el estudiante.

Dado lo anterior, cada estudiante qued clasificado en un Nivel de Aprendizaje por cada asignatura en
que fue evaluado, de acuerdo al puntaje obtenido.

78 Los documentos Estndares de Aprendizaje, elaborados por el Ministerio de Educacin, estn disponibles para descargar en su pgina web, en
http://www.mineduc.cl/index5_int.php?id_portal=47&id_contenido=17116&id_seccion=3264&c=7027.

126

Informe Tcnico Simce 2013

8.2.5 Clculo de ndice RP67


Como informacin adicional a la estimacin de parmetros obtenidos en la calibracin de tems, se
calcula el ndice denominado RP6779. Este indicador es utilizado para asociar los tems a los Estndares
de Aprendizaje y corresponde a una estimacin de la dificultad reescalada a 0,67 (2/3) de probabilidad
de acierto del tem u alternativa, en el caso de tems politmicos. El objetivo de calcular este valor es
proveer informacin necesaria para establecer los futuros Estndares de Aprendizaje.
En el caso de los tems SM, esta tcnica supone una complejidad aadida por el uso del modelo logstico
de 3PL, en el cual, a diferencia de los modelos 1PL (o Modelo Rasch) y 2PL, el parmetro de dificultad no
representa directamente el valor en la escala de habilidad para el cual un examinado cualquiera tiene
50% de probabilidad de responder correctamente a un tem. En los modelos de 1PL y 2PL, el clculo de
la dificultad reescalada se obtiene mediante una interpolacin directa, mientras en el caso del modelo
logstico 3PL es preciso utilizar una ecuacin. La estimacin del valor RP67 para tems dicotmicos se
obtiene mediante la siguiente ecuacin, la cual es derivada a partir de la probabilidad de responder
correctamente un tem en el modelo logstico 3PL:

El procedimiento anterior es vlido solo para tems SM y para preguntas RA con dos alternativas de
puntuacin. En el caso de estos ltimos puntuados de manera policotmica, se calcula la dificultad
reescalada utilizando diferentes ecuaciones, dependiendo de la cantidad de opciones. Esto ltimo se
debe al requerimiento para la estrategia de modelamiento de alternativas del MCPG.

8.2.6 Anlisis de Funcionamiento Diferencial de los tems (DIF)


Como anlisis confirmatorio, se verific la presencia (o ausencia en este caso) de Funcionamiento
Diferencial de los tems (DIF, por sus siglas en ingls), aun cuando en el anlisis experimental de los tems
ya se haba descartado la presencia de sesgo para cada tem de la prueba con relacin a las variables
gnero y ruralidad.
Se analiz el DIF por gnero y ruralidad, segn correspondiera al nivel evaluado (educacin bsica y
educacin media)80, utilizando la misma metodologa empleada hasta el momento (comparacin del
parmetro de dificultad). Se consider como indicador de DIF una diferencia en dificultad, en valor
absoluto, igual o mayor a 0,4. Este criterio ha sido utilizado histricamente en el anlisis de las pruebas
Simce definitivas y experimentales.

8.3 Anlisis psicomtricos pruebas nuevos desarrollos Simce


En el ao 2013, las pruebas nuevos desarrollos correspondieron a las pruebas de Discapacidad Sensorial,
Lenguaje y Comunicacin: Escritura y el Estudio Nacional de Educacin Fsica. Debido a que estas pruebas
tienen caractersticas especiales, el proceso de anlisis estadstico es distinto al resto de las pruebas Simce.

8.3.1 Prueba Simce DS


La prueba Simce DS se ha aplicado desde el ao 2009 en 4 bsico. El ao 2013, sin embargo, se aplic
a los estudiantes de 6 bsico con el fin de ampliar el panorama sobre los aprendizajes alcanzados
por la educacin especial en Chile. La aplicacin 2013 fue, por primera vez, de carcter censal para los
estudiantes con discapacidad auditiva, discapacidad visual parcial y discapacidad visual total. Fueron
evaluadas las asignaturas de Lenguaje y Comunicacin en su rea de Comprensin de Lectura, y la de
Matemtica.
79 Habilidad necesaria para obtener un 67% de probabilidad de acertar el tem.
80 En II medio no se realiza anlisis DIF por ruralidad debido a que la poblacin de establecimientos rurales en ese grado es casi nula.

Captulo 8

127

Para transformar las respuestas de los estudiantes en puntuaciones de rendimiento individual y garantizar
la calidad psicomtrica de los resultados obtenidos, como primer paso, se requiri el archivo de Planilla
Maestra, que debi estar validado por el equipo NEE81. Adicionalmente, se requiri como primer insumo
una base de datos que contuviera lo siguiente: identificacin del estudiante, forma en que respondi, tipo
de discapacidad y el tipo de establecimiento al que asiste (escuela especial o escuela regular), entre otros.
En la etapa de ejecucin de los anlisis psicomtricos se procesaron los datos originales con el objetivo
de que estos se conviertan en indicadores de rendimiento individual. Para ello, se realizaron los siguientes
anlisis especficos:

i.

Anlisis exploratorios

Los anlisis exploratorios permiten chequear tanto la frecuencia como la distribucin de cada alternativa
de respuesta, y de las respuestas omitidas. Adems, a travs de este procedimiento se obtiene una primera
aproximacin del comportamiento de los datos, en cuanto al ajuste al modelo que se pretende utilizar.
Para el caso de las preguntas de SM se calcularon los siguientes indicadores:

Porcentaje de respuesta para cada alternativa.

Correlacin tem-total de cada alternativa.

ndice de dificultad del tem (porcentaje de aciertos).

Curvas empricas de respuesta al tem.

Proporcin de respuestas omitidas para cada tem.

Con el fin de optimizar el tiempo de procesamiento, se utilizaron las curvas empricas generadas por el
programa TIAPLUS, siempre y cuando el tamao de las subpoblaciones (estudiantes con discapacidad
visual total, discapacidad visual parcial y discapacidad auditiva), lo permitiese. La grfica con que se
muestra el anlisis en este programa, utiliza una curva para cada alternativa de respuesta, sealando la
que es correcta, tal como se muestra en la Figura 8.1.
Figura 8.1 Curva emprica del tem

Nota: La figura muestra la curva emprica del tem.

81 Para mayor detalle revisar captulo 2 de este informe, subseccin 2.2.2 Caractersticas de las pruebas DS 2013.

128

Informe Tcnico Simce 2013

ii.

Anlisis clsicos

Las puntuaciones de la prueba Simce DS fueron calculados bajo el modelo de la Teora Clsica, debido a
que el tamao de las subpoblaciones de estudiantes que rindieron la prueba no permitieron implementar
modelos de mayor sofisticacin (como por ejemplo, TRI).
Dicho modelo permite descomponer el puntaje observado del test como una combinacin del puntaje
verdadero ms el componente de error, lo que implica que, a menor error, mayor es la relacin entre el
puntaje observado y el puntaje verdadero. El modelo bsico para el puntaje verdadero de un sujeto est
dado por (Lord y Novick, 2008):
V=X+e
Los puntajes verdaderos (V) de los estudiantes se estiman a travs de una combinacin lineal de los
puntajes observados en la medicin (X), correspondientes a los puntajes asignados por el corrector, una
vez corregidas cada una de las pautas/estmulos de la prueba, ms un componente de error (e).
Como se puede observar en la ecuacin de la Teora Clsica de los test, mientras menor sea el trmino
error, mayor ser la relacin lineal entre los puntajes observados y los verdaderos. Lo ms importante
en trminos de confiabilidad de las puntuaciones de un test es estimar cun bien representan las
puntuaciones observadas a las verdaderas.

iii.

Clculo de puntuaciones definitivas

El modelo clsico permite construir un puntaje individual a partir de la suma de las distintas respuestas
del estudiante. Sin embargo, la gran desventaja de esta metodologa es que no permite cuantificar
el error de estimacin a nivel individual. Adems, para el clculo de las puntuaciones las respuestas
omitidas son tratadas como valor perdido.
Una vez obtenida la estimacin de habilidad individual, se transforma esta construccin utilizando una
escala Simce de discapacidad sensorial diferente a las escalas de las pruebas Simce regular. Se propuso
trabajar con el porcentaje de respuestas correctas (PRC) que genera una escala con valores entre 0 y 100,
donde cada puntuacin se obtiene de la siguiente manera:

PRC=

N
i=1

respuestai 100
N total preguntas

La diferencia de la escala con respecto a la que utiliza Simce en sus pruebas regulares se centra
principalmente en el hecho de que los tems de estas pruebas han sufrido acomodaciones especficas
que dependen de la discapacidad de los estudiantes, y adems, del reducido nmero de estudiantes
que constituyeron la poblacin evaluada. Esta diferencia entre las escalas previene la interpretacin
incorrecta en el uso de los puntajes, como por ejemplo, realizar comparaciones entre ambas evaluaciones.

8.3.2 Prueba Simce Lenguaje y Comunicacin: Escritura


Como se ha dicho, la prueba de Escritura se aplic por primera vez a los estudiantes de 6 bsico de
manera muestral el ao 2012, con una cobertura a nivel nacional. El ao 2013 esta prueba fue aplicada
de manera censal para todos los estudiantes del pas.
En esta oportunidad se utiliz la Teora Clsica82 como modelo para analizar los resultados. En cuanto al
clculo de puntuaciones definitivas, el modelo clsico permite construir un puntaje individual a partir
de la suma de cada una de las codificaciones de pautas/estmulos de las pruebas. Para este clculo, las
respuestas omitidas fueron tratadas como perdidas, y con ello los estudiantes que omitieron toda la
prueba no obtuvieron una estimacin de puntaje.
Para esta prueba los formatos de preguntas fueron: de produccin escrita83, en las que los estudiantes
escriben textos con caractersticas especficas; SM, en la que buscan la discriminacin de una respuesta
82 El uso de un modelo de Teora Clsica para esta prueba se debe a que el modelo TRI utilizada en las pruebas regulares requiere el cumplimiento de
varios requisitos que no son alcanzados por esta prueba.
83 Preguntas de produccin escrita son aquellas en que los estudiantes redactan una respuesta a partir de un estmulo.

Captulo 8

129

por sobre otras; y de ordenacin, donde los estudiantes deben ordenar diferentes categoras de acuerdo
a criterios solicitados.
Cada pregunta de SM tiene una puntuacin de 0 (incorrecta) o 1 (correcta), al igual que las preguntas
de ordenacin. Para las preguntas de produccin escrita se corrigi cada respuesta por dos correctores
con puntuaciones que van desde 0 a 4, donde el 4 es la respuesta completamente correcta, de 1 a 3 son
respuestas parcialmente correctas, y 0 es incorrecta. Para el puntaje de cada estudiante se consider una
ponderacin de un 70% de la suma de los puntos en las preguntas de produccin escrita, y un 30% de la
suma de los puntos en las preguntas de SM y ordenacin. Esta ponderacin fue acordada por los expertos
en el rea. Una vez obtenidas estas puntuaciones se realiz un proceso de equiparacin de los puntajes
de cada forma a travs de un mtodo equipercentil84, el que permite obtener una escala nica para las
distintas formas de la prueba. La escala escogida para esta prueba es una media de 50 puntos y de una
desviacin estndar de 10 puntos.
Para la estimacin de los parmetros de la prueba, clculo de confiabilidad y otros, se generaron los
siguientes indicadores:

Para las preguntas de produccin escrita: puntaje medio, frecuencia en cada categora, correlacin
poliserial.

Para las preguntas de otros formatos: dificultad, correlacin biserial, porcentaje de omisin.

Para la confiabilidad por forma se calcul la confiabilidad compuesta, ponderando con un 0,7 la parte
de la prueba de produccin escrita y con un 0,3 la parte de otros formatos (Ofqual, 2009). El detalle de
la confiabilidad por forma de esta prueba, y de las dems, se puede consultar en el anexo G.

A su vez, se calcul una matriz de correlacin de los siguientes puntajes:

Puntaje final.

Puntaje obtenido en la pauta holstica.

Puntaje obtenido en cada uno de los indicadores de la pauta analtica.

Puntaje obtenido en los tems de seleccin mltiple.

Puntaje obtenido en los tems de ordenacin.

Puntaje obtenido en los tems de seleccin mltiple y ordenacin.

Puntaje obtenido en los tems de cada uno de los propsitos comunicativos.

Puntaje obtenido en los tems de cada uno de los objetivos de evaluacin.

8.3.3 Estudio Nacional de Educacin Fsica


Para el Estudio Nacional de Educacin Fsica se consider el uso de anlisis exploratorio. El objetivo del
anlisis de exploracin es construir dos indicadores que permitan clasificar a los estudiantes segn los
aspectos de la condicin fsica, esto es, estructural y funcional, de acuerdo a las categoras satisfactorio
y no satisfactorio, segn edad y gnero, a partir del conjunto de pruebas que fueron aplicadas. Sin
embargo, antes de llevar a cabo el anlisis fue importante realizar una exploracin minuciosa del
comportamiento de los datos, as como de la distribucin de frecuencias.

i.

Definicin de puntos de corte

La definicin de los puntos de corte, que permiten explicar el nivel de rendimiento que tienen los
estudiantes segn edad y gnero, se realiz en conjunto con los expertos en el rea del Instituto Nacional

84 Para mayor informacin, revisar Kolen, M. y Brennan, R. (2004). Test equating, Scaling and Linking: Methods and Practices. New York: Springer.

130

Informe Tcnico Simce 2013

de Deportes (IND85). Este proceso se llev a cabo con los datos obtenidos en la aplicacin 2010, debido
a que los puntos de corte obtenidos en tal aplicacin son la lnea base para definir en las posteriores
aplicaciones el nivel de rendimiento que tienen los estudiantes.
Los niveles definidos varan dependiendo del tipo de prueba, puesto que, como se desarroll en el
captulo 2 de este informe, este estudio se compone de ocho pruebas, de las cuales la ltima, el Test de
Navette86, puede no ser rendido por todos los estudiantes.
Los puntos establecidos por prueba son:

Talla y peso (IMC): los valores de referencia utilizados para estas pruebas son los establecidos en las
normas tcnicas del Ministerio de Salud (2003), para la clasificacin segn el IMC.

Permetro de cintura: para esta prueba no existe una tabla de referencia. Sin embargo, esta medicin
sirve como insumo para obtener la razn entre cintura y talla, lo que es un predictor de factores
de riesgo cardiovascular y metablico. Aquellos estudiantes con una razn menor a 0,55 son
considerados en la categora sin riesgo, y aquellos con una razn mayor o igual a este valor, en la
categora con riesgo.

Abdominales cortos: establece dos niveles de rendimiento: aceptable y necesita mejorar, ya que
al ser una prueba en la que se establece un ritmo de trabajo constante, no se est midiendo el
mximo rendimiento del estudiante. En la siguiente tabla se expresan estos niveles.

Tabla 8.4 Puntajes de corte para prueba de abdominales cortos


Mujeres

Nivel

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

Necesita mejorar

16

16

16

20

20

20

Aceptable

> 16

> 16

> 16

> 20

> 20

> 20

Salto largo a pies juntos: se mide con tres niveles de rendimiento: destacado, aceptable y
necesita mejorar, los cuales fueron establecidos segn las categoras propuestas por Gatica
(2000), Montecinos (2000), Montecinos et al. (2005) y Montecinos y Gatica (2005).

Tabla 8.5 Puntajes de corte para prueba de salto largo a pies juntos
Nivel

Mujeres

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

137

137

142

164

177

187

Aceptable

> 137 y 149

> 137 y 148

> 142 y 151

> 164 y 175

> 177 y 188

> 187 y 196

Destacado

> 149

> 148

> 151

> 175

> 188

> 196

Necesita
mejorar

Flexo-extensin de codos: cuenta con tres niveles de rendimiento, destacado, aceptable y


necesita mejorar, los cuales fueron establecidos segn las categoras propuestas por Gatica (2000),
Montecinos (2000) y Montecinos y Gatica (2005). La Tabla 8.6 indica los niveles de esta prueba.

85 El IND dispuso un equipo de expertos especialmente para este estudio. Para mayor informacin con respecto a quienes integran este equipo,
revisar Informe Tcnico Simce 2012.
86 Para ms informacin sobre estos test revisar el captulo 2.

Captulo 8

131

Tabla 8.6 Puntajes de corte para prueba de flexo-extensin de codos


Nivel

Mujeres

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

16

18

16

15

19

19

Aceptable

> 16 y 19

> 18 y 21

> 16 y 20

> 15 y 19

> 19 y 22

> 19 y 23

Destacado

> 19

> 21

> 20

> 19

> 22

> 23

Necesita
mejorar

Flexin de tronco adelante (test de Wells-Dillon adaptado): utiliza tres niveles de rendimiento,
destacado, aceptable y necesita mejorar, los cuales fueron establecidos segn las categoras
propuestas por Gatica (2000), Montecinos (2000), Montecinos et al. (2005) y Montecinos y Gatica
(2005). En la siguiente tabla se indican estos niveles.

Tabla 8.7 Puntajes de corte para prueba de flexin de tronco adelante


Nivel

Mujeres

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

34

36

37

29

32

32

Aceptable

> 34 y 37

> 36 y 39

> 37 y 41

> 29 y 32

> 32 y 34

> 32 y 35

Destacado

> 37

> 39

> 41

> 32

> 34

> 35

Necesita
mejorar

Test de Cafra: tiene dos niveles de rendimiento, aceptable y necesita mejorar. Esta ltima
categora considera a aquellos estudiantes que, al finalizar el test, registraron una frecuencia
cardaca igual o mayor a 160 pulsaciones por minuto, por lo que podran presentar algn riesgo
cardiovascular. La Tabla 8.8 indica el detalle de estos niveles.

Tabla 8.8 Puntajes de corte para Test de Cafra


Nivel

Mujeres

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

Necesita
mejorar

160

160

160

160

160

160

Aceptable

< 160

< 160

< 160

< 160

< 160

< 160

Test de Navette: cuenta con tres niveles de rendimiento, destacado, aceptable y necesita
mejorar, los cuales dan cuenta de la potencia aerbica mxima de los estudiantes. Estos niveles se
expresan en la siguiente tabla.

Tabla 8.9 Puntajes de corte para Test de Navette


Nivel

Mujeres

Hombres

13 aos

14 aos

15 aos o ms

13 aos

14 aos

15 aos o ms

Aceptable

>5y7

>5y7

>5y7

>6y9

>6y9

>6y9

Destacado

>7

>7

>7

>9

>9

>9

Necesita
mejorar

132

Informe Tcnico Simce 2013

ii.

Clculo de indicadores

El clculo de los dos indicadores, estructural y funcional, segn los aspectos de la condicin fsica, se
encuentra condicionado a la edad y gnero de los estudiantes, a partir de lo establecido por las normas
nacionales e internacionales aplicadas a este tipo de evaluaciones. Por este motivo se deben utilizar los
puntos de corte definidos para cada prueba, considerando la edad y el gnero de cada estudiante, y a
travs de estos cortes se establece la categora en la que el alumno queda clasificado.
Para el clculo del indicador estructural y funcional se deben considerar las siguientes pruebas. Para
establecer el indicador estructural, solo se deben utilizar las pruebas de abdominales cortos, salto largo
a pies juntos, flexo-extensin de codos y flexin de tronco adelante. El estudiante ser considerado
con una condicin satisfactoria, siempre y cuando est en las categoras de aceptable o destacado
en cada una de las pruebas, de acuerdo a lo definido por los especialistas del IND. Para establecer el
indicador funcional, solo se deben utilizar los test de Cafra y Navette. El estudiante ser considerado
con una condicin satisfactoria, siempre y cuando est en las categoras de aceptable o destacado en
estos test, de acuerdo a lo definido por los especialistas del IND.
Una vez obtenida la clasificacin del estudiante para cada prueba aplicada, se procede a clasificar su
condicin fsica de acuerdo a los aspectos funcionales y estructurales.

8.4 Anlisis psicomtrico pruebas experimentales Simce 2013


Las pruebas experimentales correspondientes al proceso Simce 2013 fueron aplicadas el 2012, siendo
evaluados los grados de 2, 4, 6 y 8 bsico y II medio, con el objetivo de retroalimentar el ensamblaje
de las pruebas definitivas Simce 2013. Para el caso de estas ltimas, el propsito principal fue producir
para cada tem aplicado un conjunto de indicadores de calidad, basado en el Modelo Clsico y en la Teora
de Respuesta al tem (TRI).
El anlisis psicomtrico permite contribuir a la elaboracin de una prueba Simce definitiva mximamente
confiable, esto es, una evaluacin que arroje estimaciones de rendimiento individual con el mnimo
error de medida posible. En el ao 2013, el equipo de Anlisis Estadstico de Simce realiz un estudio
exploratorio con el fin de chequear la predictibilidad de las pruebas experimentales, y en consecuencia
la capacidad predictiva de las pruebas experimentales en relacin a las pruebas definitivas o censales
respectivas. El estudio contempl los datos arrojados por la medicin Simce 2012, y sus resultados
indicaron que hay una gran predictibilidad a nivel de los datos de los parmetros de los tems (Agencia
de Calidad de la Educacin, 2013d).
El anlisis psicomtrico de las pruebas experimentales comparte en su gran mayora los procesos
estadsticos utilizados para las pruebas definitivas o censales; aqu se describirn brevemente, ya que se
detallaron en el apartado 8.2 de este mismo captulo (Anlisis psicomtrico pruebas Simce 2013).
Para desarrollar el anlisis psicomtrico de las pruebas experimentales es necesario contar con la
informacin general de las pruebas y las bases de datos con las respuestas de los estudiantes. Para la
etapa de ejecucin de los anlisis se procesan los datos originales, con el objetivo de que se conviertan
en indicadores de rendimiento individual. Para ello, se realizan los siguientes anlisis especficos:

Anlisis exploratorios: permiten chequear la frecuencia y distribucin de cada alternativa y de las


respuestas omitidas.

Revisin de supuestos: dado que desde 1998 se ha tomado la opcin de calibrar las pruebas
mediante modelos de anlisis basados en TRI, especficamente el Modelo Logstico de Tres
Parmetros (3PL) para las preguntas de SM y MCPG para las RA, es necesario revisar el cumplimiento
de los supuestos bajo los cuales este modelo resulta eficiente. Para esto, se revisan los supuestos de
unidimensionalidad, independencia local y monotonicidad creciente.

Anlisis clsico: en las pruebas experimentales, la informacin generada en esta etapa debe ser
considerada en conjunto con la informacin de la etapa de calibracin, para el anlisis integral del
ajuste de cada tem a la prueba.

Captulo 8

133

Para el caso de preguntas cerradas, se analiza:


El ndice de dificultad del tem (porcentaje de aciertos).
La capacidad discriminativa del tem (correlacin tem-total, corregida).
Porcentaje de respuesta a cada alternativa y omisin.
Correlacin tem-total de cada alternativa.
Las curvas empricas de respuesta al tem.
Para el caso de preguntas abiertas, se analiza:
Porcentaje de respuesta por cdigo de puntuacin.
ndice de dificultad del tem.
Capacidad discriminativa del tem (correlacin tem-total, corregida).

Anlisis TRI: como se ha dicho anteriormente, las pruebas Simce utilizan el modelo logstico 3PL
de la metodologa TRI. El objetivo es seleccionar el primer conjunto de tems para cada asignatura
evaluada en la equiparacin de puntuaciones, con la ltima medicin de la serie. Para cumplir este
objetivo se realiz una calibracin libre de las pruebas experimentales, sin anclaje a la medicin
anterior. En trminos de equiparacin entre formas de la prueba, se opt por la calibracin
concurrente.

Anlisis DIF: al igual que los anlisis de las pruebas censales, para las pruebas experimentales se
midi y explor la presencia de sesgos sistemticos que pudieran generar un impacto adverso
sobre algn subgrupo de estudiantes evaluados. Para las pruebas experimentales se analiz DIF
segn gnero y ruralidad, utilizando la misma metodologa empleada hasta el momento, esto es,
la comparacin del parmetro de dificultad. Se considera como indicador de DIF una diferencia de
dificultad, en valor absoluto, igual o mayor a 0,4.

Clculo de RP67: como informacin adicional a la estimacin de parmetros obtenidos en la


calibracin de tems, se calcula el RP67. Este valor corresponde a una estimacin de dificultad
reescalada a 0,67 (2/3) de probabilidad de acierto del tem o alternativa, en el caso de las preguntas
politmicas. Es importante sealar que el clculo de este indicador se realiza a partir de la solucin
ptima encontrada en la calibracin de las pruebas experimentales 2012.

8.5 Controles de calidad


Para asegurar la estandarizacin de los procesos y la implementacin de procedimientos de aseguramiento
de la calidad, la Unidad de Anlisis Estadstico efectu una serie de mecanismos de control de calidad
internos, que fueron realizados por un profesional de la Unidad que no particip directamente en los
anlisis, realizando un control de calidad cruzado.
Debido a que este control fue realizado en forma simultnea al anlisis, en caso de existir inconsistencias
estas fueron verificadas y ajustadas de forma inmediata. Si las discrepancias se hubieran dado en el proceso
original de procesamiento de datos, se hubieran revisado ambos procesos para identificar el origen de estos
errores o zanjar diferencias. Si las diferencias hubieran persistido, la jefatura de la Unidad hubiera resuelto
las dudas antes de calcular las puntuaciones definitivas y/o calificaciones para cada estudiante.

134

Informe Tcnico Simce 2013

III

Captulo 9:
Anlisis de datos agregados
y tendencias

A partir del anlisis de datos agregados (resultados a nivel nacional, regional, comunal y otras
agregaciones de inters) es posible conocer los aprendizajes logrados por los estudiantes y tambin
monitorear en el tiempo su evolucin. Estos datos son generados para la entrega de los distintos productos
comunicacionales Simce de acuerdo a los objetivos propuestos en el plan de productos descritos en el
captulo 11 del presente informe.
Por otra parte, a partir del anlisis de tendencia y brechas tambin es posible conocer la evolucin de los
resultados de aprendizaje en las ltimas evaluaciones.

9.1 Anlisis de datos agregados


9.1.1 Objetivo de anlisis de datos agregados
El objetivo del anlisis de datos agregados es generar informacin precisa que permita conocer la
realidad actual del desempeo de los estudiantes del pas y monitorear, a travs del tiempo, su evolucin,
comparando los resultados del ao con los de evaluaciones anteriores. Esta informacin es generada a
travs de datos estadsticos, los cuales son entregados a los diferentes actores de la comunidad educativa
(docentes, equipos directivos, familias, administradores locales, autoridades polticas y diseadores de
polticas pblicas) a travs de los productos comunicacionales Simce.
Los anlisis estadsticos que se detallan a continuacin entregan resultados sobre el rendimiento
promedio de una agregacin. En esta lnea, se identifican dos instancias de comparacin del rendimiento:
Diferencia significativa, que compara el rendimiento promedio obtenido en una agregacin con el
rendimiento promedio de otra agregacin en la misma medicin. Por ejemplo, se comparan los puntajes
promedio 4 bsico Matemtica Simce 2013 de una regin con el puntaje promedio nacional.
Variacin significativa, que compara el rendimiento promedio obtenido en una agregacin con el
rendimiento promedio de la misma agregacin de la medicin anterior. Por ejemplo, se comparan los
puntajes promedio Simce 2012 y Simce 2013 en la evaluacin de 4 bsico Matemtica.
Otro aspecto importante de estos anlisis se refiere a la proporcin de los estudiantes que se ubican en
cada nivel de los Estndares de Aprendizaje (Adecuado, Elemental o Insuficiente) de una agregacin. Para
la evaluacin 2013, en el grado de 8 bsico se entregaron por primera vez resultados de aprendizaje
referidos a dichos estndares. Por este motivo, se proyectaron los puntajes de corte de cada grado 2013
a la evaluacin anterior, con lo cual se pudo reproducir la proporcin de estudiantes ubicados para cada
nivel de estndar del ao anterior y de este modo verificar variaciones.

9.1.2 Clasificacin socioeconmica de establecimientos


Para desarrollar los anlisis agregados de datos, fue necesario contar con la clasificacin de GSE de los
establecimientos. Esta clasificacin permite comparar el desempeo acadmico de una comunidad
educativa respecto de otra, controlando las caractersticas socioeconmicas de cada una, obteniendo
como resultado comparaciones ms justas.
Para la construccin de los grupos de establecimientos similares se utiliza la tcnica estadstica
de anlisis de conglomerados o clusters. La clasificacin con esta metodologa se realiza de manera
independiente para cada nivel, inclusive si un establecimiento imparte todos los niveles evaluados. Para

135

mayores detalles sobre el clculo de GSE consultar el apunte tcnico Metodologa de Construccin de
Grupos Socioeconmicos 201387.

9.1.3 Anlisis de datos agregados: pruebas regulares Simce


En primer lugar, es necesario contar con informacin de la aplicacin, la cual es calculada y sistematizada
al principio del anlisis. Con la base de datos consolidada se calcula la cobertura de estudiantes y
establecimientos, la asistencia anual y en el da de aplicacin de la prueba, adems de la distribucin
de los estudiantes evaluados. Estos datos son reportados en los Informes de Resultados, descritos en el
captulo 11 de este informe, destinados a los actores involucrados en polticas educativas.
A continuacin se describen los clculos de cobertura, asistencia y distribucin de estudiantes:

Porcentaje de estudiantes evaluados88: corresponde a la proporcin del nmero total de estudiantes


que rindi la prueba sobre el total de estudiantes perteneciente al nivel evaluado del sistema (segn
bases Simce y SIGE). Se calcula a nivel nacional y por regin.

Porcentaje de establecimientos evaluados: corresponde a la proporcin del nmero total de


establecimientos que aplican la prueba sobre el total de establecimientos del sistema que imparten
el nivel evaluado (segn las bases Simce y SIGE). Se calcula a nivel nacional y por regin.

Asistencia anual (%): corresponde al porcentaje de asistencia anual promedio que alcanzaron todos
los estudiantes del nivel evaluado. El dato es obtenido de las bases SIGE. Se calcula solo la asistencia
anual nacional.

Asistencia Simce (%): corresponde a la divisin entre el nmero total de estudiantes que rinden la
prueba y el total de estudiantes matriculados en el nivel evaluado (segn bases Simce). Se calcula
solo la asistencia nacional. Se diferencia de la cobertura nacional de estudiantes, ya que es calculada
solo con los registros de las bases Simce.

Distribucin de estudiantes: corresponde al nmero de estudiantes evaluados de una agregacin. El


dato es obtenido de las bases Simce. Se calcula para las agregaciones: nacional, por regin, gnero,
GSE, dependencia, GSE/dependencia, GSE/regin y dependencia/regin.

Distribucin de establecimientos: corresponde al nmero de establecimientos de los estudiantes


evaluados en una agregacin. El dato es obtenido de las bases Simce. Se calcula para las agregaciones:
nacional, regin, GSE, GSE/regin y dependencia/regin.

De este modo se obtienen los resultados de puntaje promedio, desviacin estndar y Estndares de
Aprendizaje para cada asignatura del nivel evaluado89 segn las agregaciones de inters. Adems, para
cada agregacin se calcula la diferencia con otras agregaciones dentro del mismo ao y la variacin con
respecto a la medicin anterior.
Un aspecto importante de los anlisis es el clculo de la significancia estadstica de las variaciones y
diferencias entre agregaciones, tanto para la comparacin de puntajes promedio como para la proporcin
de estudiantes en cada nivel de los Estndares de Aprendizaje. Dicho procedimiento se detalla en el
documento Clculo de significancia estadstica para Simce, disponible en la pgina web de la Agencia.
Los anlisis agregados que se realizan se pueden agrupar de la forma presentada en la Tabla 9.1.

87 Disponible en lnea en la pgina www.agenciaeducacion.cl.


88 La cobertura de estudiantes se publica en la Conferencia Nacional de Prensa, Inserto de Prensa, Sntesis de Resultados y en el Informe Nacional.
89 Es importante destacar que Simce reporta resultados por cada uno de las asignaturas evaluadas en un nivel, ya que cada asignatura tiene
una escala propia y no es posible, tcnicamente, generar anlisis combinando las asignaturas.

136

Informe Tcnico Simce 2013

Tabla 9.1 Agrupacin de los anlisis agregados


Anlisis

Descripcin
Puntaje promedio de una agregacin.
Diferencias entre puntajes promedio de dos agregaciones en el mismo ao.

Puntaje

Variacin y significancia entre puntajes promedio de una agregacin obtenida en dos


evaluaciones consecutivas.
Distribucin en Estndares de Aprendizaje de una agregacin.
Estndares de
Aprendizaje

Diferencias de la distribucin en Estndares de Aprendizaje de dos agregaciones en el


mismo ao.
Variacin y significancia entre la distribucin en Estndares de Aprendizaje de una
agregacin obtenida en dos evaluaciones consecutivas.

Estos anlisis se rigen por filtros y restricciones. Los filtros tienen el objetivo de definir la poblacin
estadsticamente comparable. Por ejemplo, al comparar los resultados Simce 2012 y Simce 2013 4
bsico Matemtica, segn GSE/dependencia administrativa, se considera a los establecimientos que en
estas dos evaluaciones mantuvieron su GSE y dependencia.
Las restricciones son condiciones para la publicacin de datos, y por lo tanto son aplicadas en forma
posterior al clculo de los anlisis agregados e impiden la publicacin de informacin especfica, con
el objetivo de resguardar la confidencialidad y/o robustez de los datos. Por ejemplo, no se publican
resultados segn Estndares de Aprendizaje para los establecimientos que tengan menos de diez
estudiantes en una asignatura y nivel evaluado.

9.1.4 Anlisis de datos agregados: pruebas de nuevos desarrollos Simce


i.

Prueba Simce Discapacidad Sensorial

Para el caso de la prueba Simce DS aplicada en 6 bsico, los anlisis agregados reportaron el
porcentaje medio de respuestas correctas a nivel nacional para cada tipo de DS (discapacidad visual
total, discapacidad visual parcial o discapacidad auditiva) y de las agregaciones de inters indicadas en
los requerimientos para los productos. El clculo del porcentaje medio de respuesta correcta de cada
estudiante viene informado en la base de datos tanto para la asignatura de Lenguaje y Comunicacin:
Comprensin de Lectura, como para Matemtica. Los resultados entregados con respecto al puntaje
obtenido son los siguientes:

Porcentaje medio de respuestas correctas segn tipo de DS para Comprensin de Lectura y


Matemtica: este se calcula solo a nivel nacional para tipo de establecimiento (regular/especial),
gnero de los estudiantes y dependencia administrativa.

Diferencia entre grupos: se realiza una comparacin entre las categoras de las variables de inters.

Para esta evaluacin se implement una metodologa no paramtrica de comparacin de medianas para
dos agregaciones.

ii.

Prueba Simce Lenguaje y Comunicacin: Escritura

Para esta prueba los resultados que se entregaron con respecto al puntaje promedio obtenido por los
estudiantes de 6 bsico fueron los siguientes:

Captulo 9

137

Cantidad de estudiantes evaluados a nivel nacional.

Cantidad de estudiantes con puntaje del establecimiento y por curso.

Puntaje promedio nacional del establecimiento y de cada curso (esta ltima informacin solo en
formato impreso).

Comparacin del puntaje promedio de cada establecimiento segn GSE.

Porcentaje nacional de respuestas en cada nivel de rendimiento segn indicador y propsito


comunicativo evaluado con la Pauta Analtica.

Porcentaje de respuestas de los estudiantes del establecimiento en cada nivel de rendimiento,


segn indicador evaluado con la Pauta Analtica.

Distribucin de establecimientos y estudiantes, el cual ser igual que las otras evaluaciones
aplicadas en 6 bsico.

Puntaje promedio para las agregaciones de inters (nacional, regional, GSE/dependencia y gnero).

Comparacin de puntajes promedios entre las agregaciones de inters que cumplan los requisitos
estadsticos.

Adems, se publicaron ejemplos de textos escritos por los estudiantes de acuerdo a los niveles de
rendimiento. En cada caso expuesto se incorpor un comentario con el propsito de guiar a los docentes
en la revisin y evaluacin de las producciones escritas de sus estudiantes.

iii.

Estudio Nacional de Educacin Fsica

Este estudio se aplic a una muestra de estudiantes de 8 bsico, y por lo tanto el reporte de resultados
es de carcter general y no se entregan resultados por establecimiento. Los principales resultados
agregados que se reportaron son los siguientes:

Distribucin de estudiantes y establecimientos de la muestra por regin.

Distribucin de estudiantes de la muestra segn categoras de cada prueba, tanto nacional, regional
y por gnero.

Distribucin de estudiantes que poseen condicin fsica satisfactoria, desde el punto de vista
estructural, segn gnero, regin y dependencia.

Distribucin de estudiantes que poseen condicin fsica satisfactoria, desde el punto de vista
funcional, segn gnero, regin y dependencia.

Comparacin de los porcentajes de cada prueba y condicin fsica desde el punto de vista estructural
y funcional, con respecto a la evaluacin anterior.

9.2 Anlisis de tendencias y brechas


Este anlisis consisti en reportar las tendencias de resultados a nivel nacional para los grados evaluados
cada ao, para todas las asignaturas y en un periodo acotado. En otras palabras, consisti en plasmar la
evolucin de los puntajes promedio a partir de una medicin de referencia. Esto se logra gracias a que
desde 1998 las pruebas Simce se construyen y analizan con la metodologa TRI, con lo cual ha sido posible
la comparacin de rendimiento (resultados en las pruebas) entre grupos de estudiantes en aplicaciones
sucesivas.
La Agencia ha hecho un gran esfuerzo por incluir al mayor nmero posible de establecimientos en las
evaluaciones. De esta manera se busca que efectivamente todos los estudiantes de un nivel sean parte
de la aplicacin de las pruebas. Gracias a este aumento de participantes se puede identificar el grupo o
poblacin que se desea seguir en el tiempo, y as determinar tendencias de rendimiento.

138

Informe Tcnico Simce 2013

Hacer este seguimiento implica controlar las caractersticas de los establecimientos que podran
cambiar en el tiempo, con el objetivo de obtener poblaciones equivalentes que puedan ser comparadas.
Sin embargo, no todos los establecimientos presentaron estudiantes matriculados en el nivel para
cada aplicacin. Asimismo, el tamao se ha modificado, aumentando el nmero de establecimientos
pequeos90. Es por ello que para este anlisis se determin una poblacin de referencia cuyas
caractersticas se mantuvieran en el tiempo, lo que permit medir la evolucin o tendencia de dicha
poblacin.
El resultado nacional de cada ao corresponde al promedio obtenido por la cohorte en cuestin, que
tiene sus propias caractersticas, las cuales pueden cambiar de aplicacin en aplicacin y, por ende,
pueden afectar los resultados. Por lo tanto, no es recomendable usar los resultados promedio de cada
ao para un anlisis de evolucin.
Para obtener una poblacin comparable que mantenga sus caractersticas en el tiempo, se decidi construir
una muestra representativa del ao escogido como referencia para el clculo de tendencias. El diseo
muestral escogido correspondi al muestreo aleatorio de conglomerados con afijacin proporcional. Este
diseo garantiz que la muestra seleccionada representara adecuadamente a la poblacin en funcin de
variables particulares denominadas estratificadoras. Las variables estratificadoras seleccionadas para
reportar tendencia son: GSE (bajo, medio bajo, medio, medio alto y alto) y tamao de establecimiento
(medido en cantidad de cursos dependiendo del nivel). La Tabla 9.2 muestra la variable tamao del
establecimiento para cada nivel.
Tabla 9.2 Clasificacin de establecimientos por tamao
2 bsico

4 bsico

8 bsico

II medio

Tamao
establecimiento

N. cursos

N.
alumnos

N. cursos

N.
alumnos

N. cursos

N.
alumnos

N. cursos

1 curso

n<4

1 curso

n<4

1 curso

n 20

1 curso

1 curso

4 n < 11

1 curso

4 n < 11

1 curso

n > 20

2 cursos

1 curso

11 n

1 curso

11 n

2 cursos

N/A

3 cursos

2 cursos

N/A

2 cursos

N/A

3 cursos

N/A

4 cursos

> 2 cursos

N/A

> 2 cursos

N/A

> 3 cursos

N/A

> 4 cursos

La unidad de muestra correspondi a los establecimientos educacionales, ya que estos son las unidades
susceptibles de ser muestreadas. De este modo se trabaj con todos los estudiantes evaluados de cada
establecimiento, lo que permiti obtener un error muestral acotado.
Luego, se escogieron establecimientos segn la proporcin de estos observada en cada estrato del ao
pivote seleccionado por grado. Para los niveles de bsica, se eligi el ao 2007 debido a que es el ao que
posee la mayor cantidad de establecimientos evaluados, gracias a un esfuerzo adicional del Mineduc por
evaluar a los establecimientos pequeos91. Para II medio se utiliz el ao 2006.
Una vez definida la muestra del ao para cada nivel, se calcul el puntaje promedio nacional por grado y
asignatura, para finalmente plasmarlo en un grfico (ver Figura 9.1).

90 Establecimientos pequeos son aquellos con menos de diez estudiantes.


91 dem nota anterior.

Captulo 9

139

Figura 9.1 Evolucin Puntajes Promedio 4 Bsico 2005-2013 en Matemtica

Nota: La figura muestra la evolucin de puntajes promedio de 4 bsico 2005-2013, en Matemtica.

Por otra parte, se analizaron las diferencias existentes entre dos categoras extremas de variables de
inters. Por ejemplo, para la variable dependencia se calcul la diferencia entre los promedios de los
establecimientos municipales y particulares pagados en cada ao donde se evala el nivel, con el fin de
determinar estadsticamente si ha mantenido, aumentado o disminuido dicha diferencia en el tiempo.
Este anlisis se denomina Anlisis de Brecha, y se realiz para los grados y asignaturas evaluadas el ao
2013 para las siguientes agregaciones:

Dependencia: brecha entre establecimientos municipales y particulares pagados.

Grupo socioeconmico: brecha entre establecimientos del grupo socioeconmico bajo y alto.

Gnero: brecha entre mujeres y hombres.

Cabe resaltar que el anlisis de brecha se realiza utilizando los promedios nacionales de las agregaciones
en cuestin, y no los promedios que se pueden obtener de la muestra seleccionada de cada ao bajo el
anlisis de tendencia. Un ejemplo de la forma de reportar este anlisis se muestra en la Figura 9.2.

140

Informe Tcnico Simce 2013

Figura 9.2 Tendencia grupo socioeconmico Matemtica 8 bsico 2004-2013

Nota: La figura muestra la tendencia de grupo socioeconmico en Matemtica 8 bsico, 2004-2013.

Captulo 9

141

III

Captulo 10:
Anlisis de los Cuestionarios de Calidad
y Contexto de la Educacin

10.1 Antecedentes
El anlisis de estos instrumentos, descritos en el captulo 3 de este informe, tiene dos focos:

Construir los Otros Indicadores de Calidad Educativa, velando por el cumplimiento de los criterios
tcnicos que los definen.

Indagar en los factores contextuales que podran estar asociados al logro de aprendizaje de los
alumnos.

Los anlisis anteriores son, adems, un insumo fundamental para la elaboracin de los cuestionarios del
ciclo del ao siguiente, es decir, los Cuestionarios de Calidad y Contexto de la Educacin 2014.
El anlisis que se realiza para construir los OIC tiene como objetivo proporcionar a los establecimientos
informacin relevante sobre distintas reas de desarrollo de sus estudiantes, para complementar
con ello la informacin acadmica proporcionada por los resultados Simce y los Estndares de
Aprendizaje. As, estos indicadores entregan una seal a los establecimientos sobre la importancia de
implementar acciones sistemticas para desarrollar aspectos no acadmicos, los que son clave para
el futuro de los estudiantes.
De esta forma, los Otros Indicadores de Calidad buscan que los establecimientos monitoreen el estado
de desarrollo y la efectividad de las prcticas que han implementado en los mbitos evaluados, para as
poder mantener y potenciar las medidas que han resultado exitosas y poder tomar medidas remediales
a tiempo, cuando sea necesario.
Por ltimo, los OIC servirn de insumo para el Sistema de Aseguramiento de la Calidad, que permitir
identificar a los establecimientos que requieren orientacin y apoyo y facilitarn disear y evaluar
polticas educativas a nivel nacional92.
El anlisis de factores asociados a resultados de aprendizaje evaluados en las pruebas Simce que
utilizan la informacin levantada a travs de los cuestionarios, tiene como objetivo proporcionar
informacin relevante al sistema educacional chileno acerca del desarrollo de polticas, programas y
prcticas educativas, para incrementar la calidad y equidad de los resultados del proceso de enseanza y
aprendizaje. Asimismo, se espera aportar a la discusin acadmica sobre los factores sociales asociados
al aprendizaje.

10.2 Anlisis de datos para la construccin de los Otros Indicadores de


Calidad y factores asociados a resultados de aprendizaje
10.2.1 Actualizacin de la matriz de variables
Antes de comenzar con el anlisis de los datos fue fundamental revisar y ajustar las matrices de
operacionalizacin de variables93, segn los cambios realizados a los cuestionarios en cada grado. De esta

92 Para mayor detalle ver documento Otros Indicadores de Calidad Educativa Ministerio de Educacin, 2014.
93 La matriz incluye informacin de las dimensiones, subdimensiones, indicadores y variables en los cuestionarios utilizados.

143

forma, cada ao el plan de anlisis ha considerado la actualizacin del nmero de pregunta que corresponde
a cada variable, e incluye variables nuevas y/o modificadas en la subdimensin y dimensin correspondiente.

10.2.2 Anlisis general de la base de datos


Una vez recibidas las bases de datos consolidadas que la Unidad de Gestin de datos genera, se
realizaron anlisis de aspectos generales como las tasas de retorno de cada instrumento94, porcentaje de
cuestionarios retornados completamente en blanco, porcentaje de valores perdidos y respuesta vlida
de cada variable, y anlisis de variabilidad.
La tasa de retorno corresponde a la proporcin de cuestionarios retornados con respecto a los cuestionarios
aplicados en grados y asignaturas en los que se aplica Simce. Para los Cuestionarios Estudiantes, la
tasa de retorno se calcul con respecto a los estudiantes presentes al momento de aplicacin. Para
los Cuestionarios Padres y Apoderados se calcul con respecto a la cantidad total de estudiantes, a los
cuales les fue entregado dicho material. En el caso de los Cuestionarios Docentes, la tasa de retorno se
calcul respecto del total de cursos en los que se aplica la prueba.
Para la realizacin de anlisis de los OIC y de los factores asociados se espera obtener como mnimo una
tasa de retorno de 80%. Si no se obtiene este porcentaje, se solicita a la UOCL la revisin de los procesos
de aplicacin. A la vez, para los anlisis se tiene cuidado de que el no retorno est sesgado por alguna
variable importante (dependencia, ruralidad, GSE). Las tasas de retorno para los cuestionarios aplicados
el ao 2013 pueden ser consultadas en el captulo 4 de este informe.
Junto con lo anterior, se calcul el porcentaje de cuestionarios retornados completamente en blanco,
del total de cuestionarios retornados, para estimar el total de cuestionarios con informacin disponible
y evaluar posibles problemas de aplicacin o del instrumento.
Adems, se calcul el porcentaje de valores perdidos y de respuesta vlida de cada variable. Se considera
como valor perdido la omisin (respuesta vaca) y la doble respuesta. En este sentido, se identificaron
los tems con una tasa de omisin mayor al 5% y al 10%, y de doble respuesta mayor al 5%. Tambin
se identificaron las preguntas multi-tem con una tasa de omisin mayor al 5% y al 10%. Se analiz la
distribucin de estos valores dentro del cuestionario para evaluar su completitud y extensin.
Adems, se hizo un anlisis de variabilidad que consisti en una revisin de las frecuencias de respuesta
por variable, identificando aquellos tems que presentan una concentracin mayor al 90% en una o en
dos categoras con la misma tendencia.
Cuando los tems tienen entre 5% y 10% de valores perdidos, se identifican con seal de alerta. Para el
anlisis de factores asociados, cuando un tem tiene ms del 10% de valores perdidos (omisin y/o doble
respuesta) o presenta baja variabilidad, este no puede ser utilizado.
Para la construccin de los OIC, cuando un individuo tiene ms del 50% de valores perdidos (omisin y/o
doble respuesta) entre las preguntas que componen cada ndice, se realiza imputacin por la moda del
curso. En la construccin de los OIC se hacen imputaciones para respetar los ponderadores que indica en
el Decreto 381, y de este modo se busca resguardar que no se distorsione la informacin recibida de los
distintos actores.
Para los datos de Cuestionarios Simce 2013, las tasas de valores perdidos por pregunta de los cuestionarios
de estudiantes calculadas fueron, en promedio, de 1% en Cuestionario Estudiantes 8 bsico y II medio,
y de 2% en 4 y 6 bsico. Solo en II medio hubo un tem con un porcentaje de valores perdidos mayor
a 10%.
La tasa de valores perdidos por pregunta de los Cuestionarios de Padres y Apoderados fue en promedio
4% para todos los grados evaluados. Solo en 6 bsico y II medio hay un tem con un porcentaje mayor
a 10%.
La tasa de valores perdidos por pregunta de los cuestionarios de Docentes fue en promedio 1,8% para
todos los grados evaluados, donde el nmero promedio de tems con mayor al 10% fue de 2,4 tems.

94 Este dato lo calcula el equipo de Gestin de Datos. Para ver detalles de su clculo revisar captulo 6 de este documento.

144

Informe Tcnico Simce 2013

10.2.3 Ajuste de la base de datos


Las bases de datos se ajustaron como parte del proceso de preparacin del anlisis estadstico,
direccionando las preguntas del cuestionario. Lo anterior implic ajustar los valores de respuesta de
acuerdo a las distintas formas en que fueron formuladas las preguntas. De esta manera, se debieron
identificar las preguntas formuladas en sentido negativo y las que se refieren a la valoracin de una
caracterstica o atributo negativo, y se invirti la puntuacin de la escala para homologarla a la puntuacin
del resto de las preguntas formuladas en positivo, o que refieren a caractersticas o atributos deseables.
Adems de lo anterior, en los casos en los que se requiriera construir un ndice con tems con diferentes
escalas, debieron homologarse las escalas de puntuacin de los indicadores. Lo anterior fue fundamental
para poder realizar el anlisis factorial, y posteriormente, calcular ndices.
Por ello, antes de calcular la confiabilidad y validez de los ndices para los OIC, las respuestas a los tems
fueron transformadas segn la siguiente ecuacin, de manera que todas las respuestas estn dentro de
un rango 0-100.

10.2.4 Estadsticos descriptivos


El anlisis descriptivo se realiza considerando el tipo de variable del que se trate:

Cuantitativas: considera tanto la distribucin de frecuencia de las respuestas, como estadsticos


de tendencia central, de dispersin y distribucin (por ejemplo, en el Cuestionario Estudiantes y
de Padres y Apoderados, la variable edad; y en el Cuestionario de Docentes, la edad y los aos de
antigedad en el establecimiento, entre otras).

Cualitativas nominales: distribucin de frecuencia de las respuestas (por ejemplo, en el Cuestionario


Estudiantes, la variable sexo; en el Cuestionario Docentes, el ttulo de profesor; y en el Cuestionario
de Padres y Apoderados, el parentesco con el estudiante, entre otras).

Cualitativas ordinales: distribucin de frecuencia de las respuestas (por ejemplo, las preguntas con
escala Likert).

Al igual que las tasas de omisin y los anlisis anteriores, los estadsticos descriptivos reportados para
cada pregunta tambin orientan las modificaciones que debern realizarse a los cuestionarios para
futuras aplicaciones.
Si el tem fue modificado, se realiza tambin una comparacin de los resultados de los estadsticos
descriptivos con los del ao anterior. De esta manera se observan los efectos del cambio realizado en
las respuestas.

10.2.5 Confiabilidad de ndices y escalas


En general, para analizar la consistencia interna de los ndices relativos a los OIC y otros ndices que se
proponga construir, se calcul el coeficiente Alfa de Cronbach. As se determina el grado de homogeneidad
de una escala, correlacionando las puntuaciones de cada tem con la puntuacin total del instrumento o
una dimensin de este. Se considera aceptable un alfa de 0,7.
Los resultados de este anlisis de los OIC con datos de los cuestionarios 2013 sealaron que la mayora
de los ndices de las dimensiones e indicadores tienen valores del coeficiente Alfa de Cronbach sobre 0,7
(para mayor detalle, ver anexo J). Solo las dimensiones correspondientes al indicador de Hbitos de vida
saludable obtuvieron valores bajo este ndice (entre 0,4 y 0,6).

10.2.6 Validez de ndices


Para asegurar la validez de constructo de los OIC y otros ndices que se proponga construir, se lleva a cabo
un anlisis factorial exploratorio con las respuestas de los estudiantes, docentes, padres y apoderados en
los cuestionarios. A travs de esta tcnica, se identifica una serie de factores subyacentes tras los tems

Captulo 10

145

evaluados, lo cual permite analizar la correspondencia entre las preguntas y el constructo terico que
est tras ellas. Los resultados de este anlisis factorial son analizados conforme a parmetros estadsticos
de consistencia y pertinencia, tales como: valor del determinante de la matriz de correlaciones, KMO95,
comunalidades y cargas factoriales.
Se considera como aceptable una determinante de matriz de correlaciones cercana a 0, y valores de
KMO cercanos a 0,9 y mayores que 0,5. En cuanto a la definicin del nmero de factores considerados se
utiliza una solucin con un solo factor. Por ltimo, como criterio general se consideran como aceptables
comunalidades mayores que 0,4 y se incluyen tems con cargas factoriales mayores a 0,396.
Los resultados de este anlisis de los OIC sealaron que todos los ndices de las dimensiones e indicadores
cumplen con los valores sealados.

10.2.7 Construccin y anlisis de los Otros Indicadores de Calidad


La construccin de los OIC evaluados mediante cuestionarios tiene una metodologa especfica que fue
aprobada por el Consejo Nacional de Educacin y qued definida en el Decreto Supremo de Educacin
N. 381/2013.
Con los datos depurados y testeados en su calidad mediante los procedimientos anteriormente descritos,
se procede a calcular el ndice de cada dimensin e indicador. Para esto, se llevan a cabo los siguientes
pasos en cada indicador:

Clculo del puntaje por estudiante: a cada estudiante se le asigna el puntaje correspondiente a su
propio cuestionario, al de su apoderado y su/s docente/s, basndose en las respuestas a las preguntas
relacionadas con el indicador. El puntaje obtenido es mayor cuando las respuestas reflejan un mayor
nivel del indicador evaluado. El puntaje de cada actor se calcula a partir de las cargas factoriales que
arroja el anlisis factorial exploratorio de los tems. Respecto de esto ltimo, es importante recordar
que la construccin de estos ndices exige el cumplimiento de ciertos parmetros estadsticos
entregados por los anlisis de confiabilidad y validez previamente descritos.

Clculo del puntaje por grado: para cada grado se promedian los puntajes de todos los estudiantes/
docentes/padres de un determinado grado, que responden el cuestionario Simce.

Clculo del puntaje por ciclo (educacin bsica o educacin media): para cada ciclo se agregan los
resultados del indicador de todos los grados correspondientes al ciclo evaluado, para lo cual se
promedian los puntajes por grado.

Los puntajes de los indicadores se expresan en una escala de 0 a 100, continuando con los valores en que
se reescalaron las respuestas de los cuestionarios (segn procedimiento descrito en el apartado 10.2.3
de este captulo). Adems se definieron distintos niveles para cada indicador por grado, los cuales se
fijaron de acuerdo al promedio y la desviacin estndar de las respuestas de todos los que contestaron97.
Con fines comunicacionales se calcularon distintos niveles para cada indicador por grado, los cuales se
definieron en base al promedio y la desviacin estndar de las respuestas de todos los que contestaron98.
Hasta ahora se ha dado a conocer pblicamente el porcentaje de estudiantes a nivel nacional en cada
uno de estos niveles, en cada indicador y sus respectivas dimensiones para cada grado (4, 6, 8 bsico y
II medio). Se ha comparado por dependencia administrativa, grupo socioeconmico del establecimiento
y gnero de los estudiantes (Agencia de Calidad de la Educacin, 2014b).

95 Kaiser-Meyer-Olkin (KMO) es un ndice usado para examinar la conveniencia de un anlisis factorial.


96 Estos criterios fueron utilizados en la elaboracin de los OIC. Ver Fundamentos. Otros Indicadores de Calidad Educativa, p. 232.
97 Cabe sealar que los lmites inferior y superior de las categoras, son distintos para 4 y 6 bsico que para 8 bsico y II medio, ya que las preguntas
en relacin a este indicador fueron distintas para los nios que para los jvenes, de acuerdo a la realidad de cada uno de estos segmentos, y por
lo tanto, la curva de distribucin de resultados tambin fue diferente para ambos grupos.
98 Cabe sealar que los lmites inferior y superior de las categoras, son distintos para 4 y 6 bsico que para 8 bsico y II medio, ya que las preguntas
en relacin a este indicador fueron distintas para los nios que para los jvenes, de acuerdo a la realidad de cada uno de estos segmentos, y por
lo tanto, la curva de distribucin de resultados tambin fue diferente para ambos grupos.

146

Informe Tcnico Simce 2013

Los OIC con datos de Simce 2013 tambin son utilizados en estudios, apuntes y documentos de trabajo
que publica la Agencia de Calidad durante este ao99.
Tabla 10.1 Otros Indicadores de Calidad Educativa presentados en resultados Simce 2013
OIC

Difusin

Autoestima acadmica y motivacin escolar

Conferencia de prensa Resultados Simce 2013

Clima de convivencia escolar

Conferencia de prensa Resultados Simce 2013

Participacin y formacin ciudadana

Conferencia de prensa Resultados Simce 2013

Autoestima acadmica y motivacin escolar

Informe Nacional de Resultados Simce 2013

Clima de convivencia escolar

Informe Nacional de Resultados Simce 2013

Participacin y formacin ciudadana

Informe Nacional de Resultados Simce 2013

Otros Indicadores de Calidad y Satisfaccin de Padres

Apunte octubre 2014

Vida democrtica y motivacin escolar

Apunte agosto 2014

Otros Indicadores de Calidad

Documento de trabajo octubre 2014

10.3 Anlisis de factores asociados a resultados de aprendizaje


Dentro del anlisis de factores asociados a resultados de aprendizaje, se consideran los anlisis
descriptivos de variables de contexto que caracterizan a establecimientos y estudiantes, y los anlisis
bivariados y/o multivariados de los resultados de los estudiantes en las pruebas Simce en relacin a
diferentes variables de inters.
Posterior a la entrega de resultados se proyecta, por parte de la Divisin de Estudios de la Agencia de
Calidad de la Educacin, la elaboracin de una serie de apuntes, dentro de los cuales se profundiza en
algunos factores asociados a resultados que utilizan informacin levantada a travs de cuestionarios.
En estos casos se llevan a cabo anlisis descriptivos que pueden considerar la construccin de ndices.
Los ndices son elaborados a partir de tems considerados dentro de los cuestionarios. Estos son
construidos utilizando estadsticos descriptivos o de tendencia central (por ejemplo, sumatoria de
puntajes, promedios simples, etc.), o bien, a partir de cargas factoriales que arroja el anlisis factorial
exploratorio de los tems. Respecto de esto ltimo, es importante sealar que la construccin de los
ndices exige el cumplimiento de ciertos parmetros estadsticos entregados por el anlisis factorial
exploratorio y los indicadores de confiabilidad interna previamente descritos.
El Informe Nacional de Resultados 2013 utiliz datos de los Cuestionarios de Calidad y Contexto. Se
elabor un modelo explicativo del rendimiento en Matemtica de los estudiantes de 6 bsico. Para
la elaboracin de este ltimo se utiliz el anlisis lineal jerrquico, que consider caractersticas de
los establecimientos, as como tambin caractersticas contextuales e individuales de los estudiantes,
recogidas mediante los Cuestionarios de Estudiantes, Padres y Apoderados, y Docentes.
El Informe Nacional de Resultados 2013 tambin present un anlisis descriptivo de factores asociados a
resultados de aprendizaje de estudiantes con discapacidad sensorial que rindieron las pruebas Simce 6
bsico Discapacidad Sensorial de Comprensin de Lectura y Matemtica, el cual analiz caractersticas
contextuales e individuales de los estudiantes, recogidas mediante los cuestionarios de estudiantes.
Otros datos de Simce 2013 tambin son utilizados en estudios, apuntes y documentos de trabajo que
publica la Agencia de Calidad de la Educacin durante el ao.

99 Estos documentos se pueden encontrar en la pgina web de la Agencia (www.agenciaeducacion.cl).

Captulo 10

147

En el siguiente cuadro se exponen los factores asociados presentados a partir de los resultados Simce 2013:
Tabla 10.2 Factores asociados presentados en resultados Simce 2013
Factor asociado

Difusin

Expectativas de los padres y apoderados sobre el nivel


de estudio que alcanzar el estudiante

Informe Nacional de Resultados Simce 2013

Autoconcepto acadmico de estudiantes con


discapacidad sensorial

Informe Nacional de Resultados Simce 2013

Metodologas de trabajo en aula: prcticas de


integracin de los estudiantes con discapacidad
sensorial en los establecimientos regulares

Informe Nacional de Resultados Simce 2013

Relaciones en el establecimiento y seguridad en el


establecimiento: discriminacin de los estudiantes
con discapacidad sensorial en los establecimientos
regulares y especiales

Informe Nacional de Resultados Simce 2013

148

Informe Tcnico Simce 2013

IV
Captulo 10

Comunicacin
de Resultados
149

150

Informe Tcnico Simce 2013

IV

Captulo 11:
Comunicacin de resultados
Simce 2013

11.1 Propsitos de la comunicacin de los resultados de aprendizaje


La creciente utilizacin de evaluaciones de logros de aprendizaje para el quehacer pedaggico es
actualmente una prctica comn entre los establecimientos, tanto a nivel nacional como internacional.
A partir de los resultados de las evaluaciones, adems del monitoreo y rendicin de cuentas de la calidad
educativa, se espera que la evaluacin sea una de las principales herramientas para la toma de decisiones
y lineamientos de nuevos objetivos para mejorar los aprendizajes que logran los estudiantes.
La ley sobre el Sistema Nacional de Aseguramiento de Calidad de la Educacin100 considera que es deber
del Estado asegurar una educacin de calidad, para ello es necesario tener en cuenta, entre otros factores,
la entrega de informacin sobre los logros de aprendizaje y el desempeo de los establecimientos. Por
otra parte, se requiere reforzar la autonoma en la gestin de los establecimientos, considerando los
proyectos educativos y las iniciativas de autoevaluacin.
El artculo 10 de esta ley plantea que el objeto de la Agencia de Calidad de la Educacin ser evaluar
y orientar el sistema educativo para que este propenda al mejoramiento de la calidad y equidad de
las oportunidades educativas, considerando las particularidades de los distintos niveles y modalidades
educativas. Para llevar a cabo dicho objetivo, la ley faculta a la Agencia para evaluar los logros de
aprendizaje de los alumnos segn el cumplimiento de los Estndares de Aprendizaje, actualmente a
travs de las pruebas Simce.
Finalmente, la ley declara que la Agencia de Calidad de la Educacin debe proporcionar informacin en
materias de su competencia a la comunidad en general y promover su correcto uso (Ley N. 20529, art.
10, letra e).
Bajo este marco normativo se replantea la comunicacin de resultados, que se basa tambin en el uso
de la informacin como herramienta de mejora. Es as como se propone una funcin formativa de los
resultados de la evaluacin estandarizada de aprendizajes:
Las evaluaciones estandarizadas, sus instrumentos y sus resultados pueden ser utilizados para
mejorar el modo en que los maestros evalan, y para identificar y dar a conocer experiencias de
escuelas con niveles de logro destacados en contextos difciles. Para ello, es fundamental producir
estrategias y materiales de difusin especficamente pensados para apoyar el trabajo docente y, en
especial, articular la divulgacin de resultados con programas de capacitacin en servicio (...) para
propiciar la reflexin a partir de los resultados de las evaluaciones y el cambio de las prcticas de la
enseanza (...). La experiencia internacional indica que este tipo de aproximaciones favorecen mejor
el desarrollo de una cultura de la evaluacin y actitudes positivas hacia las evaluaciones externas
que cuando las mismas tienen un carcter nicamente de control o una connotacin punitiva
(Ravela, 2006, p. 227).
En este contexto, la Agencia impuls el ao 2012 la creacin del programa Uso de la Informacin, con
el propsito de orientar el uso pedaggico de la informacin elaborada por la Agencia de Calidad de la
Educacin, desde un enfoque reflexivo y formativo para el desarrollo de una cultura evaluativa en los
establecimientos.

100

Ley N. 20529 Disponible en: http://www.leychile.cl/Navegar?idNorma=1028635.

151

11.2 Publicaciones Simce 2013


Durante los aos 2013 y 2014 la Agencia de Calidad de la Educacin public variados documentos en
los que se entreg informacin sobre las pruebas Simce 2013 antes de ser aplicadas (en los documentos
de Orientaciones para Docentes y Modelos de Prueba), como tambin documentos con los resultados
de aprendizaje logrados por los estudiantes del pas en los distintos niveles y reas evaluadas (en los
documentos Informes de Resultados).

11.2.1 Orientaciones
Los documentos Orientaciones para Docentes y Modelos de Prueba tienen como objetivo dar a conocer
variados aspectos de las pruebas Simce, segn la audiencia a la que estn dirigidos.
Las Orientaciones para Docentes dan a conocer los cronogramas de aplicacin, los conocimientos
y habilidades que se evaluarn, los tipos de preguntas y caractersticas generales de las pruebas. Por
otro lado, las Orientaciones para Directivos tienen como objetivo dar a conocer los procedimientos
relacionados con la aplicacin de las pruebas Simce, con el propsito de garantizar la estandarizacin de
los procesos de aplicacin y la validez de los resultados.
A continuacin se sealan los soportes y fechas de publicacin de las Orientaciones Simce 2013.
Tabla 11.1 Orientaciones Simce 2013
Documento

Soporte

Orientaciones para Docentes Educacin Bsica

Electrnico

Orientaciones para Docentes Educacin Media

Electrnico

Orientaciones para Docentes 6 bsico Escritura

Electrnico

Orientaciones para Directivos Educacin Bsica

Electrnico

Orientaciones para Directivos Educacin Media

Electrnico

Orientaciones Educacin Fsica

Impreso

Fecha de publicacin
1 de agosto 2013
5 de septiembre 2013
30 de agosto 2013

Orientaciones para Directivos Pruebas Experimentales Impreso


Orientaciones para Directivos Pruebas Extendidas

Impreso

Orientaciones Pruebas Escuelas Especiales

Impreso

Septiembre 2013

Las Orientaciones en formato electrnico fueron publicadas en la pgina web de la Agencia


(http://www.agenciaeducacion.cl/biblioteca-digital/folletos-de-orientaciones-2/). Las Orientaciones en
formato impreso fueron distribuidas a los establecimientos de la muestra que participan en la evaluacin
correspondiente.

11.2.2 Modelos de prueba


Los Modelos de Prueba tienen como objetivo dar a conocer las caractersticas que tendrn las nuevas
pruebas del ao 2013 y ejemplificar los tipos de preguntas, textos y estmulos a los que se enfrentarn
los estudiantes, propiciando la reflexin pedaggica de los docentes acerca de los logros de aprendizaje
de los alumnos. Junto a estos documentos se public un Manual del Profesor, cuyo propsito es entregar
orientaciones para el uso y aprovechamiento pedaggico de los modelos de prueba.
A continuacin se sealan los soportes y fechas de publicacin para los anteriores documentos.

152

Informe Tcnico Simce 2013

Tabla 11.2 Cuadernillos de preguntas, modelos de pruebas y manuales del profesor Simce 2013
Documento

Soporte

Cuadernillos con preguntas de desarrollo Simce


Escritura 6 bsico

Electrnico

Modelos de Prueba Simce Discapacidad Sensorial


Comprensin de Lectura 6 bsico

Electrnico

Modelos de Prueba Simce Discapacidad Sensorial


Matemtica 6 bsico

Electrnico

Manual del Profesor Simce Discapacidad Sensorial


6 bsico

Electrnico

Fecha de publicacin
10 de septiembre 2013

17 de julio 2013

Nota: La tabla seala los soportes y fechas de publicacin de los documentos publicados de Simce 2013. Los modelos
y manuales fueron publicados en la pgina web de la Agencia (http://www.agenciaeducacion.cl/biblioteca-digital/
folletos-de-orientaciones-2/).

11.2.3 Informes de Resultados


Los Informes de Resultados son una herramienta estratgica e importante para comunicar los logros de
aprendizaje de los estudiantes en las distintas asignaturas y niveles evaluados. Su propsito es entregar
la informacin como un insumo al servicio de la mejora escolar. As, la comunidad escolar puede conocer
y reflexionar acerca de los aprendizajes logrados por los estudiantes e identificar desafos y fortalezas,
todo ello para contribuir a la elaboracin o reformulacin de estrategias de enseanza orientadas a
mejorar los aprendizajes. Las autoridades y quienes toman decisiones pueden utilizar la informacin de
resultados para evaluar alguna poltica pblica especfica, y a la vez contar con informacin til en el
diseo de futuras polticas educacionales.
Para cumplir con estos objetivos, la Agencia entrega diversos tipos de Informes de Resultados Simce,
segn la audiencia y los propsitos comunicacionales.
A continuacin se describen los tipos de informes, con la descripcin de la estrategia utilizada para cada
tipo de comunicacin.

i.

Informes de Resultados para Docentes y Directivos

Los Informes de Resultados para Docentes y Directivos101 comunican los resultados de aprendizaje (segn
puntaje promedio y Estndares de Aprendizaje cuando corresponde) de los estudiantes del pas en cada
prueba Simce. Los Estndares de Aprendizaje son referentes que describen lo que los estudiantes deben
saber y poder hacer para demostrar, en las evaluaciones Simce, determinados niveles de cumplimiento de
los objetivos de aprendizaje estipulados en el currculo vigente. Estos permiten entregar mayor claridad
respecto del puntaje obtenido por el establecimiento, ya que existen descripciones de las distintas
categoras o niveles asociados a cada rango de puntaje, que permiten tambin conocer el porcentaje de
estudiantes que se encuentra en cada nivel, y transparentar los requisitos que se necesitan para alcanzar
cada nivel de aprendizaje. Los resultados de los establecimientos se entregan en comparacin con los de
la evaluacin anterior y con los logrados por estudiantes que asisten a establecimientos de similar GSE.
Adems, la versin 2013 de estos documentos incluy nueva informacin, con el propsito de ampliar la
evidencia con que cuentan docentes y directivos para analizar y reflexionar en torno a los aprendizajes
logrados por sus estudiantes.
A continuacin se sealan los nuevos contenidos definidos para los Informes de Resultados para Docentes
y Directivos Simce 2013:

Tendencia de los puntajes promedio del establecimiento. Con un grfico se informaron los puntajes
promedio del establecimiento en las ltimas evaluaciones Simce102, con el propsito de favorecer

101 Los Informes de Resultados para Docentes y Directivos se envan a cada establecimiento y pueden descargarse en versin digital desde la pgina
web de la Agencia (www.agenciaeducacion.cl).
102 Para 4 bsico se presentaron los puntajes promedio de las ltimas cinco evaluaciones, desde el ao 2009. Para 8 bsico y II medio se presentaron
los puntajes promedio de las ltimas tres evaluaciones desde el ao 2009 y 2010, respectivamente.

Captulo 11

153

el anlisis de los resultados en su evolucin y no solo segn la comparacin con los resultados de
la medicin anterior. Esto debido a que los resultados de dos mediciones consecutivas entregan
un panorama acotado acerca de los aprendizajes que demuestran los estudiantes (a partir de las
caractersticas de la cohorte evaluada) y, por lo tanto, son menos apropiados para evaluar el impacto
de las iniciativas y los cambios de la gestin escolar y pedaggica.

Otros Indicadores de la Calidad Educativa. Este fue uno de los cambios ms importantes en la
entrega de los resultados Simce 2013. Se presentaron algunas de las acciones que realizan los
establecimientos que logran altos desempeos en los Otros Indicadores de la Calidad, con el
propsito de apoyar la planificacin e implementacin de acciones sistemticas en los planes de
mejoramiento, que incorporen el desarrollo de aspectos no acadmicos.

Talleres para el anlisis de resultados de aprendizaje en versin electrnica. En los documentos


Simce 2013 no se public el taller Orientaciones para el Anlisis de Resultados. Estos talleres
fueron publicados en la pgina web de la Agencia, como parte de las estrategias desarrolladas en el
programa Uso de la Informacin.

A continuacin se sealan los soportes y fechas de publicacin de los Informes de Resultados para
Docentes y Directivos Simce 2013.
Tabla 11.3 Informes de Resultados Docentes y Directivos Simce 2013
Documento

Soporte

Fecha de publicacin

Informes de Resultados Docentes y Directivos 2 bsico


Comprensin de Lectura

Electrnico e impreso

Informes de Resultados Docentes y Directivos 4 bsico

Electrnico e impreso

Informes de Resultados Docentes y Directivos 6 bsico

Electrnico e impreso

Informes de Resultados Docentes y Directivos 8 bsico

Electrnico e impreso

Informes de Resultados Docentes y Directivos II medio

Electrnico e impreso

Estudio Nacional de Educacin Fsica

Electrnico e impreso

22 de julio 2014

Informes de Resultados Docentes y Directivos 6 bsico


Escritura

Electrnico e impreso

7 de octubre de 2014

10 de junio 2014

El ejemplar impreso de los informes de resultados para docentes y directivos, a diferencia de la versin
digital, contiene los puntajes promedio por curso.
La fecha de publicacin de los informes de resultados para docentes y directivos corresponde a la
Conferencia de prensa Simce 2013. A partir de ese momento los informes son publicados en la pgina
web de la Agencia (www.agenciaeducacion.cl) y se inicia el proceso de distribucin de los ejemplares
impresos a todos los establecimientos del pas.

ii.

Informes de Resultados para Padres y Apoderados

Los Informes de Resultados para Padres y Apoderados contienen los resultados de aprendizaje que
logra el curso al que asisten los estudiantes, en un lenguaje sencillo que facilita la comprensin de la
informacin. Su propsito es involucrar a padres y apoderados en una relacin de apoyo y colaboracin
con el establecimiento en una tarea comn: el proceso de aprendizaje del estudiante.
En un esfuerzo por facilitar la comprensin y uso de la informacin, se evalu con padres y apoderados la
versin 2012 de este informe. A partir de este estudio103 se simplific el lenguaje utilizado para entregar
los resultados y se incorporaron recursos grficos y recomendaciones segn la edad y etapa de desarrollo
del estudiante.
103 Las modificaciones introducidas al Informe de Resultados fueron definidas a partir del estudio realizado a la versin 2012 por Edecsa, y las
conclusiones de la consulta con una maqueta de prueba de un documento modificado, realizada por el equipo de Desarrollo, Anlisis y Uso de
la Informacin. La consulta se realiz a cinco padres y apoderados de 4 bsico del establecimiento particular subvencionado Jorge Alessandri
Rodrguez, de la comuna de Renca, Regin Metropolitana.

154

Informe Tcnico Simce 2013

A continuacin se sealan los soportes y fechas de publicacin para los Informes de Resultados para
Padres y Apoderados Simce 2013.
Tabla 11.4 Informes de Resultados Padres y Apoderados Simce 2013
Documento

Soporte

Informes de Padres y Apoderados 2 bsico Comprensin


de Lectura

Electrnico e impreso

Informes de Resultados Padres y Apoderados 4 bsico

Electrnico e impreso

Informes de Resultados Padres y Apoderados 6 bsico

Electrnico e impreso

Informes de Resultados Padres y Apoderados 8 bsico

Electrnico e impreso

Informes de Resultados Padres y Apoderados II medio

Electrnico e impreso

Informes de Resultados Padres y Apoderados 6 bsico


Escritura

Electrnico e impreso

Fecha de publicacin

10 de junio 2014

7 de octubre de 2014

La fecha de publicacin de los Informes de Resultados para Padres y Apoderados corresponde a la


Conferencia de prensa Simce 2013. A partir de ese momento los informes son publicados en la pgina
web de la Agencia (www.agenciaeducacion.cl) y se inicia el proceso de distribucin de los ejemplares
impresos a todos los establecimientos del pas.
Tanto los Informes de Resultados para Padres y Apoderados, como los Informes de Resultados para
Docentes y Directivos, se evalan ao a ao por las audiencias respectivas. El objetivo principal de esta
evaluacin es recoger antecedentes para incorporar nueva informacin, cambiar enfoques, profundizar
contenidos, etc. Todo esto con el fin de mejorar la calidad de los productos comunicacionales y fomentar
el uso adecuado de la informacin que entrega la Agencia. En el caso de la entrega de resultados 2013, la
evaluacin de los productos se realiz durante los meses de octubre y noviembre del 2014, para obtener
los primeros resultados en diciembre del mismo ao.

11.2.4 Resmenes Ejecutivos


Los resmenes ejecutivos tienen por objetivo entregar a la opinin pblica una sntesis de los principales
resultados de la evaluacin. Esta informacin es comunicada en los medios a travs de las conferencias
de prensa nacionales y regionales. En estas conferencias tambin se distribuyen Sntesis de Resultados
que apoyan y complementan la informacin.

i.

Conferencia de Prensa Nacional

La Conferencia de Prensa Nacional es el evento informativo a travs del cual la Agencia comunica al
pblico en general los resultados de aprendizaje de las pruebas censales.
La entrega de resultados 2013 se realiz el 10 de junio de 2014, y la conferencia incluy por primera
vez los resultados relacionados con el desarrollo personal y social de los estudiantes. Especficamente,
se incorpor la percepcin de los estudiantes en aspectos como el clima y convivencia escolar; la
autoestima acadmica y motivacin escolar; y la participacin y formacin ciudadana. Estos aspectos,
medidos a partir de cuestionarios aplicados a los alumnos durante la evaluacin Simce son parte de los
Otros Indicadores de la Calidad (OIC) que defini el Mineduc, para ampliar la mirada sobre el significado
de la calidad de la educacin, y as complementar los logros en aprendizajes cognitivos.

ii.

Conferencias de prensa regionales

Las conferencias de prensa regionales son presentaciones que tienen como objetivo dar a conocer a los
Seremi (pblico objetivo directo) y Deprov (pblico objetivo indirecto) una sntesis de los principales
resultados Simce logrados por los estudiantes, y al igual que en la conferencia de prensa nacional, se
entregaron resultados relacionados con el desarrollo personal y social de los estudiantes. Esta informacin

Captulo 11

155

es reportada segn regin, provincia y circunscripcin, en un formato que permite difundir los resultados
regionales a distintos niveles, y apoyar la gestin educacional en cada regin.
A cada Seremi se le entrega la presentacin en formato Power Point, la Conferencia de Prensa Nacional y
las Sntesis de Resultados por cada nivel correspondiente con los resultados obtenidos por los estudiantes
del pas segn distintas agregaciones (comuna, Deprov, provincia y regin).

iii.

Sntesis de Resultados

Las Sntesis de Resultados corresponden a documentos breves que entregan de manera resumida los
principales resultados nacionales de cada nivel y asignatura evaluada, segn regin, GSE, dependencia
administrativa y gnero.

11.2.5 Bases de datos


Simce promueve la utilizacin de sus bases de datos a travs de la pgina web de la Agencia, entregando
la informacin de archivos sobre evaluaciones aplicadas desde el ao 1998, en los que se precisa la
identificacin del establecimiento, sus caractersticas (nmero de establecimientos, GSE, por ejemplo)
y los puntajes promedio de cada disciplina evaluada, entre otros datos. Estos archivos son pblicos y
de fcil acceso.
Por otra parte, existen archivos que contienen datos ms completos, con datos de estudiantes, profesores
y apoderados, y que son de uso restringido para propsitos de investigacin. Estos archivos pueden ser
requeridos siempre y cuando se presente una propuesta de investigacin que se comprometa a respetar
las condiciones de uso establecidas por la Agencia de Calidad de la Educacin, las que incluyen el
cumplimiento de las normas ticas de investigacin, con especial cuidado de la confidencialidad de la
informacin. Cabe destacar que estas bases no entregan informacin referente a la individualizacin de
los estudiantes, apoderados y profesores, es decir, no se entregan datos como RUN ni nombres.
Las bases de datos de resultados 2013 se liberaron el da 15 de octubre de 2014. En esta oportunidad
se realiz una pequea modificacin en el tipo de archivo reportado, donde los resultados por
establecimientos se desagregaron en quince archivos regionales. Por otro lado, para tener un resguardo
del tipo de uso de esta informacin, se desarroll un formulario que debe ser llenado por el usuario que
requiere las bases, indicando datos personales y el uso de la informacin solicitada. Luego de llenado el
formulario, el usuario tiene acceso a las bases de datos pblicas.

11.2.6 Casos irregulares


Los resultados de las evaluaciones en sistemas de responsabilizacin (accountability) tienen
consecuencias para los establecimientos y profesores de los estudiantes evaluados. Este hecho genera
eventualmente irregularidades asociadas a la aplicacin de las evaluaciones que es necesario detectar.
De acuerdo a la informacin que entrega el sistema de monitoreo Simce, la Unidad de Operaciones de
Campo y Logstica se encarga de revisar individualmente cada situacin irregular acontecida durante el
periodo de la aplicacin, determinando si afecta la validez de los resultados. Adicionalmente, el equipo
de Anlisis Estadstico realiza revisiones para detectar posibles exclusiones, entendidas estas como la
posibilidad de inasistencia inducida hacia alumnos de la rendicin de la prueba Simce.
Por otra parte, aquellos establecimientos que presentan alguna anomala, ya sea por causas ajenas al
mismo, como por causas ajenas a la Agencia, llevan una nota de advertencia de que los resultados no son
representativos del desempeo de sus estudiantes (Tabla 11.5).

156

Informe Tcnico Simce 2013

Tabla 11.5 Marcas en Informe de Resultados Simce 2013


Casos
Establecimientos no empadronados
Establecimientos sin visita previa

Tipo de marca
Ninguna, se enva carta al director del
establecimiento lamentando lo ocurrido.

Smbolo
Ninguno

Retraso en hora de inicio


Retraso llegada material (ms de 1 hora
cronolgica)
Retraso llegada examinador (ms de 1 hora
cronolgica)
Errores en la administracin de la prueba
Alteracin cronograma aplicacin

Por causas ajenas al establecimiento


educacional, los resultados no son
representativos del desempeo de sus
estudiantes.

**

Baja asistencia (asistencia menor al 60%)

Por causas ajenas a la Agencia de Calidad


de la Educacin, los resultados no son
representativos del desempeo de los
estudiantes del establecimiento.

Baja matrcula (uno o ningn estudiante con


resultados)

Por causas ajenas al establecimiento, no es


posible reportar sus resultados.

Puntaje y Estndar de Aprendizaje, asignatura


no evaluada por prueba extendida

La aplicacin de la prueba extendida no


permite evaluar esta asignatura.

<

Estndares de Aprendizajes para alumnos


evaluados con puntaje entre [1,10]

La cantidad de estudiantes evaluados del


establecimiento no permite reportar esta
informacin.

No se respetan tiempos mnimos


Anulacin indebida de pruebas
Problemas con el material
Problemas compaginacin
Prdida de material
Mal desempeo examinador
Otros
Movilizaciones/cambio de local

Irregularidades
Exclusin alumnos (deteccin)
Exclusin alumnos (denuncia)

Ninguna, eventualmente se enva una denuncia


a la Superintendencia de Educacin.

Ninguno

Copia

Captulo 11

157

[continuacin]
Casos

Tipo de marca

Smbolo

No es posible reportar esta informacin, porque


en la evaluacin anterior no hubo resultados o
estos no permiten una comparacin vlida.

Marca por casos anmalos en la medicin actual

No es posible reportar esta informacin, porque


en la evaluacin actual no hubo resultados o
estos no permiten una comparacin vlida.

Menos de seis estudiantes evaluados en la


medicin anterior y/o en la medicin actual.

No es posible comparar resultados, porque


la cantidad de estudiantes evaluados es
insuficiente.

Problemas de comparabilidad
Marca por casos anmalos en la medicin anterior
Establecimiento sin resultados en la medicin
anterior (en blanco).
Marca por casos anmalos en la medicin anterior
y en la medicin actual

158

Informe Tcnico Simce 2013

Listado de
Referencias
Adam, C. Klissouras, M., Ravazollo, R., Renson, W., y Tuxworth, W. (1988). Eurofit: European test of Physical
Fitness. Roma: Council of Europe: Comitee for the Development of Sport.
AERA, APA, NCME. (1999). Standards for Educational and Psychological Testing. Washington.
Agencia de Calidad de la Educacin. (2012). Informe Tcnico Simce 2012. Santiago, Chile: autor.
Agencia de Calidad de la Educacin. (2012b). Plan de levantamiento de pruebas experimentales Simce
2013. Santiago, Chile: [Documento interno de trabajo].
Agencia de Calidad de la Educacin. (2013a). Metodologa de Construccin de Grupos Socioeconmicos
Simce 2013. Santiago, Chile: autor.
Agencia de Calidad de la Educacin. (2013b). Plan de Ensamblaje de Pruebas Definitivas. Santiago, Chile
[Documento de trabajo].
Agencia de Calidad de la Educacin. (2013c). Predictibilidad de las pruebas experimentales Simce.
Santiago, Chile: [Documento interno de trabajo].
Agencia de Calidad de la Educacin. (2014a). Plan de Ensamblaje de Pruebas Definitivas 2015.
Documento de trabajo interno a la Divisin de Evaluacin de Logros del Aprendizaje. Santiago,
Chile: [Documento interno de trabajo].
Agencia de Calidad de la Educacin. (2014b). Presentacin de la Conferencia de Prensa Simce 2013.
Obtenido de: https://s3.amazonaws.com/archivos.agenciaeducacion.cl/resultados-simce-2013/
Conferencia_Nacional_ResultadosSimce2013.pdf, ltima consulta enero 2015.
Arnaiz, P., Acevedo, M., Daz, C., Bancalari, R., Barja, S., Aglony, M., Cavada, G. y Garca, H. (2010). Razn cintura
estatura como predictor de riesgo cardiometablico en nios. Revista Chilena de Cardiologa,
29(3), 281-288.
Arnold, R., Barnaby, J., Bieniarz, I., Carranza, M., Fuster, J. y Hernandez, J. (1986). La Educacin Fsica en las
enseanzas medias. Teora y prctica. Barcelona: Paidotribo.
Aznar, S. y Webster, T. (2006). Actividad fsica y salud en la infancia y la adolescencia. Gua para todas las
personas que participan en su educacin. Madrid: Ministerio de Educacin y Ciencia.
Bacha, N. (2001). Writing evaluation: what can analytic versus holistic essay scoring tell us? System, 29,
3, 371-383.
Bock, R. y Mislevy, R. (1982). Adaptative EAP estimation of ability in a microcomputer environment.
Applied Psychological Measurement, 6, 431-444.
Caspersen, C., Powell, K. y Christenson, G. (1985). Physical-Activity, Excercise, and Physical Fitness:
Definitions and distinctions for health related and research. Public Health Reports 100 (2), 126-131.
Cizek, G. (Ed.). (2001). Setting performance standards: concepts, methods, and perspectives. Mahwah, NJ:
Lawrence Erlbaum Associates.
Clarke, H. (1971). Basic understanding of physical fitness. Physical Fitness Research Digest. Washington
DC: Presidents Council on Physical Fitness and Sport.
Cook, T. y Godard, S. (2007). What counts and should count as evidence? En Evidence in Education:
Linking Research and Policy. Paris: OECD.
Crocker, L. y Algina, J. (1996). Introduction to Classical and Modern test theory. Nueva York: Harcourt Brace
Jovanovich College Publishers.
De la Cruz, E. y Pino, J. (2009). Condicin Fsica y Salud. Facultad de Ciencias del Deporte,
Universidad de Murcia. Obtenido de: http://digitum.um.es/xmlui/bitstream/10201/6621/1/
CONDICI%C3%93N%20F%C3%8DSICA%20Y%20SALUD.pdf, ltima consulta mayo 2014.

DeVellis, F. (2012). Scale development: theory and applications, tercera edicin. Thousand Oaks, CA: Sage
Publications.
Downing, S. y Haladyna, T. (Eds.) (2006). Handbook of Test Development. Mahwah, NJ: Lawrence Erlbaum
Associates.
Elliot, J. y Thurlow, M. (2006). Improving test performance of students with disabilities on district and
state assessments, segunda edicin.
Gatica, P. (2000). La condicin fsica en la poblacin escolar de la regin del Maule-Chile. Talca, Chile:
Universidad Catlica del Maule.
Haladyna, T. M. y Rodrguez, M. C. (2013). Developing and Validating Items. Nueva York: Routledge.
Hanna, E. (2005). Inclusive Design for Maximum Accessibility: A Practical Approach to Uninversal
Design. Obtenido de: http://images.pearsonassessments.com/images/tmrs/tmrs_rg/RR_05_04.
pdf?WTmc_id=TMRS_Inclusive_Design_for_Maximum_Accessibility, ltima consulta mayo 2014.
ISTAT, FSO, INE, ZUMA. (2006). Handbook of Recommended Practices for Questionnaire Development and
Testing in the European Statistical System. S.d: European Commission Grant Agreement.
Lamela, M. (2009). Valoracin de la condicin fsica relacionada con la salud en el mbito educativo. Obtenido
de: http://centros.edu.xunta.es/cfr/lugo/files/valoraci%C3%B3ncondici%B3nf%C3%ADsica.pdf,
ltima consulta junio 2012.
Ley N. 20529. (2011). Establece el Sistema Nacional de Aseguramineto de la Calidad de la Educacin
Parvularia, Bsica y Media y su Fiscalizacin. Diario Oficial de la Repblica de Chile. 27 de agosto
de 2011.
Lord, F. y Novick, M. (2008). Statistical theories of mental test scores. Reading, MA: Addison-Wesley.
Marchant, T., Recart, I., Cuadrado, B. y Sanhueza, R. (2009). Pruebas de Dominio Lector Fundacin
Educacional Arauco para Alumnos de Enseanza Bsica. Santiago: Ediciones Universidad Catlica
de Chile.
Martin, D. (2008). Psicologa Experimental. Cmo hacer experimentos en psicologa, sptima edicin.
Mxico D.F.: Cengage Learning Editores. .
Martnez, A., Del Valle, M. y Cecchiani, J. (2003). Asociacin de la Condicin Fsica Saludable y los
Indicadores del Estado de Salud (I). Archivos de Medicina del Deporte 20 (96), 339-345.
Martnez, M. (2005). Psicometra: Teora de los Test Psicolgicos y Educativos. Madrid: Editorial Sntesis,
SA. Obtenido de: http://www.ssicnetral.com/irt/, ltima consulta agosto 2013.
Mide UC (2008). Resultados Aplicacin pre piloto tems Simce 4 bsico adaptados para estudiantes con
discapacidad auditiva o visual. Santiago, Chile: Universidad Catlica de Chile.
Ministerio de Educacin de Chile (2002). Informe al Consejo Superior de Educacin sobre la Medicin de
4 bsico de acuerdo al nuevo marco de OFCMO (Decreto supremo N. 240). Santiago, Chile: autor.
Ministerio de Educacin de Chile. (2009). Objetivos Fundamentales y Contenidos Mnimos Obligatorios
de la Educacin Bsica y Media. Actualizacin 2009. Santiago, Chile: autor.
Ministerio de Educacin de Chile. (2011) Plan de Evaluaciones Nacionales e Internacionales. Santiago,
Chile: autor.
Ministerio de Educacin de Chile. (2012b). Especificaciones para la Elaboracin de tems Lectura. Santiago,
Chile: [Documento interno].
Ministerio de Educacin. (2012a). Bases Curriculares 2012: Educacin Bsica. Santiago: Gobierno de Chile.
Ministerio de Educacin de Chile. (2012c). Especificaciones para la Elaboracin de tems Matemtica.
Santiago, Chile: [Documento interno].
Ministerio de Educacin de Chile. (2012d). Especificaciones para la Elaboracin de tems Ciencias
Naturales. Santiago, Chile: [Documento interno].
Ministerio de Educacin de Chile. (2013). Estndares de Aprendizaje 2013. Santiago, Chile: autor.
Ministerio de Educacin de Chile. (2014). Fundamentos. Otros Indicadores de Calidad Educativa. Santiago,
Chile: autor.
160

Informe Tcnico Simce 2013

Ministerio de Educacin de Chile. (2014).Otros Indicadores de Calidad Educativa. Santiago, Chile: autor.
Montecinos, R. (2000). La aptitud fsica en la poblacin chilena (Proyecto FONDECYT N. 1970061). Talca,
Chile: Universidad Catlica del Maule, Facultad de Ciencias de la Educacin.
Montecinos, R. y Gatica, P. (2005). Condicin Fsica de la poblacin escolar chilena femenina de 10 a 18
aos de edad. Revista Archivos de la Sociedad Chilena de Medicina del Deporte, 50(4), 125-140.
Montecinos, R., Gatica, P., Trujillo, H., Vargas, R., Herrera, M. y Jirn, O. (2005). Test para evaluar la condicin
fsica en escolares chilenos. Revista Archivos de la Sociedad Chilena de Medicina del Deporte,
50(1), 9-24.
Nogueira, J. (2002). Valoracin de la condicin fsica en nios de 11-12 aos con distinto nivel socioeconmico. Revista Internacional de Medicina y Ciencias de la Actividad Fsica y el Deporte, 2 (6),
177-188. Obtenido de: http://cdeprote.rediris.es/revista/revista6/valoracion.htm, ltima consulta
diciembre 2014.
Ochata, E., Rosa, A., Fernndez, E. y Huertas, J. (1988). Lectura braille y procesamiento de la informacin
tctil. Coleccin Rehabilitacin, 29. Madrid: INSERSO.
Ofqual (Office of Qualifications and Examinations Regulation). (2009). Estimating the realiability of
composite scores. Obtenido de: http://dera.ioe.ac.uk/1060/1/2010-02-01-composite-reliability.
pdf, ltima consulta septiembre 2014.
Paris, S. G. y Stahl, S. A. (2005). Childrens Reading Comprehension and Assessment. Mahwah, NJ: Lawrence
Erlbaum Associates.
Pate, R. (1983). A new definition of youth fitness. The Physician and Sport Medicine 11, 77-95.
Persky, Hilary: Writing Assessment in the Context of the National Assessment of Educational Progress.
En Elliot, N., Perelman, L. C., y White, E. M. (2012). Writing assessment in the 21st century: Essays in
honor of Edward M. White. Nueva York: Hampton Press.
Ravela, P. (2006). Grupo de Trabajo sobre Estndares y Evaluacin (GTEE). Para comprender las evaluaciones
educativas. Fichas Didcticas. Santiago, Chile: PREAL, Programa de Promocin de la Reforma
Educativa en Amrica Latina y el Caribe.
Redondo, C., Gonzlez, M., Moreno, L., y Garca, M. (Eds.) (2010). Actividad Fsica, Deporte, Ejercicio y Salud
en Nios y Adolescentes. Madrid: Asociacin Espaola de Pediatra.
Rijlaarsdam, G. y Van den Bergh, H (2006). Writing process theory: a functional dynamic approach. En
MacArthur, C. A., Graham, S., y Fitzgerald, J. (2006). Handbook of writing research. Nueva York:
Guilford Press.
Swain, S. y Le Mathieu. (2012). [Citados] En Elliot, N., Perelman, L. C. y White, E. M. (2012). Writing
assessment in the 21st century: Essays in honor of Edward M. White. Nueva York: Hampton Press.
Thompson, S. y Thurlow, M. (2002). Universally designed assessments: Better tests for everyone!
Minneapolis: MN: University of Minnesota, National Center on Educational Outcomes. Obtenido
de: http://www.cehd.umn.edu/NCEO/onlinepubs/Policy14.htm, ltima consulta junio 2014.
Thompson, S., Morse, A. B., Sharpe, M. y Hall, S. (2005). Accomodations Manual: How to select, administer,
and evaluate use of accomodations for instructions and assessment of students with disabilities.
The Council of Chief State School Officers. Obtenido de: http://www.ccsso.org/Documents/2005/
Accommodations_Manual_How_2005.pdf, ltima consulta junio 2014.
Thurlow, M., Elliot, J. y Ysseldyke, J. (2002). Testing Students with Disabilities. California: Ed. Corwin Press.
White, Edward: Holisticism. En Huot, B. A. y ONeill, P. (2009). Assessing writing: A critical sourcebook.
Editado por Brian Huot y Peggy ONeill. Boston: Bedford/St. Martins.

Listado de Referencias

161

162

Informe Tcnico Simce 2013

Anexos
Captulo 1

163

164

Informe Tcnico Simce 2013

Anexo A
Ejemplo de rbrica de correccin de
preguntas abiertas
Figura A.1 tem

165

Pauta de correccin
Los ejemplos corresponden a respuestas reales de los alumnos. Se mantienen los errores ortogrficos, y
se marcan con cursiva para distinguirlos.
Tabla A.1 Ejemplos de pautas de correccin
Cdigo

Descripcin
Respuestas correctas
Marca S o NO y justifica su respuesta refirindose a la instruccin de asistir a
la fiesta disfrazado de personaje de cuento. O bien, marca S o NO y justifica su
respuesta refirindose a que el disfraz de futbolista es de personaje de cuento o
que el futbolista no es un personaje de cuento. Ejemplos:

21

- No, por que Pamela el dijo que se disfrasara de un personaje de un quento.


- No, por que paloma le escribi en la carta ven disfrasado de un personaje de
cuento.
- No, porque tenia que ir disfrazado de personaje de cuento.
- No, Pamela en la invitacin dijo que balla disfrazado de un personaje de cuento.
- No, A manuel le pidieron que balla disfrado de un cuento.
- No, disfrasarse de futbolista no es de un cuento.
- No, Porque tenia que ser un perronaje de cuento.
- No, esta mal por que no es de un personaje.
- S. Es un personaje que es bonito en el cuento es muy bonito y tambin es un
personaje.
- S, porque puede haber un cuento que sea de futbolistas.
- S, porque era de cuento.
Respuestas incorrectas
Marca S y justifica su respuesta con la idea de que el nio fue disfrazado, no
importa de qu. O bien, marca NO y justifica fundamentando que el traje de
futbolista no es un disfraz.

71

- S, porque no importa el disfraz solo ay que divertirse.


- S porque fue disfrazado.
- S porque puede elegir cualquier disfraz.
- No. Porque no fue disfrazado de nada.
Marca S o NO justificando por qu Manuel actu de esa manera. Ejemplo:

72

73

166

- S, porque l es un hombre, le gusta.


- Porque era su amiga.
- No porque no era un partido y mas encima ese traje era de grande y no
para chico.
Marca S o NO y describe o comenta la imagen, el disfraz o la fiesta.
- Si cuando ay un cumpleaos los nios se visten lindos.
- Si, porque en los cumpleaos los nios se disfrazan.
- S, para que no se aburra y se divierta y paraque despus jueguen y coma
muchos dulces.

Informe Tcnico Simce 2013

[continuacin]
Cdigo

Descripcin
Respuestas incorrectas
Otras respuestas incorrectas (tautolgicas, vagas, incoherentes, contradictorias,
suposiciones respecto del personaje que no se relacionan con la informacin del
estmulo [texto e imagen], apreciaciones personales, etc.).

75

- No, porque no.


- S, porque no le poda mentir a su amiga.
- S, parajugar en el parque.
- No, fue de vampiro.
- A mi tambin me gusta el futbol y a casi todos les gusta el futbol.
- No, por que no respondio a la Carta.
Otras respuestas

98

Respuestas borradas, tachadas, con dibujos, sin justificacin o ilegibles.

99

Respuestas en blanco.

Anexo A

167

Anexo B
Rbricas utilizadas para la correccin
de preguntas abiertas de la prueba
Escritura 2013
Tabla B.1 Pauta de correccin para textos escritos con el propsito de compartir impresiones sobre
lecturas
Criterio de
evaluacin

Propsito

Desarrollo de
ideas

Nivel 4

Nivel 3

Nivel 2

Nivel 1

El texto responde a la
tarea solicitada, ya que
explicita una postura.

El texto responde
medianamente a la tarea
solicitada, ya que se
infiere con facilidad una
postura, y el texto, en
gran parte, est referido
a ella.

El texto responde de manera


emergente a la tarea solicitada,
ya que se revela la intencin de
opinar, pero no se puede deducir
una postura, o bien menciona de
manera tangencial su postura,
pero no es lo central del texto.

El texto no responde a
la tarea solicitada, ya
que no cumple con el
propsito.

En el texto se explicita
un punto de vista
que est sustentado
(desarrollado) por al
menos una razn y un
ejemplo, una alusin a
experiencias previas o
una comparacin.

En el texto se explicita o
se deduce con claridad un
punto de vista que est
sustentado (desarrollado)
por al menos una razn o
un ejemplo.

El texto revela una intencin


por opinar, pero solo presenta
una opinin y no la sustenta o la
razn es tautolgica,
o bien, no se puede deducir
un punto de vista porque da
un conjunto de afirmaciones
desvinculadas unas de otras.

De la lectura del texto


no es posible inferir
un punto de vista ni
razones, o es una copia
textual del estmulo.

El texto se comprende
fcilmente, dado que,
por ejemplo:

El texto se comprende;
sin embargo, es necesario
detenerse en algunas
ocasiones dado que, por
ejemplo:

El texto se comprende con


dificultad y es necesario releer
muchas veces, dado que, por
ejemplo:

El texto no se
comprende o se
comprende muy poco,
dado que, por ejemplo:

El texto es autnomo,
pues no depende ni del
contexto ni del estmulo
para ser comprendido,
o bien,

El texto es autnomo,
pero el lector debe
complementar con
informacin que no
es relevante para la
comprensin global, o
bien,

El texto no es autnomo, pues


una gran parte de la informacin
necesaria para la comprensin
del mismo no est escrita, sino
que el lector debe incorporarla,
o bien,

El texto no es
autnomo porque la
informacin entregada
es insuficiente para que
el lector la interprete,
o bien,

Presenta una
organizacin lgica de
las ideas, o bien,

Presenta una organizacin


lgica de las ideas, a
excepcin de algunos
casos aislados que no
afectan la comprensin
global, o bien,

Presenta ideas a partir de las


cuales hay que inferir la lgica
que las agrupa, ya que se
asemejan a un listado, o bien,

Presenta ideas de las


cuales no se puede
inferir cul es la lgica
que las relaciona, o
bien,

Todas las ideas y


ejemplos se comprenden
y estn enfocados en el
tema.

La mayor parte de las


ideas y ejemplos se
comprenden y estn
enfocados en el tema.

Presenta ideas y/o ejemplos,


con digresiones, partes que no
se comprenden o elementos
inconexos que dificultan la
comprensin.

Presenta ideas y/o


descripciones y/o
ejemplos que no se
relacionan con el tema.

Coherencia

169

[continuacin]
Criterio de
evaluacin

Nivel 4

Nivel 3

Nivel 2

Nivel 1

Cohesin

El texto incorpora recursos


variados de cohesin
(conectores o marcadores
discursivos, y recursos
de correferencia) que
enriquecen el texto.

El texto incorpora recursos


de cohesin (conectores o
marcadores discursivos, y
recursos de correferencia)
que pueden ser repetitivos o
con algunos errores aislados.

El texto incorpora escasos recursos


de cohesin o presenta varios
errores en el uso de conectores o
recursos de correferencia.

No se evidencian recursos
de cohesin o solo se
emplea repetitivamente
y de manera exclusiva el
conector y.

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos bien utilizados al
interior del texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto solo presenta


mayscula al inicio del texto y
punto final.

Convenciones
ortogrficas

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos y comas bien
utilizados al interior
del texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto presenta solo


mayscula al inicio
o punto final, o bien
no presenta uso de la
puntuacin.

170

Informe Tcnico Simce 2013

Juicio global de textos para compartir impresiones sobre lecturas


Nivel 4: Los textos en este rango reflejan un excelente logro de las habilidades de escritura necesarias

para responder a la tarea. Este juicio se asigna a aquellos textos que cumplen con la tarea solicitada en la
consigna y se comprenden fcilmente; adems, estos textos presentan ideas desarrolladas mediante una
razn y un ejemplo, organizadas de forma lgica, enfocadas en el tema y relacionadas mediante variados
recursos de cohesin.

Nivel 3: Los textos en este rango reflejan un buen logro de las habilidades de escritura necesarias
para responder a la tarea. Este juicio se asigna a aquellos textos que se comprenden, aunque puede
ser necesario releer o detenerse en algunas secciones por problemas de coherencia local, pero que no
afectan la comprensin global. Las ideas estn desarrolladas mediante una razn o un ejemplo. Adems,
la mayor parte de las ideas de estos textos se encuentran enfocadas en el tema, y se relacionan mediante
recursos de cohesin, aunque pueden ser repetitivos o utilizados errneamente en casos aislados.

Nivel 2: Los textos en este rango reflejan habilidades en desarrollo al responder a la tarea de escritura.
Este juicio se asigna a aquellos textos que son muy breves y constituyen un esbozo; o solo plantean su
postura, o se componen solamente de un ejemplo; o aquellos que se comprenden con dificultad y es
necesario releer detenidamente, dado que tiene frecuentes problemas de cohesin o coherencia. Estos
textos pueden presentar digresiones o elementos inconexos, e incorporar escasos recursos de cohesin.

Nivel 1: Los textos en este rango demuestran habilidades insuficientes al responder a la tarea de
escritura. Estos textos no se comprenden o se comprenden muy poco, dado que la informacin entregada
es insuficiente para que el lector la interprete; o bien, porque presenta ideas de las cuales no se puede
inferir la lgica que las relaciona; o bien, porque la mayor parte de sus ideas no se relacionan con el tema;
o bien, es una copia textual del estmulo1.

Otros cdigos (no evaluables):


Cdigo 98: Textos ilegibles. Copia o parafraseo de la consigna (solo la instruccin para llevar a cabo la
tarea). Espacio para responder con negativas o marcas que evidencian una falta de intencin de responder
(dibujos, insultos, etc.).

Cdigo 99: Espacio para responder en blanco.

1 El estmulo es el texto o imagen que puede complementar la consigna (instruccin para el estudiante).

Anexo B

171

Tabla B.2 Pauta de correccin para textos escritos con el propsito de narrar
Criterio de
evaluacin

Propsito

Nivel 4
El texto responde a la
tarea solicitada, ya que
narra una experiencia
relacionada con dicha
tarea.

172

Nivel 2

Nivel 1

El texto responde
medianamente a la tarea
solicitada, ya que narra
una experiencia que no se
relaciona directamente con
dicha tarea.

El texto responde de
manera emergente a la
tarea solicitada, ya que
esboza una experiencia.

El texto no responde a la
tarea solicitada.

El texto presenta una


secuencia de eventos
con un desarrollo
irregular (por ejemplo,
desarrolla acabadamente
la presentacin de un
personaje, pero hay un final
abrupto o falta el final) e
incorpora vocabulario que,
aun cuando no enriquezca
la descripcin, permite
que el lector imagine la
experiencia relatada.

El texto presenta una


secuencia de eventos
sin mayor desarrollo
(se puede asemejar a
una enumeracin), no
describe los personajes,
los eventos o el lugar
donde ocurre, e incorpora
vocabulario muy general
o repetitivo que no aporta
a la recreacin de la
experiencia.

El texto plantea una


situacin pero no
incorpora eventos que
la desarrollen o solo
menciona un evento.
El vocabulario es muy
general y repetitivo.

El texto se comprende
fcilmente, dado que,
por ejemplo:

El texto se comprende;
sin embargo, es necesario
detenerse en algunas
ocasiones, dado que, por
ejemplo:

El texto se comprende
con dificultad y es
necesario releer muchas
veces, dado que, por
ejemplo:

El texto no se
comprende o se
comprende muy poco,
dado que, por ejemplo:

El texto es autnomo,
pues no depende ni del
contexto ni del estmulo
para ser comprendido,
o bien,

El texto es autnomo,
pero el lector debe
complementar con
informacin que no
es relevante para la
comprensin global, o bien,

El texto no es autnomo,
pues una gran parte de
la informacin necesaria
para la comprensin del
mismo no est escrita,
sino que el lector debe
incorporarla, o bien,

El texto no es
autnomo porque la
informacin entregada
es insuficiente para
que el lector la
interprete, o bien,

Presenta una
organizacin lgica de
las ideas, o bien,

Presenta una organizacin


lgica de las ideas, a
excepcin de algunos
casos aislados que no
afectan la comprensin
global, o bien,

Presenta ideas a partir


de las cuales hay que
inferir la lgica que
las agrupa, ya que se
asemejan a un listado,
o bien,

Presenta ideas de las


cuales no se puede
inferir cul es la lgica
que las relaciona, o
bien,

Todas las ideas


y ejemplos se
comprenden y estn
enfocados en el tema.

La mayor parte de las ideas


y ejemplos se comprenden
y estn enfocados en el
tema.

Presenta ideas
y/o ejemplos, con
digresiones, partes que
no se comprenden o
elementos inconexos
que dificultan la
comprensin.

Presenta ideas y/o


descripciones y/o
ejemplos que no se
relacionan con el tema.

El texto presenta una


secuencia de eventos
desarrollados, describe
los personajes, eventos
o el lugar donde ocurren,
e incorpora vocabulario
Desarrollo de ideas
variado e ilustrativo
y vocabulario
que logra que el lector
imagine la experiencia
relatada de manera
detallada.

Coherencia

Nivel 3

Informe Tcnico Simce 2013

[continuacin]
Criterio de
evaluacin

Nivel 4

Nivel 3

Nivel 2

Nivel 1

Cohesin

El texto incorpora
recursos variados de
cohesin (conectores
o marcadores
discursivos, y recursos
de correferencia) que
enriquecen el texto.

El texto incorpora recursos


de cohesin (conectores o
marcadores discursivos, y
recursos de correferencia)
que pueden ser repetitivos
o con algunos errores
aislados.

El texto incorpora
escasos recursos de
cohesin o presenta
varios errores en el
uso de conectores
o recursos de
correferencia.

No se evidencian
recursos de cohesin
o solo se emplea
repetitivamente y de
manera exclusiva el
conector y.

El texto presenta
mayscula al inicio del
texto y punto final, adems
de algunos puntos bien
utilizados al interior del
texto.
*Es posible encontrar
textos de este nivel que
no presenten uso de
mayscula inicial o punto
final.

El texto solo presenta


mayscula al inicio del
texto y punto final.

Convenciones
ortogrficas
(puntual)

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos y comas bien
utilizados al interior del
texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto presenta solo


mayscula al inicio
o punto final, o bien
no presenta uso de la
puntuacin.

Anexo B

173

Juicio global texto para narrar


Nivel 4: Los textos en este rango reflejan un excelente logro de las habilidades de escritura necesarias

para responder a la tarea. Este juicio se asigna a aquellos textos que cumplen con la tarea solicitada
en la consigna y se comprenden fcilmente, dado que presentan autonoma respecto del estmulo o
contexto que motiv la escritura; adems, presentan un vocabulario que permite imaginar con detalles
la experiencia y una secuencia de ideas desarrolladas, organizadas de forma lgica, enfocadas en el tema
y relacionadas mediante variados recursos de cohesin.

Nivel 3: Los textos en este rango reflejan un buen logro de las habilidades de escritura necesarias
para responder a la tarea. Este juicio se asigna a aquellos textos que se comprenden, aunque puede
ser necesario releer o detenerse en algunas secciones por problemas de coherencia local, pero que
no afectan la comprensin global. Las ideas pueden estar desarrolladas de manera irregular, aunque
siempre se observa algn prrafo bien desarrollado. Adems, la mayor parte de las ideas de estos textos
se encuentran enfocadas en el tema, y se relacionan mediante recursos de cohesin, aunque pueden ser
repetitivos o utilizados errneamente en casos aislados.

Nivel 2: Los textos en este rango reflejan habilidades en desarrollo al responder a la tarea de escritura.

Este juicio se asigna a aquellos textos que son muy breves y la tarea se cumple de manera similar a un
esbozo o enumeracin; o aquellos que se comprenden con dificultad y es necesario releer detenidamente,
dado que tiene frecuentes problemas de coherencia local. Estos textos pueden presentar algunas
digresiones o elementos inconexos, e incorporar escasos recursos de cohesin.

Nivel 1: Los textos en este rango demuestran habilidades insuficientes al responder a la tarea de
escritura. Este juicio se asigna a aquellos textos que no se comprenden o se comprenden muy poco, dado
que la informacin entregada es insuficiente para que el lector la interprete, o bien, porque presenta
ideas de las cuales no se puede inferir la lgica que las relaciona.

Otros cdigos (no evaluables):


Cdigo 98: Textos ilegibles. Copia o parafraseo de la consigna (solo la instruccin para llevar a cabo la
tarea). Espacio para responder con negativas o marcas que evidencian una falta de intencin de responder
(dibujos, insultos, etc.).

Cdigo 99: Espacio para responder en blanco.

174

Informe Tcnico Simce 2013

Tabla B.3 Pauta de correccin para textos escritos con el propsito de informar con infografa
Criterio de
evaluacin

Propsito

Integracin de la
informacin

Coherencia

Nivel 4

Nivel 3

El texto responde a la
tarea solicitada, ya que
informa sobre el tema
propuesto.

El texto responde
medianamente a la
tarea solicitada, ya que
informa parcialmente
sobre el tema propuesto.

El texto responde de
manera emergente a la
tarea solicitada, ya que
en algunas ocasiones
informa, pero luego
realiza un giro hacia la
narracin o la opinin.

El texto no responde a
la tarea solicitada.

El texto evidencia un
desarrollo breve de
una o varias ideas, una
organizacin propia
de la informacin
claramente distinguible,
presenta relaciones
hechas a partir de la
informacin leda e
incorpora transiciones.
Es posible incorporar
informacin
parafraseada o copia
textual en algunas
secciones.

El texto evidencia un
desarrollo incipiente de
una o varias ideas, una
organizacin propia de la
informacin e incorpora
transiciones.

El texto menciona las


ideas sin desarrollarlas
y presenta un esbozo
de organizacin de
la informacin. No
incorpora relaciones
lgicas y solo se aprecian
transiciones bsicas para
unir las ideas (se puede
asemejar a un listado).
Es posible incorporar
informacin parafraseada
o copia textual en
algunas secciones.

El texto es una copia


textual del estmulo
o reproduce palabras
o frases breves del
estmulo o solo hace
una presentacin del
tema a.

El texto se comprende
fcilmente, dado que,
por ejemplo:

El texto se comprende;
sin embargo, es
necesario detenerse en
algunas ocasiones, dado
que, por ejemplo:

El texto se comprende
con dificultad y es
necesario releer muchas
veces, dado que, por
ejemplo:

El texto no se
comprende o se
comprende muy poco,
dado que, por ejemplo:

El texto es autnomo,
pues no depende ni del
contexto ni del estmulo
para ser comprendido,
o bien,

El texto es autnomo,
pero el lector debe
complementar con
informacin que no
es relevante para la
comprensin global, o
bien,

El texto no es autnomo,
pues una gran parte de
la informacin necesaria
para la comprensin del
mismo no est escrita,
sino que el lector debe
incorporarla, o bien,

El texto no es
autnomo porque la
informacin entregada
es insuficiente para
que el lector la
interprete, o bien,

Presenta una
organizacin lgica de
las ideas, o bien,

Presenta una
organizacin lgica de
las ideas, a excepcin
de algunos casos
aislados que no afectan
la comprensin global,
o bien,

Presenta ideas a partir de


las cuales hay que inferir
la lgica que las agrupa,
ya que se asemejan a un
listado, o bien,

Presenta ideas de las


cuales no se puede
inferir cul es la lgica
que las relaciona, o
bien,

Todas las ideas


y ejemplos se
comprenden y estn
enfocados en el tema.

La mayor parte de las


ideas y ejemplos se
comprenden y estn
enfocados en el tema.

Presenta ideas
y/o ejemplos, con
digresiones, partes que
no se comprenden o
elementos inconexos
que dificultan la
comprensin.

Presenta ideas y/o


descripciones y/o
ejemplos que no se
relacionan con el
tema.

Es posible incorporar
informacin
parafraseada o copia
textual en algunas
secciones.

Anexo B

Nivel 2

Nivel 1

175

[continuacin]
Criterio de
evaluacin

Cohesin

Convenciones
ortogrficas
(puntual)

Nota:

176

Nivel 4

Nivel 3

Nivel 2

El texto incorpora
recursos variados de
cohesin (conectores
o marcadores
discursivos, y recursos
de correferencia) que
enriquecen el texto.

El texto incorpora
recursos de cohesin
(conectores o
marcadores discursivos,
y recursos de
correferencia) que
pueden ser repetitivos
o con algunos errores
aislados.

El texto incorpora
escasos recursos de
cohesin o presenta
varios errores en el uso
de conectores o recursos
de correferencia.

No se evidencian
recursos de cohesin
o solo se emplea
repetitivamente y de
manera exclusiva el
conector y.

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos y comas bien
utilizados al interior del
texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos bien utilizados al
interior del texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto solo presenta


mayscula al inicio del
texto y punto final.

El texto presenta solo


mayscula al inicio
o punto final, o bien
no presenta uso de la
puntuacin.

Si el texto es una copia del estmulo, no se debe evaluar el resto de los criterios.

Informe Tcnico Simce 2013

Nivel 1

Juicio global para informar a partir de una infografa


Nivel 4: Los textos en este rango reflejan un excelente logro de las habilidades de escritura necesarias

para responder a la tarea. Este juicio se asigna a aquellos textos que cumplen con la tarea solicitada en
la consigna y se comprenden fcilmente. Se distinguen claramente del estmulo, y presentan un alto
grado de autonoma respecto del estmulo o contexto que motiv la escritura. Adems, presentan ideas
brevemente desarrolladas, organizadas de forma lgica, enfocadas en el tema y relacionadas mediante
recursos de cohesin.
Es posible encontrar informacin parafraseada en ms de una seccin, o copia textual en algunas
secciones del texto.

Nivel 3: Los textos en este rango reflejan un buen logro de las habilidades de escritura necesarias
para responder a la tarea. Este juicio se asigna a aquellos textos que se comprenden, aunque puede
ser necesario releer o detenerse en algunas secciones por problemas de coherencia local, pero que no
afectan la comprensin global. Las ideas estn unidas por transiciones que las cohesionan y desarrollan
de manera sucinta (desarrollo incipiente de las ideas). Adems, la mayor parte de las ideas de estos textos
se encuentran enfocadas en el tema, y se relacionan mediante recursos de cohesin, aunque pueden ser
repetitivos o utilizados errneamente en casos aislados.
Es posible encontrar informacin parafraseada, o copia textual en ms de una seccin del texto.

Nivel 2: Los textos en este rango reflejan habilidades en desarrollo al responder a la tarea de escritura.

Este juicio se asigna a aquellos textos que son muy breves y la tarea se cumple de manera similar a un
esbozo o enumeracin; o aquellos que se comprenden con dificultad y es necesario releer detenidamente,
dado que tienen frecuentes problemas de coherencia o cohesin). Estos textos pueden presentar
digresiones o elementos inconexos.
Es posible encontrar informacin parafraseada, o copia textual en ms de alguna seccin del texto.
O bien, en el caso de trabajar con textos que incorporan un estmulo con infografas, puede ser un
texto de fcil lectura, pero que presenta las ideas en un listado o enumeracin de elementos copiados
textualmente del estmulo y con muy pocos elementos que lo diferencian del estmulo.

Nivel 1: Los textos en este rango demuestran habilidades insuficientes al responder a la tarea

de escritura. Estos textos no se comprenden o se comprenden muy poco, por ejemplo, dado que la
informacin entregada es insuficiente para que el lector la interprete, o bien, porque presenta ideas
de las cuales no se puede inferir la lgica que las relaciona, o bien, porque la mayor parte de sus ideas
no se relacionan con el tema. Adems, el texto puede presentar abundantes errores en el uso de las
convenciones ortogrficas o, por su brevedad, no se puede considerar este aspecto.
O bien, es una copia textual del estmulo2.

Otros cdigos (no evaluables):


Cdigo 98: Textos ilegibles. Copia o parafraseo de la consigna (solo la instruccin para llevar a cabo la
tarea). Espacio para responder con negativas o marcas que evidencian una falta de intencin de responder
(dibujos, insultos, etc.).

Cdigo 99: Espacio para responder en blanco.

El estmulo es el texto o imagen que puede complementar la consigna (instruccin para el estudiante).

Anexo B

177

Tabla B.4 Pauta de correccin para textos escritos con el propsito de informar
Criterio de
evaluacin

Nivel 4

Nivel 3

Nivel 2

Nivel 1

El texto responde
medianamente a la
tarea solicitada, ya que
informa parcialmente
sobre el tema
propuesto.

El texto responde de
manera emergente a la
tarea solicitada, ya que
en algunas ocasiones
informa, pero luego
realiza un giro hacia la
narracin o la opinin.

El texto no responde a
la tarea solicitada.

Propsito

El texto responde a la
tarea solicitada, ya que
informa sobre el tema
propuesto.

Incorpora informacin
sobre ms de un
aspecto del tema, pero
esta tiene un desarrollo
irregular (no incorpora
ejemplos, algunas
informaciones solo se
mencionan).
Incorpora vocabulario
que, aun cuando no
enriquece la entrega
de informacin,
es suficiente para
exponerla.

Incorpora informacin
sobre algn aspecto del
tema, sin embargo no la
desarrolla o es repetitiva.

O bien,
Presenta el tema
pero no incorpora
informacin sobre l.

Elaboracin del
conocimiento

Incorpora informacin
sobre ms de un aspecto
del tema y la desarrolla
mediante ejemplos o
descripcionesIncorpora vocabulario
variado e ilustrativo que
enriquece la exposicin
de la informacin.

El texto se comprende
fcilmente, dado que,
por ejemplo:

El texto se comprende;
sin embargo, es
necesario detenerse
en algunas ocasiones,
dado que, por ejemplo:

El texto se comprende
con dificultad y es
necesario releer muchas
veces, dado que, por
ejemplo:

El texto no se
comprende o se
comprende muy poco,
dado que, por ejemplo:

El texto es autnomo,
pues no depende ni del
contexto ni del estmulo
para ser comprendido,
o bien,

El texto es autnomo,
pero el lector debe
complementar con
informacin que no
es relevante para la
comprensin global,
o bien,

El texto no es autnomo,
pues una gran parte de
la informacin necesaria
para la comprensin del
mismo no est escrita,
sino que el lector debe
incorporarla, o bien,

El texto no es
autnomo porque la
informacin entregada
es insuficiente para
que el lector la
interprete, o bien,

Presenta una
organizacin lgica de
las ideas, o bien,

Presenta una
organizacin lgica de
las ideas, a excepcin
de algunos casos
aislados que no afectan
la comprensin global,
o bien,

Presenta ideas a partir de


las cuales hay que inferir
la lgica que las agrupa,
ya que se asemejan a un
listado, o bien,

Presenta ideas de las


cuales no se puede
inferir cul es la lgica
que las relaciona, o
bien,

Todas las ideas y


ejemplos se comprenden
y estn enfocados en el
tema.

La mayor parte de las


ideas y ejemplos se
comprenden y estn
enfocados en el tema.

Presenta ideas
y/o ejemplos, con
digresiones, partes que
no se comprenden o
elementos inconexos que
dificultan la comprensin.

Presenta ideas y/o


descripciones y/o
ejemplos que no se
relacionan con el tema.

Coherencia

178

Informe Tcnico Simce 2013

[continuacin]
Criterio de
evaluacin

Cohesin

Convenciones
ortogrficas

Nota:

Nivel 4

Nivel 3

Nivel 2

Nivel 1

El texto incorpora
recursos variados de
cohesin (conectores
o marcadores
discursivos, y recursos
de correferencia) que
enriquecen el texto.

El texto incorpora
recursos de cohesin
(conectores o
marcadores discursivos,
y recursos de
correferencia) que
pueden ser repetitivos
o con algunos errores
aislados.

El texto incorpora
escasos recursos de
cohesin o presenta
varios errores en el uso
de conectores o recursos
de correferencia.

No se evidencian
recursos de cohesin
o solo se emplea
repetitivamente y de
manera exclusiva el
conector y.

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos y comas bien
utilizados al interior del
texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto presenta
mayscula al inicio
del texto y punto final,
adems de algunos
puntos bien utilizados
al interior del texto.
*Es posible encontrar
textos de este nivel
que no presenten uso
de mayscula inicial o
punto final.

El texto solo presenta


mayscula al inicio del
texto y punto final.

El texto presenta solo


mayscula al inicio
o punto final, o bien
no presenta uso de la
puntuacin.

Usar esta fila si el texto considera un estmulo con informacin que el estudiante debe conocer previamente.

Anexo B

179

Juicio global textos para informar


Nivel 4: Los textos en este rango reflejan un excelente logro de las habilidades de escritura necesarias

para responder a la tarea. Este juicio se asigna a aquellos textos que cumplen con la tarea solicitada en
la consigna y se comprenden fcilmente. Desarrollan informacin sobre ms de algn aspecto del tema
e incorporan ejemplos o descripciones.

Nivel 3: Los textos en este rango reflejan un buen logro de las habilidades de escritura necesarias
para responder a la tarea. Este juicio se asigna a aquellos textos que se comprenden, aunque puede
ser necesario releer o detenerse en algunas secciones por problemas de coherencia local, pero que no
afectan la comprensin global. Incorpora informacin sobre ms de un aspecto del tema, pero de manera
irregular. Adems, la mayor parte de las ideas de estos textos se encuentran enfocadas en el tema, y se
relacionan mediante recursos de cohesin, aunque pueden ser repetitivos o utilizados errneamente en
casos aislados. Es posible encontrar informacin parafraseada o copia textual, en ms de una seccin.

Nivel 2: Los textos en este rango reflejan habilidades en desarrollo al responder a la tarea de escritura.
Este juicio se asigna a aquellos textos que son muy breves, solo presenta las ideas y no las desarrolla;
o la tarea se cumple de manera similar a un esbozo o enumeracin; o aquellos que se comprenden con
dificultad y es necesario releer detenidamente, dado que tiene frecuentes problemas de coherencia o
cohesin). Estos textos pueden presentar digresiones o elementos inconexos.

Nivel 1: Los textos en este rango demuestran habilidades insuficientes al responder a la tarea de

escritura. Estos textos no se comprenden o se comprenden muy poco, dado que, por ejemplo, la
informacin entregada es insuficiente para que el lector la interprete, porque presenta ideas de las
cuales no se puede inferir la lgica que las relaciona, porque la mayor parte de sus ideas no se relacionan
con el tema, etc.

Otros cdigos (no evaluables):


Cdigo 98: Textos ilegibles. Copia o parafraseo de la consigna (solo la instruccin para llevar a cabo la
tarea). Espacio para responder con negativas o marcas que evidencian una falta de intencin de responder
(dibujos, insultos, etc.)

Cdigo 99: Espacio para responder en blanco.

180

Informe Tcnico Simce 2013

Anexo C
Curvas de informacin y caractersticas
de prueba Simce DS 2013
En las siguientes figuras se presentan las curvas definitivas en cada una de las reas evaluadas.
Figura C.1 Curvas caractersticas prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Lenguaje y Comunicacin:
Comprensin de Lectura 2013

181

Figura C.2 Curvas de Informacin Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Lenguaje y Comunicacin:
Comprensin de Lectura 2013

Figura C.3 Curvas caractersticas Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Matemtica 2013

182

Informe Tcnico Simce 2013

Figura C.4 Curvas de informacin Prueba Simce 6 bsico Discapacidad Visual Total (DVT),
Discapacidad Auditiva (DA) y Discapacidad Visual Parcial (DVP): Matemtica 2013

Anexo C

183

Anexo D
Cobertura de pruebas
Simce 2013
Pruebas 2 bsico
Tabla D.1 Cobertura nacional 2 bsico 2013
Fecha de aplicacin

29 de octubre

Estudiantes evaluados

215.512

Porcentaje del total de estudiantes matriculados en este nivel

91,5%

Establecimientos evaluados

7.593

Porcentaje del total de establecimientos que imparten este nivel

98,3%

Porcentaje de asistencia promedio en el ao

91,8%

Porcentaje de asistencia a la prueba

91,7%

Tabla D.2 Cobertura regional 2 bsico 2013


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total Nacional

Establecimientos

Alumnos

93,9%
97,3%
99,3%
97,3%
98,1%
99,1%
98,4%
99,8%
99,0%
97,9%
98,5%
97,5%
97,6%
91,9%
100,0%

87,0%
88,6%
90,7%
90,9%
92,9%
91,4%
91,1%
93,0%
92,8%
91,5%
92,3%
92,2%
91,7%
93,4%
90,6%

98,3%

91,5%

185

Tabla D.3 Distribucin de alumnos y establecimientos por regin


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Establecimientos

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Alumnos

77
109
134
109
455
766
1.792
454
590
1.019
900
350
727
57
54

1%
1%
2%
1%
6%
10%
24%
6%
8%
13%
12%
5%
10%
1%
1%

2.896
4.533
7.923
4.140
9.765
20.775
83.095
11.578
12.895
25.402
12.552
4.917
11.446
1.550
2.045

1%
2%
4%
2%
4%
10%
39%
5%
6%
12%
6%
2%
5%
1%
1%

7.593

100%

215.512

100%

Pruebas 4 bsico
Tabla D.4 Cobertura nacional 4 bsico 2013
Fecha de aplicacin

8 y 9 de octubre

Estudiantes evaluados

224.421

Porcentaje del total de estudiantes matriculados en este nivel

95,4%

Establecimientos evaluados

7.630

Porcentaje del total de establecimientos que imparten este nivel

98,7%

Porcentaje de asistencia promedio en el ao

92,4%

Porcentaje de asistencia a la prueba

95,6%

Tabla D.5 Cobertura regional 4 bsico 2013


Regin
N.
15
1
2
3
4
5
13
6
7
8
9

186

Nombre

Establecimientos

Alumnos

96,3%
99,1%
97,8%
99,1%
98,5%
99,5%
99,1%
99,6%
99,0%
98,1%
98,6%

92,5%
94,0%
95,5%
93,6%
96,2%
95,4%
95,6%
96,1%
95,2%
95,3%
95,3%

Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana

Informe Tcnico Simce 2013

[continuacin]
Regin
N.
10
11
12

Nombre

Establecimientos

Alumnos

99,1%
91,7%
100,0%

96,0%
95,1%
93,8%

98,7%

95,4%

Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Tabla D.6 Distribucin de alumnos y establecimientos por regin


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Establecimientos

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Alumnos

78
107
132
106
471
765
1.801
453
598
1.025
890
355
740
55
54

1%
1%
2%
1%
6%
10%
24%
6%
8%
13%
12%
5%
10%
1%
1%

3.028
4.799
8.211
4.080
9.915
21.956
86.693
12.168
13.495
26.584
13.045
4.974
11.881
1.536
2.056

1%
2%
4%
2%
4%
10%
39%
5%
6%
12%
6%
2%
5%
1%
1%

7.630

100%

224.421

100%

Pruebas 6 bsico
Tabla D.7 Cobertura nacional 6 bsico 2013
Fecha de aplicacin

22 y 23 de octubre

Estudiantes evaluados

238.378

Porcentaje del total de estudiantes matriculados en este nivel

95,0%

Establecimientos evaluados

7.567

Porcentaje del total de establecimientos que imparten este nivel

98,8%

Porcentaje de asistencia promedio en el ao

92,3%

Porcentaje de asistencia a la prueba

95,2%

Anexo D

187

Tabla D.8 Cobertura regional 6 bsico 2013


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Nombre

Establecimientos

Alumnos

97,6%
100,0%
99,3%
96,1%
99,4%
99,5%
98,8%
100,0%
99,3%
98,9%
98,4%
99,5%
97,8%
94,4%
98,2%

92,8%
92,9%
94,7%
91,8%
95,7%
95,3%
94,9%
96,0%
95,3%
95,5%
94,5%
95,0%
95,2%
94,6%
95,3%

98,9%

95,0%

Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Tabla D.9 Distribucin de alumnos y establecimientos por regin


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Establecimientos

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Alumnos

81
105
133
98
471
757
1.773
446
589
1.022
898
364
723
51
56

1%
1%
2%
1%
6%
10%
23%
6%
8%
14%
12%
5%
10%
1%
1%

3.084
4.745
8.508
4.317
10.773
23.913
91.761
12.986
14.253
28.488
13.863
5.450
12.452
1.588
2.187

1%
2%
4%
2%
5%
10%
38%
5%
6%
12%
6%
2%
5%
1%
1%

7.567

100%

238.378

100%

Tabla D.10 Porcentaje de asistencia y cobertura Prueba Simce DS 2013


Discapacidad
Auditiva
Visual parcial
Visual total
Total

188

Sistema (Simce
+ SIGE)

Matriculados
Simce

Rindieron
Simce

%
Asistencia

%
Cobertura

266
88
26
380

246
78
18
342

235
77
18
330

95,5%
98,7%
100,0%
96,5%

88,3%
87,5%
69,2%
86,8%

Informe Tcnico Simce 2013

Pruebas 8 bsico 2013


Tabla D.11 Cobertura nacional 8 bsico 2013
Fecha de aplicacin

5 y 6 noviembre

Estudiantes evaluados

230.400

Porcentaje del total de estudiantes matriculados en este nivel

95,0%

Establecimientos evaluados

5.957

Porcentaje del total de establecimientos que imparten este nivel

99,2%

Porcentaje de asistencia promedio en el ao

91,8%

Porcentaje de asistencia a la prueba

95,2%

Tabla D.12 Cobertura regional 8 bsico 2013


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Nombre

Establecimientos

Alumnos

100,0%
100,0%
99,2%
100,0%
99,0%
98,8%
98,7%
100,0%
99,8%
99,4%
99,4%
99,5%
100,0%
96,2%
100,0%

92,1%
93,3%
95,4%
92,8%
95,5%
94,4%
95,2%
95,7%
95,4%
94,9%
95,1%
94,3%
95,1%
93,9%
94,2%

99,2%

95,0%

Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Tabla D.13 Distribucin de alumnos y establecimientos por regin


Regin
N.
15
1
2
3
4
5
13
6
7
8
9

Establecimientos

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana

Anexo D

Alumnos

62
97
131
86
310
683
1.758
354
442
785
535

1%
2%
2%
1%
5%
11%
30%
6%
7%
13%
9%

3.027
4.413
8.365
3.997
10.114
22.788
89.928
12.420
13.765
27.459
13.545

1%
2%
4%
2%
4%
10%
39%
5%
6%
12%
6%

189

[continuacin]
Regin
N.
10
11
12

Establecimientos

Nombre

428
50
53

7%
1%
1%

11.914
1.420
2.141

5%
1%
1%

5.957

100%

230.400

100%

Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Alumnos

Tabla D.14 Cobertura nacional Estudio Nacional de Educacin Fsica 2013


Regin
N.

Establecimientos

Nombre

Alumnos

Frecuencia

Porcentaje

Frecuencia

Porcentaje

Tarapac

1%

241

2%

Antofagasta

2%

369

3%

Atacama

1%

91

1%

Coquimbo

10

2%

211

2%

Valparaso

46

11%

1.339

11%

Libertador General Bernardo O Higgins

26

6%

624

5%

Maule

30

7%

771

6%

Biobo

59

15%

1.643

14%

La Araucana

30

7%

702

6%

10

Los Lagos

19

5%

525

4%

11

Aysn del General Carlos Ibez del Campo

2%

140

1%

12

Magallanes y la Antrtica Chilena

1%

89

1%

13

Metropolitana

132

33%

4.556

38%

14

Los Ros

13

3%

358

3%

15

Arica y Parinacota

2%

322

3%

401

100%

11.981

100%

Total muestral

Pruebas II medio 2013


Tabla D.15 Cobertura nacional II medio 2013
Fecha de aplicacin
Estudiantes evaluados

20 de noviembre
204.263
87,0%

Establecimientos evaluados

2.818

Porcentaje del total de establecimientos que imparten este nivel

99,1%

Porcentaje de asistencia promedio en el ao

90,1%

Porcentaje de asistencia a la prueba

87,6%

Anexos

Porcentaje del total de estudiantes matriculados en este nivel

190

Informe Tcnico Simce 2013

Tabla D.16 Cobertura regional II medio 2013


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Nombre

Establecimientos

Alumnos

100,0%
98,4%
97,3%
100,0%
100,0%
99,2%
98,6%
100,0%
100,0%
99,7%
98,3%
98,8%
99,4%
100,0%
100,0%

83,3%
83,0%
82,3%
81,0%
88,5%
87,4%
86,3%
89,6%
88,8%
88,1%
88,5%
88,8%
87,7%
86,1%
87,4%

99,1%

87,0%

Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Tabla D.17 Distribucin de alumnos y establecimientos por regin


Regin
N.
15
1
2
3
4
5
13
6
7
8
9
14
10
11
12

Establecimientos

Nombre
Arica y Parinacota
Tarapac
Antofagasta
Atacama
Coquimbo
Valparaso
Regin Metropolitana
Libertador General Bernardo OHiggins
Maule
Biobo
La Araucana
Los Ros
Los Lagos
Aysn del General Carlos Ibez del Campo
Magallanes y de la Antrtica Chilena

Total nacional

Anexo D

Alumnos

33
61
73
37
141
365
1.043
146
164
299
169
81
157
20
29

1%
2%
3%
1%
5%
13%
37%
5%
6%
11%
6%
3%
6%
1%
1%

2.740
3.718
6.791
3.243
8.903
20.080
78.375
11.197
12.968
25.168
12.373
4.937
10.826
1.155
1.789

1%
2%
3%
2%
4%
10%
38%
5%
6%
12%
6%
2%
5%
1%
1%

2.818

100%

204.263

100%

191

Anexo E
Indicadores de calidad
aplicacin 2013
1. Indicador de calidad en impresin y mecanizacin de
material para la aplicacin Simce 2013
La Agencia de Calidad de la Educacin es responsable de elaborar y aplicar las pruebas nacionales para
evaluar los logros de aprendizaje de los estudiantes del pas. Como parte de esta tarea debe realizar los
procesos de impresin de las pruebas y los resultados de estas. Para el proceso de aplicacin Simce 2013
la Agencia aplic un proceso de control de la calidad a los procesos de impresin, para lo cual se requiri
formular planes de muestreo para el aseguramiento de la calidad de impresin y mecanizacin bajo la
Normativa Chilena de Calidad N. 44, Of. 2007 (en adelante Nch 44), Planes de Muestro por Atributos.

1.1 Diseo de planes de muestreo


a)

Se disearon planes y procedimientos de muestreo estadstico por atributos, conforme a NCh 44,
contenidos en un procedimiento operacional denominado PD-ACE-02: Planes y procedimientos de
muestreo para inspeccin de recepcin de impresiones pruebas Simce 2013. Estos fueron aplicados
para los siguientes productos:

Material impreso.
Material no impreso.
Impresin braille.
Mecanizado de cajas.
Palletizado.
b) Se clasificaron las caractersticas de la calidad de los productos Simce 2013, individualizados en la
letra a) precedente.
c)

Se definieron los mtodos de muestreo aplicables a los planes de la letra a).

d) Se efectu una induccin de 4 horas al impresor para el adecuado uso del procedimiento.

1.2 Marco terico general que sustenta los planes de muestreo


aplicados
Se establecieron planes y procedimientos de muestreo considerando no conformidades clases A, B y C,
de acuerdo a los criterios de este tipo de industria:

Para NC Clase A, AQL 1.


Para NC Clase B, 1 AQL 2,5.
Para NC Clase C, AQL 2,5.
Para todos los planes se consider:

Nivel de Inspeccin II.


Inspeccin simple normal.
Aplicacin de los criterios de NCh 44.

193

1.3 Nivel de Calidad Aceptable (AQL)


Los niveles de calidad aceptables definidos para los planes de muestreo del procedimiento, PD-ACE-02,
permitieron asegurar niveles de confianza superiores al 98% para las no conformidades clases A, B y C
del proceso productivo, excepto el palletizado, que para no conformidades Clase C permitiron obtiener
un nivel de confianza del 86,4%.

2. Indicador de Calidad (IDC) para la aplicacin Simce 2013


El indicador propuesto para evaluar la calidad del proceso Simce 2013 se construy a partir de la
medicin de una serie de actividades relacionadas al proceso de aplicacin, entre ellas: procedimientos,
niveles de cumplimiento de los protocolos de preparacin de la aplicacin, la aplicacin misma y el
trmino del proceso. A ello se sum un anlisis de los procesos de capacitacin y seleccin utilizando
tambin el criterio de cumplimiento de los niveles exigidos para los examinadores y su entrenamiento.
Es as como a partir de ambos procesos se construy un indicador de calidad del proceso (IDC), el cual se
calcul a partir del concepto central de adherencia al cumplimiento de las exigencias y estndares en la
ejecucin de cada proceso y subproceso asociado. Por ejemplo, si al seleccionar a los examinadores estos
no hubieran cumplido el 100% de los requerimientos, o bien, si no se cumpli un hito como el horario de
comienzo de la prueba, entonces no hubo una adherencia completa y por tanto el indicador bajar de un
100%, e ir disminuyendo en la proporcin de impacto asociada a cada tarea, hito o actividad a cumplir
antes, durante y despus de la aplicacin.
La construccin del IDC bas su lgica central en la adherencia, por tanto pudo aplicarse a cada proceso
y su subproceso de igual forma. En la medida que todos y cada uno fueron cumpliendo las exigencias, se
construy el IDC final en base a que si las actividades medidas cumplan los estndares definidos por la
Agencia, entonces el indicador sera de 100%; en caso contrario el indicador disminuira paulatinamente
hasta llegar a un 0%, en caso de incumplimientos totales.

2.1 Lnea base


Para el clculo de la lnea de base se utiliz el mximo de 100% para cada uno de los procesos y
subprocesos, y a partir de los pesos relativos entre cada uno de ellos se construyeron distintos IDC hasta
conseguir el IDC GLOBAL.
En este sentido, el indicador siempre estuvo en un mnimo de 0% y un mximo de 100%, en donde 0% es
un IDC que no representa un proceso de calidad, y 100% un proceso general de calidad absoluta. Para el
proceso 2013 el clculo del IDC general se efectu a partir de los ponderadores aprobados por la Agencia
para su medicin a travs de pautas. Este clculo histrico permiti la comparacin aun cuando los
niveles pudieran variar, debido a que su construccin se efecta a travs de procesos que son generales
para cualquier aplicacin de pruebas Simce o similares ya que considera el proceso de formacin de los
equipos y el proceso de aplicacin, tareas comunes para las aplicaciones gestionadas por la Agencia.

194

Informe Tcnico Simce 2013

2.2 Formato de clculo


Para realizar el clculo del IDC se consideraron de forma general dos procesos centrales:

Formacin de los equipos.


Aplicacin.
A continuacin se presentan las bases para el clculo.

2.2.1 Proceso de formacin de equipos


En este caso se midieron dos subprocesos:

Pruebas de seleccin de los examinadores.


Capacitacin de examinadores.
i.

Subproceso seleccin

Para el ao 2013 se aplicaron dos instrumentos de forma equivalente: la prueba de seleccin de


examinadores (PSE) y el test psicolgico de examinadores TSES-61. Para el clculo del IDC del subproceso
de seleccin se consider el nivel de aprobacin de los examinadores en cada prueba. En el caso de
la PSE fue excluyente, ya que ningn candidato reprobado en esta prueba pudo desempearse como
examinador; por su parte, el TSES-61 no result excluyente a pesar de ser un requisito, y por tanto estuvo
en niveles inferiores al 100%. Para el clculo se consider adems el peso relativo asignado a cada
prueba en el subproceso y as se defini el impacto en el IDC final de seleccin.
Tabla E.1 IDC final de seleccin
IDC proceso de
seleccin
Ponderadores
IDC aprobacin test examinadores

TSES-61
(A) Peso relativo TSES 61

(B) Peso relativo PSE

(C) % de examinadores que


aprobaron el TSES-61

(D) % de examinadores que


aprobaron la PSE

IDC seleccin

ii.

PSE

% Resultante de (A)x(C)+(B)x(D)

Subproceso capacitacin

En cuanto a la capacitacin, la dinmica empleada estuvo relacionada con los niveles de cumplimiento
observados en las sesiones de capacitacin, las cuales incluyeron una serie de dimensiones. Para ello se
construy un IDC que permiti establecer la cercana de cada dimensin con respecto a lo esperado. El
instrumento que se utiliz fue una pauta como la que se presenta a continuacin, que fue aplicada por
los observadores para establecer los niveles de cumplimiento de cada dimensin.

Anexo E

195

Figura E.1 Evolucin general de la capacitacin

En este caso la capacitacin cumpli en promedio un 68% de lo esperado, y en algunas dimensiones


estuvo bajo los niveles esperados.
As, para efectuar el anlisis de la capacitacin realizada se estableci una pauta multidimensional que
permiti entregar una perspectiva integral del proceso de entrenamiento de los miles de involucrados
en la aplicacin directa en aula. Cada una de estas dimensiones, a su vez, tuvo asociadas una serie de
preguntas que eran puntuadas en base a la siguiente escala:

196

Informe Tcnico Simce 2013

Tabla E.2 Pauta multidimensional del proceso de entrenamiento


Tabla evaluacin

Asignacin

No aplica

N/A

No observado

Insuficiente

Parcialmente esperado

Esperado

En esta escala, 3 era el resultado que estaba dentro de los parmetros de lo que se deba presentar
durante la observacin. Por ejemplo, en trminos de la dimensin de locaciones, se poda establecer si se
cumplan los requerimientos de espacialidad (una silla para cada participante y una mesa para escribir),
o si exista la suficiente luminosidad, etc. Por el contrario, si alguna de estas condiciones no se cumpla,
entonces la puntuacin sera 1, o bien 0, lo cual estableca la insuficiencia de las condiciones para que
se realizara la capacitacin en los trminos esperados. As, mientras mayor fuera el cumplimiento en
la observacin, el IDC se encontrara ms cercano a 100%. Adems de ello, cada dimensin a su vez
dispona de un ponderador segn el cual se construa el IDC final, que tambin es posible de calcular al
nivel de sesiones individuales de capacitacin.
Tabla E.3 Ponderacin de dimensiones
Dimensiones

Ponderacin

Contenidos

Tpicos incluidos en el proceso.

20%

Materiales

Tipo, disponibilidad y calidad.

20%

Seguridad

Del proceso, acceso y materiales.

5%

Formatos

Tipo del proceso y duracin.

20%

Relatores

Dominio, claridad y formalidad.

20%

Locaciones

Tipo de lugar y sus caractersticas.

5%

Formalidades

Asistencia, acreditacin, acceso.

5%

Pertinencia

Percepcin general del proceso.

5%

Total

100%

Estas ponderaciones permitieron construir un IDC de las caractersticas solicitadas para cada dimensin
y entregarles un peso relativo que impactara en la evaluacin final del cumplimiento de las empresas
aplicadoras en el proceso de capacitacin. De esta forma, fue factible evaluar cada jornada de capacitacin
de forma individual, independiente de si se trataba de una capacitacin regular o NEE; adems, permiti
que a futuro se pudiera realizar una comparacin entre regiones, comunas y principalmente entre
empresas. Esto ltimo es en extremo relevante ya que cada una de las empresas disea y ejecuta sus
capacitaciones con los lineamientos generales de la Agencia, pero de forma individual. As, el IDC de
capacitacin se construy de la siguiente forma:

Anexo E

197

Tabla E.4 Capacitaciones: ponderacin de dimensiones


IDC Capacitacin

(A)

Dimensiones

(B)

IDC Dimensin

Ponderacin

Contenidos

Tpicos incluidos en el proceso.

% Cumplimiento

20%

Materiales

Tipo, disponibilidad y calidad.

% Cumplimiento

20%

Seguridad

Del proceso, acceso y materiales.

% Cumplimiento

5%

Formatos

Tipo del proceso y duracin.

% Cumplimiento

20%

Relatores

Dominio, claridad y formalidad.

% Cumplimiento

20%

Locaciones

Tipo de lugar y sus caractersticas.

% Cumplimiento

5%

Formalidades

Asistencia, acreditacin, acceso.

% Cumplimiento

5%

Pertinencia

Percepcin general del proceso.

% Cumplimiento

5%

IDC Capacitacin

% (S (A) X (B))

Para el proceso Simce 2013 se asign un ponderador equivalente al 50% para cada subproceso, debido
a que no se cont con informacin histrica que permitiera aseverar el impacto preponderante de un
subproceso sobre el otro. As, el formato de clculo del proceso qued establecido del siguiente modo:
Tabla E.5 Proceso de formacin del equipo
IDC Proceso formacin equipo

Seleccin

Ponderadores
IDC Subprocesos

Capacitacin

(A) 50%

(B) 50%

(C) IDC Seleccin

(D) IDC Capacitacin

IDC Proceso

% Resultante de (A)x(C)+(B)x(D)

2.2.2 Proceso de aplicacin


En cuanto al proceso de aplicacin, que a su vez se compuso de tres subprocesos (visita previa, durante
la prueba y despus de la prueba), se definieron una serie de actividades que al cumplirse iban sumando
porcentajes a la construccin del IDC del proceso. Esta medicin se realiz a travs de pautas diseadas
especialmente para cada medicin, especialmente en lo relacionado al subproceso durante la prueba y
despus de la prueba, ya que existen variantes entre niveles. Adems, se pudo establecer un ponderador
general para futuras aplicaciones. A continuacin se presentan los ponderadores asignados a cada
subproceso para la aplicacin 2013:
Tabla E.6 Ponderadores por grados Simce 2013
Ponderadores proceso aplicacin

4 bsico

6 bsico

2 bsico

II medio

Visita previa

36,0%

36,0%

35,5%

35,5%

Durante la prueba

55,0%

55,0%

59,0%

55,5%

Despus de la prueba

9,0%

9,0%

5,5%

9,0%

Total

100%

100%

100%

100%

198

Informe Tcnico Simce 2013

Tabla E.7 Ponderadores Genricos


Ponderadores proceso aplicacin

Genricos

Visita previa

36%

Durante la prueba

56%

Despus de la prueba

8%

Total

100%

Para la aplicacin 2013 se utiliz una tabla de ponderadores ya que se observaron cuatro niveles con
algunas diferencias. El detalle de los instrumentos y la metodologa utilizada para el clculo del IDC del
proceso de aplicacin y sus subprocesos est desarrollado en el punto 2.6 del presente anexo, incluyendo
porcentajes, actividades y pautas utilizadas para la medicin de los niveles de adherencia y configuracin
del IDC para cada subproceso y nivel observados.

2.3 IDC global Simce 2013


Finalmente, para realizar una medicin general de la aplicacin Simce 2013 se construy un IDC global, el
cual se gener a partir de la ponderacin de los dos procesos centrales previamente detallados. Durante
el proceso de observacin 2013 una de las principales paradojas fue generar una medicin y correlacin
en el impacto del proceso de formacin de los equipos y su repercusin en el proceso de aplicacin. Se
consideraron los siguientes supuestos para determinar la importancia de cada proceso:

Hay variables que pueden afectar la calidad de la aplicacin, pero que pueden ser resultado de

variables externas, como el mecanizado, la cooperacin del establecimiento o factores sociales y


polticos.

Factores internos de las empresas responsables, como por ejemplo la logstica de entrega de

material, que aun cuando las condiciones de seleccin y entrenamiento de examinadores, es


adecuada, adems de la visita previa realizada en condiciones ptimas, que las cajas no lleguen
a tiempo a los establecimientos puede afectar la cadena de aplicacin, y por tanto estos factores
tambin tienen un impacto considerable.

Factores aleatorios que pueden alterar la planificacin.


Sobre la base de eventos de disconformidad de procesos anteriores que permitan establecer
relaciones de causalidad comprobables entre uno y otro proceso.

Considerando lo anterior, se determin que para la aplicacin 2013 los ponderadores de cada proceso
fueran los siguientes:
Tabla E.8 Ponderaciones e IDC subprocesos en la formacin de equipos y en la aplicacin
IDC Global 2013
Ponderadores
IDC Subprocesos

IDC Global 2013

Formacin equipos

Aplicacin

(A) 40%

(B) 60%

(C) IDC Formacin Equipos

(D) IDC Aplicacin

% Resultante de (A)x(C)+(B)x(C)

Anexo E

199

2.4 Resultados obtenidos en el proceso 2013


A continuacin se presentan los resultados obtenidos por cada subproceso y proceso.

i.

IDC subproceso de seleccin

El IDC general obtenido para la aplicacin 2013 en el subproceso de seleccin fue de un 66%. Este
indicador no considera las regiones IX, X, XI y XII, y las zonas de Juan Fernndez e Isla de Pascua, ya que en
ellas las pruebas fueron aplicadas por los Departamentos Provinciales de Educacin, DEPROVS.
Tabla E.9 Ponderaciones e IDC de aprobacin en TSES-61 y PSE
IDC Proceso de seleccin

TSES-61

PSE

Ponderadores

50%

50%

IDC Aprobacin test examinadores

32%

100%

IDC Obtenido

ii.

66%

IDC subproceso de capacitacin

El IDC general obtenido para la aplicacin 2013 en el subproceso de capacitacin fue de un 78%. Este
indicador no considera las regiones IX, X, XI y XII y las zonas de Juan Fernndez e Isla de Pascua, ya que en
ellas las pruebas fueron aplicadas por los Departamentos Provinciales de Educacin, DEPROVS.
Tabla E.10 IDC obtenido para la aplicacin 2013
IDC Proceso de capacitacin
IDC obtenido

78%

2.4.1 IDC general proceso de seleccin y capacitacin


El IDC general del proceso de seleccin y capacitacin es de 72%, el cual se calcul a partir de los
IDC de seleccin e IDC de capacitacin. Como se mencion, este IDC solo considera las regiones bajo
responsabilidad de las empresas licitadas por la Agencia para dicho propsito3.
Tabla E.11 IDC general del proceso de seleccin y capacitacin
IDC Proceso formacin equipo

Seleccin

Capacitacin

Ponderadores

50%

50%

IDC subprocesos

66%

IDC proceso

78%
72%

2.4.2 IDC general proceso aplicacin


A continuacin se presentan los resultados por cada subproceso correspondiente a la aplicacin 2013
en cada uno de los niveles observados. Para este caso se realiz el clculo del IDC a travs de una
ponderacin de los IDC obtenidos en cada subproceso por la cantidad de muestras que lo generaron:

3 Empresas que se adjudicaron el servicio de aplicacin de pruebas Simce 2013 de la licitacin N. 721703-5-LP13.

200

Informe Tcnico Simce 2013

Tabla E.12 Resultados por cada subproceso


Visita previa

Durante la
prueba

Despues de la
prueba

IDC

4 bsico

91,9%

84,9%

97,2%

88,5%

6 bsico

85,5%

85,6%

95,2%

87,5%

2 bsico

90,0%

84,7%

79,8%

88,1%

II medio

81,4%

82,2%

97,5%

83,3%

IDC por nivel

86,2%

84,1%

93,5%

86,3%

IDC Proceso aplicacin

Como se observa, el IDC del proceso de aplicacin es de 86,3% a nivel general. Adems, se presenta el IDC
de los subprocesos visita previa (86,2%), durante la prueba (84,1%) y despus de la prueba (93,5%). Estos
se obtuvieron como promedio ponderado a partir de la construccin de los ndices de cada subproceso
por cada uno de los niveles.

2.5 IDC global Simce 2013


A continuacin se presenta el clculo final para la aplicacin Simce 2013 en base a la metodologa y las
observaciones realizadas a nivel nacional. El resultado obtenido es un IDC global Simce 2013 de 80,6%,
lo que en trminos de la metodologa propuesta considera una adherencia global en promedio de un
80,6% con respecto a las exigencias, estndares, hitos y protocolos a cumplir para la formacin de los
equipos y la aplicacin de la prueba para sus distintos niveles.
Tabla E.13 Clculo final de la aplicacin 2013
Proceso
Formacin Equipos

Proceso
Aplicacin

Ponderadores

40%

60%

IDC Procesos principales

72%

86,3%

IDC Global

IDC Global 2013

80,6%

2.6 Resultados obtenidos proceso aplicacin


En los siguientes puntos se detallan los IDC obtenidos de forma general y para cada nivel observado,
adems de los horarios promedio relacionados al manejo de material y proceso de aplicacin.

2.6.1 Resultados generales


Tabla E.14 Resultados generales por aplicador
Aplicador

4 bsico

6 bsico

2 bsico

II medio

IDC

88,9%

89,3%

87,4%

83,9%

86,9%

Araucana

89,2%

91,2%

86,4%

80,7%

85,8%

Los Lagos

88,0%

87,4%

88,2%

85,9%

87,0%

Los Ros

88,2%

91,1%

88,0%

88,1%

88,4%

Magallanes

96,0%

92,5%

97,0%

87,8%

93,1%

89,2%

86,1%

89,1%

83,2%

86,2%

88,3%

82,2%

85,3%

77,1%

82,1%

DEPROV

INGEMAS
Antofagasta

Anexo E

201

[continuacin]
Aplicador

4 bsico

6 bsico

2 bsico

II medio

IDC

Arica y Parinacota

86,0%

82,8%

92,0%

81,8%

83,9%

Atacama

87,7%

89,6%

96,0%

84,8%

88,4%

Coquimbo

87,4%

83,6%

88,5%

81,9%

84,8%

Maule

88,2%

86,7%

89,1%

85,5%

87,1%

OHiggins

92,5%

94,7%

90,5%

81,9%

87,6%

Tarapac

88,5%

86,3%

87,3%

85,8%

86,9%

Valparaso

91,4%

87,1%

90,0%

84,0%

87,3%

USM

88,1%

87,9%

87,6%

83,2%

86,2%

Biobo

87,8%

85,8%

87,2%

82,9%

85,4%

Metropolitana

88,2%

88,4%

87,7%

83,2%

86,5%

88,5%

87,5%

88,1%

83,3%

86,3%

Total

Los resultados agregados presentan un panorama similar entre las empresas. Respecto de los niveles, en
el de menor desempeo (esto se observa en II medio) el IDC fue el ms bajo de forma sostenida en todas
las regiones.

2.6.2 Resultados aplicacin 4 bsico


En los siguientes cuadros se presentan los resultados del IDC obtenido para la aplicacin de 4 bsico a
nivel nacional. Se presentan adems los indicadores de tiempo relacionados con la aplicacin.
Tabla E.15 Resultados aplicacin 4 bsico nivel nacional
Visita previa

Durante la
prueba

Post prueba

IDC

91,5%

85,6%

98,8%

88,9%

Araucana

94,1%

84,3%

98,3%

89,1%

Los Lagos

89,4%

84,1%

100,0%

87,5%

Los Ros

81,4%

89,4%

100,0%

87,5%

Magallanes

98,6%

94,2%

96,3%

96,0%

92,3%

85,5%

99,3%

89,2%

Antofagasta

91,0%

84,5%

98,9%

88,1%

Arica y Parinacota

93,5%

79,1%

98,6%

86,0%

Atacama

78,1%

92,0%

100,0%

87,7%

Coquimbo

91,9%

82,3%

98,9%

87,3%

Maule

92,4%

83,0%

100,0%

87,9%

OHiggins

100,0%

86,5%

99,5%

92,5%

Tarapac

88,6%

86,5%

96,8%

88,2%

Valparaso

94,9%

87,5%

100,0%

91,3%

Aplicacin 4 bsico
DEPROV

INGEMAS

USM

91,9%

84,4%

95,5%

88,1%

Biobo

93,8%

83,1%

92,5%

87,8%

Metropolitana

91,2%

84,8%

96,5%

88,2%

91,9%

84,9%

97,2%

88,5%

Total

La siguiente tabla es una medicin del promedio de la hora en que el examinador recibi los materiales,
o bien la hora en que estos arribaron al establecimiento. En el caso de la aplicacin de 4 bsico, la zona

202

Informe Tcnico Simce 2013

a cargo de los DEPROV fue la que recibi en promedio ms tempranamente el material, mientras que en
el caso de Ingemas el material lleg en promedio casi 10 minutos despus.
Tabla E.16 Hora promedio en que examinador recibe los materiales
Hora promedio en que examinador recibe los materiales
DEPROV

7:53:14

Araucana

7:58:35

Los Lagos

7:55:00

Los Ros

7:42:44

Magallanes

7:15:00

INGEMAS

8:04:23

Antofagasta

7:59:12

Arica y Parinacota

8:25:00

Atacama

7:57:00

Coquimbo

8:03:49

Maule

7:54:25

OHiggins

8:16:34

Tarapac

8:10:00

Valparaso

8:00:49

USM

7:58:06

Biobo

8:03:57

Metropolitana

7:56:15

Total

7:59:13

La siguiente tabla presenta la distribucin en bloques y a partir de la cantidad de muestras obtenidas por
cada aplicador respecto a la recepcin del material en los establecimientos.
Tabla E.17 Distribucin hora en que examinador recibe los materiales de 4 bsico
Distribucin hora en que examinador recibe los materiales 4 bsico
Hora 8:15

Hora > 8:15

Total

DEPROV

84,6%

15,4%

100,0%

INGEMAS

72,8%

27,2%

100,0%

USM

81,9%

18,1%

100,0%

Total

79,6%

20,4%

100,0%

A continuacin se presentan los tiempos promedio de comienzo de cada mdulo observado.

Anexo E

203

Tabla E.18 Hora promedio de inicio de la prueba 4 bsico


Hora promedio de inicio de la prueba 4 bsico
Ciencias Naturales

Lenguaje

Matemtica

9:07:51

9:05:43

10:08:27

Araucana

9:06:56

9:10:00

10:33:00

Los Lagos

9:10:00

8:55:00

9:32:48

Los Ros

9:15:00

9:00:00

Magallanes

8:50:00

9:22:30

9:07:20

8:59:53

10:36:45

Antofagasta

8:57:30

8:48:40

10:15:40

Arica y Parinacota

9:11:00

9:05:00

10:19:00

Atacama

9:00:30

9:00:00

11:02:30

Coquimbo

9:05:00

9:01:00

10:35:26

Maule

9:07:20

9:13:20

10:45:00

OHiggins

9:13:45

8:57:00

10:40:30

Tarapac

9:10:48

9:07:30

11:13:20

Valparaso

9:04:44

8:55:23

10:23:49

DEPROV

INGEMAS

USM

9:05:42

9:00:01

10:24:57

Biobo

9:07:16

8:59:09

10:32:48

Metropolitana

9:05:09

9:00:18

10:22:28

9:06:31

9:00:43

10:26:11

Total

La siguiente tabla presenta la distribucin de las muestras obtenidas para la medicin del comienzo de
la prueba en el nivel observado. Solo considera los primeros mdulos del da.
Tabla E.19 Distribucin hora inicio prueba 4 bsico
Distribucin hora inicio prueba 4 bsico
Hora 9:15

Hora > 9:15

Total

DEPROV

85,3%

14,7%

100,0%

INGEMAS

89,3%

10,7%

100,0%

USM

88,4%

11,6%

100,0%

Total

88,2%

11,8%

100,0%

La siguiente tabla presenta la duracin promedio de aplicacin de la prueba. Este tiempo abarc desde el
comienzo de la prueba hasta el abandono del ltimo alumno de la sala.
Tabla E.20 Duracin promedio de aplicacin de la prueba, 4 bsico
Duracin promedio de la aplicacin por mdulo 4 bsico
DEPROV

1:12:54

Araucana

1:14:50

Los Lagos

1:11:09

Los Ros

1:12:26

Magallanes

0:57:30

INGEMAS

1:14:59

Antofagasta

204

1:23:43

Informe Tcnico Simce 2013

[continuacin]
Duracin promedio de la aplicacin por mdulo 4 bsico
Arica y Parinacota

1:07:20

Atacama

1:29:40

Coquimbo

1:18:55

Maule

1:20:00

OHiggins

1:10:25

Tarapac

1:20:51

Valparaso

1:08:25

USM

1:13:18

Biobo

1:10:04

Metropolitana

1:12:54

Total

1:14:50

La siguiente tabla presenta la distribucin de los tiempos promedios de duracin de los mdulos.
Tabla E.21 Distribucin duracin mdulo 4 bsico
Distribucin duracin mdulo 4 bsico
Duracin
00:45

< 00:45
Duracin 1:30

Duracin
1:30 >

Total

DEPROV

0,0%

94,9%

5,1%

100,0%

INGEMAS

0,0%

97,5%

2,5%

100,0%

USM

0,7%

94,5%

4,8%

100,0%

Total

0,4%

95,4%

4,2%

100,0%

2.6.3 Resultados 6 bsico


En las siguientes tablas se presentan los resultados para la aplicacin de 6 bsico a nivel nacional. Se
presentan, adems, los indicadores de tiempo relacionados con la aplicacin.
Tabla E.22 Resultados 6 bsico nivel nacional
Visita previa

Durante la
prueba

Post prueba

IDC

91,6%

87,4%

92,5%

88,3%

Araucana

93,6%

90,5%

85,6%

91,2%

Los Lagos

88,5%

85,5%

93,9%

87,4%

Los Ros

94,9%

87,1%

100,0%

91,1%

Magallanes

98,6%

87,2%

100,0%

92,5%

85,5%

84,5%

97,5%

86,1%

Antofagasta

78,0%

82,0%

100,0%

82,2%

Arica y Parinacota

80,0%

81,8%

100,0%

82,8%

Atacama

87,4%

89,7%

97,8%

89,6%

Coquimbo

79,7%

85,7%

85,8%

83,5%

Maule

91,9%

81,1%

100,0%

86,7%

OHiggins

100,0%

90,7%

98,1%

94,7%

Tarapac

91,7%

80,5%

100,0%

86,3%

Aplicacin 4 bsico
DEPROV

INGEMAS

Anexo E

205

[continuacin]
Aplicacin 4 bsico

Visita previa

Durante la
prueba

Post prueba

IDC

87,2%

85,1%

99,1%

87,1%

Valparaso
USM

89,5%

85,7%

94,4%

87,8%

Biobo

91,1%

81,8%

89,3%

85,8%

Metropolitana

88,7%

87,0%

96,1%

88,4%

88,5%

85,6%

95,2%

87,5%

Total

La siguiente tabla es una medicin del promedio de la hora en que el examinador recibi los materiales,
o bien la hora en que estos arribaron al establecimiento.
Tabla E.23 Hora promedio en que examinador recibe los materiales
Hora promedio en que examinador recibe los materiales
DEPROV

7:40:48

Araucana

7:43:15

Los Lagos

7:39:51

Los Ros

7:46:53

Magallanes

7:16:40

INGEMAS

7:55:02

Antofagasta

8:21:06

Arica y Parinacota

7:32:09

Atacama

7:49:00

Coquimbo

7:48:15

Maule

7:55:46

OHiggins

8:08:00

Tarapac

8:00:25

Valparaso

7:47:19

USM

7:47:11

Biobo

7:43:21

Metropolitana

7:48:26

Total

7:48:48

La siguiente tabla presenta la distribucin en bloques y a partir de la cantidad de muestras obtenidas por
cada aplicador respecto a la recepcin del material en los establecimientos.
Tabla E.24 Distribucin hora en que examinador recibe los materiales 6 bsico
Distribucin hora en que examinador recibe los materiales 6 bsico
Hora 8:15

Hora > 8:15

Total

DEPROV

93,9%

6,2%

100,0%

INGEMAS

80,5%

19,5%

100,0%

USM

90,0%

10,0%

100,0%

Total

87,6%

12,5%

100,0%

206

Informe Tcnico Simce 2013

A continuacin se presentan los tiempos promedio de comienzo de cada mdulo observado.


Tabla E.25 Hora promedio de inicio de la prueba 6 bsico
Hora promedio de inicio de la prueba 6 bsico
Matemtica

Lenguaje

Ciencias Naturales

Total

9:11:40

9:49:03

9:36:35

Araucana

9:04:30

10:01:55

9:43:47

Los Lagos

9:21:38

9:40:34

9:34:04

Los Ros

8:53:20

9:50:10

9:31:13

Magallanes

9:00:00

9:51:00

9:34:00

DEPROV

INGEMAS

9:31:59

9:36:26

10:00:00

9:34:52

Antofagasta

9:36:15

9:29:09

9:31:51

Arica y Parinacota

8:46:00

9:56:15

9:26:09

Atacama

9:55:00

9:42:30

9:47:30

Coquimbo

9:38:43

9:12:18

9:23:11

Maule

9:38:43

9:12:18

9:23:11

OHiggins

9:01:45

9:43:51

10:00:00

9:31:10

Tarapac

10:57:15

9:06:26

9:46:44

Valparaso

9:12:11

9:55:00

9:37:52

USM

9:22:14

9:47:50

10:15:00

9:38:08

Biobo

9:39:30

9:45:18

9:00:00

9:42:22

Metropolitana

9:16:19

9:48:40

11:30:00

9:36:42

9:24:10

9:44:24

10:10:00

9:36:54

Total

A continuacin se presenta la distribucin de la hora de inicio de la aplicacin de la prueba en promedio.


Tabla E.26 Distribucin hora inicio prueba 6 bsico
Distribucin hora inicio prueba 6 bsico
Hora 9:15

Hora > 9:15

Total

DEPROV

63,5%

36,5%

100,0%

INGEMAS

62,1%

37,9%

100,0%

USM

59,9%

40,2%

100,0%

Total

61,0%

39,0%

100,0%

A continuacin se presenta la distribucin de la duracin de la aplicacin de la prueba en promedio.


Tabla E.27 Distribucin promedio de la aplicacin 6 bsico
Duracin promedio de la aplicacin por mdulo 6bsico
DEPROV

1:18:45

Araucana

1:19:27

Los Lagos

1:17:39

Los Ros

1:24:00

Magallanes

1:10:20

INGEMAS

1:18:52

Anexo E

207

[continuacin]
Duracin promedio de la aplicacin por mdulo 6bsico
Antofagasta

1:24:35

Arica y Parinacota

1:17:30

Atacama

1:28:20

Coquimbo

1:19:42

Maule

1:17:53

OHiggins

1:11:15

Tarapac

1:14:00

Valparaso

1:18:30

USM

1:14:28

Biobo

1:13:21

Metropolitana

1:14:42

Total

1:16:27

A continuacin se presenta la distribucin de la duracin promedio de la aplicacin.


Tabla E.28 Distribucin duracin promedio aplicacin 6 bsico
Distribucin duracin prueba 6 bsico
00:45 Duracin 1:30

Duracin >1:30

Total

DEPROV

91,8%

8,2%

100,0%

INGEMAS

85,1%

14,9%

100,0%

USM

92,8%

7,2%

100,0%

Total

90,3%

9,7%

100,0%

2.6.4 Resultados 2 bsico


En las siguientes tablas se presentan los resultados del IDC obtenido para la aplicacin de 2 bsico a
nivel nacional. Se presentan, adems, los indicadores de tiempo relacionado con la aplicacin.

Visita previa

Durante la
prueba

Post prueba

IDC

92,6%

85,0%

79,6%

87,4%

Araucana

93,1%

83,1%

79,4%

86,4%

Los Lagos

91,5%

86,4%

81,8%

88,2%

Los Ros

95,8%

99,2%

81,8%

88,0%

Magallanes

0,0%

78,0%

0,0%

97,0%

Aplicacin 4 bsico
DEPROV

INGEMAS

208

83,3%

86,8%

81,8%

89,1%

Antofagasta

95,8%

90,7%

81,8%

85,3%

Arica y Parinacota

98,6%

95,1%

81,8%

92,0%

Atacama

87,4%

89,7%

81,8%

95,6%

Coquimbo

91,9%

88,4%

79,0%

88,5%

Maule

91,8%

90,5%

81,4%

89,1%

OHiggins

80,3%

92,0%

81,8%

90,5%

Informe Tcnico Simce 2013

Anexos

Tabla E.29 Resultados del IDC 2 bsico nivel nacional

[continuacin]
Aplicacin 4 bsico

Visita previa

Durante la
prueba

Post prueba

IDC

91,4%

90,2%

79,9%

87,3%

Tarapac
Valparaso

89,4%

87,3%

79,2%

90,0%

91,7%

85,0%

81,3%

87,6%

Biobo

88,2%

88,2%

78,3%

87,2%

Metropolitana

90,0%

87,7%

79,8%

87,7%

90,0%

84,7%

79,8%

88,1%

USM

Total

La siguiente tabla es una medicin del promedio de la hora en que el examinador recibi los materiales,
o bien la hora en que estos arribaron al establecimiento.
Tabla E.30 Hora promedio en que examinador recibe los materiales
Hora promedio en que examinador recibe los materiales
DEPROV

7:58:46

Araucana

8:11:51

Los Lagos

7:45:26

Los Ros

7:53:20

Magallanes

7:15:00

INGEMAS

8:02:04

Antofagasta

8:17:47

Arica y Parinacota

7:32:30

Atacama

7:35:00

Coquimbo

8:00:22

Maule

8:01:43

OHiggins

8:10:17

Tarapac

8:00:20

Valparaso

7:57:18

USM

7:52:41

Biobo

7:56:53

Metropolitana

7:50:54

Total

7:57:21

La siguiente tabla presenta la distribucin en bloques y a partir de la cantidad de muestras obtenidas por
cada aplicador respecto a la recepcin del material en los establecimientos.
Tabla E.31 Distribucin hora en que examinador recibe los materiales 2 bsico
Distribucin hora en que examinador recibe los materiales 2 bsico
Hora 8:15

Hora > 8:15

Total

DEPROV

75,0%

25,0%

100,0%

INGEMAS

72,3%

27,7%

100,0%

USM

87,2%

12,8%

100,0%

Total

79,3%

20,7%

100,0%

Anexo E

209

A continuacin se presentan los tiempos promedio de comienzo de cada mdulo observado.


Tabla E.32 Hora promedio de inicio prueba 2 bsico
Hora promedio de inicio de la prueba 2 basico
Lenguaje y Comunicacin
DEPROV

9:07:39

Araucana

9:03:30

Los Lagos

9:00:00

Los Ros

9:04:55

Magallanes

9:22:26

INGEMAS

8:45:00

Antofagasta

9:01:02

Arica y Parinacota

9:01:10

Atacama

8:54:00

Coquimbo

9:03:20

Maule

9:09:00

OHiggins

8:57:41

Tarapac

9:01:29

Valparaso

9:01:22

USM

8:59:49

Biobo

9:01:13

Metropolitana

9:02:51

Total

9:00:31

A continuacin se presenta la distribucin de la hora de inicio de la aplicacin de la prueba en promedio.


Tabla E.33 Distribucin hora inicio prueba 2 bsico
Distribucin hora inicio prueba 2 bsico
Hora 9:15

Hora > 9:15

Total

DEPROV

88,2%

11,8%

100,0%

INGEMAS

97,1%

2,9%

100,0%

USM

92,7%

7,3%

100,0%

Total

93,4%

6,6%

100,0%

A continuacin se presenta la distribucin de la duracin de la aplicacin de la prueba en promedio.

210

Informe Tcnico Simce 2013

Tabla E.34 Duracin promedio de la aplicacin por mdulo 2 bsico


Duracin promedio de la aplicacin por mdulo 2 bsico
DEPROV

1:11:41

Araucana

1:09:21

Los Lagos

1:13:05

Los Ros

1:15:37

Magallanes

1:03:00

INGEMAS

1:12:43

Antofagasta

1:06:56

Arica y Parinacota

1:13:30

Atacama

1:30:50

Coquimbo

1:20:00

Maule

1:10:47

OHiggins

1:15:14

Tarapac

1:07:50

Valparaso

1:10:56

USM

1:11:59

Biobo

1:12:02

Metropolitana

1:11:58

Total

1:12:12

A continuacin se presenta la distribucin de la duracin de la aplicacin de la prueba en promedio.


Tabla E.35 Distribucin de la duracin promedio de la aplicacin de la prueba 2 bsico
Distribucin duracin prueba 2 bsico
00:45 Duracin 1:30

Duracin >1:30

Total

DEPROV

82,6%

17,4%

100,0%

INGEMAS

83,2%

16,8%

100,0%

USM

81,9%

18,1%

100,0%

Total

82,5%

17,5%

100,0%

2.6.5 Resultados II medio


En los siguientes cuadros se presentan los resultados del IDC obtenido para la aplicacin de II medio a
nivel nacional. Se presentan, adems, los indicadores de tiempo relacionado con la aplicacin.

Anexo E

211

Tabla E.36 Resultados IDC para II medio nivel nacional


Visita previa

Durante la
prueba

Post prueba

IDC

81,6%

82,9%

98,1%

83,9%

Araucana

79,8%

78,8%

96,2%

80,7%

Los Lagos

82,5%

86,0%

99,7%

85,9%

Los Ros

85,6%

87,2%

100,0%

88,1%

Magallanes

81,7%

89,6%

100,0%

87,8%

Aplicacin II medio
DEPROV

INGEMAS

79,7%

82,6%

98,2%

83,2%

Antofagasta

67,9%

79,5%

99,5%

77,1%

Arica y Parinacota

89,8%

73,7%

100,0%

81,8%

Atacama

81,9%

84,3%

100,0%

84,8%

Coquimbo

78,9%

79,7%

100,0%

81,9%

Maule

84,3%

83,3%

100,0%

85,5%

OHiggins

73,2%

84,7%

93,4%

81,9%

Tarapac

85,9%

83,6%

100,0%

85,8%

Valparaso

81,2%

83,5%

98,1%

84,0%

82,4%

81,7%

96,8%

83,2%

Biobo

84,7%

80,2%

93,9%

82,9%

Metropolitana

81,6%

82,2%

97,9%

83,2%

81,4%

82,2%

97,5%

83,3%

USM

Total

La siguiente tabla es una medicin del promedio de la hora en que el examinador recibi los materiales,
o bien la hora en que estos arribaron al establecimiento.
Tabla E.37 Hora promedio en que examinador recibe materiales
Hora promedio en que examinador recibe los materiales
DEPROV

7:56:36

Araucana

8:10:00

Los Lagos

7:41:51

Los Ros

7:51:15

Magallanes

7:45:00

INGEMAS

8:06:06

Antofagasta

8:21:20

Arica y Parinacota

8:27:30

Atacama

7:46:34

Coquimbo

8:20:00

Maule

8:06:26

OHiggins

8:03:25

Tarapac

8:06:30

Valparaso

7:59:55

USM

7:59:29

Biobo

8:05:53

Metropolitana

7:57:02

Total

212

8:01:20

Informe Tcnico Simce 2013

La siguiente tabla presenta la distribucin en bloques y a partir de la cantidad de muestras obtenidas por
cada aplicador respecto a la recepcin del material en los establecimientos.
Tabla E.38 Distribucin hora en que examinador recibe los materiales II medio
Distribucin hora en que examinador recibe los materiales II medio
Hora 8:15

Hora > 8:15

Total

DEPROV

79,3%

20,8%

100,0%

INGEMAS

69,4%

30,6%

100,0%

USM

80,8%

19,2%

100,0%

Total

76,6%

23,4%

100,0%

A continuacin se presentan los tiempos promedio de comienzo de cada mdulo observado.


Tabla E.39 Hora promedio de inicio de la prueba II medio
Hora promedio de inicio de la prueba II medio
Matemtica
DEPROV

9:02:39

Araucana

9:05:47

Los Lagos

9:02:45

Los Ros

8:55:00

Magallanes

8:50:00

INGEMAS

9:02:27

Antofagasta

9:08:00

Arica y Parinacota

9:06:45

Atacama

9:04:34

Coquimbo

9:05:45

Maule

9:00:27

OHiggins

9:00:40

Tarapac

8:58:00

Valparaso

9:01:35

USM

9:03:07

Biobo

9:04:51

Metropolitana

9:02:31

Total

9:02:48

A continuacin se presenta la distribucin del inicio de la prueba segn los estndares definidos por la
Agencia.

Anexo E

213

Tabla E.40 Distribucin hora inicio prueba II medio


Distribucin hora inicio prueba II medio
Hora 9:15

Hora > 9:15

Total

DEPROV

88,2%

11,8%

100,0%

INGEMAS

97,1%

2,9%

100,0%

USM

92,7%

7,3%

100,0%

Total

93,4%

6,6%

100,0%

A continuacin se presenta la distribucin de la duracin de la aplicacin de la prueba en promedio.


Tabla E.41 Duracin promedio aplicacin II medio
Duracin promedio de la aplicacin por mdulo II medio
DEPROV

1:11:41

Araucana

1:09:21

Los Lagos

1:13:05

Los Ros

1:15:37

Magallanes

1:03:00

INGEMAS

1:12:43

Antofagasta

1:06:56

Arica y Parinacota

1:13:30

Atacama

1:30:50

Coquimbo

1:20:00

Maule

1:10:47

OHiggins

1:15:14

Tarapac

1:07:50

Valparaso

1:10:56

USM

1:11:59

Biobo

1:12:02

Metropolitana

1:11:58

Total

1:12:12

A continuacin se presenta la distribucin de la duracin promedio de la aplicacin.


Tabla E.42 Distribucin duracin prueba II medio
Distribucin duracin prueba II medio
00:30 Duracin 1:30

Duracin >1:30

Total

DEPROV

82,6%

17,4%

100,0%

INGEMAS

83,2%

16,8%

100,0%

USM

81,9%

18,1%

100,0%

Total

82,5%

17,5%

100,0%

214

Informe Tcnico Simce 2013

Anexo F
Roles y responsabilidades del personal
involucrado en aplicacin Simce 2013
Jefe de proyecto

Coordinar el proceso completo.

Coordinar las actividades de otros proveedores que participaron en el proceso de Simce 2013
(impresin, distribucin y captura).

Deben tener responsabilidad directa sobre las jefaturas de: Logstica y Seguridad, Centro de Gestin
Operacional, Informtica, RRHH, Seleccin, Capacitacin, Jefes Regionales, Coordinadores de Zonas.

Informar a la Agencia los avances del proceso y la deteccin de irregularidades.

Velar por el correcto desarrollo de los procesos.

Conocer a cabalidad los procedimientos de aplicacin descritos en el Manual de Aplicacin, para


asegurar el buen cumplimiento de su rol y para verificar el correcto desempeo de supervisores y
examinadores.

Cumplir los procesos de acuerdo con las fechas, cronograma e instrucciones establecidas por el
Simce.

Asistir puntualmente a todas las actividades a las cuales sea citado.

Organizar y coordinar el proceso de seleccin de examinadores idneos para la aplicacin de las


pruebas Simce.

Apoyar el proceso de distribucin del material que la Agencia informe, en la entrega y retiro del
material de aplicacin de los centros de operaciones del proveedor adjudicado.

Verificar que los supervisores realicen sus labores de manera completa e intachable. Verificar el
proceso de asignacin de cursos a los examinadores.

Verificar el cronograma y ejecuciones de las visitas previas.

Cuidar de la presentacin personal y vestimenta del personal a cargo de la aplicacin de las pruebas.

Estar disponible en todo momento de la aplicacin para prestar asistencia a los supervisores.

Contar con conectividad (celular o conexin a internet) que permita una correcta coordinacin.

Elaboracin y entrega formal de los productos solicitados.

215

Supervisores

Conocer a cabalidad los procedimientos de aplicacin descritos en el Manual de Aplicacin, para


asegurar el buen cumplimiento de su rol, verificar el correcto desempeo de los examinadores,
resolver dudas que se presenten o apoyarlos frente a situaciones inesperadas.

Cumplir los procesos de acuerdo con las fechas, cronogramas e instrucciones establecidas por
el Simce.

Llevar a cabo o apoyar el proceso de seleccin de examinadores idneos para la aplicacin de las
pruebas Simce.

Participar en la organizacin, entrega y recepcin del material de aplicacin, asegurando su integridad


y confidencialidad, tanto en la entrega de materiales a los examinadores como en su devolucin.

Verificar que cada da los examinadores cuenten con cada uno de los documentos y materiales
necesarios para llevar a cabo la aplicacin.

Ser responsable de todo material complementario.

Asignar a los examinadores un curso y establecimiento donde debern desempearse y comunicar


esta informacin.

Organizar la fecha y horario de realizacin de la visita previa al establecimiento.

Verificar y validar la informacin de los formularios de control en la visita previa.

Realizar a cabalidad las acciones requeridas en la visita previa al establecimiento.

Dejar registro de la fecha y hora de la realizacin de la visita previa.

Completar correctamente la informacin requerida en el Formulario de Supervisin.

Cuidar presentacin personal y vestimenta.

Estar disponible en todo momento de la aplicacin para prestar asistencia a los examinadores a
su cargo.

Contar con conectividad (acceso celular, internet) y movilizacin.

Examinador

Conocer a cabalidad los procedimientos de aplicacin descritos en el Manual de Aplicacin para


asegurar el buen cumplimiento de su rol.

Asistir puntualmente a todas las actividades a las que sea citado.

Cumplir con las fechas y horarios sealados en el cronograma establecido en el Manual de Aplicacin.

Velar por la seguridad y confidencialidad de todo material que reciba, evitando prdidas o
reproduccin total o parcial de cualquiera de los documento.

216

Informe Tcnico Simce 2013

Entregar a la Agencia toda la informacin requerida.

Realizar, en conjunto con el supervisor, la visita previa al establecimiento asignado.

Asegurar las condiciones adecuadas para que los estudiantes respondan las pruebas.

Ejecutar en forma estricta todos los procedimientos recibidos en la capacitacin.

Realizar de manera perfecta la cuadratura del material, segn lo indicado en el Manual de Operaciones.

Registrar correctamente la informacin solicitada en todos los formularios de control.

Asegurar las condiciones adecuadas para que los estudiantes respondan las pruebas; ambiente de
trabajo acorde a la importancia de esta prueba (tranquilo y silencioso).

Validar el registro de cuadratura de la informacin y/o registro de errores en la Plataforma Integrada


de Trazabilidad (PIT).

Cuidar presentacin personal y vestimenta.

Contar con celular que permita tomar contacto con su supervisor. Si el celular tiene cmara
fotogrfica o video, no debe utilizarla en ningn momento del servicio.

Jefe de operaciones y seguridad

Responsable de la zonificacin y ubicacin de los centros de operaciones.

Responsable de los centros de acopio, y de verificar la correcta cuadratura del material entregado.

Coordinar los servicios de transporte a los establecimientos educacionales.

Realizar el control de calidad de las diferentes actividades y sobre todo de la seguridad del material
de pruebas, con el personal de bodega y vigilancia bajo su responsabilidad.

Responsable de implementar los controles y procesos que permitan determinar la trazabilidad del
material.

Jefe de centro de gestin operacional

Profesional del rea de operaciones a cargo del procedimiento de control de procesos, debe
monitorear e informar el estado de cada una de las etapas, en los tiempos planificados y requeridos
por el Ministerio para las distintas operaciones requeridas en el servicio.

Jefe de informtica

Profesional responsable de las aplicaciones que soportarn el sistema de gestin propuesto para
la aplicacin. Ser el responsable de mantener y realizar las adecuaciones que correspondan al
sistema de informacin y/o gestin del proyecto. Responsable de toda plataforma tecnolgica y
telefnica, hardware, comunicaciones, etc.

Anexo F

217

Jefe de personal

Responsable, junto con su equipo de trabajo, de disear e implementar los procedimientos de


contratacin y mantencin del personal, como tambin de velar por el cumplimiento de las
normativas legales en esta materia.

Jefe de seleccin

Responsable de llevar a cabo los procedimientos de convocatoria y seleccin de personal, aplicacin


del test de habilidades conductuales y prueba de seleccin final.

Jefe de capacitacin

Responsable de llevar a cabo procedimientos de capacitacin y contratacin de coordinadores,


supervisores y examinadores. Debe articular la infraestructura para almacenamiento de material
transitorio, salas de capacitacin, fechas y horarios de capacitacin.

Inhabilidades de los cargos

Estar condenado por crimen o simple delito.

Estar procesado.

Estar mal evaluado en aplicaciones Simce anteriores.

Ser docente de los sectores y niveles que se evaluarn.

Estar o haber estado vinculado laboralmente con el establecimiento eduacional asignado para la
aplicacin.

Supervisores y examinadores no podrn tener relacin de parentesco hasta de segundo grado con
sostenedores, directores, docentes o personal del establecimiento educacional, ni haber realizado
sus estudios en el establecimiento.

Haber realizado sus estudios en el o los establecimientos en los que tengan participacin directa.

218

Informe Tcnico Simce 2013

Anexo G
Estadsticos pruebas
Simce 2013
Tabla G.1 Estadsticos pruebas censales 2013
Grado
2 bsico
4 bsico

6 bsico

8 bsico

II medio

Asignatura

Promedio

Desviacin estndar

Lectura

254 4

50

Lectura

264 -3

51

Matemtica

256 -5

52

Ciencias

255 -4

45

Lectura

250

50

Matemtica

250

50

Escritura

150

10

Lectura

255 1

50

Matemtica

262 3

48

Ciencias

272 10

48

Lectura

254 -5

56

Matemtica

267 2

65

Tabla G.2 Confiabilidades por forma


Grado

Asignatura
Lectura

2 bsico

Lectura

4 bsico

Matemtica

Ciencias

Forma

Confiabilidad

0,84

0,84

0,86

0,91

0,90

0,91

0,93

0,89

0,89

0,93

0,85

0,84

219

[continuacin]
Grado

Asignatura
Lectura

Matemtica

6 bsico

Escritura

0,89

0,88

0,88

0,89

0,90

0,91

0,74

0,73
0,73

0,75

0,69

0,71

0,76

0,77

0,90

0,89

0,87

0,87

Ciencias

0,81

0,83

Lectura

0,91

0,90

0,90

0,92

0,91

Matemtica

II medio
Matemtica

220

Confiabilidad

Lectura

8 bsico

Forma

Informe Tcnico Simce 2013

Anexo H
Resultados de anlisis factorial
exploratorio Simce 2013
1. Scree Plot
Figura H.1 Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma A

Figura H.2 Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma B

221

Figura H.3 Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma C

Figura H.4 Scree Plot 2 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma D

222

Informe Tcnico Simce 2013

Figura H.5 Scree Plot 4 bsico, Ciencias, Forma A

Figura H.6 Scree Plot 4 bsico, Ciencias, Forma B

Anexo H

223

Figura H.7 Scree Plot 4 bsico, Matemtica, Forma C

Figura H.8 Scree Plot 4 bsico, Matemtica, Forma D

224

Informe Tcnico Simce 2013

Figura H.9 Scree Plot 4 bsico, Matemtica, Forma E

Figura H.10 Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma G

Anexo H

225

Figura H.11 Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma H

Figura H.12 Scree Plot 4 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma I

226

Informe Tcnico Simce 2013

Figura H.13 Scree Plot 6 bsico, Matemtica, Forma A

Figura H.14 Scree Plot 6 bsico, Matemtica, Forma B

Anexo H

227

Figura H.15 Scree Plot 6 bsico, Matemtica, Forma C

Figura H.16 Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma O

228

Informe Tcnico Simce 2013

Figura H.17 Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma P

Figura H.18 Scree Plot 6 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma S

Anexo H

229

Figura H.19 Scree Plot 8 bsico, Ciencias, Forma A

Figura H.20 Scree Plot 8 bsico, Ciencias, Forma B

230

Informe Tcnico Simce 2013

Figura H.21 Scree Plot 8 bsico, Matemtica, Forma C

Figura H.22 Scree Plot 8 bsico, Matemtica, Forma D

Anexo H

231

Figura H.23 Scree Plot 8 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma E

Figura H.24 Scree Plot 8 bsico, Lenguaje y Comunicacin: Comprensin de Lectura, Forma G

232

Informe Tcnico Simce 2013

Figura H.25 Scree Plot II medio, Matemtica, Forma A

Figura H.26 Scree Plot II medio, Matemtica, Forma B

Anexo H

233

Figura H.27 Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma C

Figura H.28 Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma D

234

Informe Tcnico Simce 2013

Figura H.29 Scree Plot II medio, Lenguaje y Comunicacin: Comprensin de Lectura, Forma E

2.

ndice de ajuste del modelo factorial exploratorio

A continuacin se presentan los ndices de ajuste del modelo factorial exploratorio, con un factor para
cada nivel y forma de la prueba censal Simce 2013.
La literatura sugiere tres puntos de corte sobre 0,95 para los ndices CFI (Comparative Fit Index) y TLI, ya
que ambos buscan cuantificar las mejoras del modelo propuesto respecto al modelo nulo. Una ventaja
del primer ndice es que no es sensible a los tamaos muestrales, por lo que funciona de buena manera
independiente del tamao que se tenga. Este ndice tambin es conocido como ndice de Bentler,
mientras que TLI es conocido tambin como NNFI (Non Normed Fit Index) o ndice de Tucker Lewis. Para
RMSEA, dado que busca estimar los errores, debe ser lo ms pequeo posible, proponiendo la literatura
valores inferiores a 0,05 para considerar un buen ajuste del modelo propuesto4.

2 bsico
Tabla H.1 ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma A

ndices de ajuste

1 Factor

RMSEA

0,039

CFI

0,955

TLI

0,950

En el caso de que alguno de estos criterios no fuera satisfecho, pero en el grfico screen plot observa un nico factor predominante, se puede
afirmar que la forma analizada es unidimensional.

Anexo H

235

Tabla H.2 ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma B


ndices de ajuste

1 Factor

RMSEA

0,034

CFI

0,966

TLI

0,962

Tabla H.3 ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma C


ndices de ajuste

1 Factor

RMSEA

0,036

CFI

0,968

TLI

0,964

Tabla H.4 ndices de ajuste, 2 bsico, Comprensin de Lectura, Forma D


ndices de ajuste

1 Factor

RMSEA

0,027

CFI

0,967

TLI

0,965

4 bsico
Tabla H.5 ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma G
ndices de ajuste

1 Factor

RMSEA

0,027

CFI

0,980

TLI

0,978

Tabla H.6 ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma H


ndices de ajuste

1 Factor

RMSEA

0,024

CFI

0,986

TLI

0,985

Tabla H.7 ndices de ajuste, 4 bsico, Comprensin de Lectura, Forma I

236

ndices de ajuste

1 Factor

RMSEA

0,020

CFI

0,982

TLI

0,981

Informe Tcnico Simce 2013

Tabla H.8 ndices de ajuste, 4 bsico, Matemtica, Forma C


ndices de ajuste

1 Factor

RMSEA

0,029

CFI

0,966

TLI

0,964

Tabla H.9 ndices de ajuste, 4 bsico, Matemtica, Forma D


ndices de ajuste

1 Factor

RMSEA

0,030

CFI

0,963

TLI

0,961

Tabla H.10 ndices de ajuste, 4 bsico, Matemtica, Forma E


ndices de ajuste

1 Factor

RMSEA

0,027

CFI

0,957

TLI

0,955

Tabla H.11 ndices de ajuste, 4 bsico, Ciencias Naturales, Forma A


ndices de ajuste

1 Factor

RMSEA

0,023

CFI

0,977

TLI

0,975

Tabla H.12 ndices de ajuste, 4 bsico, Ciencias Naturales, Forma B


ndices de ajuste

1 Factor

RMSEA

0,025

CFI

0,970

TLI

0,968

6 bsico
Tabla H.13 ndices de ajuste, 6 bsico, Lectura, Forma O
ndices de ajuste

1 Factor

RMSEA

0,033

CFI

0,957

TLI

0,954

Anexo H

237

Tabla H.14 ndices de ajuste, 6 bsico, Lectura, Forma P


ndices de ajuste

1 Factor

RMSEA

0,030

CFI

0,964

TLI

0,962

Tabla H.15 ndices de ajuste, 6 bsico, Lectura, Forma S


ndices de ajuste

1 Factor

RMSEA

0,022

CFI

0,975

TLI

0,974

Tabla H.16 ndices de ajuste, 6 bsico, Matemtica, Forma A


ndices de ajuste

1 Factor

RMSEA

0,029

CFI

0,960

TLI

0,957

Tabla H.17 ndices de ajuste, 6 bsico, Matemtica, Forma B


ndices de ajuste

1 Factor

RMSEA

0,033

CFI

0,946

TLI

0,943

Tabla H.18 ndices de ajuste, 6 bsico, Matemtica, Forma C


ndices de ajuste

1 Factor

RMSEA

0,028

CFI

0,917

TLI

0,914

8 bsico
Tabla H.19 ndices de ajuste, 8 bsico, Lectura, Forma E

238

ndices de ajuste

1 Factor

RMSEA

0,032

CFI

0,957

TLI

0,954

Informe Tcnico Simce 2013

Tabla H.20 ndices de ajuste, 8 bsico, Lectura, Forma G


ndices de ajuste

1 Factor

RMSEA

0,025

CFI

0,974

TLI

0,972

Tabla H.21 ndices de ajuste, 8 bsico, Matemtica, Forma C


ndices de ajuste

1 Factor

RMSEA

0,031

CFI

0,953

TLI

0,950

Tabla H.22 ndices de ajuste, 8 bsico, Matemtica, Forma D


ndices de ajuste

1 Factor

RMSEA

0,026

CFI

0,962

TLI

0,960

Tabla H.23 ndices de ajuste, 8 bsico, Ciencias, Forma A


ndices de ajuste

1 Factor

RMSEA

0,019

CFI

0,974

TLI

0,973

Tabla H.24 ndices de ajuste, 8 bsico, Ciencias, Forma B


ndices de ajuste

1 Factor

RMSEA

0,017

CFI

0,981

TLI

0,979

II medio
Tabla H.25 ndices de ajuste, II medio, Lectura, Forma C
ndices de ajuste

1 Factor

RMSEA

0,044

CFI

0,932

TLI

0,927

Anexo H

239

Tabla H.26 ndices de ajuste, II medio, Lectura, Forma D


ndices de ajuste

1 Factor

RMSEA

0,035

CFI

0,948

TLI

0,945

Tabla H.27 ndices de ajuste, II medio, Lectura, Forma E


ndices de ajuste

1 Factor

RMSEA

0,033

CFI

0,956

TLI

0,954

Tabla H.28 ndices de ajuste, II medio, Matemtica, Forma A


ndices de ajuste

1 Factor

RMSEA

0,034

CFI

0,960

TLI

0,958

Tabla H.29 ndices de ajuste, II medio, Matemtica, Forma B

240

ndices de ajuste

1 Factor

RMSEA

0,037

CFI

0,941

TLI

0,938

Informe Tcnico Simce 2013

Anexo I
Parmetros y curvas caractersticas y de
informacin de las pruebas Simce 2013
Este anexo contiene informacin relativa a los parmetros de los tems de las pruebas Simce 2013.
Adicionalmente, se adjunta las curvas caractersticas, de informacin y de error estndar de medida de
cada prueba, de acuerdo al grado y asignatura medida.

Prueba 2 bsico: Lenguaje y Comunicacin: Comprensin de Lectura


Tabla I.1 Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin: Comprensin de Lectura
2 bsico 2012
ID_
TEM

ID_
TIPO

CLAVE

%_A
_2013

%_B
_2013

%_C
_2013

%_
OMIT
_2013

CORR_
A_
2013

CORR_
B_
2013

CORR_
C_
2013

DISC_
IRT
_2013

DIFIC_
IRT_
2013

AZAR_
IRT_
2013

RP67
_2013

tem 1

Cerrada

3,43

94,14

1,86

0,58

-0,23

0,29

-0,17

1,183

-2,174

0,000

153

tem 2

Cerrada

6,27

5,87

86,95

0,92

-0,23

-0,25

0,35

1,101

-1,424

0,124

189

tem 3

Cerrada

88,46

7,46

3,06

1,01

0,33

-0,24

-0,22

0,994

-1,742

0,014

179

tem 4

Cerrada

4,35

3,76

91,14

0,75

-0,22

-0,18

0,30

0,926

-2,109

0,000

162

tem 5

Cerrada

91,28

4,46

3,38

0,87

0,29

-0,22

-0,18

1,009

-1,801

0,057

173

tem 6

Cerrada

15,43

12,23

62,41

9,93

-0,30

-0,20

0,39

0,751

-0,470

0,192

242

tem 7

Cerrada

7,22

4,82

87,18

0,77

-0,29

-0,31

0,44

1,238

-1,262

0,068

199

tem 8

Cerrada

12,42

80,59

5,90

1,09

-0,30

0,44

-0,29

1,066

-1,012

0,150

211

tem 9

Cerrada

90,73

4,66

3,19

1,42

0,40

-0,30

-0,26

1,503

-1,342

0,197

187

tem 10

Cerrada

4,11

12,75

81,91

1,24

-0,25

-0,28

0,39

1,072

-1,040

0,188

207

tem 11

Cerrada

9,24

8,39

80,86

1,51

-0,22

-0,28

0,37

0,974

-1,042

0,187

208

tem 12

Cerrada

7,71

83,27

7,30

1,71

-0,27

0,38

-0,25

1,166

-1,061

0,226

202

tem 13

Cerrada

7,84

82,82

7,71

1,63

-0,33

0,42

-0,23

1,071

-0,888

0,356

202

tem 14

Cerrada

70,85

10,91

16,08

2,16

0,39

-0,33

-0,19

0,783

-0,490

0,262

234

tem 15

Cerrada

29,92

19,83

47,68

2,57

0,24

0,04

-0,26

1,081

1,284

0,166

335

tem 16

Cerrada

9,69

82,51

6,04

1,76

-0,29

0,39

-0,24

1,703

-0,580

0,430

214

tem 17

Cerrada

9,28

18,86

69,60

2,26

-0,25

-0,27

0,40

1,425

-0,169

0,308

245

tem 18

Cerrada

17,62

19,06

60,88

2,45

-0,24

-0,14

0,31

0,986

0,213

0,306

267

tem 19

Cerrada

20,21

27,67

50,45

1,67

-0,18

-0,27

0,39

1,369

0,476

0,239

284

tem 21

Cerrada

19,75

29,81

48,61

1,84

-0,26

-0,24

0,42

2,515

0,415

0,193

279

tem 22

Cerrada

63,74

19,71

14,50

2,05

0,36

-0,22

-0,23

2,447

0,288

0,392

266

tem 24

Cerrada

4,17

92,37

2,62

0,84

-0,22

0,28

-0,17

0,747

-2,329

0,149

145

tem 26

Cerrada

3,64

94,41

1,43

0,52

-0,20

0,27

-0,18

0,832

-2,619

0,000

136

tem 27

Cerrada

14,55

8,57

76,14

0,74

-0,23

-0,22

0,34

0,703

-0,804

0,276

216

Anexo I

241

[continuacin]
ID_
TEM

ID_
TIPO

CLAVE

%_A
_2013

%_B
_2013

%_C
_2013

%_
OMIT
_2013

CORR_
A_
2013

CORR_
B_
2013

CORR_
C_
2013

DISC_
IRT
_2013

DIFIC_
IRT_
2013

AZAR_
IRT_
2013

RP67
_2013

tem 28

Cerrada

4,08

14,06

80,91

0,95

-0,22

-0,30

0,38

0,850

-0,955

0,239

210

tem 29

Cerrada

10,36

8,89

79,39

1,36

-0,36

-0,31

0,50

1,235

-0,696

0,152

226

tem 30

Cerrada

65,85

16,13

16,25

1,78

0,46

-0,34

-0,24

1,439

0,120

0,274

263

tem 31

Cerrada

16,89

8,89

71,16

3,06

-0,19

-0,27

0,34

0,848

-0,354

0,302

237

tem 32

Cerrada

19,97

55,69

21,61

2,73

-0,20

0,31

-0,18

1,022

0,577

0,325

285

tem 33

Cerrada

8,68

11,75

76,74

2,83

-0,24

-0,32

0,43

1,180

-0,519

0,323

225

tem 34

Cerrada

42,98

10,15

43,93

2,94

-0,07

-0,32

0,27

1,997

0,947

0,303

305

tem 36

Cerrada

22,79

2,67

73,37

1,17

-0,31

-0,18

0,37

1,042

-0,883

0,106

220

tem 37

Cerrada

16,33

5,35

76,83

1,50

-0,24

-0,23

0,34

1,108

-0,911

0,257

209

tem 39

Cerrada

7,86

72,25

18,29

1,61

-0,17

0,36

-0,29

1,511

-0,298

0,299

238

tem 40

Cerrada

8,60

83,97

5,81

1,63

-0,26

0,30

-0,14

1,059

-0,925

0,388

197

tem 41

Cerrada

74,65

12,64

10,76

1,95

0,37

-0,27

-0,22

1,692

-0,451

0,301

230

tem 42

Cerrada

72,25

11,76

13,56

2,43

0,34

-0,23

-0,22

1,734

-0,212

0,349

240

tem 43

Cerrada

19,59

60,18

16,82

3,40

-0,14

0,23

-0,14

0,793

0,160

0,306

265

Tabla I.2 Parmetros preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura 2 bsico 2013
ID_
TEM

ID_
TIPO

CLAVE

%_
INCORR

%_
PARC

%_
CORR

%_
OMITA

CORR_
AB

DISC_
IRT

DIFIC_CORR_
IRT

RP67_
CORR

tem 20

Abierta

n/a

59,87

35,82

4,31

0,51

0,832

0,526

308

tem 23

Abierta

n/a

71,63

5,62

16,47

6,28

0,53

1,218

1,227

338

tem 25

Abierta

n/a

38,57

57,88

3,55

0,52

0,743

-0,314

266

tem 35

Abierta

n/a

30,75

65,43

3,83

0,52

0,758

-0,721

243

Tabla I.3 tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 2 bsico 2013
ID_
TEM

ID_
TIPO

tem 38

Cerrada

CLAVE

%_A

%_B

%_C

%_OMIT

CORR_A

CORR_B

CORR_C

26,06

67,85

5,01

1,08

-0,22

0,28

-0,14

Tabla I.4 Descripciones de campos correspondientes a tablas I.1, I.2 e I.3


Referencia
Identificacin
Clave

242

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

Informe Tcnico Simce 2013

MOTIVO
Ajuste

[continuacin]
Referencia

Datos mtricos
cerradas

Datos mtricos
abiertas

Nombre del campo

Descripcin de campo

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

(considerando el parmetro de azar).

Figura I.1 Curva caracterstica de la prueba, 2 bsico, Lenguaje y Comunicacin:


Comprensin de Lectura 2013

Anexo I

243

Figura I.2 Curva de informacin de la prueba, 2 bsico, Lenguaje y Comunicacin:


Comprensin de Lectura 2013

Prueba 4 bsico: Lenguaje y Comunicacin: Comprensin de Lectura


Tabla I.5 Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin: Comprensin de Lectura
4 bsico Simce 2013
%_
CORR CORR CORR CORR DISC_ DIFIC_ AZAR
CLA- %_A_ %_B_ %_C_ %_D_
RP67
OMIT_
_A
_B
_C
_D
IRT
IRT
_IRT
VE 2013 2013 2013 2013
_2013
2013 _2013 _2013 _2013 _2013 _2013 _2013 _2013

ID_
TEM

ID_
TIPO

tem 1

Cerrada

6,41

9,01

4,23

80,16

0,19

-0,24

-0,17

-0,17

0,36

0,776

-1,080

0,053

221

tem 2

Cerrada

2,40

6,30

18,85

72,23

0,23

-0,15

-0,22

-0,26

0,40

1,048

-0,309

0,247

246

tem 3

Cerrada

1,92

16,82

3,33

77,69

0,23

-0,13

-0,18

-0,18

0,28

0,617

-1,096

0,069

226

tem 4

Cerrada

2,27

2,52

87,33

7,63

0,25

-0,17

-0,15

0,30

-0,19

0,761

-1,548

0,074

194

tem 5

Cerrada

2,83

5,77

81,79

9,34

0,27

-0,20

-0,24

0,40

-0,22

0,976

-0,905

0,139

221

tem 6

Cerrada

12,05

8,27

2,68

76,73

0,27

-0,28

-0,21

-0,17

0,42

0,945

-0,753

0,061

234

tem 7

Cerrada

4,82

6,19

3,99

84,69

0,32

-0,29

-0,30

-0,24

0,51

1,856

-0,845

0,164

215

tem 8

Cerrada

5,12

8,20

7,28

78,87

0,53

-0,23

-0,28

-0,26

0,48

1,274

-0,684

0,146

229

tem 9

Cerrada

5,87

73,74

13,43

6,49

0,47

-0,28

0,47

-0,23

-0,25

1,132

-0,504

0,127

241

tem 10 Cerrada

6,24

10,60

8,09

74,62

0,46

-0,23

-0,36

-0,22

0,52

1,490

-0,421

0,159

241

tem 11 Cerrada

11,51

76,57

5,64

5,85

0,43

-0,32

0,52

-0,24

-0,26

1,539

-0,473

0,183

237

tem 12 Cerrada

13,73

66,18

11,60

8,00

0,48

-0,18

0,42

-0,27

-0,18

0,951

-0,152

0,169

261

tem 13 Cerrada

17,22

6,19

12,54

63,38

0,67

-0,25

-0,22

-0,15

0,41

0,962

-0,008

0,182

268

tem 15 Cerrada

5,08

63,09

19,35

12,00

0,48

-0,28

0,42

-0,16

-0,24

1,254

0,165

0,249

271

244

Informe Tcnico Simce 2013

[continuacin]
ID_
TEM

ID_
TIPO

%_
CORR CORR CORR CORR DISC_ DIFIC_ AZAR
CLA- %_A_ %_B_ %_C_ %_D_
RP67
OMIT_
_A
_B
_C
_D
IRT
IRT
_IRT
VE 2013 2013 2013 2013
_2013
2013 _2013 _2013 _2013 _2013 _2013 _2013 _2013

tem 16 Cerrada

6,82

5,33

80,11

7,23

0,51

-0,29

-0,29

0,50

-0,24

1,584

-0,579

0,229

229

tem 17 Cerrada

17,53

60,17

11,99

9,37

0,93

-0,20

0,43

-0,21

-0,21

1,647

0,346

0,280

278

tem 18 Cerrada

21,04

13,20

10,85

53,85

1,05

-0,18

-0,27

-0,19

0,45

1,396

0,376

0,180

285

tem 19 Cerrada

7,67

70,70

8,03

12,75

0,85

-0,23

0,42

-0,21

-0,21

1,099

-0,160

0,269

252

tem 20 Cerrada

11,90

12,50

57,34

17,46

0,79

-0,24

-0,25

0,41

-0,11

1,391

0,406

0,231

285

tem 21 Cerrada

17,36

53,95

19,97

7,59

1,13

-0,13

0,40

-0,24

-0,21

1,855

0,535

0,240

290

tem 23 Cerrada

38,03

5,46

54,14

1,81

0,56

-0,23

-0,22

0,36

-0,16

0,839

0,485

0,203

296

tem 24 Cerrada

9,07

8,33

10,65

71,24

0,72

-0,19

-0,24

-0,25

0,44

1,079

-0,154

0,260

253

tem 25 Cerrada

24,74

56,01

9,65

8,81

0,79

-0,18

0,34

-0,17

-0,14

1,239

0,484

0,298

285

tem 26 Cerrada

18,36

9,26

29,61

41,54

1,24

-0,10

-0,23

-0,19

0,40

1,282

0,752

0,124

310

tem 27 Cerrada

60,65

13,91

15,93

8,45

1,05

0,43

-0,22

-0,20

-0,20

1,403

0,292

0,223

279

tem 28 Cerrada

45,81

19,35

14,46

18,86

1,52

0,20

-0,13

-0,13

0,00

1,229

1,230

0,324

325

tem 29 Cerrada

11,49

35,27

12,68

39,04

1,51

-0,20

0,10

-0,20

0,18

1,421

1,431

0,285

339

tem 30 Cerrada

18,80

10,89

9,25

60,01

1,06

-0,15

-0,27

-0,23

0,43

1,011

0,180

0,177

278

tem 31 Cerrada

9,20

17,35

55,21

17,03

1,19

-0,15

-0,20

0,39

-0,20

1,392

0,563

0,267

291

tem 33 Cerrada

10,39

4,67

80,10

4,58

0,25

-0,28

-0,22

0,39

-0,12

0,781

-0,908

0,147

224

tem 34 Cerrada

2,91

3,74

1,92

91,19

0,24

-0,19

-0,24

-0,19

0,37

1,078

-1,214

0,251

195

tem 35 Cerrada

9,06

5,63

78,39

6,47

0,45

-0,21

-0,23

0,41

-0,22

0,951

-0,638

0,281

225

tem 36 Cerrada

4,41

7,37

5,06

82,96

0,20

-0,22

-0,18

-0,17

0,35

0,680

-1,532

0,033

201

tem 37 Cerrada

6,58

1,11

1,30

90,79

0,22

-0,29

-0,15

-0,13

0,36

0,942

-1,810

0,049

176

tem 38 Cerrada

5,14

10,91

69,84

13,80

0,31

-0,26

-0,32

0,48

-0,18

1,088

-0,154

0,217

256

tem 39 Cerrada

8,43

10,84

62,11

18,06

0,56

-0,35

-0,25

0,49

-0,16

1,076

0,138

0,168

276

tem 40 Cerrada

4,88

75,98

5,39

13,27

0,48

-0,28

0,41

-0,27

-0,16

0,713

-1,120

0,000

225

tem 42 Cerrada

19,55

8,51

5,25

66,00

0,69

-0,31

-0,25

-0,22

0,52

1,240

-0,135

0,184

258

tem 43 Cerrada

64,49

10,98

5,97

17,90

0,66

0,48

-0,23

-0,26

-0,25

1,216

0,016

0,234

264

tem 44 Cerrada

11,05

6,95

68,49

12,72

0,80

-0,18

-0,23

0,38

-0,18

0,851

-0,137

0,276

254

tem 45 Cerrada

10,38

20,46

10,30

58,01

0,85

-0,29

-0,20

-0,22

0,48

1,029

0,048

0,155

272

tem 46 Cerrada

14,04

14,89

62,72

7,38

0,96

-0,29

-0,27

0,53

-0,20

1,606

0,183

0,233

271

tem 47 Cerrada

15,55

14,30

57,85

11,26

1,04

-0,18

-0,18

0,39

-0,20

1,190

0,426

0,292

283

tem 48 Cerrada

17,02

62,95

12,02

6,87

1,14

-0,27

0,51

-0,24

-0,25

1,731

0,163

0,274

268

tem 49 Cerrada

24,88

9,52

52,97

11,08

1,55

-0,13

-0,27

0,39

-0,19

1,310

0,566

0,272

292

tem 50 Cerrada

11,07

10,02

8,16

69,22

1,52

-0,34

-0,20

-0,20

0,49

1,017

-0,393

0,101

251

tem 51 Cerrada

20,62

65,24

4,33

8,40

1,41

-0,31

0,47

-0,23

-0,17

1,201

-0,258

0,237

248

tem 52 Cerrada

14,28

67,27

8,61

8,12

1,72

-0,25

0,47

-0,25

-0,21

0,943

-0,339

0,241

245

Anexo I

245

Tabla I.6 Parmetros preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura 4 bsico
Simce 2013
ID_TEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

tem 14

Abierta

48,55

47,83

3,62

0,45

0,648

0,284

307

tem 22

Abierta

17,04

76,76

6,20

0,52

0,998

-0,967

224

tem 41

Abierta

37,09

61,06

1,85

0,46

0,637

-0,427

268

Tabla I.7 tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 4 bsico Simce 2013
ID_ITEM ID_TIPO
tem 32

Cerrada

CLAVE

%_A

%_B

%_C

%_D

6,19

78,02

8,13

6,31

%_
CORR_ CORR_
OMIT
A_2013 B_2013
_2013
1,35

-0,21

0,39

CORR_
C_2013

CORR_
D_2013

-0,19

-0,22

MOTIVO
Alto Azar

Tabla I.8 Descripciones de campos correspondientes a tablas I.5 a I.7


Referencia

Identificacin
Clave

Datos mtricos
cerradas

246

Nombre del
campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_C_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%
(considerando el parmetro de azar).

Informe Tcnico Simce 2013

[continuacin]
Referencia

Datos mtricos
abiertas

Nombre del
campo

Descripcin de campo

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Figura I.3 Curva caracterstica de la prueba, 4 bsico, Lenguaje y Comunicacin:

Comprensin de Lectura Simce 2013

Anexo I

247

Figura I.4 Curva de informacin de la prueba, 4 bsico, Lenguaje y Comunicacin:

Comprensin de Lectura 2013

Prueba 4 bsico: Matemtica


Tabla I.9 Parmetros preguntas seleccin mltiple, Matemtica, 4 bsico Simce 2013
ID_
TEM

ID_
TIPO

CLA- %_A_ %_B_ %_C_ %_D_


VE 2013 2013 2013 2013

%_
DISC
DIFIC AZAR
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
_IRT
_IRT
_IRT
A_2013 B_2013 C_2013 D_2013
_2013
_2013
_2013 _2013 _2013

tem 2

Cerrada

3,13

91,12

1,17

4,26

0,32

-0,13

0,24

-0,10

-0,16

0,693

-1,976

0,191

149

tem 3

Cerrada

10,45

12,30

6,34

70,08

0,83

-0,16

-0,13

-0,15

0,29

0,609

-0,711

0,072

238

tem 4

Cerrada

2,56

7,63

86,97

2,37

0,46

-0,15

-0,18

0,27

-0,11

0,658

-1,783

0,063

173

tem 5

Cerrada

9,48

78,87

6,17

4,80

0,67

-0,17

0,36

-0,20

-0,22

0,995

-0,754

0,171

216

tem 6

Cerrada

88,94

4,22

3,00

3,06

0,78

0,32

-0,19

-0,17

-0,17

1,105

-1,236

0,266

180

tem 7

Cerrada

71,07

6,64

13,14

8,76

0,40

0,29

-0,16

-0,22

-0,06

0,959

-0,101

0,316

242

tem 8

Cerrada

9,31

17,87

58,69

13,24

0,89

-0,28

-0,13

0,35

-0,12

0,785

0,079

0,069

277

tem 9

Cerrada

23,09

2,38

4,41

69,63

0,48

-0,14

-0,12

-0,13

0,23

0,613

-0,381

0,212

242

tem 10

Cerrada

12,12

9,28

16,33

61,68

0,58

-0,11

-0,09

-0,19

0,28

0,746

0,250

0,198

277

tem 11

Cerrada

6,10

76,94

10,09

6,09

0,78

-0,16

0,30

-0,11

-0,22

0,640

-1,156

0,023

214

tem 12

Cerrada

17,39

53,75

10,18

17,29

1,39

-0,22

0,00

-0,05

0,26

1,474

1,597

0,069

353

tem 14

Cerrada

28,41

4,20

7,84

58,67

0,87

-0,30

-0,12

-0,05

0,35

0,866

0,076

0,135

270

tem 15

Cerrada

38,73

18,53

31,25

10,24

1,26

-0,27

-0,04

0,34

-0,04

1,265

0,986

0,088

319

tem 16

Cerrada

43,90

23,62

16,87

14,65

0,97

0,32

-0,17

-0,05

-0,19

0,827

0,777

0,139

311

tem 17

Cerrada

11,98

43,37

15,30

28,15

1,21

-0,18

0,26

-0,14

-0,04

0,922

1,018

0,275

312

248

Informe Tcnico Simce 2013

[continuacin]
%_
DISC
DIFIC AZAR
CLA- %_A_ %_B_ %_C_ %_D_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
_IRT
_IRT
_IRT
VE 2013 2013 2013 2013
A_2013 B_2013 C_2013 D_2013
_2013
_2013
_2013 _2013 _2013

ID_
TEM

ID_
TIPO

tem 18

Cerrada

10,36

22,26

53,71

11,96

1,71

-0,13

-0,11

0,23

-0,10

0,836

0,661

0,277

292

tem 19

Cerrada

16,16

77,67

2,14

3,45

0,57

-0,24

0,29

-0,11

-0,09

0,875

-1,005

0,048

212

tem 20

Cerrada

6,72

10,28

74,86

7,29

0,85

-0,18

-0,23

0,35

-0,14

1,076

-0,439

0,248

228

tem 21

Cerrada

34,27

23,95

31,16

9,81

0,80

0,09

-0,35

0,30

-0,11

1,609

1,112

0,135

321

tem 22

Cerrada

11,33

6,69

13,52

67,55

0,91

-0,13

-0,24

-0,33

0,46

1,178

-0,197

0,135

248

tem 23

Cerrada

45,28

26,35

20,00

7,03

1,34

0,32

-0,14

-0,15

-0,14

1,136

0,516

0,203

287

tem 24

Cerrada

14,07

66,31

8,20

10,08

1,34

-0,25

0,38

-0,19

-0,13

1,052

0,041

0,262

255

tem 25

Cerrada

55,28

15,08

19,79

8,82

1,02

0,39

-0,18

-0,25

-0,10

1,440

0,513

0,259

281

tem 26

Cerrada

24,49

10,22

7,56

56,66

1,07

-0,23

-0,19

-0,17

0,41

1,036

0,187

0,126

273

tem 27

Cerrada

17,61

15,77

60,28

5,29

1,05

-0,30

-0,15

0,41

-0,14

1,259

0,075

0,154

262

tem 28

Cerrada

11,80

13,36

53,68

19,33

1,83

-0,16

-0,19

0,39

-0,19

1,388

0,423

0,215

279

tem 29

Cerrada

15,69

10,07

9,34

63,64

1,26

-0,34

-0,21

-0,22

0,52

1,607

-0,004

0,143

256

tem 31

Cerrada

7,01

66,99

11,35

12,82

1,82

-0,24

0,45

-0,20

-0,24

1,641

-0,045

0,232

249

tem 32

Cerrada

10,88

14,72

11,37

61,21

1,82

-0,15

-0,22

-0,18

0,38

0,896

-0,067

0,125

261

tem 33

Cerrada

5,95

7,31

79,26

6,06

1,42

-0,23

-0,21

0,41

-0,22

1,363

-0,426

0,321

222

tem 34

Cerrada

19,48

5,63

61,27

12,26

1,35

-0,31

-0,21

0,45

-0,13

1,600

0,158

0,220

262

tem 35

Cerrada

3,07

4,02

14,80

76,86

1,25

-0,16

-0,20

-0,23

0,36

1,120

-0,823

0,076

216

tem 37

Cerrada

8,38

7,76

79,29

4,21

0,36

-0,21

-0,14

0,31

-0,15

0,727

-0,670

0,303

212

tem 39

Cerrada

9,44

1,25

1,70

87,06

0,55

-0,27

-0,14

-0,12

0,33

0,729

-1,625

0,068

179

tem 40

Cerrada

2,63

90,20

2,41

4,21

0,54

-0,21

0,35

-0,17

-0,21

0,900

-1,671

0,075

171

tem 42

Cerrada

59,39

32,86

5,10

2,11

0,54

0,54

-0,42

-0,18

-0,19

1,384

0,216

0,112

272

tem 43

Cerrada

2,83

7,78

77,08

11,51

0,81

-0,19

-0,18

0,34

-0,19

0,621

-1,028

0,088

217

tem 44

Cerrada

4,90

87,62

3,55

3,23

0,70

-0,27

0,41

-0,22

-0,19

1,254

-0,930

0,322

193

tem 45

Cerrada

5,26

74,10

4,84

15,34

0,46

-0,22

0,39

-0,23

-0,19

0,645

-0,953

0,000

228

tem 46

Cerrada

5,38

7,96

33,28

52,69

0,68

-0,21

-0,21

-0,23

0,43

0,981

0,394

0,128

286

tem 47

Cerrada

8,92

77,71

9,24

3,46

0,67

-0,32

0,46

-0,23

-0,17

1,192

-0,427

0,257

227

tem 48

Cerrada

4,08

11,59

77,81

4,99

1,54

-0,22

-0,25

0,38

-0,14

0,898

-0,510

0,297

221

tem 49

Cerrada

12,28

14,07

58,50

13,82

1,33

-0,17

-0,22

0,37

-0,14

0,931

0,376

0,279

274

tem 50

Cerrada

15,10

20,40

53,88

9,87

0,75

-0,09

-0,18

0,30

-0,14

0,871

0,810

0,295

298

tem 51

Cerrada

41,44

33,95

7,54

15,71

1,36

-0,08

0,28

-0,14

-0,15

1,108

1,333

0,183

336

tem 52

Cerrada

10,38

11,26

10,16

67,49

0,71

-0,18

-0,18

-0,14

0,33

0,786

-0,140

0,261

247

tem 53

Cerrada

12,66

4,48

35,26

46,83

0,77

-0,08

-0,19

0,30

-0,16

1,102

1,252

0,177

332

tem 54

Cerrada

59,88

23,24

8,90

7,25

0,73

0,48

-0,27

-0,17

-0,28

1,337

0,266

0,184

271

tem 55

Cerrada

30,63

10,34

7,98

50,16

0,89

-0,12

-0,11

-0,19

0,28

0,743

0,881

0,242

310

tem 56

Cerrada

13,03

12,32

11,11

62,68

0,86

-0,27

-0,32

-0,27

0,58

1,844

0,194

0,137

266

tem 58

Cerrada

65,90

10,13

6,90

15,86

1,21

0,45

-0,31

-0,23

-0,17

1,155

0,044

0,223

257

tem 59

Cerrada

8,79

5,12

7,52

77,58

0,99

-0,31

-0,28

-0,26

0,53

1,497

-0,208

0,273

238

tem 60

Cerrada

4,20

6,23

83,12

5,50

0,95

-0,23

-0,28

0,37

-0,08

0,685

-1,753

0,000

179

tem 61

Cerrada

4,90

9,30

7,43

77,37

0,99

-0,24

-0,31

-0,19

0,46

0,933

-0,813

0,037

222

tem 62

Cerrada

9,93

84,83

2,50

1,73

1,00

-0,18

0,29

-0,19

-0,15

0,614

-1,637

0,095

181

tem 63

Cerrada

2,23

4,31

85,59

6,43

1,43

-0,19

-0,18

0,36

-0,23

0,871

-1,223

0,197

188

Anexo I

249

Tabla I.10 Parmetros preguntas abiertas, Matemtica 4 bsico Simce 2013


ID_TEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

tem 13

Abierta

69,60

17,84

12,56

0,41

0,844

1,442

359

tem 30

Abierta

25,17

55,17

9,19

0,54

0,751

-0,186

267

tem 38

Abierta

32,03

64,73

3,24

0,41

0,546

-0,622

254

tem 57

Abierta

65,87

25,10

9,03

0,48

0,991

1,091

334

Tabla I.11 tems eliminados, Matemtica 4 bsico Simce 2013


ID_
TEM

%_A_ %_B_ %_C_ %_D_ %_OMIT CORR_ CORR_ CORR_ CORR_


2013 2013 2013 2013 _2013 A_2013 B_2013 C_2013 D_2013

ELIM_IRT
_2013

ID_TIPO

CLAVE

Cerrada

7,62

0,81

89,14

2,08

0,35

-0,16

-0,09

0,20

-0,07

Ajuste

tem 36 Cerrada

4,95

3,76

85,50

4,24

1,55

-0,21

-0,21

0,37

-0,19

Alto Azar

tem 41 Cerrada

2,57

3,63

87,75

5,54

0,51

-0,19

-0,20

0,28

-0,11

Ajuste

tem 1

Tabla I.12 Descripciones de campos correspondientes a tablas I.9 a I.11


Referencia
Identificacin
Clave

Datos mtricos
cerradas

Datos mtricos
abiertas

250

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%
(considerando el parmetro de azar).

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Informe Tcnico Simce 2013

Figura I.5 Curva caracterstica de la prueba, 4 bsico, Matemtica 2013

Figura I.6 Curva de informacin de la prueba, 4 bsico, Matemtica 2013

Anexo I

251

Prueba 4 bsico: Ciencias Naturales


Tabla I.13 Parmetros preguntas seleccin mltiple, Ciencias Naturales 4 bsico 2013
ID_
TEM

ID_
TIPO

%_
DISC_ DIFIC_ AZAR_
CLA- %_A_ %_B_ %_C_ %_D_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT
IRT
IRT
VE 2013 2013 2013 2013
A_2013 B_2013 C_2013 D_2013
_2013
_2013
_2013 _2013 _2013

tem 1

Cerrada

11,64

7,49

5,61

74,87

0,39

-0,29

-0,20

-0,20

0,44

1,257

-0,367

0,226

237

tem 2

Cerrada

10,70

4,81

9,61

74,46

0,42

-0,30

-0,17

-0,26

0,47

1,462

-0,251

0,200

243

tem 4

Cerrada

6,95

16,65

71,99

3,83

0,57

-0,25

-0,19

0,37

-0,15

0,739

-0,728

0,032

238

tem 5

Cerrada

27,97

6,41

11,02

53,98

0,62

-0,27

-0,19

-0,23

0,48

1,438

0,318

0,162

275

tem 6

Cerrada

11,59

47,95

8,55

31,04

0,88

-0,10

0,35

-0,15

-0,22

1,085

0,732

0,187

299

tem 7

Cerrada

15,62

56,85

13,27

13,23

1,02

-0,09

0,27

-0,14

-0,15

0,639

0,437

0,246

285

tem 9

Cerrada

13,04

12,53

52,94

20,45

1,04

-0,21

-0,30

0,41

-0,08

1,182

0,432

0,208

281

tem 10 Cerrada

33,71

45,83

8,99

10,78

0,69

0,24

-0,10

-0,08

-0,12

1,116

1,378

0,210

332

tem 11 Cerrada

7,52

23,72

64,01

4,13

0,62

-0,03

-0,37

0,38

-0,07

0,740

-0,329

0,062

257

tem 12 Cerrada

5,50

2,20

8,36

83,32

0,62

-0,25

-0,16

-0,27

0,42

1,246

-0,872

0,178

213

tem 13 Cerrada

8,54

29,84

49,90

11,08

0,65

-0,24

-0,23

0,34

0,00

0,911

0,619

0,204

294

tem 14 Cerrada

16,54

24,55

35,72

22,44

0,75

-0,14

-0,13

0,32

-0,11

1,126

1,079

0,167

318

tem 15 Cerrada

50,51

9,77

8,60

30,41

0,71

0,34

-0,11

-0,19

-0,18

1,068

0,422

0,254

278

tem 16 Cerrada

7,30

9,16

7,22

75,69

0,64

-0,24

-0,18

-0,20

0,39

0,848

-0,619

0,211

228

tem 17 Cerrada

5,78

4,58

3,32

85,67

0,65

-0,22

-0,19

-0,20

0,37

1,025

-1,196

0,082

203

tem 18 Cerrada

9,41

57,66

19,10

13,03

0,81

-0,30

0,43

-0,25

-0,08

1,309

0,339

0,227

274

tem 19 Cerrada

31,29

35,66

22,79

9,36

0,90

-0,18

0,26

-0,04

-0,09

1,058

1,238

0,203

325

tem 20 Cerrada

17,66

45,38

20,84

15,33

0,80

-0,01

-0,23

0,27

0,02

2,101

1,362

0,118

329

tem 21 Cerrada

3,88

20,34

4,37

70,72

0,69

-0,18

-0,31

-0,18

0,44

0,944

-0,297

0,260

240

tem 22 Cerrada

37,82

9,12

13,72

38,65

0,69

-0,22

-0,13

-0,04

0,33

1,080

0,989

0,175

313

tem 23 Cerrada

51,13

10,02

14,97

23,00

0,89

0,31

-0,17

-0,22

-0,05

0,798

0,646

0,222

295

tem 24 Cerrada

59,26

13,37

11,10

15,46

0,81

0,46

-0,13

-0,17

-0,35

1,396

0,241

0,221

269

tem 25 Cerrada

16,34

8,41

39,50

34,64

1,11

-0,25

-0,20

0,23

0,07

0,879

1,329

0,242

329

tem 26 Cerrada

23,50

14,71

29,62

31,05

1,12

-0,01

-0,12

-0,18

0,27

1,296

1,116

0,187

318

tem 27 Cerrada

5,71

3,58

4,10

85,75

0,86

-0,20

-0,18

-0,19

0,35

1,055

-1,003

0,267

202

tem 28 Cerrada

17,92

12,77

8,34

59,86

1,12

-0,25

-0,26

-0,26

0,52

1,568

0,086

0,140

263

tem 29 Cerrada

10,61

17,12

64,91

6,24

1,11

-0,22

-0,26

0,44

-0,18

1,154

-0,065

0,206

255

tem 30 Cerrada

11,02

10,75

7,81

68,94

1,48

-0,27

-0,24

-0,24

0,49

1,561

-0,155

0,221

247

tem 31 Cerrada

4,10

3,81

73,72

17,97

0,39

-0,15

-0,14

0,34

-0,25

0,817

-0,469

0,240

234

tem 32 Cerrada

72,60

10,33

8,36

8,24

0,48

0,34

-0,19

-0,17

-0,16

0,920

-0,181

0,337

240

tem 33 Cerrada

5,98

5,75

83,20

4,76

0,31

-0,26

-0,21

0,34

-0,08

0,852

-1,239

0,056

206

tem 34 Cerrada

4,43

89,96

1,92

3,25

0,44

-0,22

0,30

-0,13

-0,14

0,994

-1,076

0,239

200

tem 36 Cerrada

10,42

9,78

19,55

59,83

0,42

-0,18

-0,20

-0,25

0,44

1,160

0,117

0,188

265

tem 37 Cerrada

11,65

8,46

16,68

62,55

0,66

-0,32

-0,19

-0,07

0,38

0,903

0,009

0,201

262

tem 39 Cerrada

7,01

11,01

66,59

14,23

1,16

-0,17

-0,25

0,37

-0,15

0,934

-0,111

0,236

252

tem 41 Cerrada

21,46

45,06

23,79

8,44

1,25

-0,23

0,37

-0,08

-0,19

1,675

0,760

0,243

294

tem 42 Cerrada

71,60

8,46

7,64

11,20

1,10

0,40

-0,22

-0,22

-0,19

1,041

-0,330

0,227

240

252

Informe Tcnico Simce 2013

Tabla I.14 Parmetros preguntas abiertas, Ciencias Naturales, 4 bsico 2013


ID_
TEM
tem 8

ID_
TIPO
Abierta

%_INCORR

%_CORR

42,10

55,08

%_
OMITA
2,83

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

0,50

0,815

-0,076

272

Tabla I.15 tems eliminados Ciencias Naturales, 4 bsico 2013


ID_
TEM

CLAVE

Cerrada

21,92

51,98

9,00

16,43

0,67

-0,11

0,15

0,01

-0,08

Alto Azar

tem 35 Cerrada

19,82

5,66

14,55

59,34

0,63

-0,16

-0,18

-0,13

0,31

Alto Azar

tem 38 Cerrada

21,60

23,00

44,98

9,03

1,39

-0,13

-0,05

0,22

-0,11

tem 40 Cerrada

41,06

15,99

13,06

28,93

0,96

0,19

-0,01

-0,11

-0,11

tem 3

%_A %_B %_C %_D


_2013 _2013 _2013 _2013

%_
CORR_ CORR_ CORR_ CORR_
OMIT
ELIM_IRT_2013
A_2013 B_2013 C_2013 D_2013
_2013

ID_
TIPO

Baja
Discriminacin
Baja
Discriminacin

Tabla I.16 Descripciones de campos correspondientes a tablas I.13 a I.15


Referencia
Identificacin
Clave

Datos mtricos
cerradas

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%
(considerando el parmetro de azar).

Anexo I

253

[continuacin]
Referencia

Datos mtricos
abiertas

Nombre del campo

Descripcin de campo

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Figura I.7 Curva caracterstica de la prueba, 4 bsico, Ciencias Naturales, 2013

254

Informe Tcnico Simce 2013

Figura I.8 Curva de informacin de la prueba, 4 bsico, Ciencias Naturales, 2013

Prueba 6 bsico: Lenguaje y Comunicacin: Comprensin de Lectura


Tabla I.17 Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin: Comprensin de Lectura
6 bsico 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

ID_
TIPO

tem 2

Cerrada

2,35

6,04

5,62

85,56

0,43

-0,15

-0,24

-0,17

0,35

0,747 -1,979

0,000

179

tem 3

Cerrada

8,18

80,49

4,08

6,98

0,26

-0,25

0,42

-0,18

-0,24

0,891 -1,359

0,058

203

tem 5

Cerrada

32,30

37,37

6,62

23,32

0,39

0,26

-0,13

-0,15

-0,06

0,745

1,487

0,171

346

tem 6

Cerrada

9,71

32,61

25,19

31,96

0,54

-0,07

-0,04

0,15

-0,06

0,956

2,094

0,192

372

tem 7

Cerrada

89,67

4,15

5,93

0,25

0,32

-0,22

-0,23

0,794 -2,397

0,000

156

tem 8

Cerrada

3,17

4,22

4,06

88,36

0,18

-0,20

-0,24

-0,22

0,40

1,121 -1,740

0,000

182

tem 9

Cerrada

5,57

11,18

7,08

75,93

0,23

-0,24

-0,21

-0,14

0,37

0,625 -1,442

0,000

212

tem 10 Cerrada

77,53

3,29

4,95

13,97

0,26

0,41

-0,20

-0,19

-0,27

0,754 -1,343

0,000

211

tem 11 Cerrada

7,53

11,78

76,35

3,94

0,41

-0,20

-0,30

0,44

-0,18

0,983 -0,895

0,194

217

tem 12 Cerrada

8,15

8,08

66,25

16,99

0,53

-0,25

-0,26

0,36

-0,08

0,631 -0,534

0,177

244

tem 14 Cerrada

5,59

4,01

86,62

3,55

0,23

-0,26

-0,25

0,43

-0,21

1,461 -1,238

0,222

195

tem 15 Cerrada

23,07

8,21

65,18

3,19

0,35

-0,28

-0,23

0,44

-0,17

1,013 -0,235

0,218

250

tem 16 Cerrada

9,79

7,72

69,29

12,88

0,32

-0,24

-0,25

0,44

-0,20

0,831 -0,677

0,105

237

tem 17 Cerrada

12,35

73,63

13,72

0,30

-0,23

0,37

-0,26

0,663 -1,015

0,111

224

tem 18 Cerrada

7,56

34,63

53,02

4,45

0,33

-0,14

-0,17

0,33

-0,22

0,755

0,251

288

Anexo I

CORR_A CORR_B CORR_C CORR_D


_2013 _2013 _2013 _2013

DISC_ DIFIC AZAR


RP67
IRT_ _IRT
_IRT
_2013
2013 _2013 _2013

ID_
TEM

0,498

255

[continuacin]
ID_
TEM

ID_
TIPO

CLA- %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

CORR_A CORR_B CORR_C CORR_D


_2013 _2013 _2013 _2013

DISC_ DIFIC AZAR


RP67
IRT_ _IRT
_IRT
_2013
2013 _2013 _2013

tem 19 Cerrada

15,47

12,77

56,50

14,45

0,81

-0,18

-0,20

0,29

-0,04

0,686

0,493

0,301

283

tem 20 Cerrada

20,99

17,59

49,11

11,27

1,05

-0,18

-0,12

0,32

-0,13

1,035

0,770

0,294

296

tem 23 Cerrada

8,85

72,57

13,83

4,39

0,36

-0,21

0,43

-0,31

-0,12

1,050 -0,444

0,290

233

tem 24 Cerrada

49,26

4,04

3,67

42,43

0,59

0,31

-0,22

-0,21

-0,14

0,803

0,742

0,262

299

tem 25 Cerrada

19,02

14,59

53,58

12,24

0,56

-0,18

-0,21

0,45

-0,24

1,216

0,295

0,224

275

tem 26 Cerrada

68,56

14,95

10,09

5,73

0,67

0,46

-0,30

-0,22

-0,17

1,344 -0,206

0,299

244

tem 27 Cerrada

9,59

11,51

68,25

9,98

0,66

-0,25

-0,28

0,48

-0,19

1,492 -0,202

0,291

245

tem 28 Cerrada

11,24

57,73

17,49

12,64

0,90

-0,26

0,51

-0,24

-0,23

1,983

0,158

0,254

264

tem 29 Cerrada

16,00

59,22

12,81

10,80

1,17

-0,24

0,48

-0,23

-0,23

1,878

0,165

0,287

263

tem 31 Cerrada

22,26

18,92

14,05

43,80

0,97

-0,28

-0,22

-0,11

0,49

1,282

0,433

0,126

287

tem 32 Cerrada

15,87

19,25

9,45

54,58

0,85

-0,19

-0,31

-0,23

0,52

1,498

0,124

0,177

267

tem 33 Cerrada

13,48

55,71

29,97

0,84

-0,18

0,44

-0,34

1,870

0,350

0,297

272

tem 34 Cerrada

13,43

15,40

53,09

16,94

1,14

-0,23

-0,24

0,46

-0,17

1,619

0,352

0,254

275

tem 35 Cerrada

63,29

11,30

8,91

15,47

1,03

0,44

-0,25

-0,22

-0,19

1,439

0,095

0,328

258

tem 37 Cerrada

14,54

3,24

5,42

76,48

0,33

-0,25

-0,20

-0,20

0,40

0,826 -0,794

0,227

222

tem 39 Cerrada

11,42

45,75

13,16

28,39

1,28

-0,25

0,37

-0,27

-0,02

1,050

0,751

0,227

300

tem 40 Cerrada

11,70

16,26

56,97

13,82

1,24

-0,19

-0,17

0,29

-0,05

0,664

0,520

0,302

284

tem 41 Cerrada

14,22

21,91

38,74

23,60

1,52

-0,18

-0,11

0,38

-0,18

1,369

0,902

0,195

307

Tabla I.18 Parmetros preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura 6 bsico 2013
ID_TEM ID_TIPO %_INCORR

%_PARC %_CORR %_OMITA CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

tem 21

Abierta

40,97

12,37

14,36

32,30

0,53

0,765

0,503

306

tem 30

Abierta

18,48

60,00

21,53

0,35

0,482

-1,627

213

Tabla I.19 tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura 6 bsico 2013
ID_
TEM

ID_
TIPO

tem 1

Cerrada

8,68

68,45

10,24

12,12

0,50

tem 4

Cerrada

13,15

73,65

12,97

0,23

tem 13 Cerrada

17,37

11,57

18,95

51,43

tem 22 Cerrada

66,25

13,79

8,72

tem 36 Cerrada

77,08

7,62

tem 38 Cerrada

6,42

9,13

256

CLA- %_A %_B %_C %_D %_OMIT CORR_A


VE _2013 _2013 _2013 _2013 _2013
_2013

CORR_B
_2013

CORR_C
_2013

-0,16

0,32

-0,19

-0,14

Discriminacin

-0,21

0,31

-0,20

Discriminacin

0,68

-0,27

-0,18

-0,01

0,33

Discriminacin

10,76

0,49

0,36

-0,26

-0,15

-0,12

Azar

7,78

6,83

0,69

0,27

-0,22

-0,14

-0,07

Azar

63,20

20,85

0,40

-0,19

-0,22

0,34

-0,13

Discriminacin

Informe Tcnico Simce 2013

CORR_D ELIM_
_2013 IRT_2013

Tabla I.20 Descripciones de campos correspondientes a tablas I.7 a I.19


Referencia
Identificacin
Clave

Datos mtricos
cerradas

Datos mtricos
abiertas

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

(considerando el parmetro de azar).

Anexo I

257

Figura I.9 Curva caracterstica de la prueba, 6 bsico, Lenguaje y Comunicacin:


Comprensin de Lectura, 2013

Figura I.10 Curva de informacin de la prueba, 6 bsico, Lenguaje y Comunicacin:


Comprensin de Lectura 2013

258

Informe Tcnico Simce 2013

Prueba 6 bsico: Matemtica


Tabla I.21 Parmetros preguntas seleccin mltiple, Matemtica 6 bsico 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

ID_
TIPO

tem 4

Cerrada

81,94

5,21

8,04

4,17

0,64

0,35

-0,15

-0,24

-0,16

1,007

-1,237

0,118

203

tem 7

Cerrada

9,47

0,72

88,46

1,14

0,21

-0,24

-0,07

0,27

-0,08

0,754

-2,055

0,022

171

tem 9

Cerrada

8,02

21,75

62,83

6,75

0,64

-0,17

-0,18

0,29

-0,07

0,756

0,107

0,313

261

tem 10 Cerrada

8,42

7,75

25,39

57,62

0,82

-0,15

-0,17

-0,33

0,46

1,171

-0,186

0,081

258

tem 11 Cerrada

1,86

10,97

13,67

72,79

0,70

-0,11

-0,31

-0,18

0,40

0,938

-0,861

0,069

227

tem 12 Cerrada

21,18

11,51

61,63

4,53

1,15

-0,19

-0,24

0,39

-0,15

0,852

-0,193

0,182

257

tem 13 Cerrada

56,71

31,51

6,79

4,43

0,57

0,41

-0,26

-0,19

-0,17

1,004

0,065

0,189

268

tem 14 Cerrada

4,97

7,69

61,12

25,05

1,17

-0,11

-0,08

0,33

-0,26

0,629

-0,417

0,090

258

tem 15 Cerrada

2,96

55,41

4,28

36,99

0,37

-0,08

0,43

-0,12

-0,37

0,933

-0,041

0,112

268

tem 16 Cerrada

11,81

47,01

31,37

8,07

1,75

-0,20

0,41

-0,20

-0,17

1,272

0,497

0,212

287

tem 17 Cerrada

2,53

12,61

27,95

56,47

0,44

-0,09

-0,14

0,41

-0,24

1,207

0,897

0,061

316

tem 18 Cerrada

21,05

24,60

33,23

20,07

1,05

-0,19

-0,20

0,35

-0,01

1,388

0,943

0,157

313

tem 19 Cerrada

25,97

27,66

36,45

7,97

1,95

-0,15

-0,13

0,29

-0,05

1,682

1,044

0,238

313

tem 20 Cerrada

54,36

10,50

9,88

24,67

0,59

-0,37

-0,03

0,00

0,45

1,252

0,930

0,032

319

tem 21 Cerrada

23,78

27,11

18,96

27,65

2,50

-0,05

-0,14

-0,17

0,34

1,196

1,139

0,123

326

tem 22 Cerrada

28,47

18,93

44,02

7,33

1,25

0,37

-0,07

-0,22

-0,11

1,936

1,070

0,149

317

tem 23 Cerrada

35,12

18,97

26,91

18,07

0,92

-0,27

-0,13

0,31

0,11

1,429

1,242

0,147

329

tem 24 Cerrada

11,74

16,28

37,48

32,88

1,62

-0,15

-0,08

0,23

-0,08

1,796

1,248

0,289

322

tem 25 Cerrada

34,04

8,14

8,12

48,65

1,05

-0,16

-0,21

-0,18

0,37

0,861

0,366

0,161

288

tem 26 Cerrada

11,12

14,83

57,09

15,85

1,11

-0,22

-0,17

0,42

-0,21

0,937

-0,005

0,170

266

tem 27 Cerrada

17,91

14,35

44,08

22,26

1,40

-0,22

-0,16

0,37

-0,10

1,348

0,723

0,240

297

tem 28 Cerrada

14,91

54,09

12,56

16,72

1,71

-0,03

-0,18

-0,01

0,28

1,186

1,588

0,072

353

tem 29 Cerrada

27,72

55,36

12,37

3,72

0,83

-0,20

0,38

-0,21

-0,14

1,001

0,214

0,227

273

tem 30 Cerrada

10,68

22,91

25,11

40,05

1,25

-0,16

-0,20

-0,15

0,40

1,088

0,605

0,129

299

tem 31 Cerrada

18,76

52,14

21,63

6,16

1,32

-0,18

0,34

-0,19

-0,11

0,769

0,344

0,205

285

tem 32 Cerrada

80,37

6,63

6,79

5,25

0,96

0,37

-0,19

-0,22

-0,18

0,998

-1,012

0,235

207

tem 33 Cerrada

14,12

24,97

51,36

8,78

0,77

-0,18

-0,18

0,35

-0,11

0,702

0,142

0,110

284

tem 34 Cerrada

62,10

17,56

10,50

8,88

0,96

0,38

-0,16

-0,17

-0,26

0,760

-0,452

0,069

253

tem 36 Cerrada

52,11

31,18

9,73

5,74

1,23

0,27

-0,22

-0,06

-0,08

0,787

0,705

0,305

294

tem 37 Cerrada

54,92

18,52

18,81

6,35

1,40

0,39

-0,23

-0,16

-0,17

0,861

0,113

0,180

273

tem 38 Cerrada

9,15

30,52

48,54

10,06

1,73

-0,21

-0,20

0,35

-0,07

1,229

0,602

0,267

290

tem 39 Cerrada

5,86

8,27

10,01

75,08

0,78

-0,21

-0,23

-0,24

0,44

1,395

-0,629

0,229

225

tem 40 Cerrada

18,39

57,40

15,78

7,44

0,99

-0,26

0,40

-0,16

-0,13

0,840

-0,136

0,116

265

tem 41 Cerrada

10,43

15,85

72,78

0,94

-0,30

-0,24

0,40

0,834

-0,810

0,149

226

tem 42 Cerrada

1,55

6,60

85,34

6,06

0,44

-0,13

-0,21

0,36

-0,24

1,032

-1,301

0,237

191

tem 43 Cerrada

10,45

75,64

13,38

0,54

-0,12

0,30

-0,26

0,642

-0,734

0,322

216

tem 44 Cerrada

3,46

5,88

84,47

5,67

0,52

-0,17

-0,17

0,33

-0,21

0,755

-1,891

0,000

181

Anexo I

CORR_ CORR_ CORR_ CORR_


A_2013 B_2013 C_2013 D_2013

DISC_ DIFIC_ AZAR_


RP67
RT
IRT
IRT
_2013
_2013 _2013 _2013

ID_
TEM

259

[continuacin]
ID_
TEM

ID_
TIPO

CLA- %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

CORR_ CORR_ CORR_ CORR_


A_2013 B_2013 C_2013 D_2013

DISC_ DIFIC_ AZAR_


RP67
RT
IRT
IRT
_2013
_2013 _2013 _2013

tem 45 Cerrada

18,95

74,82

4,64

1,29

0,30

-0,32

0,35

-0,06

-0,12

0,614

-1,376

0,000

215

tem 46 Cerrada

59,96

7,22

4,62

27,02

1,18

0,31

-0,12

-0,09

-0,23

0,623

0,077

0,251

269

tem 47 Cerrada

9,16

63,64

8,90

16,79

1,50

-0,19

0,40

-0,18

-0,22

0,979

-0,039

0,293

255

tem 48 Cerrada

1,10

3,87

9,86

84,61

0,56

-0,11

-0,19

-0,20

0,30

0,726

-1,592

0,183

184

tem 50 Cerrada

18,90

22,81

46,27

10,28

1,74

-0,21

-0,17

0,38

-0,12

1,296

0,742

0,273

297

tem 51 Cerrada

9,93

46,28

29,32

13,03

1,45

-0,14

0,38

-0,20

-0,17

0,814

0,549

0,178

297

tem 52 Cerrada

13,70

24,11

32,63

25,68

3,89

-0,12

-0,02

0,26

-0,17

1,176

1,409

0,232

335

tem 53 Cerrada

7,50

46,15

18,51

26,69

1,15

-0,08

-0,23

-0,09

0,38

2,205

1,149

0,148

320

tem 54 Cerrada

39,52

10,68

27,35

21,16

1,29

-0,15

-0,17

0,26

0,02

1,339

1,515

0,187

342

tem 55 Cerrada

36,04

15,15

13,29

34,35

1,16

-0,23

-0,17

0,01

0,36

1,059

1,051

0,167

321

tem 56 Cerrada

27,92

32,19

39,15

0,75

-0,23

-0,07

0,28

1,106

1,217

0,262

323

tem 57 Cerrada

44,25

16,50

26,22

11,97

1,05

-0,29

-0,11

0,43

-0,02

1,388

1,075

0,097

322

tem 58 Cerrada

21,51

22,17

12,51

42,25

1,55

-0,27

-0,17

-0,17

0,48

1,256

0,539

0,150

293

tem 59 Cerrada

20,70

56,14

17,86

4,14

1,16

-0,18

0,35

-0,21

-0,07

0,778

0,318

0,264

278

tem 60 Cerrada

6,62

10,21

28,31

53,53

1,35

-0,16

-0,24

-0,16

0,37

0,728

0,229

0,187

281

tem 61 Cerrada

28,47

42,17

22,47

5,52

1,37

-0,34

0,39

-0,03

-0,11

1,282

0,805

0,230

302

tem 63 Cerrada

10,81

20,64

56,88

9,40

2,27

-0,25

-0,22

0,42

-0,14

1,002

0,128

0,235

268

tem 64 Cerrada

21,47

20,33

52,25

4,51

1,43

-0,30

-0,14

0,43

-0,16

1,324

0,433

0,270

280

tem 65 Cerrada

5,92

15,61

17,07

59,81

1,58

-0,20

-0,27

-0,20

0,45

1,182

0,010

0,236

260

tem 66 Cerrada

14,35

10,09

59,99

14,45

1,12

-0,21

-0,24

0,41

-0,14

0,847

-0,083

0,194

262

tem 67 Cerrada

9,09

11,02

13,57

65,10

1,21

-0,17

-0,26

-0,22

0,44

0,945

-0,368

0,170

247

tem 68 Cerrada

9,40

65,53

12,34

11,77

0,95

-0,20

0,41

-0,17

-0,25

0,854

-0,390

0,174

247

tem 69 Cerrada

10,93

16,04

20,16

51,38

1,49

-0,30

-0,22

-0,16

0,49

1,090

0,144

0,135

274

tem 70 Cerrada

39,59

32,64

14,72

11,19

1,87

-0,21

0,40

-0,10

-0,16

1,295

0,995

0,155

316

Tabla I.22 Parmetros preguntas cerradas, Matemtica 6 bsico 2013


ID_TEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

tem 5

Abierta

44,26

16,24

39,51

0,50

0,841

1,046

335

tem 35

Abierta

60,85

13,27

25,88

0,52

1,156

1,235

338

tem 49

Abierta

31,98

44,74

23,28

0,52

0,813

-0,278

265

tem 62

Abierta

52,08

8,36

39,57

0,51

1,379

1,473

347

260

Informe Tcnico Simce 2013

Tabla I.23 Parmetros preguntas eliminadas, Matemtica 6 bsico 2013


ID_
TEM

ID_
TIPO

CLA- %_A %_B


%_C %_D %_OMIT CORR_ CORR_
VE _2013 _2013 _2013 _2013 _2013 A_2013 B_2013

tem 1 Cerrada

8,77

81,46

tem 2 Cerrada

1,66

90,41

tem 3 Cerrada

4,35

4,83

tem 6 Cerrada

4,47

3,87

tem 8 Cerrada

71,20

10,02

8,30

CORR_
C_2013

CORR_
D_2013

0,18

-0,11

ELIM_
IRT_2013

1,47

-0,13

Azar

5,15

2,61

0,18

-0,08

0,20

-0,13

-0,13

Baja dificultad

17,94

71,58

1,30

-0,15

-0,07

-0,20

0,27

Discriminacin

91,25

0,41

-0,14

-0,15

0,21

7,62

10,48

0,68

0,25

-0,10

-0,16

-0,13

Ajuste
Discriminacin

Tabla I.24 Descripciones de campos correspondientes a tablas I.21 a I.23


Referencia

Identificacin
Clave

Datos mtricos
cerradas

Datos mtricos
abiertas

Nombre del
campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

(considerando el parmetro de azar).

Anexo I

261

Figura I.11 Curva caracterstica de la prueba, 6 bsico, Matemtica 2013

Figura I.12 Curva de informacin de la prueba, 6 bsico, Matemtica 2013

262

Informe Tcnico Simce 2013

Prueba 8 bsico: Lenguaje y Comunicacin: Comprensin de Lectura


Tabla I.25 Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin: Comprensin de Lectura,
8 bsico 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

CORR_A CORR_B CORR_C CORR_D


_2013 _2013 _2013 _2013

DISC_ DIFIC_ AZAR_


RP67
IRT
IRT
IRT
_2013
_2013 _2013 _2013

COD_
ITEM

ID_
TIPO

tem 1

Cerrada

6,20

7,66

5,36

80,30

0,48

-0,23

-0,16

-0,19

0,36

0,675

-1,145

0,245

204

tem 3

Cerrada

77,64

4,72

12,11

4,93

0,60

0,35

-0,19

-0,19

-0,19

0,681

-0,801

0,315

214

tem 8

Cerrada

9,12

3,62

73,53

13,55

0,18

-0,30

-0,19

0,40

-0,16

0,854

-0,487

0,282

234

tem 9

Cerrada

50,72

15,05

16,28

17,19

0,76

0,27

-0,14

-0,15

-0,08

0,720

0,773

0,276

305

tem 10 Cerrada

5,83

2,82

84,73

6,38

0,24

-0,25

-0,22

0,44

-0,25

1,089

-1,026

0,316

200

tem 11 Cerrada

11,53

21,81

5,08

61,21

0,37

-0,22

-0,20

-0,23

0,42

0,850

-0,102

0,171

265

tem 12 Cerrada

3,57

3,01

4,37

88,84

0,20

-0,27

-0,27

-0,26

0,47

1,178

-1,689

0,000

181

tem 13 Cerrada

11,59

3,10

81,16

3,97

0,19

-0,20

-0,26

0,40

-0,24

0,666

-1,789

0,000

191

tem 14 Cerrada

4,42

84,18

6,68

4,50

0,22

-0,30

0,46

-0,22

-0,23

0,947

-1,493

0,000

197

tem 15 Cerrada

15,53

73,67

8,10

2,48

0,23

-0,24

0,41

-0,20

-0,23

0,763

-0,781

0,159

230

tem 17 Cerrada

4,70

3,88

85,16

5,97

0,29

-0,26

-0,26

0,46

-0,23

0,981

-1,458

0,064

195

tem 18 Cerrada

3,19

9,35

3,55

83,65

0,27

-0,26

-0,31

-0,26

0,50

1,099

-1,312

0,033

202

tem 19 Cerrada

77,07

6,01

8,29

8,29

0,34

0,45

-0,30

-0,26

-0,16

0,975

-0,731

0,234

224

tem 20 Cerrada

3,94

87,52

3,73

4,65

0,16

-0,26

0,37

-0,20

-0,15

0,864

-1,388

0,322

181

tem 21 Cerrada

5,16

73,96

3,34

17,34

0,20

-0,17

0,41

-0,22

-0,26

0,932

-0,452

0,297

234

tem 22 Cerrada

13,70

13,23

12,66

60,07

0,34

-0,12

-0,27

-0,17

0,39

0,638

-0,323

0,066

268

tem 23 Cerrada

7,77

10,27

75,51

6,15

0,31

-0,24

-0,23

0,44

-0,23

1,159

-0,438

0,319

232

tem 24 Cerrada

8,14

11,20

7,49

72,85

0,32

-0,32

-0,28

-0,21

0,52

1,136

-0,594

0,145

235

tem 25 Cerrada

12,15

27,70

9,89

49,71

0,54

-0,25

-0,14

-0,27

0,45

1,107

0,377

0,164

288

tem 26 Cerrada

68,66

11,73

13,11

5,95

0,55

0,49

-0,27

-0,26

-0,21

1,465

-0,153

0,277

250

tem 27 Cerrada

10,34

11,57

60,01

17,27

0,81

-0,21

-0,13

0,35

-0,17

0,732

0,158

0,185

280

tem 29 Cerrada

8,47

9,75

7,80

73,66

0,33

-0,30

-0,29

-0,19

0,51

1,305

-0,490

0,188

237

tem 30 Cerrada

7,20

7,36

79,77

5,38

0,29

-0,26

-0,30

0,43

-0,12

1,020

-0,773

0,287

217

tem 31 Cerrada

25,10

55,27

11,09

7,98

0,57

-0,19

0,37

-0,16

-0,17

1,184

0,421

0,280

282

tem 32 Cerrada

6,39

6,94

11,72

74,53

0,42

-0,22

-0,28

-0,26

0,47

1,168

-0,493

0,192

238

tem 33 Cerrada

15,24

9,30

6,31

68,57

0,58

-0,28

-0,28

-0,27

0,54

1,730

-0,231

0,201

249

tem 34 Cerrada

8,76

14,84

65,08

10,78

0,55

-0,26

-0,24

0,48

-0,23

1,466

-0,086

0,276

254

tem 35 Cerrada

11,19

18,68

16,58

53,03

0,53

-0,20

-0,18

-0,16

0,38

0,882

0,295

0,182

285

tem 36 Cerrada

14,96

14,82

54,88

14,72

0,63

-0,23

-0,28

0,43

-0,09

1,818

0,399

0,280

280

tem 37 Cerrada

16,40

43,72

16,65

22,22

1,01

-0,14

0,33

-0,24

-0,05

1,629

0,797

0,256

303

tem 38 Cerrada

48,23

15,45

9,33

25,88

1,11

0,28

-0,16

-0,19

-0,06

1,325

0,843

0,316

303

tem 39 Cerrada

11,46

31,19

45,72

10,80

0,82

-0,21

-0,01

0,25

-0,16

0,971

0,985

0,287

314

tem 40 Cerrada

10,24

66,87

11,76

10,77

0,36

-0,17

0,36

-0,24

-0,12

0,865

-0,063

0,271

258

tem 41 Cerrada

5,70

4,28

7,45

82,35

0,22

-0,19

-0,21

-0,24

0,39

0,827

-1,228

0,132

206

tem 42 Cerrada

9,16

7,26

78,33

4,78

0,47

-0,29

-0,19

0,43

-0,19

0,964

-0,789

0,233

221

tem 43 Cerrada

4,47

88,09

4,25

2,79

0,39

-0,22

0,38

-0,22

-0,19

1,012

-1,580

0,203

179

tem 45 Cerrada

70,21

9,94

13,98

5,39

0,48

0,36

-0,21

-0,18

-0,17

0,694

-0,532

0,212

241

tem 46 Cerrada

6,42

84,09

6,48

2,74

0,28

-0,30

0,48

-0,27

-0,21

1,367

-0,977

0,253

207

Anexo I

263

[continuacin]
COD_
ITEM

ID_
TIPO

CLA- %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013

%_
OMIT
_2013

CORR_A CORR_B CORR_C CORR_D


_2013 _2013 _2013 _2013

DISC_ DIFIC_ AZAR_


RP67
IRT
IRT
IRT
_2013
_2013 _2013 _2013

TEM 47 Cerrada

82,90

4,83

2,49

9,45

0,32

0,43

-0,25

-0,21

-0,25

1,087

-0,973

0,275

207

tem 49 Cerrada

15,89

63,30

7,33

13,03

0,45

-0,25

0,41

-0,24

-0,13

1,018

0,026

0,267

262

tem 50 Cerrada

8,49

82,42

5,77

3,08

0,24

-0,28

0,46

-0,25

-0,22

1,237

-0,868

0,283

211

tem 51 Cerrada

5,06

10,40

75,25

8,94

0,35

-0,23

-0,25

0,47

-0,25

1,147

-0,567

0,241

231

tem 52 Cerrada

10,89

18,75

60,03

9,87

0,46

-0,28

-0,25

0,49

-0,18

1,435

0,058

0,208

265

tem 53 Cerrada

12,04

16,37

10,87

60,27

0,45

-0,24

-0,30

-0,23

0,53

1,475

-0,127

0,155

257

tem 54 Cerrada

15,32

10,70

64,54

8,93

0,52

-0,25

-0,28

0,51

-0,24

1,676

-0,035

0,247

258

tem 55 Cerrada

14,72

34,68

29,30

20,51

0,79

-0,10

0,24

-0,10

-0,08

1,339

1,154

0,222

325

tem 56 Cerrada

14,55

14,13

18,43

51,81

1,07

-0,22

-0,23

-0,17

0,44

1,142

0,299

0,171

283

tem 57 Cerrada

19,79

60,52

10,31

8,68

0,70

-0,13

0,40

-0,26

-0,22

1,126

0,166

0,272

269

tem 58 Cerrada

8,23

9,36

9,57

72,26

0,58

-0,25

-0,29

-0,25

0,52

1,699

-0,274

0,286

243

tem 59 Cerrada

20,15

15,71

11,13

52,34

0,68

-0,18

-0,15

-0,23

0,40

1,256

0,451

0,248

286

tem 60 Cerrada

9,14

15,89

19,09

55,23

0,65

-0,20

-0,18

-0,27

0,46

1,166

0,183

0,183

275

tem 61 Cerrada

13,84

58,83

10,21

16,38

0,73

-0,17

0,39

-0,22

-0,18

1,023

0,240

0,272

274

Tabla I.26 Parmetros preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura, 8 bsico 2013
ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

ELIM_A_IRT

tem 6

Abierta

32,60

60,15

7,25

0,32

Baja Discriminacin

tem 28

Abierta

22,06

63,45

14,49

0,42

Baja Discriminacin

tem 48

Abierta

13,05

78,32

8,63

0,33

Baja Discriminacin

Tabla I.27 tems eliminados, Lenguaje y Comunicacin: Comprensin de Lectura, 8 bsico 2013
ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

ELIM_A_IRT

Item 6

Abierta

32,60

60,15

7,25

0,32

Baja Discriminacin

Item 28

Abierta

22,06

63,45

14,49

0,42

Baja Discriminacin

Item 48

Abierta

13,05

78,32

8,63

0,33

Baja Discriminacin

264

Informe Tcnico Simce 2013

Tabla I.28 Descripciones de campos correspondientes a las tablas I.25 al I.27


Referencia
Identificacin
Clave

Datos mtricos
cerradas

Datos mtricos
abiertas

Nombre del campo


Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad de


respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Descripcin de campo

ELIM_A_2013

(considerando el parmetro de azar).

Parmetro de Dificultad en escala Simce para la categora con Correcta,


ajustado a una probabilidad de respuesta de 67%.
Criterio psicomtrico en que est basada la eliminacin del tem.

Anexo I

265

Figura I.13 Curva caracterstica de la prueba, 8 bsico, Lenguaje y Comunicacin:

Comprensin de Lectura, 2013

Figura I.14 Curva de informacin de la prueba 8 bsico, Lenguaje y Comunicacin:

Comprensin de Lectura, 2013

266

Informe Tcnico Simce 2013

Prueba 8 bsico: Matemtica


Tabla I.29 Parmetros preguntas seleccin mltiple, Matemtica 8 bsico 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_ IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

ID_
ITEM

ID_
TIPO

Item 1

Cerrada

6,68

7,69

82,66

2,39

0,58

-0,26

-0,24

0,39

-0,13

1,262

-0,966

0,094

218

Item 2

Cerrada

84,96

5,23

3,60

5,84

0,36

0,34

-0,19

-0,22

-0,16

0,911

-1,386

0,013

205

Item 3

Cerrada

15,76

77,96

4,32

1,61

0,36

-0,26

0,35

-0,19

-0,11

0,802

-0,917

0,123

226

Item 4

Cerrada

10,87

73,31

7,94

7,34

0,54

-0,19

0,41

-0,23

-0,22

1,010

-0,485

0,187

241

Item 5

Cerrada

4,39

6,76

81,79

5,79

1,28

-0,12

-0,19

0,29

-0,15

0,625

-1,551

0,051

204

Item 6

Cerrada

1,55

1,72

11,34

85,08

0,31

-0,14

-0,15

-0,30

0,37

1,087

-1,215

0,056

208

Item 8

Cerrada

18,82

64,88

8,03

7,46

0,81

-0,32

0,45

-0,17

-0,16

1,463

0,394

0,327

278

Item 9

Cerrada

34,29

52,30

9,00

2,15

2,25

-0,32

0,38

-0,07

-0,09

0,871

0,484

0,210

294

Item 10 Cerrada

78,41

7,77

4,12

9,23

0,47

0,30

-0,12

-0,17

-0,19

0,673

-0,882

0,239

221

Item 11 Cerrada

17,17

64,49

14,08

2,99

1,28

-0,14

0,40

-0,32

-0,17

1,108

0,111

0,290

266

Item 12 Cerrada

7,27

21,05

6,61

64,37

0,70

-0,22

-0,37

-0,10

0,49

1,173

-0,201

0,101

259

Item 13 Cerrada

26,20

6,19

6,55

60,01

1,05

-0,18

-0,21

-0,19

0,36

0,918

0,340

0,286

279

Item 14 Cerrada

25,28

16,27

49,78

7,61

1,06

-0,21

-0,27

0,47

-0,16

1,432

0,529

0,203

292

Item 15 Cerrada

17,96

12,71

39,95

27,52

1,86

-0,25

-0,08

0,34

-0,09

1,216

1,077

0,230

321

Item 16 Cerrada

23,66

48,12

7,21

20,02

1,00

-0,06

0,34

-0,19

-0,22

0,839

0,777

0,224

309

Item 17 Cerrada

20,89

49,30

24,27

4,07

1,47

-0,10

0,32

-0,24

-0,08

0,898

0,902

0,290

309

Item 18 Cerrada

9,01

10,01

39,01

40,78

1,19

-0,21

-0,23

-0,18

0,44

1,299

0,683

0,165

303

Item 19 Cerrada

39,15

38,86

8,79

11,15

2,04

-0,11

0,25

-0,15

-0,08

1,339

1,221

0,283

325

Item 20 Cerrada

16,02

29,46

43,71

9,65

1,16

-0,17

-0,04

0,22

-0,10

0,651

1,405

0,267

341

Item 21 Cerrada

17,44

41,13

18,94

21,05

1,43

-0,03

-0,16

0,04

0,18

0,774

2,291

0,134

399

Item 22 Cerrada

24,86

27,64

30,90

12,13

4,46

-0,13

-0,08

0,22

-0,03

1,199

1,672

0,237

353

Item 23 Cerrada

15,12

31,13

26,71

24,16

2,89

-0,18

0,03

-0,04

0,16

1,473

1,972

0,201

369

Item 24 Cerrada

35,80

16,32

36,78

10,62

0,48

-0,20

-0,17

0,40

-0,12

1,349

1,000

0,169

319

Item 25 Cerrada

42,14

16,79

10,03

29,37

1,66

-0,38

-0,08

-0,09

0,54

1,582

0,983

0,090

320

Item 26 Cerrada

21,10

20,63

38,56

16,85

2,85

-0,06

-0,10

0,30

-0,21

2,427

1,236

0,293

324

Item 27 Cerrada

32,52

16,70

8,25

41,89

0,64

-0,22

-0,31

-0,15

0,52

1,221

0,537

0,068

300

Item 28 Cerrada

49,79

20,08

21,73

7,21

1,19

0,37

-0,26

-0,11

-0,13

1,036

0,703

0,245

301

Item 29 Cerrada

6,81

39,08

8,09

45,31

0,72

-0,24

0,41

-0,20

-0,18

1,501

0,842

0,193

309

Item 30 Cerrada

9,07

12,58

45,52

31,36

1,48

-0,23

-0,23

0,38

-0,10

1,572

0,991

0,273

313

Item 31 Cerrada

15,15

49,72

12,68

21,35

1,10

-0,17

0,38

-0,26

-0,10

1,132

0,696

0,249

300

Item 33 Cerrada

33,23

16,89

41,99

5,92

1,97

-0,35

-0,14

0,47

-0,07

1,476

0,734

0,205

302

Item 34 Cerrada

18,06

10,04

12,95

57,90

1,06

-0,22

-0,23

-0,22

0,47

1,315

0,261

0,222

277

Item 35 Cerrada

8,00

14,69

61,91

14,28

1,13

-0,21

-0,22

0,41

-0,18

0,767

0,123

0,194

277

Item 36 Cerrada

11,23

15,61

61,82

10,20

1,13

-0,18

-0,20

0,39

-0,20

1,121

0,270

0,301

273

Item 37 Cerrada

4,39

6,99

20,21

67,65

0,75

-0,19

-0,25

-0,30

0,48

1,536

-0,035

0,268

258

Item 38 Cerrada

7,31

3,51

86,65

2,02

0,51

-0,19

-0,17

0,29

-0,11

0,660

-1,664

0,060

195

Item 40 Cerrada

81,93

7,96

5,54

3,85

0,72

0,40

-0,26

-0,22

-0,17

1,281

-0,686

0,214

227

Item 42 Cerrada

63,20

20,32

11,19

4,33

0,96

0,40

-0,29

-0,15

-0,12

0,940

-0,051

0,244

261

Item 43 Cerrada

18,82

11,81

18,72

49,27

1,37

-0,21

-0,17

-0,24

0,46

1,150

0,425

0,149

291

Anexo I

267

[continuacin]
ID_
ITEM

ID_
TIPO

CLA- %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_ IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

Item 44 Cerrada

6,94

29,77

59,73

2,85

0,70

-0,26

-0,29

0,46

-0,13

1,268

0,188

0,226

273

Item 45 Cerrada

5,40

35,20

56,70

1,85

0,84

-0,18

-0,41

0,51

-0,12

1,562

0,218

0,185

275

Item 46 Cerrada

46,00

41,74

7,60

3,25

1,42

0,33

-0,25

-0,14

-0,03

1,676

1,015

0,320

311

Item 48 Cerrada

11,21

35,67

36,73

14,67

1,71

-0,16

0,26

-0,17

0,03

1,862

1,298

0,256

329

Item 49 Cerrada

11,45

20,30

32,37

35,02

0,85

-0,14

-0,17

0,43

-0,18

1,698

1,052

0,152

321

Item 50 Cerrada

6,54

22,45

19,17

50,87

0,98

-0,13

0,12

0,17

-0,17

1,222

2,076

0,141

380

Item 51 Cerrada

19,26

41,31

33,48

5,20

0,75

-0,20

-0,13

0,33

-0,08

0,882

1,197

0,134

337

Item 52 Cerrada

20,11

13,26

44,30

21,14

1,18

-0,19

-0,15

0,24

0,01

0,977

1,337

0,315

330

Item 53 Cerrada

36,07

20,59

21,37

20,01

1,96

0,31

-0,19

-0,16

-0,02

1,140

1,236

0,213

331

Item 54 Cerrada

10,33

12,13

30,43

45,33

1,79

-0,11

-0,21

-0,18

0,38

1,258

0,830

0,244

307

Item 55 Cerrada

9,12

21,39

17,75

50,66

1,07

-0,16

-0,33

-0,19

0,51

1,380

0,332

0,134

285

Item 56 Cerrada

22,53

24,16

40,20

10,58

2,52

-0,11

-0,19

0,34

-0,12

0,942

0,995

0,193

322

Item 57 Cerrada

14,48

28,98

37,93

17,44

1,17

-0,11

-0,13

0,32

-0,14

1,073

1,177

0,214

328

Item 58 Cerrada

8,15

52,16

31,03

7,32

1,35

-0,14

0,45

-0,28

-0,19

1,502

0,530

0,252

289

Item 59 Cerrada

9,21

24,64

19,48

44,76

1,91

-0,19

-0,23

-0,14

0,43

1,195

0,776

0,211

306

Item 60 Cerrada

5,34

24,01

58,92

11,14

0,59

-0,20

-0,30

0,47

-0,18

1,275

0,162

0,195

273

Item 61 Cerrada

15,54

13,72

13,88

55,81

1,05

-0,20

-0,14

-0,18

0,37

0,875

0,289

0,282

277

Item 62 Cerrada

51,27

15,21

11,68

20,38

1,47

0,41

-0,25

-0,23

-0,10

1,439

0,622

0,271

293

Item 63 Cerrada

13,61

63,95

13,52

7,87

1,05

-0,24

0,39

-0,19

-0,15

1,130

0,170

0,275

270

Item 64 Cerrada

9,16

67,73

16,94

5,22

0,96

-0,21

0,43

-0,28

-0,17

1,477

0,054

0,326

259

Item 65 Cerrada

51,93

13,62

17,63

15,73

1,08

0,46

-0,15

-0,22

-0,25

1,299

0,433

0,202

287

Tabla I.30 Parmetros preguntas abiertas, Matemtica 8 bsico 2013


ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_
CORR

Item 7

Abierta

47,51

26,72

25,76

0,33

0,412

1,101

369

Item 47

Abierta

60,62

30,49

8,89

0,57

1,085

0,752

317

Tabla I.31 tems eliminados, Matemtica 8 bsico 2013


%_
OMIT
_2013

CORR_A
_2013

CORR_B
_2013

CORR_C
_2013

16,66

1,31

-0,16

0,31

-0,20

-0,07

Alto Azar

5,66

2,42

0,31

0,20

-0,10

-0,17

-0,04

Ajuste

68,75

6,53

0,38

-0,10

-0,15

0,26

-0,20

Ajuste

ID_ITEM ID_TIPO CLAVE

%_A %_B %_C %_D


_2013 _2013 _2013 _2013

Item 32

Cerrada

10,09

56,75

15,18

Item 39

Cerrada

89,21

2,40

Item 41

Cerrada

20,21

4,12

268

Informe Tcnico Simce 2013

CORR_D
ELIM_
_2013 IRT_2013

Tabla I.32 Descripciones de campos correspondientes a las Tablas I.29 a I.31


Referencia

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

Datos mtricos CORR_C_2013


cerradas
CORR_D_2013

Correlacin opcin-test considerando la alternativa C.

Identificacin
Clave

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad de


respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA
Datos mtricos
CORR_AB
abiertas

Correlacin opcin-test considerando la alternativa D.

(considerando el parmetro de azar).

Porcentaje de respuestas omitidas.


Correlacin opcin-test considerando la categora con puntuacin
mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con Correcta,


ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Anexo I

269

Figura I.15 Curva caracterstica de la prueba, 8 bsico, Matemtica 2013

Figura I.16 Curva de informacin de la prueba, 8 bsico, Matemtica 2013

270

Informe Tcnico Simce 2013

Prueba 8 bsico: Ciencias Naturales


Tabla I.33 Parmetros preguntas seleccin mltiple, Ciencias Naturales, 8 bsico 2013
%_
DISC_ DIFIC_ AZAR_
CLA- %_A %_B %_C %_D
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_
IRT_
IRT_
VE _2013 _2013 _2013 _2013
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

ID_
ITEM

ID_
TIPO

tem 2

Cerrada

11,88

62,61

14,45

10,55

0,50

-0,23

0,44

-0,29

-0,11

1,033

-0,069

0,243

261

tem 3

Cerrada

2,30

1,95

2,57

92,94

0,24

-0,16

-0,14

-0,14

0,26

1,086

-1,370

0,127

196

tem 4

Cerrada

58,55

8,59

19,32

12,32

1,22

0,31

-0,15

-0,09

-0,23

0,670

0,375

0,189

296

tem 5

Cerrada

13,82

12,38

53,72

19,05

1,04

-0,22

-0,12

0,37

-0,18

1,113

0,723

0,253

304

tem 6

Cerrada

49,74

9,04

19,26

20,53

1,43

0,27

-0,19

-0,18

-0,02

0,785

1,093

0,273

325

tem 7

Cerrada

6,88

53,18

24,95

14,17

0,83

-0,10

0,25

-0,11

-0,15

0,844

1,156

0,343

320

tem 8

Cerrada

40,78

8,65

40,34

9,70

0,53

0,37

-0,07

-0,25

-0,13

0,970

1,028

0,143

329

tem 10 Cerrada

46,68

13,43

17,43

21,61

0,85

0,00

0,00

0,20

-0,19

0,864

2,266

0,087

403

tem 11 Cerrada

19,87

22,75

10,04

46,43

0,91

-0,10

-0,28

-0,03

0,33

0,743

0,548

0,138

308

tem 12 Cerrada

29,00

7,02

2,73

60,86

0,39

-0,31

-0,15

-0,13

0,42

1,158

0,389

0,232

286

tem 13 Cerrada

15,76

37,09

25,27

19,50

2,39

-0,03

0,20

-0,12

-0,10

1,218

1,733

0,286

356

tem 14 Cerrada

33,68

12,29

44,36

8,17

1,51

0,01

-0,18

0,18

-0,13

0,854

1,786

0,340

355

tem 15 Cerrada

32,00

9,78

14,85

42,78

0,59

-0,22

-0,08

-0,06

0,30

0,838

1,203

0,202

337

tem 16 Cerrada

16,02

16,77

13,97

51,04

2,21

-0,19

-0,15

-0,14

0,35

0,964

0,759

0,205

310

tem 17 Cerrada

26,40

17,32

48,78

6,74

0,76

-0,22

-0,21

0,39

-0,06

1,313

0,803

0,242

308

tem 18 Cerrada

47,37

25,39

16,11

9,27

1,86

0,37

-0,12

-0,22

-0,17

1,170

0,931

0,236

316

tem 19 Cerrada

10,93

6,97

67,88

13,94

0,28

-0,26

-0,16

0,34

-0,11

0,752

0,040

0,239

271

tem 21 Cerrada

6,15

30,54

36,52

26,22

0,58

-0,18

-0,12

0,30

-0,11

1,025

1,393

0,189

345

tem 23 Cerrada

11,89

9,57

26,05

51,27

1,22

-0,24

-0,22

-0,19

0,46

1,157

0,538

0,134

300

tem 24 Cerrada

1,29

2,17

1,86

94,44

0,23

-0,11

-0,13

-0,12

0,21

0,883

-1,994

0,063

169

tem 25 Cerrada

16,70

30,53

36,69

15,57

0,51

-0,21

0,23

-0,07

0,02

0,920

1,800

0,182

370

tem 26 Cerrada

18,68

12,09

51,41

16,93

0,89

-0,03

-0,13

0,27

-0,22

0,605

0,827

0,198

322

tem 27 Cerrada

22,78

20,79

20,96

34,17

1,30

-0,10

-0,13

-0,06

0,25

0,758

1,656

0,194

364

tem 28 Cerrada

25,54

16,19

8,40

49,18

0,69

-0,14

-0,22

-0,18

0,39

1,007

0,748

0,178

311

tem 29 Cerrada

47,10

15,00

20,63

15,94

1,33

0,33

-0,11

-0,17

-0,15

0,934

1,052

0,211

326

tem 30 Cerrada

10,43

65,63

10,43

12,87

0,63

-0,22

0,39

-0,22

-0,14

0,906

0,357

0,179

291

tem 31 Cerrada

9,74

18,70

63,06

7,69

0,82

-0,21

-0,24

0,39

-0,11

1,172

0,654

0,251

300

tem 32 Cerrada

9,31

10,49

22,64

56,53

1,03

-0,22

-0,23

-0,11

0,37

0,940

0,526

0,217

297

tem 33 Cerrada

71,98

7,75

11,04

8,48

0,75

0,34

-0,18

-0,16

-0,19

0,831

-0,215

0,220

257

tem 34 Cerrada

47,77

14,41

24,57

11,96

1,30

0,36

-0,15

-0,21

-0,11

0,825

0,752

0,148

316

tem 37 Cerrada

25,76

5,96

15,35

52,11

0,82

-0,28

0,00

-0,18

0,38

0,639

0,134

0,000

300

tem 38 Cerrada

48,80

16,93

15,40

16,87

2,00

0,38

-0,14

-0,16

-0,20

1,156

0,852

0,234

312

tem 39 Cerrada

51,06

18,09

15,85

13,94

1,06

0,29

-0,17

-0,17

-0,04

0,809

0,952

0,262

318

tem 40 Cerrada

48,76

28,81

12,51

8,83

1,09

0,32

-0,14

-0,19

-0,13

1,553

1,100

0,323

319

tem 41 Cerrada

14,61

53,52

2,93

28,41

0,53

-0,20

0,46

-0,07

-0,33

1,291

0,525

0,170

296

tem 42 Cerrada

44,63

12,08

28,17

13,81

1,31

0,29

-0,23

-0,08

-0,09

0,797

1,160

0,221

333

tem 44 Cerrada

18,30

55,37

10,34

15,10

0,89

-0,23

0,36

-0,20

-0,07

1,169

0,781

0,303

303

Anexo I

271

Tabla I.34 Parmetros preguntas abiertas, Ciencias Naturales, 8 bsico 2013


ID_
ITEM

ID_
TIPO

%_
INCORR

%_
PARC

%_
CORR

%_
OMITA

CORR
_AB

DISC
_IRT

DIFIC_
PARC_ IRT

DIFIC_
CORR_IRT

RP67_
PARC

RP67
_CORR

tem 22

Abierta

42,21

31,12

18,73

7,94

0,39

0,283

0,944

1,703

322

458

Tabla I.35 tems eliminados prueba Ciencias Naturales 8 bsico 2013


%_A %_B %_C %_D
_2013 _2013 _2013 _2013

%_
CORR_ CORR_ CORR_ CORR_
OMIT
A_2013 B_2013 C_2013 D_2013
_2013

ID_
ITEM

ID_
TIPO

CLAVE

tem 1

Cerrada

5,69

83,74

3,60

6,26

0,71

-0,18

0,23

-0,13

-0,07

Alto Azar

tem 9

Cerrada

21,89

33,96

29,30

14,64

0,21

-0,14

-0,02

0,17

-0,03

Baja Discriminacin

tem 20 Cerrada

59,67

21,50

6,70

11,61

0,52

0,26

-0,07

-0,22

-0,14

Baja Discriminacin

tem 35 Cerrada

1,69

2,98

85,10

9,89

0,34

-0,11

-0,10

0,24

-0,18

Baja Discriminacin

tem 36 Cerrada

70,66

16,21

5,02

7,40

0,72

0,21

-0,11

-0,19

-0,05

Baja Discriminacin

tem 43 Cerrada

25,63

17,58

13,91

42,37

0,50

-0,02

0,06

0,08

-0,08

Ajuste

ELIM_IRT_2013

Tabla I.36 Descripciones de campos correspondientes a Tablas I.33 a I.35


Referencia

Identificacin
Clave

Datos mtricos
cerradas

272

Nombre del
campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems)

ID_ITEM

Cdigo identificador del tem (todos los tems)

ID_TIPO

Tipo de tem (todos los tems)

CLAVE

Opcin de respuesta correcta

%_A_2013

Porcentaje de respuesta de la alternativa A

%_B_2013

Porcentaje de respuesta de la alternativa B

%_C_2013

Porcentaje de respuesta de la alternativa C

%_D_2013

Porcentaje de respuesta de la alternativa D

%_OMIT_2013

Porcentaje de respuestas omitidas

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67%
(considerando el parmetro de azar).

Informe Tcnico Simce 2013

[continuacin]
Referencia

Datos mtricos
abiertas

Nombre del
campo

Descripcin de campo

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Figura I.17 Curva caracterstica de la prueba 8 bsico, Ciencias Naturales 2013

Anexo I

273

Figura I.18 Curva de informacin de la prueba, 8 bsico, Ciencias Naturales, 2013

Prueba II medio: Lenguaje y Comunicacin: Comprensin de Lectura


Tabla I.37 Parmetros preguntas seleccin mltiple, Lenguaje y Comunicacin: Comprensin de Lectura 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_
IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

ID_
ITEM

ID_
TIPO

Item 1

Cerrada

7,36

7,67

9,40

74,65

0,92

-0,27

-0,23

-0,24

0,47

0,748

-1,262

0,063

213

Item 2

Cerrada

7,35

23,23

5,31

63,13

0,99

-0,18

-0,41

-0,25

0,58

1,108

-0,500

0,062

246

Item 3

Cerrada

8,06

8,47

5,05

77,68

0,75

-0,20

-0,28

-0,24

0,45

0,789

-1,345

0,104

204

Item 4

Cerrada

75,06

6,09

8,69

9,36

0,80

0,54

-0,25

-0,30

-0,30

1,407

-0,801

0,200

220

Item 5

Cerrada

11,38

52,49

26,86

8,04

1,23

-0,19

0,36

-0,14

-0,21

0,716

0,376

0,215

291

Item 6

Cerrada

17,68

7,94

67,72

5,67

0,99

-0,30

-0,23

0,46

-0,16

0,816

-0,593

0,174

239

Item 7

Cerrada

32,85

45,60

6,78

13,93

0,85

-0,17

0,33

-0,18

-0,11

0,982

0,939

0,263

314

Item 8

Cerrada

10,91

51,18

20,84

16,21

0,86

-0,07

0,30

-0,17

-0,15

0,956

0,928

0,335

307

Item 9

Cerrada

13,24

13,86

68,04

4,19

0,67

-0,29

-0,20

0,43

-0,16

0,845

-0,277

0,281

247

Item 11 Cerrada

35,10

10,36

41,32

12,23

1,00

-0,06

-0,27

0,34

-0,17

1,188

1,007

0,236

318

Item 12 Cerrada

7,60

63,20

16,31

11,93

0,96

-0,23

0,39

-0,15

-0,21

0,802

0,093

0,311

264

Item 13 Cerrada

5,46

7,81

82,33

3,31

1,10

-0,21

-0,29

0,42

-0,18

0,731

-1,623

0,195

183

Item 19 Cerrada

14,83

24,53

5,01

54,76

0,87

-0,23

-0,21

-0,19

0,43

0,714

0,140

0,165

282

Item 21 Cerrada

15,13

14,22

14,11

55,69

0,85

-0,31

-0,25

-0,17

0,52

1,150

0,133

0,197

273

Item 22 Cerrada

51,33

16,76

7,49

23,43

0,99

0,30

-0,17

-0,25

-0,05

0,577

0,703

0,257

307

Item 23 Cerrada

11,66

14,13

5,36

67,88

0,97

-0,33

-0,30

-0,22

0,56

0,992

-0,887

0,012

230

Item 24 Cerrada

75,18

11,55

7,98

4,58

0,71

0,49

-0,33

-0,23

-0,19

0,813

-1,337

0,015

210

Item 25 Cerrada

6,40

80,94

7,35

4,48

0,83

-0,26

0,47

-0,28

-0,21

1,127

-1,074

0,185

208

Item 26 Cerrada

11,22

50,06

19,73

17,82

1,17

-0,20

0,36

-0,15

-0,15

0,940

0,731

0,252

304

274

Informe Tcnico Simce 2013

[continuacin]
ID_
ITEM

ID_
TIPO

Item 27 Cerrada

CLA %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013
C

18,75

16,14

Item 28 Cerrada

46,12

Item 29 Cerrada

11,19

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_
IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

56,17

7,79

1,16

-0,18

-0,21

0,42

-0,21

0,944

35,31

5,39

11,84

9,63

16,52

61,55

0,288

0,231

281

1,34

0,30

-0,13

-0,24

-0,10

1,10

-0,23

-0,27

-0,23

0,49

0,723

0,975

0,252

319

0,983

-0,120

0,195

261

Item 30 Cerrada

8,76

61,10

21,15

7,37

1,62

-0,23

0,41

-0,20

-0,19

1,142

0,266

0,347

270

Item 31 Cerrada

52,64

15,14

21,17

9,10

1,95

0,45

-0,23

-0,22

-0,17

1,194

0,391

0,247

284

Item 32 Cerrada

13,32

14,32

17,24

53,24

1,87

-0,25

-0,23

-0,18

0,48

0,990

0,191

0,184

279

Item 33 Cerrada

12,99

48,21

17,09

19,53

2,19

-0,15

0,32

-0,19

-0,09

0,855

0,864

0,288

308

Item 35 Cerrada

24,11

24,79

13,36

34,42

3,33

-0,21

-0,22

-0,12

0,48

1,897

0,830

0,141

309

Item 37 Cerrada

14,35

25,03

30,78

26,20

3,64

-0,20

-0,16

-0,03

0,34

2,256

1,229

0,148

329

Item 38 Cerrada

22,39

21,77

35,93

15,76

4,15

-0,08

-0,12

0,27

-0,13

2,564

1,219

0,271

325

Item 39 Cerrada

16,56

13,38

44,43

22,03

3,60

-0,12

-0,20

0,36

-0,15

1,559

0,886

0,289

307

Item 42 Cerrada

11,08

14,91

63,63

9,57

0,81

-0,24

-0,27

0,44

-0,14

1,192

0,159

0,349

264

Item 43 Cerrada

37,54

38,76

9,70

11,76

2,24

0,28

-0,11

-0,19

-0,08

0,740

1,303

0,214

341

Item 44 Cerrada

24,77

13,95

19,22

41,06

0,99

-0,02

-0,21

-0,31

0,42

0,815

0,691

0,129

313

Item 45 Cerrada

56,14

20,42

14,69

7,71

1,03

0,43

-0,18

-0,22

-0,22

0,880

0,221

0,235

278

Item 46 Cerrada

10,90

61,82

10,88

15,44

0,95

-0,21

0,38

-0,22

-0,15

0,726

0,033

0,280

265

Item 48 Cerrada

20,12

58,42

11,00

9,02

1,45

-0,24

0,41

-0,23

-0,11

1,223

0,257

0,345

269

Item 49 Cerrada

49,55

14,94

22,23

11,82

1,47

0,48

-0,28

-0,23

-0,14

1,615

0,452

0,222

286

Item 50 Cerrada

13,72

59,10

13,21

12,43

1,55

-0,25

0,45

-0,23

-0,17

1,352

0,216

0,290

271

Item 51 Cerrada

20,49

24,42

36,41

16,51

2,17

-0,07

-0,13

0,23

-0,08

1,152

1,527

0,245

346

Item 52 Cerrada

44,31

17,71

24,73

11,16

2,09

0,36

-0,27

-0,03

-0,20

0,985

0,758

0,192

309

Item 53 Cerrada

24,50

50,00

11,55

11,43

2,51

-0,27

0,44

-0,21

-0,10

1,821

0,569

0,278

290

Item 54 Cerrada

47,89

19,78

16,15

13,80

2,39

0,44

-0,26

-0,26

-0,07

1,233

0,498

0,210

291

Item 55 Cerrada

13,15

16,12

49,08

19,04

2,60

-0,16

-0,25

0,34

-0,06

0,872

0,696

0,267

301

Item 56 Cerrada

10,78

17,19

12,85

56,66

2,52

-0,18

-0,25

-0,24

0,47

1,224

0,177

0,246

272

Item 57 Cerrada

14,03

22,38

46,29

14,50

2,81

-0,15

-0,18

0,35

-0,13

1,580

0,851

0,302

304

Item 58 Cerrada

13,15

16,50

49,96

17,66

2,73

-0,22

-0,25

0,36

-0,03

1,199

0,683

0,299

296

Item 59 Cerrada

15,95

18,81

50,45

12,16

2,63

-0,20

-0,18

0,42

-0,20

1,477

0,551

0,276

290

Item 61 Cerrada

4,84

8,63

13,61

72,26

0,66

-0,18

-0,26

-0,30

0,48

0,892

-0,566

0,217

236

Item 62 Cerrada

70,58

6,17

10,55

11,98

0,72

0,40

-0,26

-0,20

-0,17

0,701

-0,437

0,264

241

Item 63 Cerrada

9,02

64,10

13,06

12,77

1,05

-0,21

0,45

-0,19

-0,27

1,103

0,164

0,319

266

Item 64 Cerrada

38,27

11,80

26,69

21,75

1,48

0,25

-0,22

0,00

-0,12

0,836

1,470

0,243

346

Item 66 Cerrada

18,25

18,68

53,42

8,23

1,42

-0,16

-0,27

0,43

-0,16

1,496

0,587

0,285

291

Item 67 Cerrada

13,46

21,77

19,42

43,94

1,42

-0,17

-0,18

-0,23

0,46

1,426

0,705

0,178

303

Item 68 Cerrada

16,30

23,63

30,54

27,99

1,54

-0,20

-0,05

0,12

0,09

1,468

1,924

0,261

365

Item 69 Cerrada

15,65

53,54

15,59

13,76

1,46

-0,22

0,43

-0,20

-0,17

1,573

0,594

0,291

291

Item 70 Cerrada

51,92

28,40

11,12

7,16

1,40

0,37

-0,13

-0,22

-0,23

0,924

0,633

0,257

298

Item 71 Cerrada

15,58

17,84

24,68

40,20

1,70

-0,18

-0,22

-0,12

0,41

1,209

0,865

0,168

314

Item 72 Cerrada

75,38

8,06

10,20

5,37

0,98

0,50

-0,29

-0,28

-0,22

1,215

-0,573

0,261

230

Item 73 Cerrada

13,97

8,74

8,53

67,72

1,04

-0,23

-0,30

-0,24

0,51

0,997

-0,400

0,162

248

Item 75 Cerrada

68,38

11,66

12,88

5,44

1,63

0,42

-0,25

-0,20

-0,21

1,121

-0,154

0,280

252

Item 76 Cerrada

5,86

14,03

72,89

5,57

1,64

-0,24

-0,30

0,46

-0,17

1,145

-0,165

0,320

248

Item 77 Cerrada

40,35

23,36

25,11

9,25

1,94

0,31

-0,16

-0,09

-0,17

1,003

1,135

0,227

327

Item 78 Cerrada

19,64

25,02

23,56

29,58

2,20

-0,15

0,01

-0,05

0,17

1,443

1,638

0,207

353

Anexo I

275

Tabla I.38 Parmetros preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura II medio 2013
ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

Item 16

Abierta

31,19

30,89

37,92

0,45

0,500

0,229

314

Item 34

Abierta

45,90

17,22

36,88

0,41

0,602

1,396

370

Item 65

Abierta

21,82

34,50

22,72

0,57

0,431

-0,214

320

Tabla I.39 tems eliminados preguntas cerradas, Lenguaje y Comunicacin: Comprensin de Lectura II
medio 2013
ID_
ITEM

ID_
TIPO

CLA- %_A %_B %_C %_D %_OMIT CORR_ CORR_ CORR_ CORR_
ELIM_IRT_2013
VE _2013 _2013 _2013 _2013 _2013 A_2013 B_2013 C_2013 D_2013

Item 10 Cerrada

15,73

9,78

68,59

5,06

0,84

-0,21

-0,27

0,44

-0,21

Alto Azar

Item 14 Cerrada

7,86

9,04

9,64

71,81

1,65

-0,15

-0,24

-0,25

0,41

Baja
Discriminacin

Item 17 Cerrada

3,91

3,37

6,15

86,06

0,51

-0,22

-0,24

-0,14

0,35

Baja Dificultad

Item 18 Cerrada

2,25

3,02

91,54

2,78

0,42

-0,20

-0,21

0,34

-0,16

Baja Dificultad

Item 20 Cerrada

8,96

81,66

4,89

3,92

0,57

-0,19

0,36

-0,25

-0,15

Baja
Discriminacin

Item 36 Cerrada

18,71

35,05

28,99

13,95

3,29

-0,10

0,14

-0,02

-0,05

Ajuste

Item 40 Cerrada

32,66

13,72

12,33

38,12

3,17

-0,13

-0,15

-0,12

0,32

Item 41 Cerrada

4,30

7,50

14,60

73,12

0,47

-0,19

-0,18

-0,25

0,39

Item 60 Cerrada

10,69

63,04

15,60

9,32

1,35

-0,27

0,38

-0,16

-0,13

Baja
Discriminacin
Baja
Discriminacin
Alto Azar

Tabla I.40 tems eliminados preguntas abiertas, Lenguaje y Comunicacin: Comprensin de Lectura II
medio 2013
ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

Item 15

Abierta

17,59

53,28

29,12

0,32

Item 47

Abierta

22,54

52,07

25,39

0,30

Item 74

Abierta

48,95

19,77

31,28

0,33

276

Informe Tcnico Simce 2013

ELIM_A_IRT
Baja
Discriminacin
Baja
Discriminacin
Baja
Discriminacin

Tabla I.41 Descripciones de campos correspondientes a Tablas I.37 a I.40


Referencia
Identificacin
Clave

Datos mtricos
cerradas

Datos mtricos
abiertas

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems).

ID_ITEM

Cdigo identificador del tem (todos los tems).

ID_TIPO

Tipo de tem (todos los tems).

CLAVE

Opcin de respuesta correcta.

%_A_2013

Porcentaje de respuesta de la alternativa A.

%_B_2013

Porcentaje de respuesta de la alternativa B.

%_C_2013

Porcentaje de respuesta de la alternativa C.

%_D_2013

Porcentaje de respuesta de la alternativa D.

%_OMIT_2013

Porcentaje de respuestas omitidas.

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad de


respuesta de 67%

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con Correcta,


ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

(considerando el parmetro de azar).

Anexo I

277

Figura I.19 Curva caracterstica de la prueba II medio Lenguaje y Comunicacin:

Comprensin de Lectura 2013

Figura I.20 Curva de informacin de la prueba II medio Lenguaje y Comunicacin:

Comprensin de Lectura 2013

278

Informe Tcnico Simce 2013

Prueba II medio: Matemtica


Tabla I.42 Parmetros preguntas de seleccin mltiple, Matemtica II medio, 2013
CLA- %_A %_B %_C %_D
VE _2013 _2013 _2013 _2013

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_ IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

ID_
ITEM

ID_
TIPO

tem 1

Cerrada

3,01

8,45

83,87

3,19

1,49

-0,14

-0,21

0,30

-0,13

0,731

-0,970

0,344

183

tem 2

Cerrada

5,03

16,84

70,93

4,85

2,36

-0,16

-0,26

0,38

-0,16

0,922

0,033

0,344

249

tem 3

Cerrada

5,39

7,92

11,01

74,72

0,96

-0,20

-0,18

-0,20

0,37

0,630

-1,097

0,000

219

tem 4

Cerrada

7,99

11,13

70,23

9,62

1,04

-0,24

-0,23

0,45

-0,23

0,926

-0,360

0,100

247

tem 5

Cerrada

11,03

23,30

53,43

8,69

3,55

-0,22

-0,38

0,56

-0,17

2,022

0,590

0,269

290

tem 6

Cerrada

4,01

74,44

11,83

8,79

0,92

-0,15

0,43

-0,26

-0,27

1,054

-0,301

0,237

238

tem 7

Cerrada

3,97

82,79

5,55

6,98

0,71

-0,16

0,33

-0,18

-0,19

0,707

-1,206

0,149

193

tem 8

Cerrada

16,20

8,22

10,54

61,91

3,13

-0,30

-0,20

-0,23

0,50

1,603

0,427

0,292

279

tem 10 Cerrada

40,81

20,61

25,67

8,63

4,27

0,57

-0,21

-0,35

-0,14

1,982

0,995

0,119

323

tem 11 Cerrada

2,75

4,07

90,78

1,87

0,54

-0,17

-0,17

0,28

-0,12

1,091

-1,319

0,144

177

tem 12 Cerrada

13,17

5,06

13,03

67,56

1,19

-0,31

-0,21

-0,12

0,41

0,647

-0,632

0,000

248

tem 13 Cerrada

5,75

14,16

53,60

25,29

1,20

-0,12

-0,24

0,58

-0,40

1,967

0,587

0,187

293

tem 14 Cerrada

17,74

41,67

26,56

9,65

4,37

-0,25

0,50

-0,22

-0,17

2,182

1,075

0,214

323

tem 15 Cerrada

15,17

36,24

6,54

41,10

0,95

-0,15

-0,42

-0,09

0,57

1,226

0,826

0,071

320

tem 17 Cerrada

15,66

10,23

22,68

50,23

1,20

-0,33

-0,17

-0,19

0,50

1,344

0,585

0,167

298

tem 18 Cerrada

17,96

14,22

18,08

47,89

1,86

-0,21

-0,16

-0,17

0,40

0,957

0,962

0,216

323

tem 19 Cerrada

9,73

31,71

34,22

22,95

1,39

-0,01

-0,39

0,52

-0,14

1,684

1,153

0,120

335

tem 20 Cerrada

39,55

8,86

13,78

35,53

2,28

-0,34

-0,20

-0,12

0,56

1,299

1,133

0,107

337

tem 22 Cerrada

11,72

34,37

22,39

25,73

5,78

-0,02

-0,08

-0,20

0,30

2,492

1,701

0,186

365

tem 23 Cerrada

22,61

47,37

11,64

15,06

3,32

-0,21

0,44

-0,14

-0,23

1,333

0,987

0,245

319

tem 24 Cerrada

13,10

17,38

24,53

41,58

3,42

-0,17

-0,19

-0,14

0,39

1,041

1,227

0,214

340

tem 26 Cerrada

26,48

34,26

24,40

13,17

1,67

-0,09

0,37

-0,25

-0,09

1,326

1,496

0,192

356

tem 27 Cerrada

27,84

20,87

27,05

21,43

2,81

0,49

-0,13

-0,32

-0,06

1,595

1,319

0,090

347

tem 28 Cerrada

16,85

36,04

12,77

32,05

2,28

-0,01

0,42

-0,09

-0,36

1,266

1,313

0,168

346

tem 29 Cerrada

36,19

20,17

17,10

23,76

2,78

0,48

-0,18

-0,15

-0,23

1,770

1,181

0,167

334

tem 30 Cerrada

51,57

13,31

8,85

23,89

2,38

-0,17

-0,25

-0,13

0,49

2,168

1,466

0,087

353

tem 32 Cerrada

46,50

22,56

17,80

8,54

4,60

0,50

-0,25

-0,24

-0,17

2,775

1,007

0,268

316

tem 33 Cerrada

6,74

55,34

25,55

10,53

1,85

-0,15

0,37

-0,25

-0,13

0,953

0,842

0,299

307

tem 34 Cerrada

6,23

9,23

56,23

25,72

2,59

-0,13

-0,18

0,41

-0,27

0,872

0,545

0,224

296

tem 36 Cerrada

16,67

56,44

13,66

11,19

2,05

-0,24

0,43

-0,23

-0,13

1,184

0,703

0,284

298

tem 37 Cerrada

15,61

48,78

15,94

17,27

2,39

-0,18

0,38

-0,11

-0,22

1,178

1,014

0,264

321

tem 38 Cerrada

12,93

15,49

53,16

14,64

3,79

-0,23

-0,22

0,48

-0,22

1,588

0,738

0,268

300

tem 39 Cerrada

58,60

15,98

8,07

15,94

1,42

0,52

-0,27

-0,21

-0,26

1,342

0,423

0,207

285

tem 40 Cerrada

23,74

56,07

7,93

10,82

1,45

-0,32

0,43

-0,14

-0,13

0,841

0,473

0,180

296

tem 41 Cerrada

15,08

12,88

20,27

47,74

4,03

-0,18

-0,28

-0,30

0,57

1,420

0,636

0,123

303

tem 43 Cerrada

8,28

8,29

71,93

9,93

1,58

-0,24

-0,22

0,47

-0,28

1,306

-0,081

0,268

248

tem 44 Cerrada

4,09

2,43

2,46

89,98

1,04

-0,20

-0,16

-0,13

0,30

0,859

-1,939

0,000

152

tem 45 Cerrada

14,68

75,92

6,14

2,30

0,96

-0,31

0,43

-0,20

-0,13

0,813

-0,626

0,065

235

tem 46 Cerrada

3,11

3,78

89,11

2,29

1,71

-0,13

-0,17

0,25

-0,12

0,683

-2,050

0,087

145

tem 47 Cerrada

83,17

5,01

6,03

4,88

0,91

0,36

-0,20

-0,22

-0,18

0,863

-1,144

0,110

196

Anexo I

279

[continuacin]
ID_
ITEM

ID_
TIPO

CLA %_A %_B %_C %_D


VE _2013 _2013 _2013 _2013

tem 48 Cerrada

tem 49 Cerrada

tem 50 Cerrada

tem 51 Cerrada

tem 53 Cerrada

tem 54 Cerrada
tem 55 Cerrada

15,20

%_
DISC_ DIFIC_ AZAR_
CORR_ CORR_ CORR_ CORR_
RP67
OMIT
IRT_ IRT_
IRT_
A_2013 B_2013 C_2013 D_2013
_2013
_2013
2013 2013 2013

6,88

47,54

28,59

1,78

-0,01

-0,14

0,48

-0,44

1,193

0,869

0,183

317

2,84

4,38

89,31

2,77

0,70

-0,18

17,59

66,95

6,70

6,97

1,80

-0,21

-0,21

0,34

-0,18

1,126

-1,476

0,067

171

0,43

-0,23

-0,25

0,744

-0,495

0,000

252

12,97

3,44

81,88

1,28

0,43

-0,31

-0,16

0,37

-0,09

0,796

-1,174

0,046

201

14,13

10,12

25,54

46,70

3,50

-0,27

-0,23

-0,27

0,57

1,620

0,663

0,132

302

39,00

12,93

33,75

13,29

14,70

39,94

20,89

21,61

1,03

0,53

-0,20

-0,19

-0,28

2,238

1,024

0,158

322

2,86

-0,07

0,50

-0,21

-0,33

2,263

1,036

0,184

322

tem 56 Cerrada

16,93

65,05

8,96

6,82

2,24

-0,15

0,33

-0,19

-0,18

0,865

0,287

0,269

275

tem 57 Cerrada

26,16

13,21

17,36

40,03

3,24

-0,26

-0,19

-0,16

0,49

1,991

1,057

0,193

324

tem 58 Cerrada

9,48

tem 60 Cerrada

19,59

13,83

40,00

33,22

3,47

-0,12

-0,22

-0,04

0,28

2,324

1,579

0,233

355

22,59

38,85

14,62

4,36

-0,18

-0,12

0,37

-0,16

1,442

1,310

0,239

340

tem 62 Cerrada

12,28

42,39

28,68

14,50

2,14

-0,16

0,41

-0,24

-0,10

1,620

1,172

0,248

330

tem 63 Cerrada

14,28

35,31

21,87

23,50

5,03

-0,09

0,42

-0,25

-0,15

2,538

1,283

0,217

336

tem 64 Cerrada

22,13

34,52

30,98

10,19

2,18

-0,05

-0,39

0,43

0,02

1,479

1,324

0,131

347

tem 65 Cerrada

9,94

41,88

36,44

8,69

3,05

-0,14

-0,13

0,27

-0,09

1,202

1,645

0,258

362

tem 66 Cerrada

49,94

9,55

28,15

9,90

2,46

0,30

-0,16

-0,09

-0,19

0,728

1,208

0,278

336

tem 67 Cerrada

11,24

61,92

9,25

15,55

2,04

-0,20

0,42

-0,16

-0,26

1,148

0,461

0,304

281

tem 68 Cerrada

59,74

16,44

8,65

13,93

1,24

0,40

-0,27

-0,19

-0,12

0,898

0,432

0,244

287

tem 69 Cerrada

11,19

25,82

43,34

12,25

7,40

-0,13

-0,20

0,31

-0,06

1,674

1,371

0,341

337

tem 70 Cerrada

6,29

37,28

42,04

12,30

2,09

-0,15

-0,32

0,52

-0,20

2,211

0,901

0,213

312

tem 71 Cerrada

6,40

48,84

32,57

10,18

2,01

-0,14

0,52

-0,35

-0,20

1,947

0,779

0,210

305

tem 72 Cerrada

11,50

16,73

21,86

48,18

1,73

-0,25

-0,29

-0,22

0,56

1,578

0,637

0,129

301

tem 73 Cerrada

18,07

11,52

51,28

17,10

2,03

-0,24

-0,16

0,50

-0,27

1,491

0,696

0,211

302

tem 74 Cerrada

8,01

15,17

15,79

59,74

1,28

-0,21

-0,31

-0,13

0,44

0,977

0,177

0,142

278

tem 75 Cerrada

48,81

17,19

14,68

17,67

1,66

0,39

-0,10

-0,18

-0,24

0,790

0,740

0,158

317

tem 76 Cerrada

70,67

4,63

15,88

7,59

1,24

0,41

-0,16

-0,25

-0,21

0,873

-0,231

0,206

247

Tabla I.43 Parmetros preguntas abiertas, Matemtica II medio 2013


ID_ITEM

ID_TIPO

%_INCORR

%_CORR

%_OMITA

CORR_AB

DISC_IRT

DIFIC_CORR_IRT

RP67_CORR

tem 9

Abierta

29,20

3,17

63,52

0,46

1,061

1,999

404

tem 31

Abierta

42,04

8,34

49,62

0,41

0,816

2,166

423

280

Informe Tcnico Simce 2013

Tabla I.44 tems eliminados, Matemtica II medio 2013


ID_
ITEM

ID_
TIPO

CLA- %_A %_B %_C %_D %_OMIT CORR_ CORR_ CORR_


VE _2013 _2013 _2013 _2013 _2013 A_2013 B_2013 C_2013

CORR_
D_2013

ELIM_IRT
_2013

tem 16 Cerrada

25,44

46,92

15,99

10,16

1,49

0,37

-0,30

0,11

-0,17

Ajuste

tem 21 Cerrada

22,78

20,25

27,79

25,72

3,45

-0,01

-0,18

0,16

0,01

Ajuste

tem 25 Cerrada

23,69

39,30

17,93

11,53

7,55

-0,03

0,18

-0,10

-0,10

Ajuste

tem 35 Cerrada

12,83

59,10

8,20

18,53

1,34

-0,11

0,32

-0,22

-0,16

Baja
Discriminacin

tem 42 Cerrada

5,13

68,94

20,96

3,76

1,21

-0,15

0,41

-0,32

-0,12

Alto Azar

tem 52 Cerrada

66,93

4,06

24,51

2,56

1,94

0,37

-0,19

-0,26

-0,14

Alto Azar

tem 59 Cerrada

13,37

29,70

12,19

40,68

4,06

0,00

0,28

-0,17

-0,15

Ajuste

tem 61 Cerrada

27,89

25,28

28,02

12,96

5,85

-0,05

-0,11

0,17

-0,02

Ajuste

Tabla I.45 Descripciones de campos correspondientes a Tablas I.42 a I.44


Referencia
Identificacin
Clave

Datos
mtricos
cerradas

Datos
mtricos
abiertas

Nombre del campo

Descripcin de campo

Asignatura

rea a la que pertenece el tem (todos los tems).

ID_ITEM

Cdigo identificador del tem (todos los tems).

ID_TIPO

Tipo de tem (todos los tems).

CLAVE

Opcin de respuesta correcta.

%_A_2013

Porcentaje de respuesta de la alternativa A.

%_B_2013

Porcentaje de respuesta de la alternativa B.

%_C_2013

Porcentaje de respuesta de la alternativa C.

%_D_2013

Porcentaje de respuesta de la alternativa D.

%_OMIT_2013

Porcentaje de respuestas omitidas.

CORR_A_2013

Correlacin opcin-test considerando la alternativa A.

CORR_B_2013

Correlacin opcin-test considerando la alternativa B.

CORR_C_2013

Correlacin opcin-test considerando la alternativa C.

CORR_D_2013

Correlacin opcin-test considerando la alternativa D.

DISC_IRT_2013

Parmetro de discriminacin IRT.

DIFIC_IRT_2013

Parmetro de dificultad IRT.

AZAR_IRT_2013

Parmetro de azar.

ELIM_IRT_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

RP67_2013

Parmetro de Dificultad en escala Simce ajustado a una probabilidad


de respuesta de 67% (considerando el parmetro de azar).

%_INCORR

Porcentaje de respuesta para la categora Incorrecta.

%_PARC

Porcentaje de respuesta para la categora Parcialmente correcta.

%_CORR

Porcentaje de respuesta para la categora Correcta.

%_OMITA

Porcentaje de respuestas omitidas.

CORR_AB

Correlacin opcin-test considerando la categora con puntuacin


mxima.

DISC_IRT

Parmetro de discriminacin IRT.

DIFIC_CORR_IRT

Parmetro de dificultad IRT para la categora Correcta.

RP67_CORR

Parmetro de Dificultad en escala Simce para la categora con


Correcta, ajustado a una probabilidad de respuesta de 67%.

ELIM_A_2013

Criterio psicomtrico en que est basada la eliminacin del tem.

Anexo I

281

Figura I.21 Curva caracterstica de la prueba II medio Matemtica 2013

Figura I.22 Curva de informacin de la prueba II medio Matemtica 2013

282

Informe Tcnico Simce 2013

Anexo J

Tabla J.1 ndices de confiabilidad y Anlisis Factoriales exploratorios de Cuestionarios


Nivel

Actor

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico

Estudiante

4 bsico
4 bsico
4 bsico

Padres y
Apoderados
Padres y
Apoderados
Padres y
Apoderados

4 bsico

Docentes

4 bsico

Docentes

4 bsico

Docentes

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico

Estudiante

6 bsico
6 bsico
6 bsico

Padres y
Apoderados
Padres y
Apoderados
Padres y
Apoderados

Indicador
Autoestima
acadmica y
motivacin escolar

Alpha
Cronbach

KMO

Autopercepcin y
autovaloracin acadmica

0,80

0,79

53%

0,026

Motivacin escolar

0,69

0,76

49%

0,226

0,69

0,76

41%

0,379

0,71

0,78

47%

0,442

0,91

0,95

60%

0,001

Hbitos alimentarios

0,57

0,72

44%

0,679

Hbitos de autocuidado

0,65

0,62

59%

0,169

Hbitos de vida activa

0,37

0,57

43%

0,841

0,73

0,80

53%

0,176

0,83

0,88

56%

0,067

0,73

0,79

49%

0,396

Ambiente Organizado

0,75

0,73

51%

0,242

Ambiente Seguro

0,73

0,76

62%

0,155

0,77

0,83

44%

0,067

0,85

0,87

53%

0,001

0,87

0,90

58%

0,002

0,89

0,90

67%

0,000

Autopercepcin y
autovaloracin acadmica

0,82

0,80

56%

0,010

Motivacin escolar

0,75

0,79

45%

0,110

0,74

0,79

45%

0,282

0,77

0,83

55%

0,113

0,92

0,95

63%

0,002

Hbitos alimentarios

0,67

0,71

51%

0,541

Hbitos de autocuidado

0,77

0,77

67%

0,053

Hbitos de vida activa

0,47

0,55

66%

0,570

Participacin

0,74

0,80

54%

0,150

0,88

0,91

65%

0,016

0,80

0,82

56%

0,222

Ambiente Organizado

0,75

0,74

51%

0,248

Ambiente Seguro

0,73

0,76

62%

0,163

0,77

0,84

48%

0,058

Dimensin

Ambiente de Respeto
Clima de convivencia
Ambiente Organizado
escolar
Ambiente Seguro
Hbitos de vida
saludable

Participacin
Participacin y
Sentido de Pertenencia
formacin ciudadana
Vida democrtica
Clima de convivencia
escolar

Participacin y
Participacin
formacin ciudadana
Ambiente de respeto
Clima de convivencia
Ambiente organizado
escolar
Ambiente seguro
Autoestima
acadmica y
motivacin escolar

Ambiente de Respeto
Clima de convivencia
Ambiente Organizado
escolar
Ambiente Seguro
Hbitos de vida
saludable

Participacin y
Sentido de Pertenencia
formacin ciudadana
Vida democrtica
Clima de convivencia
escolar

Participacin y
Participacin
formacin ciudadana

Anexo J

% de varianza
Determinante
explicada

283

[continuacin]
Nivel

Actor

6 bsico

Docentes

6 bsico

Docentes

6 bsico

Docentes

6 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico

Estudiante

8 bsico
8 bsico
8 bsico

Padres y
Apoderados
Padres y
Apoderados
Padres y
Apoderados

8 bsico

Docentes

8 bsico

Docentes

8. bsico

Docentes

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio

Estudiante

II medio
II medio
II medio

Padres y
Apoderados
Padres y
Apoderados
Padres y
Apoderados

II medio

Docentes

II medio

Docentes

II medio

Docentes

284

Indicador

Alpha
Cronbach

KMO

0,87

0,89

57%

0,000

0,90

0,92

62%

0,000

0,90

0,91

68%

0,000

Autopercepcin y
autovaloracin acadmica

0,81

0,79

60%

0,007

Motivacin escolar

0,77

0,79

57%

0,044

0,85

0,91

56%

0,002

0,80

0,83

61%

0,017

0,88

0,89

63%

0,000

Hbitos alimentarios

0,53

0,65

52%

0,539

Hbitos de autocuidado

0,65

0,67

58%

0,152

Hbitos de vida activa

0,53

0,66

60%

0,556

0,81

0,84

51%

0,180

0,91

0,93

65%

0,001

0,81

0,85

62%

0,002

Ambiente Organizado

0,74

0,73

50%

0,265

Ambiente Seguro

0,73

0,76

61%

0,173

0,78

0,85

44%

0,063

0,88

0,89

59%

0,000

0,90

0,92

62%

0,000

0,90

0,91

67%

0,000

Autopercepcin y
autovaloracin acadmica

0,79

0,76

61%

0,005

Motivacin escolar

0,76

0,76

58%

0,030

0,85

0,91

56%

0,002

0,80

0,81

62%

0,014

0,89

0,90

65%

0,000

Hbitos alimentarios

0,53

0,65

52%

0,570

Hbitos de autocuidado

0,71

0,67

68%

0,088

Hbitos de vida activa

0,58

0,68

49%

0,450

Participacin

0,84

0,86

56%

0,122

0,91

0,91

62%

0,001

0,81

0,85

60%

0,001

Ambiente Organizado

0,73

0,72

50%

0,284

Ambiente Seguro

0,72

0,75

61%

0,181

0,79

0,85

47%

0,062

0,88

0,89

58%

0,000

0,90

0,92

63%

0,000

0,91

0,92

68%

0,000

Dimensin

Ambiente de respeto
Clima de convivencia
Ambiente organizado
escolar
Ambiente seguro
Autoestima
acadmica y
motivacin escolar

Ambiente de Respeto
Clima de convivencia
Ambiente Organizado
escolar
Ambiente Seguro
Hbitos de vida
saludable

Participacin
Participacin y
Sentido de Pertenencia
formacin ciudadana
Vida democrtica
Clima de convivencia
escolar

Participacin y
Participacin
formacin ciudadana
Ambiente de respeto
Clima de convivencia
Ambiente organizado
escolar
Ambiente seguro
Autoestima
acadmica y
motivacin escolar

Ambiente de Respeto
Clima de convivencia
Ambiente Organizado
escolar
Ambiente Seguro
Hbitos de vida
saludable

Participacin y
Sentido de Pertenencia
formacin ciudadana
Vida democrtica
Clima de convivencia
escolar

Participacin y
Participacin
formacin ciudadana
Ambiente de respeto
Clima de convivencia
Ambiente organizado
escolar
Ambiente seguro

Informe Tcnico Simce 2013

% de varianza
Determinante
explicada

Anexo K
Lista de los software mencionados en el
informe como parte de las herramientas
utilizadas en proceso 2013
CORRECTOR 1.0 (2007) Santiago: Ministerio de Educacin.
CORRECTOR 2.0 (2013) Santiago: Agencia de Calidad de la Educacin.
MPLUS 7.3 (1998 2014) Los Angeles, CA: Muthn y Muthn.
PARSCALE 4.1 (2003) Chicago, IL: Scientific Software International.
SAS 9.1 Utilities: Reference. (2004). Cary, NC: SAS Institute Inc.
SAS Enterprise Guide (Versin 4.1). (2008). Cary, NC: SAS Institute Inc.
TIAPLUS: Build 307. (2010). Arnhem, Pases Bajos: CITO.

Anexo K

285

Captulo 1

287

288

Informe Tcnico Simce 2013

Você também pode gostar