Escolar Documentos
Profissional Documentos
Cultura Documentos
1. Consideraciones generales
El fracaso de las encuestas de opinin para predecir correctamente el resultado de las elecciones presidenciales () cre amplia confusin y recelo acerca de la fiabilidad de las encuestas. La reaccin del pblico oscil entre acusaciones de fraude absoluto a expresiones de simpata personal hacia los encuestadores. Las reacciones de los expertos oscilaron entre la condena por negligencia, parcialidad involuntaria, errores de juicio y uso de tcnicas anticuadas, a la determinacin de aprovechar esta experiencia para ampliar nuestro conocimiento del comportamiento poltico y mejorar la metodologa de las encuestas.
Este juicio no se refiere a las encuestas en la pasada eleccin presidencial en Mxico. Fue formulado por el estadstico Samuel Wilks, luego del mayor fracaso de las encuestas para prever el resultado de una eleccin presidencial en Estados Unidos, en 1948. Pero bien pudiera asumirse para el caso que nos ocupa.
Ello, porque en el reciente proceso electoral, varias casas encuestadoras fueron abiertamente cuestionadas por los resultados que difundieron en la eleccin presidencial, al sobreestimar el respaldo a favor del candidato priista.
Comencemos por el principio: Cundo surgen las encuestas electorales? 1936 Crossley, Gallup y Roper prevn correctamente por encuesta el triunfo de Roosevelt en Estados Unidos. Literary Digest da ventaja a Landon con 2.3 millones de votos por correo.
Fuentes de error
No muestrales
Dado que una encuesta es una muestra y no una observacin de todo el universo, lleva implcito un error que es calculable si se adoptan procedimientos probabilsticos.
El margen de error se calcula para una probabilidad determinada de que el estimador se encuentre en la proximidad del parmetro (nivel de confianza).
12
M5
14
Participacin
Decisin
Preferencias
15
Inhibirla
Desnimo
16
Equilibro electoral.
18
19
20
22
23
Casos paradigmticos:
ESTADOS UNIDOS (1948).
Demcratas Crossley Gallup Roper 44.8% 44.5% 37.1% Error - 4.6% - 4.9% -12.3%
REAL
49.4%
24
Casos paradigmticos:
ESTADOS UNIDOS (1936).
Demcratas Crossley Gallup Roper 53.8% 53.8% 61.7% Error - 6.4% - 6.4% + 1.5%
REAL
60.2%
25
Casos paradigmticos:
Ganador 1936
Crossley Gallup Roper REAL Demcrata Demcrata Demcrata Demcrata
Ganador 1948
Republicano Republicano Republicano Demcrata
26
Casos paradigmticos:
ESTADOS UNIDOS (1980).
Reagan Carter CBS/NYT Gallup Harris/ABC NBC/AP REAL 44 - 43 47 - 44 46 - 41 42 - 36 ( ( ( ( 1) 3) 5) 6) M3 4.5 3.5 2.5 2.0 Anderson 7
27
51 - 41 (10)
28
29
30
31
2. Consideraciones particulares
32
Condicionantes
Medios
Democracia
33
En Mxico, la evidencia muestra que las encuestas son slo un elemento ms entre los que el ciudadano toma su decisin, y no necesariamente el ms importante.
Al preguntar a los ciudadanos qu tanto influyen en su decisin de voto diversos aspectos, se detecta que lo que ms impacta es el balance respecto de la situacin econmica y de seguridad pblica, mientras que los resultados de encuestas son atendidos solamente por uno de cada cuatro electores. As, los electores hoy perciben como menos relevante las encuestas que lo que pensaban que eran antes de los comicios.
34
35
Dos de cada cinco ciudadanos considera que las encuestas reflejaron realmente las preferencias en el pasado proceso electoral, proporcin que apenas vari respecto a la medida antes de la jornada electoral.
36
El grueso de los electores no pone en duda la capacidad tcnica de las encuestas. Esta visin contrasta con la de muchos analistas, para quienes la diferencia con los resultados es atribuible a fallas tcnicas de los encuestadores.
37
Por vez primera desde 2000, las encuestas previas a una eleccin presidencial acertaron en detectar al lder en la contienda. En 2000 y en 2006 la mayora de las encuestas haban equivocado al respecto.
39
El error medio de las encuestas finales este ao fue de 2.6 puntos, idntico al observado en 2000 y apenas superior al registrado en 2006, de 2.3 puntos. En promedio, las encuestas previas a las tres ltimas elecciones presidenciales han tenido una diferencia de 2.5 puntos, idntica a lo esperado.
40
41
Una forma alterna de determinar el error es ver qu tanto est por encima o por debajo del margen de lo esperado a un nivel de confianza usual (1.96 desviaciones al 95 por ciento de confianza). Puede verse que las desviaciones en 2006 fueron menores a lo esperado y que en 2012 la desviacin apenas fue un poco mayor.
42
43
Sin embargo, las diferencias entre encuestas previas y resultados reflejan la existencia no de un error aleatorio, sino de un sesgo que afect a todas las mediciones.
44
No es la primera vez que esto pasa en Mxico, aunque en 2000 la sobreestimacin fue para el segundo lugar, no para el lder.
45
Y en 2006 las encuestas tendieron a subestimar al ganador, pero favoreciendo al tercer lugar, no al segundo.
46
Para atenuar la variabilidad en las mediciones, se construye una encuestas de encuestas Razones
Se asume que son experimentos de medicin que buscan determinar el mismo parmetro. Similares en tiempo (ventana definida). Similar tamao muestral y UPM (secciones).
47
Lmites
Distintos diseos de muestra. Distintos mtodos de eleccin de personas. Distintos instrumentos de recuperacin. Distintos procesos de control de calidad. Distintos procesos de anlisis de datos.
48
Veamos ahora los promedios: es claro que en 2000 se tendi a subestimar al ganador, Fox y sobreestimar a Labastida.
49
Y que en 2006 se subestim a Caldern y a Lpez Obrador y se sobreestim al tercer lugar, Madrazo.
50
Y que en 2012 se sobreestim al ganador, Pea Nieto, mientras se subestim a Lpez Obrador y a Vzquez Mota.
51
Sin embargo, en todas las ocasiones los datos reales quedaron dentro de las brechas de estimacin del conjunto de encuestas.
52
En 2006, las brechas indicaban la imposibilidad de definir un ordenamiento claro entre los dos primero lugares.
53
Y en 2012 mostraban un claro lder, con un margen que podra cerrarse a menos de cinco puntos en el extremo.
54
Aunque la forma correcta sera determinar la desviacin, dado el nmero de casos, es posible tomar mximos y mnimos.
55
Nuevamente, los rangos de las estimaciones tienden a abrirse de manera tal que los proporciones reales se ubican dentro.
56
Las brechas determinan un ordenamiento posible, con traslapes. Es poco preciso lo que dicen, pero muy alta su confiabilidad.
57
Las encuestas difundidas en 2012 detectaron correctamente los cierres de brechas y relevos en el orden de los contendientes. En promedio, las encuestas registraron una disminucin de doce puntos en la ventaja del lder a lo largo de la campaa.
58
De hecho, en mayor o menor medida todas las series nacionales tienden a mostrar un mismo movimiento en las preferencias.
59
Esto se refleja en una tendencia descendente de Pea Nieto a lo largo de la campaa y un ascenso sistemtico de Lpez Obrador.
60
Cuando lo que se ven son las brechas entre las series de encuestas, las estimaciones terminan ubicndose en el margen de lo real.
61
Cuando se ven los mximos y mnimos reportados por las series nacionales, el comportamiento es muy similar.
62
La revisin hecha por las casas encuestadoras permite asegurar que no hubo un problema con muestreos: las desviaciones entre muestras tomadas y resultados finales estuvieron dentro de lo estadsticamente esperado.
Dado que varias casas encuestadoras realizaron mediciones con idnticos procedimientos en elecciones locales a los utilizados en sus ejercicios nacionales, como fue el caso de las encuestas de seguimiento paralelo de GEA-ISA a nivel nacional y en Distrito Federal, con datos exitosos en lo local, sera impropio pensar que los errores fueron por problemas en el diseo de cuestionarios, controles de calidad en el trabajo en campo o formas de acopio y procesamiento de datos.
63
64
Lo que se ha argumentado, y que ha sido la explicacin hallada para las diferencias entre encuestas previas y resultados reales en otras naciones, son posibles virajes de ltimo momento en el sentido del voto, ocultamiento de intenciones de sufragio o diferencias entre las preferencias en el electorado en su conjunto con la de los votantes efectivos.
La hiptesis de que se trat de un sbito cambio en preferencias durante el perodo de reflexin o en la misma jornada electoral carece de evidencia slida. Este argumento es ms endeble dado que las variaciones a lo largo de las series mostraban cambios menores, lo que dificulta sostener que hubo un pronunciado cambio en los ltimos das.
65
Igualmente, es difcil sostener la presencia de una tendencia al ocultamiento de las intenciones de voto por los entrevistados, pues ello no ha ocurrido en otras ocasiones ni se registr en las encuestas de salida, y no fue patrn regular en las elecciones locales coincidentes.
Slo queda una hiptesis posible de sostener: la mayora de las encuestas estaban reflejando eficientemente la distribucin de preferencias para la poblacin observada en el momento en que tomaron los datos, pero esta poblacin no correspondi en la mayora de casos con la relevante para anticipar el resultado.
Ello pudiera ser reflejo de peculiaridades del proceso electoral, pues ocurre que en democracias donde las encuestas han arrojado estimaciones consistentes, stas de pronto fallan.
66
Todas las encuestas en Mxico parten de la observacin de muestras de ciudadanos. Sus datos observados corresponden a esta poblacin y es sobre esta poblacin que podan realizarse inferencias, no sobre los votantes.
La proporcin de electores que definen una intencin de voto es superior a quienes acudirn a las urnas. Frente a ello, bien se asume que el patrn de definidos corresponder a los votantes y se reportan las preferencias efectivas, bien se recurre a buscar cmo detectar a los votantes probables mediante un modelo. En todo caso, este patrn de respuesta a la pregunta electoral pareciera relacionarse con la exactitud de las mediciones.
67
Sin embargo, en la experiencia mexicana reciente, los modelos de votantes probables han sido menos eficientes que la preferencia efectiva para anticipar los resultados electorales.
68
En 2012, entre mayor fue la proporcin de preferencias definidas en una encuesta, mayor el margen de ventaja medido.
69
Paradjicamente, en 2000 el comportamiento fue el contrario: a mayor proporcin de definidos, menor margen de ventaja.
70
Es cierto que las encuestas electorales no constituyen, en s mismas, un pronstico. Pero tambin es cierto que se espera que un ejercicio realizado en fecha cercana a una eleccin arroje datos cercanos a lo que se registre en las urnas.
Sin embargo, esto no siempre ocurre, porque si bien es tpico que las preferencias efectivas coincidan con los resultados, a veces ello no pasa. Y no existe un modelo de votantes probables que haya mostrado ser certero de manera consistente. La noche anterior a una eleccin, ningn encuestador, analista o poltico sabe con seguridad cual ser el resultado. Este es el lmite de las encuestas. Y es la victoria de la democracia, pues no se puede sustituir la voluntad ciudadana por ningn ejercicio demoscpico.
71
Panel de encuestadores