“Precisión” de las encuestas: Estados Unidos y...
28
“Precisión” de las encuestas: Estados Unidos y México Ulises Beltrán División de Estudios Políticos Cide
Transcript of “Precisión” de las encuestas: Estados Unidos y...
“Precisión” de las encuestas: Estados Unidos y México
Ulises Beltrán
División de Estudios Políticos
Cide
Fuentes de error
• Muestreo (por los tamaños de muestra, 2.5 puntos porcentuales)
• Error derivado del momento en el que se levanta la encuesta
• Errores inducidos por la agencia encuestadora
• Diseño de cuestionario• Operativo de campo• Estimación de resultados
”Metodologías”• Selección de muestra
• Modo de entrevista
• Duración del levantamiento
• Duración de la entrevista
• Uso de urna simulada – pregunta directa
• Reporte de resultados
• Estimación - Votantes probables
• Financiamiento: propias, de partido o de medios
• Costos
• Asociaciones profesionales
Diferencias entre la encuesta y los resultados
• Diferencia en la distancia entre el primero y el segundo lugares
• Diferencia entre la estimación y el resultado para cada uno de los partidos
Estados Unidos
http://fivethirtyeight.com/interactives/pollster-ratings/
How FiveThirtyEight Calculates Pollster RatingsBy NATE SILVER
http://fivethirtyeight.com/features/how-fivethirtyeight-calculates-pollster-ratings/
A - F rating
Agencias con calificación B-F de FiveThirtyEight
AGENCIADiferencia en la distancia entre primer
y segundo lugar1998-2007 Desde 2008
ABC News/Washington Post 3.0 3.1
American Research Group 6.1 7.8
CBS News/New York Times 5.1 3.9
CNN/Opinion Research Group 5.4 4.5
EPI-MRA 5.7 5.2
Fox News/Opinion Dynamics Corp. 4.1 3.6
Gallup 4.2 4.5
George Washington University (Battleground) 3.5 3.5
Greenberg Quinlan Rosner (Democracy Corps 4.9 4.0
Insider Advantage 9.5 8.0
Marist College 5.5 4.7
Mason-Dixon Polling Research & Communications 4.8 6.0
Mitchell Research & Communications 5.5 5.0
Princeton Survey Research Associates International 5.2 3.5
Public Opinion Strategies 6.7 5.2
Quinnipiac University 5.4 3.9
Rasmussen Reports/Pulse Opinion Research 4.2 5.8
Research & Polling, Inc. 3.8 4.7
Research 2000 4.8 6.2
Strategic Vision, LLC 3.8 4.4
Suffolk University 5.0 5.0
University of New Hampshire 5.6 5.3
YouGov 4.2 4.4
Zogby Analytics, telephone 5.4 5.4
Zogby Interactive/JZ Analytics 7.2 5.0
PROMEDIO DE TODAS LAS AGENCIAS: 5.1 4.9NOTA: Se muestra el promedio de todas las encuestas hechas por la agencia en las tres semanas anteriores
a la elección para todos los tipos de elección
AGENCIADiferencia en la distancia entre primer
y segundo lugar
National Journal 2.6
Muhlenberg College 2.9
Grove Insight 3.1
Behavior Research Center 3.5
Gfk Group 3.5
Ciruli Associates 3.6
Montana State University Billings 3.6
University of Connecticut 3.6
University of Cincinnati (Ohio Poll) 3.7
Ipsos Telephone 3.8
Field Research Corporation (Field Poll) 3.9
Public Policy Institute of California 4
NBC News/Wall Street Journal 4.1
Selzer & Company 4.1
Fairleigh Dickinson University (PublicMind) 4.2
Elway Research 4.4
Monmouth University 4.4
SurveyUSA 4.5
Blum &Werpin Associates 4.6
Siena College 5.1
PROMEDIO DE TODAS LAS AGENCIAS: 3.9NOTA: Se muestra el promedio de todas las encuestas hechas por la agencia en las tres semanas anteriores a la elección para todos los tipos de elección
Agencias con calificación A de FiveThirtyEight
México 2012 2015
Informe mensual de cumplimiento del Acuerdo INE/CG220/2014 en materia de regulación de encuestas electorales. Secretaría Ejecutiva.
Siete Informes.
http://www.ine.mx/archivos2/portal/Elecciones/PEF/2014-2015/Preparacion/Encuestas/informes.html
Diputado Federal(levantadas en las últimas dos semanas previas a la elección)
RESULTADO DE LA ENCUESTA
Diferencia para cada candidato respecto de resultado IFE
DISTANCIA ENTRE
PRMERO Y SEGUNDO
SEGÚN ENCUESTA
Diferencia en la
distancia respecto de
resultado IFE
FECHA DE LEVANTAMIENTO
Número de
entrevistas
AGENCIAJVM
EPNAML
OGQ
Dif JVM
Dif EPN
Dif AML
O
Promedio de
diferencias
Distancia 1o-2o lugar
Dif. en la distancia
16-22 de junio 1200 MERCAEI 27.2 38.5 31 3.3 1.1 0.6 1.4 1.0 7.5 0.8
21-24 de junio 1500 Covarrubias-SDP Noticias 26 41 30 3 0.1 1.9 2.4 1.5 11 4.3
21-24 de junio 1500 María de las Heras/ UNOTV 23 40 33 4 3.1 0.9 0.6 1.5 7 0.3
21-24 de junio 1616 Reforma 24 41 31 4 2.1 1.9 1.4 1.8 10 3.3
17-19 de junio 1200 Votia 29.1 37.1 30.9 2.9 3 2 1.5 2.2 6.2 0.5
14-19 de junio 1000 IPSOS 25 44 29 2 1.1 4.9 3.4 3.1 15 8.3
22-24 junio 1200 BGC-Excélsior 25 44 28 3 1.1 4.9 4.4 3.5 16 9.3
18-23 de junio 1000 Parametría/ Sol de México 23.6 43.9 28.7 3.8 2.5 4.8 3.7 3.7 15.2 8.5
22-24 junio 1000 Consulta Mitofsky 24 45 29 2 2.1 5.9 3.4 3.8 16 9.3
22-24 junio 1200 Con Estadística/ Grupo Fórmula 25 44 27 4 1.1 4.9 5.4 3.8 17 10.3
22-24 junio 2000 Buendía & Laredo- El Universal 24.4 45 27.9 2.7 1.7 5.9 4.5 4.0 17.1 10.4
25-27 junio 1444 GEA-ISA/ Milenio 22.4 46.9 28.5 2.2 3.7 7.8 3.9 5.1 18.4 11.7
20-25 junio 2000 Indermerc-Harris- El Financiero 22.8 47.2 27.1 2.9 3.3 8.1 5.3 5.6 20.1 13.4
RESULTADO PREP IFE:26.1
39.1
32.4 2.4 6.7
PROMEDIO DE TODAS LAS AGENCIAS: 2.0 4.2 3.2 3.1 13.6 7.0Nota: cuando una agencia reporta dos resultados, se toma el que señala como el escenario de votantes probables.
México 2012
México 2015Entre finales de noviembre de 2014 y finales de mayo de 2015, el INE registro 113 encuestas “originales”
45 agencias distintas
Tan sólo para hacer encuesta de salida o conteos rápidos se registraron 68 agencias distintas
En los procesos electorales participaron hasta nueve partidos distintos (nueve estimaciones)
Levantadas en las tres semanas previas a la elección
La estimación para los tres partidos más grandes
Nacionales para diputados federales
Gobernadores
2015DIPUTADO FEDERAL
(levantadas en las últimas tres semanas previas a la elección)
RESULTADO DE LA ENCUESTA
Diferencia para cada partido respecto de resultado INE
DISTANCIA ENTRE PRMERO
Y SEGUNDO SEGÚN
ENCUESTA
Diferencia en la distancia respecto de
resultado INE
FECHA DE LEVANTAMIEN
TO
Número de
entrevistas
AGENCIA PAN PRIPRD
Dif. PAN
Dif. PRI
Dif.PRD
Promedio de
diferencias
Distancia 1o-2o lugar
Dif. en la
distancia
22-26 de mayo 1100 GEA-ISA 28 35 12 5.90 4.29 0.56 3.6 7 1.61
26-30 de mayo 1200 BGC-Excélsior 26 32 13 3.90 1.29 1.56 2.3 6 2.6127 -31 de mayo 1000 Parametría 25 31 11 2.90 0.29 0.44 1.2 6 2.61
28-31 de mayo 978Buendía y Laredo-El
Universal 24.7 28.8 11.7 2.60 1.91 0.26 1.6 4.1 4.51
29-31 de mayo 1000 Consulta 23.9 32 17.2 1.80 1.29 5.76 3.0 8.1 0.51
RESULTADO OFICIAL: 22.130.7
11.4
8.6
PROMEDIO DE TODAS LAS AGENCIAS:3.42 1.81 1.72 2.32 6.24 2.37
Nota: cuando una agencia reporta dos resultados, se toma el que señala como el escenario de votantes probables.
GOBERNADOR(levantadas en las últimas tres semanas previas a la elección)
Diferencia para cada partido respecto de resultado
DISTANCIA ENTRE PRMERO Y SEGUNDO
SEGÚN ENCUESTA
Diferencia en la distancia
respecto de resultado
EstadoDif. PAN
Dif. PRI
Dif.PRD
Promedio de
diferencias
Distancia 1o-2o lugar
Dif. en la distancia
Baja California Sur 1.93 5.43 7.27 4.88 15.20 5.3
Colima 2.96 2.32 1.10 2.13 5.45 5.28
Michoacán 4.25 4.05 4.13 4.14 7.25 6.25
Querétaro 4.82 3.47 1.06 3.12 5.36 4.83
Sonora 3.21 4.42 4.25 3.96 2.98 4.15
San Luis Potosí 5.19 1.59 4.65 3.8 2.8 3.1Nota: Se muestran promedios de todas las agencias
Diferencia para cada partido respecto de resultado
DISTANCIA ENTRE PRMERO Y
SEGUNDO SEGÚN ENCUESTA
Diferencia en la distancia
respecto de resultado
Dif. PAN
Dif. PRI
Dif.JRC
Promedio de diferencias
Distancia 1o-2o lugar
Dif. en la distancia
Nuevo León 2.68 10.72 16.42 9.9 8.69 16.8
Nota: Se muestran promedios de todas las agencias
NUEVO LEÓN
Diferencia encuesta-resultado en la distancia entre primero y segundo lugar
EEUU, encuestadoras con calificación B-F
EEUU, encuestadoras con
calificación A
México 2012
México 2015
Gobernador (sin NL)
Diputado federal
4.9 3.9 7.0 3.1 2.3
¿Mejores encuestas o elección más estable?
DIPUTADOS FEDERALES 2012
0.00
10.00
20.00
30.00
40.00
50.00
60.00
PAN PRI PRD PVEM Otros*GEA-ISA agrupó los resultados del PVEM, MC, PT y PANAL en la categoría “Otros”
DIPUTADOS FEDERALES 2015
0
5
10
15
20
25
30
35
40
45
PAN PRI PRD PVEM MORENA Otros
BAJA CALIFORNIA SUR 2015
42.347.0 44.7
49.044.8 46.3
32.034.0
30.233.0 29.7
36.4
18.412.0
15.5 13.020.0 8.9
7.34
8.83 5.5 6.6
Consulta Demotecnia Consulta Parametría Consulta Resultado
1300 1600 1400 1000 800 Cómputo final
20-23 Mar 2015 3-5 May 2015 21-24 May 2015 16-20 may 2015 30-31 may 2015 Junio
PAN/PRS PRI/PVEM/NA PRD/PT/MC MORENA Benjamín de la Rosa PES PH
GOBERNADOR EN CAMPECHE 2015
32.0
20.8 20.4 32.0
45.0
53.250.3
41.6
1115.6
13.518.3
MEBA Indemerc El Universal Resultado
1200 1514 1000 Cómputo final
27-29 Mar 11-13 Abr 17-19 Abr Junio
PAN PRI-PVEM PRD PT MOV CIUDADANO PANAL MORENA PH PES LUIS ANTONIO CHE OTRO
GOBERNADOR COLIMA 2015
25.0 35.0
32.538.3 36.8
40.5
50.9
42.0 45.941.6
44.440.7
14.2
5.09.7
13.6 11.9 12.2
Proyecta Parametría Marketing México El Universal El Universal Resultado
800 1000 ND 1000 1000 Cómputo final
5 Mar 28-30 Mar 16-30 Abr 17-20 May 31-2 Jun Junio
PAN PRI-PVEM-PANAL PRD PT MOV CIUDADANO MORENA PH PES
GOBERNADOR GUERRERO 2015
30.0
49.1 46.4
38.043.0 42.9
38.0
35.3 34.6 35.0
29.036.3
15
7.1 7.014 14
8.39
B&L Abr Berumen Abr El Universal Abr Parametría May Demotecnia May Resultado
800 3446 910 1000 ND Cómputo final
11-13 Abr 18-26 Abr 24-27 Abr 2-4 May 7-9 May Junio
PRI-PVEM PRD-PT MC PAN PP MORENA PH PES NA
GOBERNADOR MICHOACÁN 2015
29.0 31.024.2
22.5
31.0
24.8
31.0 33.0
32.136.0
30.0
29.0
38.033.0 36.8 36.0
31.0
37.6
MEBA Parametría Consulta El Universal Parametría Resultado
800 1000 1200 1000 1000 Cómputo final
27-29 Mar 18-19 Abr 09-11 May 13-17 May 27-31 May Junio
PAN PRI-PVEM PRD-PT-NA MC MORENA PH
GOBERNADOR QUERÉTARO 2015
51.0 51.1
45.1
45.3
44.4
47.0 45.0
41.2
45.0
41.138.0
39.0
48.0
38.6
48.5
38.0
45.0
53.9
44.0
48.6
MEBA VOTIA El Universal Consulta UAQ MEBA Reforma GerenciaElectoral
Consulting
Parametría Resultado
4400 1200 1000 1200 1200 1200 1214 1200 1000 Cómputofinal
20-22 Mar 27-29 Mar 28-30 Mar 24-28 Abr 15-19 May 22-24 May 22-24 May 26 May 27-31 May Junio
PRI-PVEM-NA-PT PAN PRD MORENA MC PES PH OTROS
GOBERNADOR SONORA 2015
50.7 52.646.0
41.9
53.849.4
42.4
48.2
42.0
47.353.9 52.3
41.5 44.5 42.7 43.0 43.0
46.4
44.6
47.0
41.641.3 39.9
42.4
47.8
43.9 44.8
47.8
44.1
45.1
39.8 40.143.0
45.8 45.952.3
45.0 46.0
40.8
45.8
44.0
48.7
Par
amet
ría
El Im
par
cial
Co
nsu
lta
TM R
epo
rte
Pu
nto
de
Vis
ta
Vo
tia
TM R
epo
rte
El Im
par
cial
CU
EOP
-UN
ISO
N
Vo
tia
ISA
Pu
nto
de
Vis
ta
Co
nsu
lta
El U
niv
ersa
l
TM R
epo
rte
De
mo
tecn
ia
Do
ssie
r P
olít
ico
El Im
par
cial
El U
niv
ersa
l
Par
amet
ría
Re
sult
ado
1000 1351 800 1200 1000 1000 ND 1351 1260 1000 1000 ND 800 1000 1500 1200 1200 1355 1000 1000
05-08Mar
05-12Mar
13-15Mar
17-21Mar
28-30Mar
11-12Abr
12-17Abr
11-18Abr
13-18Abr
23-24Abr
25-27Abr
23-30Abr
2-4May
7-10May
9-13May
22-24May
23-27May
24-27May
24-28May
27-31May
Junio
PAN PRI-PVEM-PANAL PRD Resto partidos
GOBERNADOR SAN LUIS POTOSÍ 2015
32.6
41.4 39.7
28.8 40.3
38.0
33.9
41.9
36.938.6
36.040.5
37.0
37.3
19.3 18.1 15.9
25.4
13.218.0 19.8
Consulta El Universal El Universal Consulta El Universal Parametría Resultado
1000 1000 1000 1000 1000 1000
Vivienda Vivienda Vivienda Vivienda Vivienda Vivienda
MARZO ABRIL MAYO MAYO MAYO MAYO
27-29 11-13 12-15 16-19 28-30 27-31 Junio
PAN PRI-PVEM-PANAL PRD-PT-PCP MOV CIUDADANO MORENA PH PES
GOBERNADOR NUEVO LEÓN 2015
40.0 40.0
48.1
40.0
37.0
33.0 32.4
37.3
40.338.0
30.0
34.9
38.2
30.2
40.0
29.136.9
32.0
39.7
28.7
24.4
24.0
27.0
22.5
17.0
28.0
36.0
39.2
24.2
32.1
15.0
36.0
25.6
28.9
36.4
21.0
44.5
39.7
34.031.9
42.4
49.9
De
mo
tecn
ia F
eb
Par
amet
ría
Mar
El U
niv
ersa
l Mar
Arc
op
Ab
r
De
mo
tecn
ia A
br
Re
form
a M
ay
HO
RA
-CER
O
El H
ori
zon
te
El U
niv
ersa
l
GEA
ISA
El F
inan
cier
o
Co
nsu
lta
Co
varr
ub
ias
Re
form
a
GEA
HO
RA
-CER
O
El U
niv
ersa
l
El F
inan
cier
o
Co
varr
ub
ias
Re
form
a
Re
sult
ado
6000 1000 1000 1200 2000 3100 3098 3700 1000 900 3100 800 1500 3100 1000 1000 1000 1499 3100
18-21feb
28 feb-4 mar
14-15mar
20-25Abr
22-24Abr
24Abr- 5May
25-29Abr
8 Abr-6May
06-10May
08-09May
11-21May
13-16May
15-18May
11-21May
23-25May
25-30May
25-28May
27-31May
28-31May
23 May- 1 Jun
Junio
PAN Felipe de Jesús Cantú PRI-PVEM-NA-PD Ivonne Álvarez Jaime Rodríguez Bronco Otros
Investigación futura
La base de datos de encuestas del INE ofrece una rica fuente para explorar mejor las posibles fuentes de error
Tipo de elecciónAgencia:
Años en el mercadoEncuestadora o consultor políticoLocal o de la Ciudad de México
Cliente (partido o medio)¿Quién pagó la encuesta?Variaciones en el método
Etapas de selecciónAleatorización de la selección del respondenteTamaño de muestraDispersión de la muestra (número de secciones)
Costo por cuestionarioPertenencia a organizaciones de encuestadores
Una regresión muy rica esperando a un estudiante ambicioso
Gracias
