mordecki.com
  Usabilidad, diseño y estrategia en Internet

¡Suscríbase! Más Info

home

e-business

presentaciones

otros temas

casos

otros autores

Enviar esta página por email Enviar por email

Usted está aquí: Home >> Otros Temas >> Sobre la validez de las Encuestas

Las encuestas de opinión tienen márgenes de error muy superiores a lo que parece


Sobre la validez de las encuestas
(21/10/2004)
 

En forma permanente, con un fuerte incremento al acercarse cada instancia electoral,
distintas empresas promueven a través de los medios los resultados de sus encuestas
así como análisis acerca de los resultados. ¿Cuánta validez tienen esos datos?
Por
Daniel Mordecki


 Versión PDF (109KB)

 

5 votos  


Metodología

El objetivo de este artículo es analizar la validez de los resultados de las encuestas de opinión pública que se realizan en Uruguay. La metodología está focalizada en la comparación de los resultados de las encuestas ya realizadas en elecciones anteriores con los resultados reales que las elecciones arrojaron. Esta enfoque tiene la ventaja de que no requiere conocer la metodología interna con que se realiza cada encuesta, sino que busca determinar la validez de los pronósticos.

Para realizar el presente análisis, se compararon 20 valores previstos por la última encuesta previa a la elección con los resultados electorales definitivos para:

  • Elecciones internas 1999
  • Elecciones Generales 1999
  • Balotage 1999
  • Elecciones internas 2004

Se consideraron los datos provistos por las encuestadoras: Cifra, Equipos Mori, Factum1 , Interconsult y Radar, lo que constituye un total de 98 pronósticos

Los datos

Para realizar la comparación se preparó una tabla que cuenta la cantidad de aciertos de las encuestadoras si se considera un margen de error determinado. Por ejemplo:

La empresa XYZ pronosticó un valor de 38% para el Partido nacional en las elecciones generales de 1999. El valor real fue de 39.6% con lo que la tabla que se generaría en este caso es:

  • Con un margen de error del 3%, el rango pronosticado es de (36.86%,39.14%) por lo que la encuesta falla.
  • Con un margen de error del 4%, el rango pronosticado es de (36.48%,39.52%) por lo que la encuesta falla.
  • Con un margen de error del 5%, el rango pronosticado es de (36.1%,39.9%) por lo que la encuesta acierta.

Resumen de los datos:
 

Error aceptado

Aciertos

Fallas

acierto/total

3%

20

78

20%

4%

26

72

27%

5%

28

70

29%

6%

30

68

31%

7%

33

65

34%

8%

38

60

39%

9%

41

57

42%

10%

43

55

44%

11%

48

50

49%

12%

51

47

52%

13%

57

41

58%

14%

59

39

60%

15%

64

34

65%

 

Los datos son contundentes, para tener un porcentaje de aciertos mayor al 50% hay que aceptar un margen de error del 12%, esto quiere decir que si las encuestadoras pronostican que el partido XYZ va a sacar 50% de los votos, en realidad podemos estar más o menos convencidos de que va a sacar entre un 46% y un 54% de los votos.

Inmediatamente surge la pregunta de si una encuestadora es mejor que otra. Está fuera de nuestro alcance definir cuál es mejor, por lo que no vamos a revelar los nombres asociados a cada dato. De todos modos, los datos son de dominio público, están disponibles en Internet y quien quiera puede rehacer las operaciones aritméticas muy sencillas con la que se calcularon los valores aquí expuestos.

Resumen de los datos por encuestadora:
 

Error aceptado

% de acierto por encuestadora

Empresa 1

Empresa 2

Empresa 3

Empresa 4

Empresa 5

3%

10.0%

15.0%

16.7%

35.0%

25.0%

4%

20.0%

15.0%

22.2%

35.0%

40.0%

5%

25.0%

15.0%

27.8%

35.0%

40.0%

6%

25.0%

20.0%

27.8%

35.0%

45.0%

7%

25.0%

30.0%

27.8%

35.0%

50.0%

8%

30.0%

40.0%

33.3%

40.0%

50.0%

9%

35.0%

40.0%

38.9%

45.0%

50.0%

10%

35.0%

40.0%

44.4%

45.0%

55.0%

11%

45.0%

40.0%

44.4%

50.0%

65.0%

12%

50.0%

40.0%

50.0%

55.0%

65.0%

13%

60.0%

40.0%

61.1%

60.0%

70.0%

14%

65.0%

40.0%

61.1%

65.0%

70.0%

15%

65.0%

60.0%

61.1%

65.0%

75.0%

 

El partido XYZ subió un 1% en tal encuesta

Si bien es posible profundizar el trabajo realizado, en la dirección de comparar los resultados de las encuestas con los resultados reales de los distintos actos eleccionarios, hay una primera conclusión a extraer: a la luz de los datos expuestos, las encuestas marcan a grosso modo, la posición relativa de los partidos políticos y muy poco más. En este marco, las disquisiciones sobre si un candidato pasó de 48% a 47% en una semana o si otro que tenía 24% ahora tiene 25.5% son disquisiciones políticas, no estadísticas.

La industria de las encuestas, propone un mensaje pseudo-científico, que intenta mostrar un panorama muy distinto al que arrojan los datos. Independientemente de la encuestadora, el medio que difunde los datos, el candidato que festeja y el que dice que la encuesta está arreglada, los distintos voceros de las empresas analizan la realidad como si su herramienta de medición tuviera la precisión de un rayo láser, cuando tienen entre sus manos apenas un trabuco naranjero.

Profecía autocumplida

Imagine que usted es el dueño de una empresa encuestadora, y su personal le comunica que el resultado de la encuesta que acaban de digitar en el sistema arroja que el EP-FA tiene en Montevideo el 41% de las preferencias. ¿Qué hacer? ¿Publicar la encuesta? ¿Hacerla nuevamente? ¿Revisar los formularios para detectar posibles "dibujos" de los datos? Son todas decisiones políticas. Las encuestadoras reprocesan, descartan, chequean, vuelven a encuestar, con metodologías razonables para las ciencias sociales pero que invalidan completamente el valor estrictamente estadístico de sus resultados. En definitiva una encuesta debe "dar" en el entorno de lo que le da a las demás empresas, por lo que las encuestadoras jamás publican valores disparatados. Pero estos valores disparatados necesariamente deben aparecer cada tanto si lo estadístico es estrictamente estadístico y lo aleatorio es estrictamente aleatorio, de lo contrario una encuesta no es más que una profecía autocumplida.


1 No se cuenta con datos de la empresa Factum para las internas en lo que respecta al EP-FA y al Partido Colorado

Fuentes:                          

Actos eleccionarios del año 1999:

Crónicas económicas del 3 de diciembre de 1999 (imagen jpg - 806KB)

Elecciones internas del año 2004:

Análisis comparativo de la empresa Cifra - Publicado en su sitio Web. (Versión PDF - 122KB)

 

Acceso directo a la pagina en el sitio de Cifra

 

 

Si lo desea, agregue su comentario

 

Nombre:

 

 

email:

 

 

Comentario:

 

Digite 

   

en el siguiente cuadro

 

 

 

 

Comentarios


SANDRA <sandrita_1601@hotmail.com>
Wednesday, September 26, 2007 at 18:01:32 (MDT)

oygan solo quiero q me dejen q les haga unas encuestas chau a mi correo sadrita_1601@hotmail.com


leslie Joe Santivañez Carrizo <leslie_203@hotmail.com>
Wednesday, September 19, 2007 at 09:45:13 (MDT)

Solicito esta informacion (I y II) para un trabajo de investigación con las encuestadoras de Perú. Gracias


camila <camilaaraya.olivares>
Wednesday, March 14, 2007 at 07:46:11 (MDT)

solicito esta informaciòn para un trabajo de la Universdad.


luis rojas <luxo_c18@hotmail.com>
Monday, August 21, 2006 at 10:15:49 (MDT)

no me gustó la página, ya que no encontré nada que me ayudara en mi trabajo a realizar


Envíe este artículo a un amigo por Email

Los datos que usted indique serán utilizados exclusivamente para enviar un link de este artículo al email destino. Nuestra Política de Privacidad es simple: no enviamos SPAM. Jamás.


[Principal] [e-business] [Presentaciones] [Otros Temas] [Casos] [Otros Autores]

243 votos  

 

Contactar a Daniel Mordecki
Por favor, no reproducir el material sin consultar
Comentarios ya ingresados sobre el sitio
Ver todas las calificaciones de los artículos
Política de privacidad de nuestro sitio
Estadísticas de acceso al sitio
Curriculum

BuiltByNOF