Sobre la validez de las encuestas

Por Daniel Mordecki
21 de octubre de 2004

En forma permanente, con un fuerte incremento al acercarse cada instancia electoral, distintas empresas promueven a través de los medios los resultados de sus encuestas así como análisis acerca de los resultados. ¿Cuánta validez tienen esos datos?

Metodología

El objetivo de este artículo es analizar la validez de los resultados de las encuestas de opinión pública que se realizan en Uruguay. La metodología está focalizada en la comparación de los resultados de las encuestas ya realizadas en elecciones anteriores con los resultados reales que las elecciones arrojaron. Esta enfoque tiene la ventaja de que no requiere conocer la metodología interna con que se realiza cada encuesta, sino que busca determinar la validez de los pronósticos.

Para realizar el presente análisis, se compararon 20 valores previstos por la última encuesta previa a la elección con los resultados electorales definitivos para:

Se consideraron los datos provistos por las encuestadoras: Cifra, Equipos Mori, Factum1 , Interconsult y Radar, lo que constituye un total de 98 pronósticos

Los datos

Para realizar la comparación se preparó una tabla que cuenta la cantidad de aciertos de las encuestadoras si se considera un margen de error determinado. Por ejemplo:

La empresa XYZ pronosticó un valor de 38% para el Partido nacional en las elecciones generales de 1999. El valor real fue de 39.6% con lo que la tabla que se generaría en este caso es:

Resumen de los datos:

Error aceptado

Aciertos

Fallas

acierto/total

3%

20

78

20%

4%

26

72

27%

5%

28

70

29%

6%

30

68

31%

7%

33

65

34%

8%

38

60

39%

9%

41

57

42%

10%

43

55

44%

11%

48

50

49%

12%

51

47

52%

13%

57

41

58%

14%

59

39

60%

15%

64

34

65%


Los datos son contundentes, para tener un porcentaje de aciertos mayor al 50% hay que aceptar un margen de error del 12%, esto quiere decir que si las encuestadoras pronostican que el partido XYZ va a sacar 50% de los votos, en realidad podemos estar más o menos convencidos de que va a sacar entre un 46% y un 54% de los votos.

Inmediatamente surge la pregunta de si una encuestadora es mejor que otra. Está fuera de nuestro alcance definir cuál es mejor, por lo que no vamos a revelar los nombres asociados a cada dato. De todos modos, los datos son de dominio público, están disponibles en Internet y quien quiera puede rehacer las operaciones aritméticas muy sencillas con la que se calcularon los valores aquí expuestos.

Resumen de los datos por encuestadora:

Error aceptado

% de acierto por encuestadora

Empresa 1

Empresa 2

Empresa 3

Empresa 4

Empresa 5

3%

10.0%

15.0%

16.7%

35.0%

25.0%

4%

20.0%

15.0%

22.2%

35.0%

40.0%

5%

25.0%

15.0%

27.8%

35.0%

40.0%

6%

25.0%

20.0%

27.8%

35.0%

45.0%

7%

25.0%

30.0%

27.8%

35.0%

50.0%

8%

30.0%

40.0%

33.3%

40.0%

50.0%

9%

35.0%

40.0%

38.9%

45.0%

50.0%

10%

35.0%

40.0%

44.4%

45.0%

55.0%

11%

45.0%

40.0%

44.4%

50.0%

65.0%

12%

50.0%

40.0%

50.0%

55.0%

65.0%

13%

60.0%

40.0%

61.1%

60.0%

70.0%

14%

65.0%

40.0%

61.1%

65.0%

70.0%

15%

65.0%

60.0%

61.1%

65.0%

75.0%


El partido XYZ subió un 1% en tal encuesta

Si bien es posible profundizar el trabajo realizado, en la dirección de comparar los resultados de las encuestas con los resultados reales de los distintos actos eleccionarios, hay una primera conclusión a extraer: a la luz de los datos expuestos, las encuestas marcan a grosso modo, la posición relativa de los partidos políticos y muy poco más. En este marco, las disquisiciones sobre si un candidato pasó de 48% a 47% en una semana o si otro que tenía 24% ahora tiene 25.5% son disquisiciones políticas, no estadísticas.

La industria de las encuestas, propone un mensaje pseudo-científico, que intenta mostrar un panorama muy distinto al que arrojan los datos. Independientemente de la encuestadora, el medio que difunde los datos, el candidato que festeja y el que dice que la encuesta está arreglada, los distintos voceros de las empresas analizan la realidad como si su herramienta de medición tuviera la precisión de un rayo láser, cuando tienen entre sus manos apenas un trabuco naranjero.

Profecía autocumplida

Imagine que usted es el dueño de una empresa encuestadora, y su personal le comunica que el resultado de la encuesta que acaban de digitar en el sistema arroja que el EP-FA tiene en Montevideo el 41% de las preferencias. ¿Qué hacer? ¿Publicar la encuesta? ¿Hacerla nuevamente? ¿Revisar los formularios para detectar posibles "dibujos" de los datos? Son todas decisiones políticas. Las encuestadoras reprocesan, descartan, chequean, vuelven a encuestar, con metodologías razonables para las ciencias sociales pero que invalidan completamente el valor estrictamente estadístico de sus resultados. En definitiva una encuesta debe "dar" en el entorno de lo que le da a las demás empresas, por lo que las encuestadoras jamás publican valores disparatados. Pero estos valores disparatados necesariamente deben aparecer cada tanto si lo estadístico es estrictamente estadístico y lo aleatorio es estrictamente aleatorio, de lo contrario una encuesta no es más que una profecía autocumplida.
 

Fuentes:


1 - No se cuenta con datos de la empresa Factum para las internas en lo que respecta al EP-FA y al Partido Colorado

 

 

Artículo

 

 

 

 

mordecki.com

 

 

 

Descargas

descargar Pdf Descargar artículo
 (PDF - 245 KB)

Valoraciones

Calificacion promedio 2

36 valoraciones

Su opinión:

Excelente

Muy bueno

Bueno

Aceptable

Regular

Malo

Muy malo

¡Suscríbase!

Reciba una notificación cuando se incorpora un artículo
Más información

 

Usabilidad, y estrategia en Internet

white_spacer

Descargas

descargar Pdf Descargar artículo
 (PDF - 245 KB)

Comentar

Nombre:

Email:

Comentario:white_spacer

Escriba la letra C

white_spacer

Comentarios

Eduardo
27 de Marzo de 2009white_spacer
Patetico lo suyo señor. En el articulo comete un monton de atropellos hacia las empresas y las compara sin tomar en cuenta un monton de cosas.
Ud. habla de "pronosticos" y no siempre fueron pronosticos sino estados de situación.
Ademas comete una burrada enorme. El margen de error estadístico no es el mismo para todos los porcentajes. El margen máximo estadistico se maneja para el total de la muestra y para un PxQ =0,50. Cuando el PxQ=0,2 el margen de error es menor.


white_spacer


Loteria
17 de Marzo de 2009white_spacer
Muchas gracias por el estudio. Era algo muy necesario para la sociedad. Al fin entendemos -aun que sea someramente- "el misterio de las Encuestas"

white_spacer


Loteria
17 de Marzo de 2009white_spacer
Agradecería se me proporcionara información sobre en qué consiste y cómo actúa la "Desviación Standard".
Gracias y felicitaciones por el trabajo.


white_spacer


Adriana
18 de Diciembre de 2008white_spacer
Hola: No se si lo consideran o no , pero no emqueda calro finalmente cual seria el % error muestral optimo para las encuestas. 12% un maximo o el optimo 3% - 6%, para hacer valida la encuesta

white_spacer


freddy hurtado
09 de Diciembre de 2008white_spacer
me parece muy interesante el articulo expuesto en esta pagina... mi recomendacion es que...

white_spacer


fabian
03 de Julio de 2008white_spacer
El articulo me pareció excelente

white_spacer


leslie Joe Santivañez Carrizo
19 de Setiembre de 2007white_spacer
Solicito esta informacion (I y II) para un trabajo de investigación con las encuestadoras de Perú. Gracias

white_spacer


camila
14 de Marzo de 2007white_spacer
solicito esta informaciòn para un trabajo de la Universdad.

white_spacer


luis rojas
21 de Agosto de 2006white_spacer
no me gustó la página, ya que no encontré nada que me ayudara en mi trabajo a realizar

white_spacer


white_spacer

UsabilidadEstrategiaPresentacionesOtros TemasCasosOtros Autores

white_spacer

     Contactar      Comentarios sobre el sitio      Valoraciones      Privacidad      Curriculum

The Times Post
Late Latino

calific1

  24

calific2

  2

calific3

  0

calific4

  1

calific5

  2

calific7

  2

calific8

  5