Error del promedio por horizonte

Cuánto se equivoca el modelo al estimar el voto de los partidos principales, en puntos, según los días que faltan para cada elección pasada.

Error absoluto medio del voto en puntos, por días de antelación, del modelo y de las tres líneas base.
Horizonte (días) Casos Modelo Último sondeo Media de 4 semanas Elección anterior
6 5 1,69 1,74 1,86 5,77
14 5 2,00 2,13 1,97 5,77
30 5 2,21 2,25 2,23 5,77
60 5 2,85 3,07 2,77 5,77
90 5 2,87 2,75 2,79 5,77
180 3 3,06 3,00 2,88 7,75
Cómo leerlo

El modelo solo usa los sondeos publicados hasta ese número de días antes de cada elección. Se compara con tres líneas base: el último sondeo publicado, la media simple de los sondeos de las cuatro semanas anteriores y el resultado de la elección anterior. El modelo aporta algo si su error es menor que el de las tres.

No dice cuánto se equivocará en la próxima elección: es una media de pocas elecciones pasadas, y una sola elección rara puede moverla.

Cobertura de los intervalos

La fracción de resultados oficiales que caen dentro de los intervalos del modelo, según los días que faltan para la elección.

Fracción de resultados oficiales que caen dentro de los intervalos del modelo, por días de antelación.
Horizonte (días) Intervalo del 50 % Intervalo del 80 % Intervalo del 95 %
6 0,557 0,780 0,960
14 0,500 0,663 0,960
30 0,440 0,680 0,837
60 0,327 0,753 0,843
90 0,253 0,713 0,843
180 0,300 0,650 0,800
Cómo leerlo

Un modelo bien calibrado deja dentro de cada intervalo una fracción de resultados cercana a su nivel nominal: 0,50, 0,80 y 0,95 (las líneas discontinuas del gráfico). Si la cobertura es menor, los intervalos son demasiado estrechos; si es mayor, demasiado anchos.

No dice si el modelo acierta al partido ganador: cuenta resultados dentro o fuera del intervalo, no cuánto se aleja el centro.

Escaños y mayorías

El error de escaños de los partidos principales según los días que faltan para la elección, en los modos Hoy y Elección, y la calidad de la probabilidad de mayoría absoluta de cada bloque.

Error de escaños y calidad de la probabilidad de mayoría, por días de antelación.
Horizonte (días) Casos con escaños Error de escaños Cobertura del 95 % CRPS de escaños Brier de mayoría Error de escaños (modo Elección) Brier de mayoría (modo Elección)
6 4 6,70 1,000 4,76 0,037 6,83 0,037
14 4 7,80 1,000 5,60 0,034 7,80 0,036
30 4 8,68 0,896 6,14 0,065 8,65 0,069
60 4 12,31 0,854 8,63 0,091 12,38 0,096
90 4 13,02 0,867 9,16 0,106 12,80 0,114
180 2 12,92 0,800 9,52 0,113 12,80 0,114
Cómo leerlo

Cada línea es el error absoluto medio de escaños por partido: la continua, el modo Hoy; la discontinua, el modo Elección, que añade la deriva de la opinión hasta la votación. La tabla suma el CRPS (premia una distribución de escaños ajustada y bien centrada) y el Brier de la probabilidad de mayoría de cada bloque: cuanto más cerca de 0, mejor.

No dice qué partido falla más: es una media de los principales, y solo cuenta las elecciones con escaños válidos.

Por elección

Las mismas métricas para cada elección pasada y cada horizonte.

Métricas de cada elección y horizonte, de la más reciente a la más antigua.
Elección Horizonte (días) Error del voto Error del último sondeo Error de escaños Cobertura del 95 % Brier de mayoría Escaños válidos
23 jul 2023 6 1,50 1,63 4,25 1,000 0,109 sí
23 jul 2023 14 1,59 1,63 5,25 1,000 0,089 sí
23 jul 2023 30 2,58 2,44 10,00 0,750 0,207 sí
23 jul 2023 60 3,48 4,63 13,00 0,750 0,131 sí
23 jul 2023 90 2,84 3,36 11,00 0,750 0,173 sí
23 jul 2023 180 2,41 2,33 9,25 1,000 0,205 sí
10 nov 2019 6 0,91 0,86 2,67 1,000 0,003 sí
10 nov 2019 14 1,91 1,40 8,00 1,000 0,006 sí
10 nov 2019 30 1,98 1,96 8,67 0,833 0,013 sí
10 nov 2019 60 3,32 3,67 15,50 0,667 0,122 sí
10 nov 2019 90 3,52 3,22 16,50 0,667 0,084 sí
28 abr 2019 6 1,58 2,30 8,40 1,000 0,012 sí
28 abr 2019 14 1,35 1,57 6,20 1,000 0,008 sí
28 abr 2019 30 1,28 1,91 5,80 1,000 0,012 sí
28 abr 2019 60 1,96 1,64 8,00 1,000 0,074 sí
28 abr 2019 90 2,79 3,55 12,60 1,000 0,128 sí
28 abr 2019 180 4,40 4,33 16,60 0,600 0,022 sí
26 jun 2016 6 2,50 2,26 11,50 1,000 0,023 sí
26 jun 2016 14 2,63 2,81 11,75 1,000 0,032 sí
26 jun 2016 30 2,33 2,13 10,25 1,000 0,029 sí
26 jun 2016 60 2,65 3,01 12,75 1,000 0,037 sí
26 jun 2016 90 2,54 2,33 12,00 1,000 0,038 sí
20 dic 2015 6 1,97 1,64 – 0,800 – no
20 dic 2015 14 2,51 3,26 – 0,800 – no
20 dic 2015 30 2,87 2,79 – 0,600 – no
20 dic 2015 60 2,86 2,37 – 0,800 – no
20 dic 2015 90 2,66 1,29 – 0,800 – no
20 dic 2015 180 2,38 2,34 – 0,800 – no
Cómo leerlo

Cada fila es una elección pasada a un horizonte, de la más reciente a la más antigua, con el error del voto frente al del último sondeo, el error de escaños, la cobertura y el Brier. Una elección con escaños no válidos solo cuenta para el voto: algún partido no tenía resultado previo con el que proyectar sus escaños.

No dice por qué falló una elección concreta: para eso está el detalle de cada una en el Histórico Errores.

Bloques

Lo que el modelo habría dicho de cada bloque en cada elección pasada, frente a lo que ocurrió.

Escaños reales y del modelo de cada bloque, y la probabilidad de mayoría que daba el modelo.
Elección Horizonte (días) Bloque Escaños reales Escaños del modelo Prob. de mayoría Mayoría real Escaños válidos
23 jul 2023 6 Derecha 170 174 46,6 % no sí
23 jul 2023 6 Izquierda 152 143 0 % no sí
23 jul 2023 14 Derecha 170 174 42,2 % no sí
23 jul 2023 14 Izquierda 152 141 0,2 % no sí
23 jul 2023 30 Derecha 170 180 64,4 % no sí
23 jul 2023 30 Izquierda 152 134 0 % no sí
23 jul 2023 60 Derecha 170 177 51,2 % no sí
23 jul 2023 60 Izquierda 152 139 0,6 % no sí
23 jul 2023 90 Derecha 170 178 58,8 % no sí
23 jul 2023 90 Izquierda 152 136 0,2 % no sí
23 jul 2023 180 Derecha 170 181 64,0 % no sí
23 jul 2023 180 Izquierda 152 134 0 % no sí
10 nov 2019 6 Derecha 151 156 4,0 % no sí
10 nov 2019 6 Izquierda 158 155 6,4 % no sí
10 nov 2019 14 Derecha 151 157 7,0 % no sí
10 nov 2019 14 Izquierda 158 154 8,8 % no sí
10 nov 2019 30 Derecha 151 152 3,6 % no sí
10 nov 2019 30 Izquierda 158 161 15,4 % no sí
10 nov 2019 60 Derecha 151 139 1,6 % no sí
10 nov 2019 60 Izquierda 158 175 49,4 % no sí
10 nov 2019 90 Derecha 151 142 2,2 % no sí
10 nov 2019 90 Izquierda 158 172 41,0 % no sí
28 abr 2019 6 Derecha 147 155 2,0 % no sí
28 abr 2019 6 Izquierda 165 163 15,2 % no sí
28 abr 2019 14 Derecha 147 159 10,4 % no sí
28 abr 2019 14 Izquierda 165 156 7,4 % no sí
28 abr 2019 30 Derecha 147 162 13,4 % no sí
28 abr 2019 30 Izquierda 165 157 8,2 % no sí
28 abr 2019 60 Derecha 147 171 38,2 % no sí
28 abr 2019 60 Izquierda 165 151 4,8 % no sí
28 abr 2019 90 Derecha 147 176 50,6 % no sí
28 abr 2019 90 Izquierda 165 147 2,6 % no sí
28 abr 2019 180 Derecha 147 166 19,0 % no sí
28 abr 2019 180 Izquierda 165 157 9,0 % no sí
26 jun 2016 6 Derecha 169 162 13,0 % no sí
26 jun 2016 6 Izquierda 156 165 17,2 % no sí
26 jun 2016 14 Derecha 169 159 11,0 % no sí
26 jun 2016 14 Izquierda 156 167 22,6 % no sí
26 jun 2016 30 Derecha 169 162 16,4 % no sí
26 jun 2016 30 Izquierda 156 164 17,4 % no sí
26 jun 2016 60 Derecha 169 163 19,4 % no sí
26 jun 2016 60 Izquierda 156 163 19,0 % no sí
26 jun 2016 90 Derecha 169 163 21,8 % no sí
26 jun 2016 90 Izquierda 156 162 16,8 % no sí
20 dic 2015 6 Derecha 163 — — — no
20 dic 2015 6 Izquierda 161 — — — no
20 dic 2015 14 Derecha 163 — — — no
20 dic 2015 14 Izquierda 161 — — — no
20 dic 2015 30 Derecha 163 — — — no
20 dic 2015 30 Izquierda 161 — — — no
20 dic 2015 60 Derecha 163 — — — no
20 dic 2015 60 Izquierda 161 — — — no
20 dic 2015 90 Derecha 163 — — — no
20 dic 2015 90 Izquierda 161 — — — no
20 dic 2015 180 Derecha 163 — — — no
20 dic 2015 180 Izquierda 161 — — — no
Cómo leerlo

Cada fila compara los escaños reales de un bloque con los del modelo y con la probabilidad de mayoría que daba. Una probabilidad alta en un bloque que no la logró es un fallo; el Brier resume todos ellos. Donde los escaños no son válidos, el modelo no pudo proyectarlos y se muestra un guion.

No dice si el bloque gobernó: la mayoría absoluta es una cifra de escaños, no un pacto.

Cómo se hace el backtest

El modelo se repite en elecciones ya celebradas viendo solo los sondeos publicados hasta cada fecha, y lo que dijo se compara con el resultado oficial.

El backtest sigue un protocolo fuera de muestra: en cada elección y a cada horizonte, solo ve los sondeos publicados hasta ese día, y los parámetros que se estiman con datos (error de sondeo, deriva de la opinión, efectos de encuestadora) se ajustan únicamente con los ciclos anteriores.

Hay dos ejecuciones, las de los dos modos del sitio. El modo Hoy responde a «si las elecciones fueran hoy» y solo está calibrado a horizontes cortos. El modo Elección, las columnas «modo Elección», añade la deriva de la opinión hasta el día de la votación: es la comparación honesta a muchos días de distancia.

Las tres líneas base son: el último sondeo publicado, la media simple de los sondeos de las cuatro semanas anteriores al corte y el resultado de la elección anterior. Las coberturas se leen frente a su nivel nominal (0,50, 0,80 y 0,95): cercanas a él, los intervalos están bien calibrados; por debajo, son demasiado estrechos.

Parámetros

Los ajustes con que se ejecutó el backtest publicado.

Simulaciones
500
Semilla
42
Días de prolongación del promedio
10
Elecciones
20 dic 2015, 26 jun 2016, 28 abr 2019, 10 nov 2019, 23 jul 2023
Horizontes (días)
6, 14, 30, 60, 90, 180
Versión
a59059f
Ejecutado
7 oct 2026, 13:35
Origen
backtest/results

Descargas

Los datos del backtest en CSV.