Cuando verificas bien, los sesgos no “aparecen de golpe”: suelen dejar señales tempranas. El problema es que si no comparas contra el baseline correcto (climatología y, muchas veces, persistencia), esas señales se camuflan y te crees que todo va bien… hasta que llega el episodio serio y te pega el bofetón. Aquí reunimos señales fáciles de vigilar semana a semana para detectar a tiempo: sobreconfianza, sesgo de intensidad, errores de fase (llegar tarde/pronto), y “skill falso” (ganar por casualidad o por base rate). Todo con ejemplos en tormentas convectivas y en ensembles/probabilidad.

Este artículo forma parte del tema Verificación en WikiMeteo.es, donde reunimos conceptos y guías prácticas para entender mejor el tiempo y el clima.

1. Qué es y por qué importa

Una “señal temprana” es un patrón pequeño pero repetido que indica que tu sistema se está desviando: quizá está bien en lo fácil, pero falla sistemáticamente en lo difícil (extremos, timing, localización). Si las detectas pronto, puedes ajustar umbrales, calibración o diagnóstico antes de que el daño sea grande (alertas mal disparadas, recursos mal asignados, pérdida de confianza).

2. Idea clave en 30 segundos

• En una frase: si no ganas a la climatología/persistencia de forma consistente, lo que ves puede ser solo ruido
• Señal típica: POD sube pero FAR sube más (alertas “valientes” pero poco útiles)
• Confusión común: celebrar AUC/ROC y olvidar calibración y baseline

3. Baselines: el “suelo” que no puedes ignorar

• Climatología: frecuencia/percentiles por época y zona (baseline estructural).
• Persistencia: baseline competitivo en 0–6 h y en fenómenos persistentes (niebla, estratos, viento canalizado).
• Regla práctica: si tu verificación no incluye ambos (cuando aplica), te faltan piezas.

4. Señales tempranas que puedes vigilar sin complicarte

4.1 El baseline te gana “en silencio”

• Tu MAE/RMSE mejora algunos días, pero la media semanal no supera a climatología.
• En eventos raros, el sistema parece “bien” por accuracy, pero CSI/ETS no despega.

4.2 Sesgo estable (bias) que se repite

• Temperatura/viento/lluvia: sesgo constante (siempre +, siempre -) es un aviso temprano.
• Si el sesgo crece con la intensidad, ojo: los extremos van a sufrir.

4.3 “Llegas tarde” o “te adelantas” (fase)

• El pico de viento o de precipitación aparece sistemáticamente 1–3 horas desplazado.
• En convectiva, se ve como “acierto cercano” pero fallo punto a punto.

4.4 Mucha discriminación, poca utilidad

• AUC alta, pero FAR alto o fiabilidad mala (sobreconfianza).
• Las probabilidades son “demasiado extremas” y luego no se cumplen.

4.5 Señal de sobreconfianza (probabilístico)

• Tu Brier/CRPS no mejora frente a baseline probabilístico sencillo.
• Diagrama de fiabilidad curvado: dices 80% y ocurre 50–60%.

4.6 Señal de “skill local” (solo funciona en un régimen)

• Funciona en situaciones estratiformes, falla en convectiva.
• Funciona con vientos sin canalización, falla con canalización/orografía.

5. Qué métricas se asocian a cada señal (sin obsesionarse)

• Sesgo de nivel: bias, error medio, dispersión obs–fcst.
• Utilidad de evento: POD/FAR/CSI/ETS.
• Probabilístico: Brier (evento), CRPS (continuo/ensembles), fiabilidad.
• Timing: correlación con desfase, error en hora de máximo, o verificación por ventanas (neighborhood temporal).

6. Checklist semanal (5–10 minutos)

• 1) ¿Gano a climatología en MAE/RMSE en la semana?
• 2) ¿Gano a persistencia en nowcasting o fenómenos persistentes?
• 3) ¿Hay bias estable (signo fijo) y crece con intensidad?
• 4) En eventos: ¿POD mejora sin disparar FAR?
• 5) En probabilístico: ¿fiabilidad razonable o sobreconfianza?
• 6) ¿Mis fallos se concentran en convectiva/orografía/extremos?

7. Errores comunes

• No separar por época o régimen y “promediar” todo.
• Medir solo correlación y llamarlo skill.
• Mirar AUC sin fiabilidad ni baseline.
• Confundir POD alto con buen sistema si FAR se dispara.
• Ignorar persistencia como baseline en nowcasting.

8. Ejemplos rápidos

8.1 Tormentas convectivas (lluvia intensa)

• Señal temprana: CSI cae a cero en umbrales altos (>20 mm/h) y mejora mucho si usas neighborhood → problema de desplazamiento.
• Qué hacer: separar verificación punto vs neighborhood y ajustar comunicación/umbrales.

8.2 Ensembles/probabilidad

• Señal temprana: fiabilidad mala (probabilidades demasiado altas) aunque AUC sea decente.
• Qué hacer: calibración (p. ej., corrección isotónica/EMOS según caso) y revisar spread.

9. Resumen y claves finales

• Las señales tempranas aparecen al comparar con baselines
• Bias estable = aviso fácil y útil
• POD sin FAR no vale; AUC sin fiabilidad tampoco
• Nowcasting compite con persistencia
• Convectiva necesita tolerancia espacial/temporal para leer el fallo real

10. Mini-glosario

• Bias: sesgo medio (sobre/infraestimación)
• POD: probabilidad de detección
• FAR: proporción de falsas alarmas
• AUC: discriminación ROC
• CRPS: score probabilístico continuo
• Persistencia: baseline “lo de ahora sigue”

11. Referencias y lecturas recomendadas

• Copernicus/ECMWF: ensembles, scores y guías prácticas
• WMO: recomendaciones y glosario de verificación
• NOAA/Met Office: ROC, fiabilidad y buenas prácticas