En noviembre, publiqué un artículo
"Yandex.Meteum - tecnología sin tecnología. Comercialización precisa para el distrito ” , que correlacionó la calidad de los pronósticos de Yandex con otros servicios. El énfasis estaba en la temperatura, sin analizar otros parámetros. La conclusión fue esta: el pronóstico de temperatura de Yandex no muestra resultados excepcionales en comparación con los servicios de pronóstico ya probados. Te recomiendo que leas el texto completo. Esta vez, es hora de revisar otro parámetro clave: la precipitación.
Condiciones de verificación y pronósticos de control.
El objetivo principal del estudio es comprender la calidad del pronóstico para la precipitación de Yandex en comparación con otros servicios de pronóstico. Le llamo la atención sobre el hecho de que el énfasis estaba en predecir el fenómeno, y no en la fase de precipitación o su cantidad.
Como pronósticos de control, utilizamos datos del sitio web intellicast.com, que se
fusionó con el servicio wundeground en enero, pero esto no afectó los pronósticos, solo cambió la interfaz. El segundo pronóstico de control es un
pronóstico integral del sitio web de la oficina metodológica del Centro Hidrometeorológico de Rusia. Hablé sobre este pronóstico en una publicación anterior.
El pronóstico fue interceptado manualmente. El período de evaluación es el día meteorológico, es decir, de aproximadamente 8-9 a.m. a 20-21 a.m. No tomé en cuenta la precipitación nocturna. Se pronosticaron pronósticos del 3 de noviembre de 2018 al 31 de marzo de 2019, es decir, para el período durante el cual cae el invierno climático en la parte europea de Rusia y parte de los Urales, y no hay influencia de convección.
Los pronósticos de Yandex también se capturaron solo durante el día. Al mismo tiempo, traté de correlacionar los pronósticos del sitio con los pronósticos que Alice envió en notificaciones push. Más tarde resultó que las previsiones no están de acuerdo entre sí, pero hablaremos más sobre esto.
Se eligieron ciudades para poder capturar parte del sur de los Urales y la mayor parte del territorio europeo de Rusia. Dibujé una línea desde Kurgan a Moscú, y elegí las ciudades en este sitio a intervalos aproximadamente iguales. Estos son Kurgan, Ufa, Kazan y Moscú. La distancia media entre los puntos es de 591 km.
El
Manual de pronósticos meteorológicos generales de corto alcance, que Roshydromet utiliza para evaluar pronósticos de hasta 72 horas, se utilizó como técnica de evaluación. Como dije, era importante para mí evaluar el hecho de la precipitación, y no su cantidad o fase. Por lo tanto, ingresé dos parámetros en las tablas: seco (sin precipitación) o precipitación.
Si el sitio predijo cualquier precipitación a cualquier hora del día, entonces el pronóstico mostró la gradación de "Precipitación", si no había precipitación en el pronóstico, entonces "Seco".
Las filas oficiales de las estaciones de Roshydromet se utilizaron como información objetiva. Si en una estación meteorológica el medidor de precipitación registró al menos 0.1 mm en 12 horas, entonces el estado "Precipitación" entró en la tabla. Además, las gradaciones pronósticas y reales se correlacionaron. Doy el número de estaciones meteorológicas que se utilizaron en el estudio: 28661 (Kurgan), 28722 (Ufa), 27595 (Kazan), 27612 (Moscú, VDNH).
Por ejemplo, Yandex predice nieve ligera durante el día, y la estación meteorológica no registra, entonces el pronóstico se establece en 0%. Si hay alguna cantidad de precipitación, entonces 100%. Por lo tanto, todos los pronósticos se colocaron en igualdad de condiciones de evaluación.
Para mayor transparencia,
publico un enlace a las tablas de origen con todos los datos . También intenté no solo evaluar los pronósticos, sino también correlacionarlos con mapas sinópticos de tiempo de espera cero, lo que me permitió identificar aquellas situaciones sinópticas en las que Yandex da los resultados más bajos de justificación.
Resultados de la investigación
Inicialmente, planteé la hipótesis de que Yandex mostrará resultados similares con otros sitios, o estarán ligeramente por debajo del nivel de los competidores. Tuve que despedirme de esta hipótesis a fines de noviembre, cuando resultó que la precisión de Yandex era comparable al lanzamiento de una moneda. Los resultados estuvieron en el nivel de pronósticos aleatorios y variaron del 50 al 60%.
Durante 5 meses, la precisión de Yandex en la precipitación durante 24 horas fue del 58%. ¡Intellicast / wunderground tiene un 81%, y el pronóstico integrado del Centro Hidrometeorológico tiene un 80%!
Yandex logró descubrir una característica interesante: cuanto más lejos de Moscú, menor es la precisión. En Kurgan, la precisión promedio fue de 45.6%, y en Moscú - 67.8%. Los pronósticos de los competidores oscilaron entre el 75% y el 85%, lo que parece muy decente para la temporada de invierno.
El principal problema de Yandex en el invierno es la lluvia falsa. Yandex predice la precipitación, mientras que otros servicios esperan clima seco, una situación típica. Lo más triste es que Yandex predice la precipitación incluso en aquellos territorios en los que hay un anticiclón extenso. Por ejemplo, el 12 de noviembre, Yandex predijo lluvia para Kazán durante todo el día, pero no debería haber ninguna, porque el centro del anticiclón pasó sobre la región, hay un clima despejado y no puede haber lluvia físicamente.
Una situación similar se repitió el 20 de diciembre, pero en Kurgan. Una vez más, se estableció un anticiclón sobre la ciudad, pero Yandex emitió precipitaciones de manera persistente. Hubo muchas situaciones tan extrañas, solo di los ejemplos más vívidos.
Otro problema resultó ser con Alice y sus notificaciones push, que envía a través de la aplicación principal de Yandex. Por ejemplo, el 3 de enero, el sitio web escribió que no llovería el 4 de enero, y Alice me envió: “La nieve es hermosa. Mañana un poco de nieve ". Durante los 5 meses hubo solo unos pocos casos, pero el hecho de desacuerdo entre los servicios lleva a pensamientos diferentes.
Por supuesto, la mayoría de las veces, Alice informó el mismo pronóstico que figuraba en el sitio, pero no hubo precipitaciones. El error de Meteum se traduce en el trabajo de todos los demás servicios y hay que hacer algo.
Datos climáticos
Calculamos el pronóstico de precipitación para 24 horas, pero me gustaría describir otro problema importante que está presente en el Yandex. El clima ".
En el artículo anterior, ya escribí que Yandex publica la precipitación mensual promedio en todas las ciudades. El problema es la fuente de datos. El sitio indica la fuente de NOAA, puedo suponer que Yandex solo usa los datos del reanálisis de computadora estadounidense CFSR. El reanálisis es adecuado para estudios de temperatura, pero es extremadamente pobre para estudiar precipitación. El modelo de computadora no reproduce la precipitación real, especialmente de baja intensidad, deficientemente. El medidor de precipitación en la estación meteorológica registra la cantidad real de precipitación, y la computadora (reanálisis) calcula la virtual. Debido a esto, puede ocurrir un error.
La diferencia es especialmente pronunciada en el verano, cuando se inician los procesos convectivos, y los modelos son muy pobres amigos de ellos. La precipitación frontal es mucho más fácil de calcular que la precipitación después de pasar a través de una celda de tormenta (nube de tormenta). El error aumenta en terreno montañoso o en un clima marino. Por lo tanto, cuando se estudia el clima, es aconsejable confiar solo en los
datos de la estación meteorológica más cercana . Se debe recurrir al reanálisis por computadora solo si simplemente no tenemos datos analógicos.
Por ejemplo, Yandex Ufa contó 803 mm de precipitación por año, aunque en realidad la tasa anual es de 586 mm. Precipitación sobredimensionada de Yandex en un 37%. En Vladivostok, Yandex, por el contrario, subestimó la precipitación en un 40%. Según Yandex, Ufa tiene más precipitaciones que en Vladivostok, lo cual es absolutamente estúpido. Escribí a Yandex sobre este problema, pero mi apelación fue ignorada. Aunque, descargar arreglos ya preparados por estaciones y procesarlos, para Yandex, creo, no es un problema tan grande.
Conclusión
El pronóstico de Yandex sobre la precipitación durante 24 horas es muy inferior en calidad a otros servicios de pronóstico. Durante 5 meses, la precisión de Yandex en la precipitación durante 24 horas fue del 58%. ¡Intellicast / wunderground tiene un 81%, y el pronóstico integrado del Centro Hidrometeorológico tiene un 80%! Yandex logró descubrir una característica interesante: cuanto más lejos de Moscú, menor es la precisión. En Kurgan, la precisión promedio fue de 45.6%, y en Moscú - 67.8%. Los parámetros de pronóstico no concuerdan entre sí: la precipitación se pronostica en un clima anticiclonal claro.
No recomiendo utilizar la información de Yandex como fuente básica o única de pronóstico.
Imagen principal: insidecorp.ruTarjetas sinópticas GFS - meteoweb.ru/alter/prec.php