Seberapa akurat Yandex memprediksi curah hujan di musim dingin? Kami menganalisis keakuratan layanan prediksi

Pada bulan November, saya menerbitkan artikel “Yandex.Meteum - teknologi tanpa teknologi. Pemasaran akurat untuk distrik ” , yang menghubungkan kualitas perkiraan Yandex dengan layanan lain. Penekanannya adalah pada suhu, tanpa menganalisis parameter lain. Kesimpulannya adalah ini: prakiraan suhu Yandex tidak menunjukkan hasil yang luar biasa dibandingkan dengan layanan prakiraan yang sudah terbukti. Saya sarankan Anda membaca teks lengkap. Kali ini, saatnya untuk memeriksa parameter kunci lain - curah hujan.

gambar

Kondisi verifikasi dan perkiraan kontrol


Tujuan utama dari penelitian ini adalah untuk memahami kualitas perkiraan untuk presipitasi Yandex dibandingkan dengan layanan perkiraan lainnya. Saya menarik perhatian Anda pada fakta bahwa penekanannya adalah pada memprediksi fenomena, dan bukan pada fase presipitasi atau kuantitasnya.

Sebagai prakiraan kontrol, kami menggunakan data dari situs web intellicast.com, yang bergabung dengan layanan wundeground pada bulan Januari, tetapi ini tidak memengaruhi prakiraan, hanya antarmuka yang berubah. Ramalan kontrol kedua adalah ramalan komprehensif dari situs web kantor metodologis dari Pusat Hydrometeorological Rusia. Saya berbicara tentang ramalan ini dalam publikasi sebelumnya.

Perkiraan itu dicegat secara manual. Periode evaluasi adalah hari meteorologi, yaitu, dari sekitar 8-9 pagi hingga 20-21 pagi. Saya tidak memperhitungkan presipitasi malam. Ramalan diperkirakan dari 3 November 2018 hingga 31 Maret 2019, yaitu untuk periode di mana musim dingin iklim turun di bagian Eropa Rusia dan bagian Ural, dan tidak ada efek konveksi.

Perkiraan Yandex juga ditangkap hanya untuk siang hari. Pada saat yang sama, saya mencoba untuk menghubungkan ramalan dari situs dengan ramalan yang Alice kirim pemberitahuan push. Nantinya ternyata ramalan itu tidak sepakat satu sama lain, tetapi kami akan membicarakan hal ini lebih lanjut.

Kota-kota dipilih sehingga saya dapat menangkap bagian selatan Ural dan bagian utama wilayah Eropa Rusia. Saya menarik garis dari Kurgan ke Moskow, dan memilih kota-kota di situs ini pada interval yang kira-kira sama. Ini adalah Kurgan, Ufa, Kazan, dan Moskow. Jarak rata-rata antara titik adalah 591 km.

Manual Prakiraan Cuaca Umum Jangka Pendek , yang digunakan oleh Roshydromet untuk mengevaluasi perkiraan hingga 72 jam, digunakan sebagai teknik penilaian. Seperti yang saya katakan, penting bagi saya untuk mengevaluasi fakta curah hujan, dan bukan jumlah atau fase mereka. Oleh karena itu, saya memasukkan dua parameter dalam tabel: kering (tanpa presipitasi) atau presipitasi.

Jika situs memperkirakan curah hujan pada jam berapa pun dalam sehari, maka prakiraan tersebut menunjukkan gradasi "Presipitasi", jika tidak ada presipitasi dalam prakiraan, maka "Kering".

Jajaran resmi stasiun Roshydromet digunakan sebagai informasi faktual. Jika di stasiun cuaca meteran curah hujan mencatat setidaknya 0,1 mm dalam 12 jam, maka status "Curah Hujan" masuk ke dalam tabel. Selanjutnya, gradasi prognostik dan aktual berkorelasi. Saya memberikan jumlah stasiun cuaca yang digunakan dalam penelitian: 28661 (Kurgan), 28722 (Ufa), 27595 (Kazan), 27612 (Moskow, VDNH).

Misalnya, Yandex memprediksi salju ringan di siang hari, dan stasiun cuaca tidak mencatat, maka ramalan ditetapkan ke 0%. Jika ada jumlah curah hujan, maka 100%. Dengan demikian, semua perkiraan ditempatkan dalam kondisi penilaian yang sama.

Untuk transparansi, saya menerbitkan tautan ke tabel sumber dengan semua data . Saya juga mencoba tidak hanya mengevaluasi ramalan, tetapi juga mengkorelasinya dengan peta sinoptik tanpa lead time, yang memungkinkan saya mengidentifikasi situasi sinoptik di mana Yandex memberikan hasil pembenaran terendah.

Hasil penelitian


Awalnya, saya berhipotesis bahwa Yandex akan menunjukkan hasil yang sama dengan situs lain, atau mereka akan sedikit di bawah tingkat pesaing. Saya harus mengucapkan selamat tinggal pada hipotesis ini pada akhir November, ketika ternyata keakuratan Yandex sebanding dengan melempar koin. Hasilnya berada pada tingkat perkiraan acak dan berkisar antara 50 hingga 60%.
Selama 5 bulan, akurasi Yandex dalam presipitasi selama 24 jam adalah 58%. Intellicast / wunderground memiliki 81%, dan perkiraan terpadu Pusat Hydrometeorological memiliki 80%!

gambar

Yandex berhasil menemukan fitur yang menarik - semakin jauh dari Moskow, semakin rendah akurasinya. Di Kurgan, akurasi rata-rata adalah 45,6%, dan di Moskow - 67,8%. Perkiraan pesaing berkisar dari 75% hingga 85%, yang terlihat sangat baik untuk musim dingin.

gambar

Masalah utama Yandex di musim dingin adalah curah hujan palsu. Yandex memprediksi curah hujan, sementara layanan lain mengharapkan cuaca kering, situasi yang khas. Hal yang paling menyedihkan adalah Yandex memprediksi curah hujan bahkan di wilayah-wilayah tersebut di mana terdapat anticyclone yang luas. Misalnya, pada tanggal 12 November, Yandex memperkirakan curah hujan untuk Kazan sepanjang hari, tetapi seharusnya tidak ada, karena pusat anticyclone melewati wilayah tersebut, ada cuaca yang jelas dan tidak ada curah hujan secara fisik.

gambar

Situasi serupa diulangi pada 20 Desember, tetapi di Kurgan. Sekali lagi, sebuah antiklon didirikan di atas kota, tetapi Yandex terus-menerus mengeluarkan curah hujan. Ada banyak situasi aneh seperti itu, saya hanya memberikan contoh yang paling jelas.

gambar

Masalah lain ternyata dengan Alice dan pemberitahuan push-nya, yang dia kirim melalui aplikasi Yandex utama. Sebagai contoh, pada 3 Januari, situs web menulis bahwa tidak akan ada hujan pada 4 Januari, dan Alice mengirim saya: “Salju itu indah. Besok sedikit salju. " Selama 5 bulan hanya ada beberapa kasus seperti itu, tetapi fakta ketidaksepakatan antara layanan menyebabkan pemikiran yang berbeda.

gambar

Tentu saja, paling sering Alice melaporkan perkiraan yang sama dengan yang tercantum di situs, tetapi tidak ada curah hujan. Kesalahan Meteum diterjemahkan ke pekerjaan semua layanan lain dan sesuatu perlu dilakukan.

Data iklim


Kami mengetahui perkiraan curah hujan selama 24 jam, tetapi saya ingin menguraikan masalah penting lainnya yang ada di Yandex. Cuaca. "
Dalam artikel sebelumnya, saya sudah menulis bahwa Yandex mempublikasikan curah hujan bulanan rata-rata di semua kota. Masalahnya adalah sumber data. Situs menunjukkan sumber NOAA, saya dapat berasumsi bahwa Yandex hanya menggunakan data CFSR komputer reanalysis Amerika. Analisis ulang ini cocok untuk studi suhu, tetapi sangat buruk untuk mempelajari presipitasi. Model komputer tidak mereproduksi curah hujan aktual, terutama intensitas rendah, buruk. Meteran curah hujan di stasiun cuaca mencatat jumlah nyata curah hujan, dan komputer (analisis ulang) menghitung virtual. Karena itu, kesalahan dapat terjadi.

Perbedaannya terutama diucapkan di musim panas, ketika proses konvektif diluncurkan, dan modelnya adalah teman yang sangat buruk dengannya. Curah hujan frontal jauh lebih mudah untuk dihitung daripada presipitasi setelah melewati sel badai (thundercloud). Kesalahan meningkat di daerah pegunungan atau di iklim laut. Karena itu, ketika mempelajari iklim, disarankan untuk hanya mengandalkan data dari stasiun cuaca terdekat . Analisis ulang komputer harus dilakukan hanya jika kita tidak memiliki data analog.

gambar

Sebagai contoh, Yandex Ufa menghitung 803 mm presipitasi per tahun, meskipun pada kenyataannya tingkat tahunannya adalah 586 mm. Curah hujan Yandex kebesaran sebesar 37%. Di Vladivostok, Yandex, sebaliknya, meremehkan curah hujan sebesar 40%. Menurut Yandex, Ufa memiliki lebih banyak presipitasi daripada di Vladivostok, yang benar-benar bodoh. Saya menulis kepada Yandex tentang masalah ini, tetapi permohonan saya diabaikan. Meskipun, mengunduh array yang sudah jadi oleh stasiun dan memprosesnya, untuk Yandex, saya pikir, bukan masalah besar.

Kesimpulan


Perkiraan Yandex pada presipitasi selama 24 jam jauh lebih rendah kualitasnya daripada layanan peramalan lainnya. Selama 5 bulan, akurasi Yandex dalam presipitasi selama 24 jam adalah 58%. Intellicast / wunderground memiliki 81%, dan perkiraan terpadu Pusat Hydrometeorological memiliki 80%! Yandex berhasil menemukan fitur yang menarik - semakin jauh dari Moskow, semakin rendah akurasinya. Di Kurgan, akurasi rata-rata adalah 45,6%, dan di Moskow - 67,8%. Parameter perkiraan tidak setuju satu sama lain: curah hujan diperkirakan dalam cuaca antiklon yang jelas.
Saya sangat tidak merekomendasikan menggunakan informasi Yandex sebagai sumber perkiraan dasar atau satu-satunya.

gambar

Gambar utama: insidecorp.ru
Kartu sinoptik GFS - meteoweb.ru/alter/prec.php

Source: https://habr.com/ru/post/id447456/


All Articles