Er der et projekt, der regelmæssigt sporer og offentliggør data om vejrforudsigelsesfejl, der kan hjælpe med at analysere sammenhængen mellem indgående data og forudsigelsesfejl?
Verden Meteorologisk organisation har flere initiativer, der sporer prognosen. Se for eksempel her. Dataene er lidt forsinkede, da i dag (5. april 2020) er den seneste tilgængelige måned februar, hvilket var før det stærke fald i AMDAR-data.
For at kunne vurdere prognosens ydeevne skal man finde et prognosefelt til plotning og en bestemt metric. Som prognosefelt kan jeg se på geopotentialhøjden på 500 hPa, da dette er knyttet til den atmosfæriske strømning, som i sig selv i høj grad bestemmer overfladens vejr. En passende metric er Anomaly Correlation Coefficient (ACC), der grundlæggende beskriver, hvor godt det forudsagte felt korrelerer med feltet, som det blev observeret senere på det tidspunkt, hvor forudsigelsen var gyldig.
En intuitiv måde derefter at visualisere disse resultater er at se på den forventede ledetid, hvor prognosen når en bestemt tærskel for ACC. I eksemplet nedenfor vælges denne tærskel til at være 80%. Så man kunne læse diagrammet som 'hvor langt modellen kunne forudsige fremad' eller kort sagt 'forudsigelighed'.
Figuren nedenfor (kilde: ECMWF) viser månedligt betyder for denne 'dag, hvor ACC = 80% nås' over den nordlige halvkugle. Bemærk den stærke sæsonbetingede cyklus, hvor forudsigeligheden er meget højere om vinteren sammenlignet med sommeren for den nordlige halvkugle.
Den store sæsonbestemthed, stærke variation fra år til år og i derudover vil samlede stigninger i forventet ydeevne over tid (med selve modellen også forbedret over tid!) sandsynligvis gøre det vanskeligt at tilskrive ændringer i ydeevnen over tid til den lavere AMDAR-dækning.
Der har imidlertid været adskillige undersøgelser, der analyserer relevansen af forskellige inputdata (inklusive AMDAR) for prognosemodellerne. Jeg fandt for eksempel denne præsentation. Selvom dette ikke er noget afgørende svar på dit spørgsmål, håber jeg, at jeg har leveret nogle nyttige ressourcer.