← zurück zum Wissen

Wissen · Nachkontrolle

Ortsbilanz: Wo die Vorhersage beständig danebenliegt

Die Trefferquote zählt, wie oft die Spanne der Modelle die Messung verfehlt hat. Diese Seite fragt pro Stadt nach der Richtung: Liegt der Konsens der Modelle an einem Ort beständig zu warm oder zu kalt — und bleibt das so, wenn man das Archiv halbiert? Ein solcher Versatz ist meist zuerst eine Eigenschaft des Messorts, nicht des Modells. Am Ende steht die Frage, ob jede Stadt ihr eigenes bestes Modell hat.

Was hier verglichen wird

Für jede der 25 Städte legt diese Seite alle sechs Stunden ab, was elf Wettermodelle für die nächsten acht Tage vorhersagen, und holt später die gemessene Höchsttemperatur der nächstgelegenen DWD-Station. Als Konsens gilt der Median der Modelle. Der Versatz ist Konsens minus Messung, gemittelt über alle gewerteten Tage: positiv heißt zu warm, negativ zu kalt. Daneben steht der mittlere absolute Fehler, der jede Abweichung zählt, egal in welche Richtung.

Wichtig für das Lesen: Die Modelle rechnen für die festen Koordinaten der Stadt, die Station steht woanders — am Flughafen, am Stadtrand, höher oder tiefer, oft mehrere Kilometer entfernt (Messnetz). Eine Station mitten in der Stadt misst an Sommertagen eher mehr als das Umland (Stadtklima). Ein fester Versatz je Stadt sagt deshalb zuerst etwas über den Messort und erst danach etwas über die Modelle.

Der Versatz je Ort

Der Balken zeigt den Versatz bei Vorlauf 0 bis 1, also für heute und morgen: Dort ist vom eigentlichen Vorhersagefehler am wenigsten übrig, ein fester Versatz tritt am deutlichsten hervor. Der Strich zeigt denselben Wert über alle Vorlauftage von 0 bis 7.

Die Auswertung wird geladen …

Bleibt der Versatz stehen? Die Halbierungsprobe

Ein Versatz, der nur in einem Teil des Archivs auftaucht, ist Wetter — etwa eine Hitzewelle, die ein Modell an einem Ort unterschätzt hat. Deshalb wird das Archiv in zwei Hälften geteilt und der Versatz jeder Stadt in beiden getrennt gerechnet. Geteilt wird nach dem gemessenen Tag, damit beide Hälften keine einzige Messung gemeinsam haben, und zwar auf zwei Arten: zeitlich (erste gegen zweite Hälfte — das trennt auch Hoch- von Spätsommer) und wochenweise (gerade gegen ungerade Kalenderwochen — gleiche Jahreszeit, aber benachbarte Tage teilen ihr Wetter, die Probe fällt dort eher zu freundlich aus). Liegen die Punkte nahe der Diagonale, hat jede Stadt in beiden Hälften denselben Versatz.

Die Auswertung wird geladen …

Hat jede Stadt ihr bestes Modell?

Gewertet wird hier nur die gleiche Aufgabe: Fälle, in denen alle elf Modelle einen Wert geliefert haben. Das reicht nicht über alle Vorlauftage, weil nicht jedes Modell acht Tage weit rechnet — bis zu welchem Vorlauf, steht unten aus der Datei (wie in der Rangliste). Je Stadt gewinnt das Modell mit dem kleinsten mittleren Fehler. Ob das mehr ist als Zufall, zeigt wieder die Halbierung: Ein bestes Modell für einen Ort müsste in beiden Hälften vorn liegen — und es dürfte nicht einfach das Modell sein, das ohnehin überall vorn liegt.

Die Auswertung wird geladen …

Alle Städte mit ihrer Station

Je Stadt die DWD-Station, die Bright Sky geliefert hat, mit ihrer Entfernung zu den Koordinaten der Stadt; dazu Versatz und mittlerer Fehler je Vorlauf-Gruppe und der Sieger der gleichen Aufgabe mit seinem Vorsprung auf den Zweiten.

Die Auswertung wird geladen …

Was diese Zahlen nicht sagen

  • Kein Urteil über eine App. Hier wird der Konsens der elf Modelle aus dem Archiv dieser Seite geprüft, nicht das, was eine bestimmte Wetter-App anzeigt (Wetter-Apps).
  • Station gegen Gitterpunkt. Ein Teil jedes Versatzes ist der Unterschied zwischen dem Ort der Station und dem Punkt, für den gerechnet wird — nicht der Fehler eines Modells.

Wonach gerechnet wurde

Die Auswertung wird geladen …

Quellen

Vorhersage: Open-Meteo, elf Modelle, archiviert in /data/forecasts/ (CC BY 4.0). Messung: DWD-Stationsmessung über Bright Sky in /data/measured.json (DWD GeoNutzV).

Auswertung: /data/ortsbilanz.json, berechnet bei jedem Schnappschuss; Aufbau auf Daten. Dieselben Vergleiche ohne Aufteilung nach Ort: Trefferquote, Faustregel, Feldbericht.