Verifikation von Wettermodellen – Teil 3
Wie zuverlässig sind Wahrscheinlichkeitsvorhersagen für Regen oder Windböen? Der DWD erklärt, wie Brier-Score und Brier-Skill-Score Wettermodelle bewerten – und was der Vergleich von ICON-D2 und COSMO-D2 zeigt.
In den Themen des Tages vom 11. September und 14. Oktober 2026 haben wir uns damit beschäftigt, wie man kontinuierliche (also ein Zahlenwert) oder kategorische (ja/nein) Vorhersagen auf ihre Richtigkeit überprüfen kann. Heute wenden wir uns einer weiteren Art der Vorhersage zu – nämlich jener, die auf Wahrscheinlichkeiten beruht.
Das grundlegende Problem dabei ist, dass die Vorhersage für einen bestimmten Zeitpunkt eine gewisse Wahrscheinlichkeit (z.B. für Regen) angibt, das Ereignis aber entweder eintritt oder nicht eintritt. Salopp gesagt: Es kann nicht 70 % regnen. Entweder es regnet oder eben nicht.
Eine einzelne Wahrscheinlichkeitsvorhersage lässt sich nach Eintritt oder Ausbleiben des Ereignisses bewerten. Ihre statistische Zuverlässigkeit lässt sich daraus allein jedoch nicht beurteilen; dafür werden viele Vorhersagefälle räumlich und/oder zeitlich zusammengefasst. Im Thema des Tages zu den kontinuierlichen Vorhersagen wurde der mittlere quadratische Fehler bereits erwähnt. Dieser ergibt sich dadurch, dass die Differenz zwischen Beobachtungswert und Vorhersagewert berechnet, dann quadriert und zum Schluss ein Mittelwert über den gesamten betrachteten Zeitraum und über alle Beobachtungspunkte gebildet wird. Der sogenannte Brier-Score verwendet genau dieses Verfahren und wendet es auf Wahrscheinlichkeitsvorhersagen an. Dabei wird die vorhergesagte Wahrscheinlichkeit als Zahl zwischen 0 und 1 mit dem beobachteten Ereignis verglichen: 1 steht für eingetreten, 0 für nicht eingetreten. Über alle Fälle wird der Mittelwert der quadrierten Differenzen gebildet. Ein Brier-Score von 0 ist perfekt; kleinere Werte sind besser.
Bauen wir auf diesem Score auf, so kann das Vorhersagemodell auch mit einer Referenzvorhersage verglichen werden. Oft wird hier die klimatologische Wahrscheinlichkeit verwendet. Diese Art der Vorhersage ist sehr simpel und fragt nur: Wie sah es im Durchschnitt in der Vergangenheit aus? Ein jedes Vorhersagemodell will natürlich besser sein als diese Referenz (und muss es auch, um die Rechenkapazitäten und Kosten zu rechtfertigen). Für einen Referenz-Brier-Score größer als null gilt: BSS = (BSReferenz − BSModell) / BSReferenz = 1 − BSModell / BSReferenz. So entsteht der sogenannte Brier-Skill-Score (BSS). Dieser hat die schöne Eigenschaft, dass wenn er eins erreicht, die Vorhersage perfekt ist. Ein BSS von null bedeutet, dass Modell und Referenz gleich gut sind. Unter null sollte der BSS auf gar keinen Fall sinken, denn dann wäre das Modell schlechter als die Referenz.

Im Jahr 2021 wurde das damalige deutsche Modellensemble COSMO-D2 durch ICON-D2 ersetzt. Beim Modellvergleich wurde unter anderem auch auf den BSS zurückgegriffen. Schauen wir uns das Ganze doch mal anhand von einer Grafik an. Ohne in alle Details zu gehen, sehen wir hier in vier Diagrammen den BSS in Bezug auf Windböen als Linien dargestellt, Rot symbolisiert dabei das alte, Schwarz das neue Modell. Das linke Diagramm beschäftigt sich mit schwächeren Windböen, die Diagramme rechts davon mit stärkeren. Auf der x-Achse findet sich die Vorhersagezeit. Es zeigt sich, dass die stärkeren Böen für die Modelle am schwierigsten korrekt darzustellen sind. Teilweise zeigt das rechte Diagramm sogar, dass das alte Modell schlechter war als die Referenzvorhersage (rote Kurve unter null). Dieser Schwachstelle konnte der Übergang zum neueren Modell entgegenwirken. Besonders die Ausreißer nach unten kommen im ICON-D2-Ensemble nicht vor. Insgesamt betrachtet, liegt die schwarze Kurve in jedem Diagramm über der roten, was bedeutet, dass der Modellwechsel ein echtes Upgrade hin zu einer höheren Vorhersagequalität war.
Doch es gibt nicht nur diese Möglichkeiten, ein Vorhersageensemble zu überprüfen. Auch mithilfe von speziellen Diagrammen können verschiedene Eigenschaften dieser Vorhersageverfahren untersucht werden. Doch das ist eine Geschichte für ein andermal.
M.Sc. Meteorologe Fabian Chow
Deutscher Wetterdienst
Vorhersage- und Beratungszentrale
Offenbach, den 22.11.2026
Copyright (c) Deutscher Wetterdienst
Quelle: Deutscher Wetterdienst – Thema des Tages vom 22.11.2026: Verifikation von Wettermodellen – Teil 3. Text: M.Sc. Meteorologe Fabian Chow, Deutscher Wetterdienst, Vorhersage- und Beratungszentrale, Offenbach. Text und Originalgrafik: CC BY 4.0. Redaktionelle Bearbeitung durch WINDINFO: Einleitung und Formatierung angepasst, Datumsangaben ergänzt, Bewertung einzelner Wahrscheinlichkeitsvorhersagen präzisiert sowie Berechnung und Interpretation der Scores erläutert. Die Originalgrafik wurde unverändert lokal gespeichert und responsiv eingebunden; Bildunterschrift ergänzt. Beitrags- und Vorschaubild: DWD-Modellvergleich des Brier-Skill-Scores.


Hinterlasse einen Kommentar
An der Diskussion beteiligen?Hinterlasse uns deinen Kommentar!