Walk-Forward-Backtesting: Wie man Fußballmodelle fair prüft
Ein Modell kann auf historischen Daten hervorragend aussehen und bei neuen Spielen enttäuschen. Ein häufiger Grund ist, dass die Vergangenheit bei der Modellentwicklung zu intensiv genutzt wurde oder Informationen in den Test gelangen, die zum Prognosezeitpunkt noch nicht verfügbar waren.
Definition: Ein Walk-Forward-Test trainiert ein Modell nur mit früheren Daten, prüft es auf dem direkt folgenden Zeitraum und verschiebt das Fenster anschließend schrittweise nach vorn.
Was bedeutet Walk-Forward?
Bei einem Walk-Forward-Test wird die zeitliche Reihenfolge respektiert. Zuerst trainiert oder kalibriert man ein Modell ausschließlich mit früheren Spielen. Danach erzeugt es Prognosen für einen späteren Zeitraum. Anschließend kann das Trainingsfenster nach vorn verschoben werden. So entsteht eine Folge zeitlich realistischer Tests.
Typische Fehler
Ein besonders kritischer Fehler ist Lookahead Bias: Das Modell verwendet Daten, die erst nach dem Anpfiff oder nach dem Spiel bekannt wurden. Auch nachträglich optimierte Auswahlregeln können die Ergebnisse verzerren. Wer viele Strategien ausprobiert und nur die beste veröffentlicht, überschätzt leicht deren tatsächliche Qualität.
Welche Kennzahlen gehören in einen Test?
Trefferquote und ROI allein reichen nicht. Für Wahrscheinlichkeitsmodelle sind beispielsweise Brier Score, Log Loss und Kalibrierungsdiagramme hilfreich. Bei Wettstrategien kommen durchschnittliche Quote, Anzahl der Picks, maximale Verlustserie, Drawdown und realistische Einsatz-/Abrechnungsregeln hinzu.
Backtest ist nicht Live-Ergebnis
Ein historischer Test kann Hinweise liefern, ist aber kein Ersatz für zeitgestempelte, unveränderte Live-Prognosen. Deshalb trennt FootballValue diese Ergebnisarten ausdrücklich. Erst die Kombination aus sauberer Methodik und belastbaren Live-Daten ermöglicht eine seriöse Bewertung.
Weiterlesen: Elo-Rating · ROI, Trefferquote und Drawdown · Statistik