Czy nasz model jest lepszy?
Porównujemy nową wersję V3.7 ze starszą V3.6 i historyczną średnią ligową. Wyniki obliczamy chronologicznie: model nie zna rezultatów ocenianych spotkań. Niższy Brier Score i log loss oznaczają lepsze prognozy.
Test historyczny 1X2
| Model | Brier 1X2 ↓ | Log loss ↓ |
|---|
Test nie uwzględnia archiwalnych kursów, podatku ani ROI. Bez tych danych nie można twierdzić, że typowanie przynosi zysk.
Kalibracja prawdopodobieństw
Przy niewielkiej liczbie przykładów w danym przedziale pomiar jest niestabilny. Puste przedziały nie są uzupełniane.
Jak czytać ten test?
V3.7 dopasowuje siłę ataku i obrony zespołów przy użyciu danych wyłącznie sprzed meczu, waży nowsze wyniki mocniej, uwzględnia formę u siebie i na wyjeździe oraz łagodzi skrajne oceny. Porównujemy oba modele na tych samych meczach. Przewagę można oceniać dopiero po odpowiednio dużym teście poza próbą treningową.
Wykonaj lokalnie node backtest.js, aby odświeżyć raport. Tylko wtedy, gdy dostępne jest data/history.json, pojawią się wyniki. Żadnych wymyślonych procentów.