Co naprawdę mierzy twój rating w Arenie
Nie to, jak często trafiasz. To, jak często trafiasz tam, gdzie model nie był już pewien wyniku.
Każdy zaczyna od 1000. Rozliczony typ zmienia tę liczbę według jednego wzoru: współczynnik K pomnożony przez różnicę między tym, co się stało, a prawdopodobieństwem, które model podał w chwili dodania typu.
Druga połowa tego zdania to cały projekt. Twój wynik nie zależy od innych ani od odsetka trafień. Liczy się porównanie z opinią samego modelu w chwili, gdy twój typ się z nim nie zgadzał albo gdy się z nim zgadzał.
Jak to wygląda w praktyce
Typ na faworyta z prawdopodobieństwem osiemdziesięciu procent, który wygrywa zgodnie z oczekiwaniami, daje bardzo mało, bo model już to mówił, a twój typ niczego nie dodał. Trafienie typu z prawdopodobieństwem trzydziestu procent daje znacznie więcej. A pomyłka przy tym faworycie z osiemdziesięcioma procentami kosztuje dużo, właśnie dlatego, że miało być łatwo.
To działa w niewygodnym kierunku i jest to celowe. Seria pewnych typów na wielkich faworytów daje odsetek trafień, który dobrze wygląda, i przeciętny rating. To właściwy wynik. Jeśli liczbę da się napompować, wybierając oczywistości, nie mierzy ona trafności oceny.
“Odsetek trafień mówi, jak często twoje typy pokrywały się z faworytem. Rating mówi, ile były warte twoje różnice zdań.
Szczegóły, które uniemożliwiają oszukiwanie
Prawdopodobieństwo zostaje zamrożone w chwili utworzenia typu, a nie sprawdzane przy rozliczeniu. Ceny zmieniają się w miarę napływu wiadomości o drużynach; gdyby rating odczytywał późniejszą liczbę, wczesny typ byłby oceniany na podstawie informacji, których nigdy nie miał.
Współczynnik K zaczyna wysoko i spada w miarę postępu twojego sezonu: czterdzieści przy pierwszych rozliczonych typach, potem dwadzieścia cztery, potem szesnaście i potem dwanaście. Nowe konta szybko znajdują swój poziom; ustabilizowane przestają gwałtownie skakać przez jeden wynik. Rating nie może spaść poniżej 800, więc zły dzień ma swoje dno.
Jeden typ na rynek i okres w każdym meczu, a rozlicza go wybrany przez ciebie rynek: to samo uzgodnione prawdopodobieństwo, które pokazała ci tablica, a nie inna liczba wyciągnięta w chwili rozliczenia.
Jeśli chcesz, żeby twój rating się ruszył, musisz nie zgodzić się z modelem i mieć rację. Innej drogi nie ma i właśnie o to chodzi.