La calibration d'un modèle de prédiction

Un modèle est calibré quand ses probabilités correspondent à la réalité : sur tous les matchs où il annonce 70 %, l'issue prédite doit se produire environ 70 % du temps.

C'est différent de la précision brute. Un modèle peut « bien deviner » par hasard sur peu de matchs ; la calibration se vérifie sur un grand échantillon.

Le Brier score et la courbe de calibration mesurent cet alignement. Plus le Brier est bas, mieux le modèle est calibré.

Nous publions ces métriques en continu sur notre page Performance — bonnes comme mauvaises. C'est la seule façon honnête de juger un modèle.