Calibration parfaite Modèle trop confiant Écart d’excès de confiance
L’exactitude d’un modèle bien calibré correspond à sa confiance affichée à tous les niveaux. Un modèle trop confiant surestime partout sa certitude — à 80 % de confiance affichée, il n’a raison que 61 % du temps.

L’écart entre les courbes, c’est la mauvaise calibration rendue visible. À 80 % de confiance affichée, le modèle trop confiant n’a raison que 61 % du temps. Un modèle bien calibré comble entièrement cet écart.