Tableaux de bord de direction et recalibration trimestrielle : garder un modèle fiable dans la durée
Un modèle de scoring crédit mis en production se dégrade avec le temps : le portefeuille évolue, l’économie change, les comportements aussi. Nous installons le pilotage qui détecte la dérive tôt et décide de la recalibration sur des faits.
Le contexte
Le modèle de scoring PME est en production depuis un an. Personne ne sait vraiment s’il performe toujours aussi bien, et les revues sont ponctuelles. La direction des risques souhaite un suivi régulier, des seuils d’alerte clairs et un processus de recalibration encadré par le dispositif de gestion du risque de modèle.
Notre méthode, pas à pas
→
→
→
→
Définir les indicateurs
Performance (pouvoir discriminant : Gini, AUC, KS), stabilité (PSI de la population et des variables), usage (taux de dérogation à la décision du modèle), incidents et coûts. Avec la direction des risques et les validateurs.
Livrable : catalogue d’indicateurs et définitions
Fixer les seuils d’alerte
Seuils d’attention et d’action pour chaque indicateur, avec le responsable désigné pour réagir. Les seuils sont justifiés et validés par le comité des modèles.
Livrable : grille de seuils et règles d’escalade
Construire le tableau de bord
Une vue synthétique pour la direction (feux, tendances, décisions à prendre) et une vue détaillée pour les équipes modèles. Alimentation automatique des données.
Livrable : tableau de bord de direction
Organiser la revue trimestrielle
Comité récurrent : lecture des indicateurs, analyse des causes de dérive, décision de recalibrer, de revalider ou de maintenir. Chaque décision est consignée.
Livrable : calendrier, ordre du jour type et comptes rendus
Recalibrer de façon contrôlée
Gestion des versions, tests avant remise en production, validation indépendante, mise à jour du registre des modèles et information des utilisateurs.
Livrable : procédure de recalibration et historique des versions
Résultat attendu
Points de vigilance
- Trop d’indicateurs tue le pilotage : mieux vaut un petit nombre d’indicateurs actionnables.
- Recalibrer trop souvent peut masquer un problème de fond ; la décision doit s’appuyer sur des seuils et des causes identifiées.
- Indépendance de la validation : la personne qui recalibre ne doit pas être celle qui valide.
Piloter vos modèles dans la durée ?
Parlons de votre dispositif de suivi et de vos besoins de recalibration.