
Ce cours vous apprend à évaluer et diagnostiquer vos modèles de Machine Learning avec la librairie open source Skore.
Vous analysez leurs performances et identifiez les limites de métriques classiques comme l’Accuracy.
Vous créez des métriques et vérifications personnalisées pour intégrer vos contraintes métiers et financières.
Vous évaluez ensuite vos modèles de manière robuste grâce à la validation croisée.
Vous apprenez à ajuster le seuil de décision afin d’optimiser les performances selon vos objectifs métiers.
Enfin, vous comparez plusieurs modèles avec Skore pour sélectionner et justifier le modèle le plus adapté.
Connaissez-vous le principe d'un cours en ligne sur OpenClassrooms ?
Ce cours suit une progression logique que l'on a séquencée en plusieurs chapitres à suivre dans l'ordre.
Avant de démarrer, voici quelques conseils pour exploiter au mieux le contenu de ce cours et optimiser votre apprentissage :
Lisez le texte dans chaque chapitre pour comprendre pourquoi les concepts abordés sont importants.
Suivez les activités dans les “À vous de jouer” pour savoir comment vous pouvez mettre en œuvre ces concepts.
Profitez de chaque occasion de pratiquer en faisant une pause dans le cours, pour vous entraîner de votre côté et reproduire pas à pas ce que vous avez lu dans le cours !

Le projet fil rouge vous place dans la peau d’un professionnel chargé d’évaluer un modèle de détection des défauts de paiement bancaires. Vous commencez par analyser une régression logistique dont l’Accuracy de 95 % masque de mauvaises performances. Vous utilisez Skore pour diagnostiquer ses faiblesses, puis créez des métriques et des vérifications personnalisées intégrant les contraintes financières de la banque. Vous évaluez ensuite un modèle de Gradient Boosting par validation croisée et ajustez son seuil de décision pour améliorer sa rentabilité. Enfin, vous comparez les deux modèles afin de formuler une recommandation argumentée sur le modèle à mettre en production.

Rendez-vous dans le prochain chapitre pour découvrir comment évaluer votre modèle initial avec Skore !