Construire une stratégie de tests pour une petite application, introduire une régression volontaire et prouver qu'elle est détectée.
Scénario
HashBox te confie une petite application (inscription à des cours, remises, rappels). Il n'y a presque aucun test. Tu dois établir une stratégie, écrire la suite, puis démontrer qu'elle protège vraiment l'application en injectant des bugs.
Objectif
Écrire (ou reprendre) une petite application, construire une suite de tests étagée (unitaires, intégration, API, un E2E), mesurer sa qualité (couverture, mutation, instabilité), l'intégrer dans un mini pipeline, puis introduire une régression contrôlée et la faire détecter.
Environnement
Python 3.10 ou plus, modules standard (unittest, unittest.mock, sqlite3, http.server, ast, xml.etree). Tout se passe en local, sans accès Internet ni service externe.
État de départ
Un dossier de travail avec l'application (appli/), un dossier tests/ vide et un fichier ci.py à écrire.
Tâches
- Décris les comportements de l'application sous forme de matrice (comportement, exemple chiffré, niveau de test).
- Écris les tests unitaires de la logique (remises, règles) avec valeurs limites et cas d'erreur.
- Écris les tests d'intégration du dépôt SQLite avec une base neuve par test.
- Écris les tests d'API (statuts, JSON, erreurs) avec un contrat de réponse validé.
- Écris un seul test E2E du parcours le plus critique, avec attente explicite.
- Remplace les dépendances de temps et de hasard par des doubles injectés.
- Mesure la couverture de lignes et le score de mutation avec les outils de la mission 9 ; renforce les tests faibles.
- Rejoue la suite 30 fois avec ordre et graine variés pour détecter l'instabilité.
- Écris
ci.py: syntaxe, tests, rapport JUnit, porte de couverture, échec rapide. - Introduis une régression contrôlée (par exemple
>=devenu>dans une remise) et prouve queci.pyla détecte et la nomme.
Observations attendues
- La matrice relie chaque comportement à au moins un test.
- La suite passe en moins de 5 secondes et en n'importe quel ordre.
- Au moins 90 % des mutants sont tués ; les survivants sont justifiés.
- Aucun test instable sur 30 exécutions variées.
- La régression contrôlée fait échouer
ci.pyavec le nom du test responsable dans le rapport.
Validation
python ci.py renvoie le code 0 sur le code sain et 1 après la régression, avec le test fautif nommé ; une personne tierce peut lire la matrice et retrouver le test de chaque comportement.
Indices
💡 Indice 1
Commence par la matrice de comportements : elle te dit quels tests écrire.
💡 Indice 2
Teste d'abord la logique pure ; ajoute les couches lentes ensuite.
💡 Indice 3
Pour chaque bug injecté, demande-toi quel test aurait dû le voir ; s'il n'y en a pas, écris-le.
Preuves à rendre
- La matrice de comportements
- La suite de tests et son temps d'exécution
- Les scores de couverture et de mutation (avant/après renforcement)
- Le rapport JUnit de la régression contrôlée
Réflexion
- Quel type de test a trouvé le plus de bugs injectés ?
- Quel test t'a coûté le plus à écrire, et valait-il son coût ?
HEF-110 — Tests et qualité
Atelier Python

