Seuils
Dans cette section, vous apprendrez à évaluer chaque exécution d’un test selon sa durée, avec des seuils saisis à la main ou calculés sur les exécutions passées.
Comment les seuils évaluent une exécution
Un test qui réussit peut tout de même être trop lent. Les seuils comparent la durée de chaque exécution à quatre limites, en secondes :
| Durée | Statut de seuil |
|---|---|
| Inférieure à Minor | OK |
| Minor ou plus | MINOR |
| Major ou plus | MAJOR |
| Critical ou plus | CRITICAL |
| Timeout ou plus | TIMEOUT |
Chaque limite doit être supérieure à la précédente : Minor < Major < Critical < Timeout. Le statut de seuil est enregistré avec chaque exécution dans l’historique de performance et peut déclencher des notifications.
Timeout est aussi une limite stricte : une exécution encore en cours à ce moment est arrêtée et enregistrée en erreur. Placez-la nettement au-dessus de la durée la plus longue que vous acceptez.
Saisir les seuils à la main
- Survolez le test dans l’onglet Tests et cliquez sur Test Settings.
- Dans l’onglet Thresholds, activez Enable Threshold.
- Saisissez les valeurs Minor, Major, Critical et Timeout en secondes. La barre Threshold Timeline affiche les quatre plages au fur et à mesure.
- Cliquez sur Save Settings.
Les valeurs par défaut sont 160, 190, 210 et 240 secondes : abaissez-les selon votre parcours.
Seuils automatiques
Les seuils automatiques calculent les limites à partir de l’historique du test lui-même, et suivent ainsi la performance réelle du site. Ils ne sont pas disponibles avec une licence gratuite.
Dans l’onglet Auto-Thresholds de Test Settings :
- Activez Enable Auto-Threshold Computation.
- Réglez l’Analysis Period : le nombre de jours d’historique à analyser (30 par défaut).
- Ajustez si besoin les Threshold Factors.
- Cliquez sur Save Settings.
Chaque limite est la durée moyenne des exécutions réussies de la période plus un nombre d’écarts types (σ) :
| Limite | Facteur par défaut |
|---|---|
| Minor | moyenne + 4 σ |
| Major | moyenne + 6 σ |
| Critical | moyenne + 8 σ |
| Timeout | moyenne + 10 σ |
Des facteurs plus bas rendent l’évaluation plus stricte ; des facteurs plus élevés tolèrent davantage de variation. Les seuils automatiques activés sont recalculés chaque jour à minuit, tant que Pulse est lancé.
Le bouton Manual Computation calcule et applique les seuils immédiatement, et affiche la taille de l’échantillon, la moyenne et l’écart type utilisés. Il faut au moins 5 exécutions réussies sur la période.
Voir aussi
- Notifications — être alerté lorsqu’un seuil est dépassé
- Historique de performance — durées et statuts dans le temps
- Transactions — des seuils par étape du parcours dans Mugnsoft