Seuils

Dans cette section, vous apprendrez à évaluer chaque exécution d’un test selon sa durée, avec des seuils saisis à la main ou calculés sur les exécutions passées.

Comment les seuils évaluent une exécution

Un test qui réussit peut tout de même être trop lent. Les seuils comparent la durée de chaque exécution à quatre limites, en secondes :

Durée Statut de seuil
Inférieure à Minor OK
Minor ou plus MINOR
Major ou plus MAJOR
Critical ou plus CRITICAL
Timeout ou plus TIMEOUT

Chaque limite doit être supérieure à la précédente : Minor < Major < Critical < Timeout. Le statut de seuil est enregistré avec chaque exécution dans l’historique de performance et peut déclencher des notifications.

Timeout est aussi une limite stricte : une exécution encore en cours à ce moment est arrêtée et enregistrée en erreur. Placez-la nettement au-dessus de la durée la plus longue que vous acceptez.

Saisir les seuils à la main

  1. Survolez le test dans l’onglet Tests et cliquez sur Test Settings.
  2. Dans l’onglet Thresholds, activez Enable Threshold.
  3. Saisissez les valeurs Minor, Major, Critical et Timeout en secondes. La barre Threshold Timeline affiche les quatre plages au fur et à mesure.
  4. Cliquez sur Save Settings.

Les valeurs par défaut sont 160, 190, 210 et 240 secondes : abaissez-les selon votre parcours.

Seuils automatiques

Les seuils automatiques calculent les limites à partir de l’historique du test lui-même, et suivent ainsi la performance réelle du site. Ils ne sont pas disponibles avec une licence gratuite.

Dans l’onglet Auto-Thresholds de Test Settings :

  1. Activez Enable Auto-Threshold Computation.
  2. Réglez l’Analysis Period : le nombre de jours d’historique à analyser (30 par défaut).
  3. Ajustez si besoin les Threshold Factors.
  4. Cliquez sur Save Settings.

Chaque limite est la durée moyenne des exécutions réussies de la période plus un nombre d’écarts types (σ) :

Limite Facteur par défaut
Minor moyenne + 4 σ
Major moyenne + 6 σ
Critical moyenne + 8 σ
Timeout moyenne + 10 σ

Des facteurs plus bas rendent l’évaluation plus stricte ; des facteurs plus élevés tolèrent davantage de variation. Les seuils automatiques activés sont recalculés chaque jour à minuit, tant que Pulse est lancé.

Le bouton Manual Computation calcule et applique les seuils immédiatement, et affiche la taille de l’échantillon, la moyenne et l’écart type utilisés. Il faut au moins 5 exécutions réussies sur la période.

Voir aussi

Traductions