Test di carico e Web Vitals rispetto a limiti prestabiliti.
Nexus StudioQA esegue uno scenario di carico da un file JSON o dalla schermata Carico e lo valuta rispetto ai limiti definiti prima dell'esecuzione. Ogni esecuzione termina con PASS, OVER_BUDGET, REGRESSED o UNMEASURED. Nei test del browser, i limiti per LCP, CLS e INP possono trasformare un test superato in PERFORMANCE_DEGRADED quando la modalità rigorosa è attiva.
A cura del gruppo Nexus StudioQA, Verdict System LLC.
Ultimo aggiornamento: .
I quattro esiti dei test di carico
| Verdetto | Quando |
|---|---|
| PASS | È stato possibile verificare almeno un criterio e tutti sono stati soddisfatti |
| OVER_BUDGET | Un criterio non è stato soddisfatto, oppure il modello aperto non è riuscito ad avviare più dell'1% delle iterazioni richieste |
| REGRESSED | Entro i limiti, ma il p95 supera di almeno 25 ms la mediana dei p95 delle ultime esecuzioni superate ed è superiore a 1.25 volte tale mediana |
| UNMEASURED | Non è stato possibile verificare nulla: nessun criterio, meno di 5 tentativi, meno di 5 campioni validi per un p95 o un limite Web Vitals che la sonda non è riuscita a misurare |
Il riferimento per REGRESSED si basa sulle ultime 5 esecuzioni superate con gli stessi scenario, destinazione, modello e numero di utenti; ne servono almeno 3. Una destinazione completamente irraggiungibile produce OVER_BUDGET, non UNMEASURED, perché il tasso di errore viene valutato sui tentativi. Con strict attivo, OVER_BUDGET e REGRESSED terminano il processo con codice di uscita 1, consentendo di arrestare la pipeline.
Cosa fa un'esecuzione di carico
Lo scenario definisce la destinazione, i passaggi con le relative asserzioni, il tempo di riflessione e un modello chiuso (da 1 a 5000 utenti) oppure aperto (una frequenza di richieste). Gli utenti virtuali inviano richieste HTTP da thread di lavoro e il rapporto fornisce percentili, volume di richieste elaborate e tasso di errore, mai soltanto una media. Prima intervengono due misure di sicurezza: devi digitare AUTHORIZED prima che venga inviato qualsiasi dato, e per una destinazione diversa da questa macchina serve anche --yes. I risultati vengono salvati in evidence/load-runs.
Web Vitals
Con --vitals, una sonda in Playwright Chromium carica le pagine prima, durante e dopo il carico e verifica i limiti del p75 per LCP, FCP, CLS, TBT e TTFB. INP non è accettato in questo contesto perché la sonda non interagisce mai con la pagina. Nei test del browser, il motore misura LCP, CLS e INP a ogni esecuzione rispetto ai limiti definiti in NEXUS_PERF_LCP, NEXUS_PERF_CLS e NEXUS_PERF_INP. Le soglie predefinite seguono web.dev:
| Metrica | Buono fino a | Scarso oltre |
|---|---|---|
| LCP | 2500 ms | 4000 ms |
| CLS | 0.1 | 0.25 |
| INP | 200 ms | 500 ms |
Questi sono valori di laboratorio ottenuti dal caricamento di una pagina tramite script: un segnale di regressione su un profilo fisso, non dati sul campo di utenti reali. INP richiede un clic o la pressione di un tasto, quindi un test che si limita a caricare pagine non ne produce alcuno. Il superamento di un limite cambia l'esito del test in PERFORMANCE_DEGRADED solo quando NEXUS_PERF_STRICT è true; altrimenti viene registrato e mostrato nel rapporto.
Nel rapporto di rilascio
Il rapporto esecutivo considera fallite le esecuzioni di carico concluse con OVER_BUDGET o REGRESSED, mostra l'ultima esecuzione e aggiunge una raccomandazione quando l'ultima esecuzione di carico non è PASS o UNMEASURED.
Domande frequenti
Il generatore di carico controlla browser reali?
No. Gli utenti virtuali inviano richieste HTTP: è così che un generatore di carico arriva a simulare migliaia di utenti. Playwright Chromium viene usato solo per la sonda Web Vitals e per i test nel browser.
Perché un'esecuzione è UNMEASURED anziché PASS?
Perché non è stato possibile verificare nulla, ad esempio per l'assenza di criteri, un numero insufficiente di campioni per un percentile o un limite Web Vitals che la sonda non è riuscita a leggere. Un limite che nessuno ha verificato non può dirsi rispettato.
Posso eseguire test di carico su qualsiasi sito?
Solo su un sistema di tua proprietà o per cui hai un'autorizzazione scritta a eseguire test. Lo strumento chiede di digitare AUTHORIZED anche per localhost, e per una destinazione diversa da questa macchina serve
--yes.Una pagina lenta fa fallire il test?
Solo in modalità rigorosa. Per impostazione predefinita, il superamento di un limite prestazionale viene registrato come avviso. Con
NEXUS_PERF_STRICT=trueil test diventa PERFORMANCE_DEGRADED, ma termina comunque con codice 0 in CI.
Fissa un limite per la velocità.
Tutto viene eseguito sulle tue macchine. Non serve una carta di credito.