Cos'รจ il test di concorrenza nei test del software?

โšก Riepilogo intelligente

I test di concorrenza rilevano i difetti che si manifestano solo quando piรน utenti agiscono contemporaneamente sulla stessa applicazione, mettendo in luce deadlock, aggiornamenti persi e problemi di blocco che i controlli funzionali sequenziali non rivelano mai.

  • ๐Ÿ‘ฅ Chiamato anche: Test multiutente, perchรฉ il fattore scatenante รจ l'accesso simultaneo piuttosto che un volume di traffico elevato.
  • ๐ŸŽฏ A cosa mira: Record di database condivisi, moduli condivisi e codice applicativo condiviso accessibili da piรน sessioni.
  • ๐Ÿ”’ Cosa misura: Livelli di deadlock, blocco, codice a thread singolo e accesso limitato alle risorse condivise.
  • ๐Ÿงญ Come funziona: Identifica i flussi a rischio di concorrenza, imposta un obiettivo di concorrenza, programma azioni reali e poi aumenta gradualmente il numero di utenti.
  • ๐Ÿž Classi di difetti: Condizioni di gara, deadlock, aggiornamenti persi, corruzione dei dati e esaurimento dei thread.
  • โš ๏ธ Limiti onesti: Il non determinismo, le callback asincrone e uno stack di chiamate poco informativo rendono difficile riprodurre gli errori.

Che cos'รจ il test di concorrenza nel test del software con piรน utenti simultanei?

Cos'รจ il test di concorrenza?

Test di concorrenza รˆ una tecnica di test utilizzata per rilevare difetti in un'applicazione quando piรน utenti sono connessi contemporaneamente. In altre parole, monitora l'effetto dell'esecuzione simultanea della stessa azione da parte di piรน utenti.

Il test di concorrenza รจ anche chiamato test multiutenteTestare un programma concorrente รจ piรน complesso che testare un programma sequenziale, a causa del non determinismo e dei problemi di sincronizzazione: lo stesso test puรฒ avere successo in un'esecuzione e fallire nella successiva senza che sia stata modificata una sola riga di codice.

Il diagramma seguente illustra il concetto: piรน utenti accedono alla stessa risorsa dell'applicazione nello stesso istante e il test osserva come l'applicazione gestisce la sovrapposizione.

Diagramma di test di concorrenza che mostra piรน utenti che accedono simultaneamente alla stessa risorsa dell'applicazione.

Perchรฉ i test di concorrenza

Due domande giustificano lo sforzo, ed entrambe risultano invisibili durante le esecuzioni funzionali a utente singolo.

  • Consente di identificare gli effetti dell'accesso simultaneo agli stessi record del database, moduli o codice applicativo.
  • Identifica e misura il livello di deadlock, di blocco, di utilizzo di codice a thread singolo e di accesso limitato alle risorse condivise.

Una funzionalitร  puรฒ essere perfettamente corretta per un utente e comunque perdere dati per il secondo utente che arriva un millisecondo dopo, motivo per cui questa tecnica si affianca test delle prestazioni piuttosto che all'interno dei test funzionali.

Come eseguire test di concorrenza

Il test di concorrenza segue una sequenza ripetibile. I passaggi seguenti vanno da scoping alla risoluzione.

  • Passaggio 1) Identificare i flussi soggetti a concorrenza. Verifica la presenza di stati condivisi: accessi simultanei, prenotazioni di posti o azioni, aggiornamenti del saldo, processi batch che scrivono sulla stessa tabella e qualsiasi componente a thread singolo nel percorso.
  • Passaggio 2) Impostare un obiettivo di concorrenza. Decidete quanti utenti devono agire contemporaneamente, basandovi sui picchi di utilizzo reali anzichรฉ su un numero tondo.
  • Fase 3) Progettare i casi di test. Ogni caso di prova associa la risorsa condivisa, le azioni concorrenti e lo stato finale previsto; ad esempio, due sessioni di prelievo dallo stesso conto non devono entrambe avere successo.
  • Passaggio 4) Scrivere lo script e selezionare lo strumento. รˆ necessario un generatore di carico che crei utenti virtuali configurabili; JMeter รจ la scelta open-source piรน comune e le sue impostazioni dei gruppi di thread si adattano direttamente agli scenari di concorrenza.
  • Passo 5) Ramp in modo incrementale. Aumentare gli utenti simultanei gradualmente invece di saltareping al bersaglio, in modo che il livello al quale inizia la contesa sia visibile.
  • Fase 6) Monitorare e analizzare. Monitorando contemporaneamente i tempi di attesa dei blocchi, la variabilitร  dei tempi di risposta, i tassi di errore e i blocchi del database, un difetto di concorrenza si manifesta spesso come un'anomalia temporale prima ancora di presentarsi come un errore.
  • Passaggio 7) Risolvi e riavvia. Risolvi il problema di sincronizzazione, indicizzazione o blocco, quindi ripeti la stessa esecuzione per confermare che il comportamento sia cambiato e non si sia spostato.

Difetti comuni di concorrenza

I difetti di concorrenza rientrano in un numero limitato di classi riconoscibili e, di solito, identificare correttamente la classe porta direttamente alla soluzione.

Difetto Che succede Sintomo tipico
Condizioni di gara Il risultato dipende da quale sessione รจ terminata per prima Totale corretto in alcune partite, sbagliato in altre.
Deadlock Due sessioni, ciascuna delle quali tiene un lucchetto, l'altra ne ha bisogno Le transazioni si bloccano invece di restituire un errore.
Aggiornamento perso Una seconda scrittura sovrascrive la prima senza leggerla Una modifica salvata scompare silenziosamente
Corruzione dei dati Una struttura condivisa รจ scritta solo parzialmente Record in uno stato in cui nessuna transazione valida potrebbe essere creata
Fame Una sessione non ottiene mai la risorsa che sta aspettando Un singolo percorso utente va in timeout mentre il sistema sembra funzionare correttamente.

Poichรฉ questi guasti sono intermittenti, ogni esecuzione necessita di registri e timestamp acquisiti; altrimenti il โ€‹โ€‹difetto non puรฒ essere segnalato in modo credibile attraverso il processo di gestione dei difetti.

Esempio di test di concorrenza

Consideriamo un negozio online che detiene l'ultima unitร  di un prodotto in magazzino. Due acquirenti aprono l'articolo nello stesso secondo ed entrambi premono Acquista.

  • Scenario: Due sessioni leggono stock = 1, entrambe superano il controllo di disponibilitร  ed entrambe scrivono stock = 0.
  • Risultato atteso: Un ordine viene confermato, l'altro riceve un messaggio di esaurimento scorte e le scorte non diventano mai negative.
  • Indicatore di difetto: Entrambi gli ordini vengono confermati, oppure il valore delle scorte si attesta a -1, il che dimostra che il controllo di disponibilitร  e il decremento non vengono eseguiti come un unico passaggio atomico.
  • Varianti che vale la pena provare: Le stesse due sessioni di modifica di un record del profilo, due approvazioni della stessa richiesta e un processo batch che aggiorna la tabella mentre un utente salva.

Lo stesso schema si generalizza: trova una risorsa, due scrittori e nessuna garanzia di ordinamento. Esecuzione dello scenario durante test di sistema, prima che venga aggiunto il carico, mantiene la diagnosi pulita.

Vantaggi del test di concorrenza

  • Riduce relativamente la quantitร  di lavoro necessaria per testare un'applicazione, limitando l'ambito delle interazioni simultanee a pochi componenti ampiamente utilizzati e ben testati.
  • L'incapsulamento consente di analizzare il comportamento di una porzione di un programma senza dover esaminare l'intero codice sorgente.
  • Contribuisce a migliorare l'affidabilitร  e la robustezza dei programmi concorrenti.
  • Questo sistema individua tempestivamente i limiti di blocco e di congestione, consentendo cosรฌ di basare le decisioni relative alla capacitร  su dati di contesa misurati anzichรฉ su stime.

Svantaggi del test di concorrenza

Gli svantaggi elencati di seguito sono quelli che i tester riscontrano tipicamente durante l'esecuzione di test di concorrenza.

  • L'applicazione deve essere testata su piรน piattaforme.
  • Gli scenari di concorrenza richiedono test piรน intensivi rispetto a quelli sequenziali.
  • Le funzioni non restituiscono immediatamente il risultato al chiamante; il risultato puรฒ essere fornito in un secondo momento tramite notifiche, blocchi, funzioni di callback o meccanismi simili, il che rende i test piรน complessi.
  • Le informazioni o il flusso del programma non si riflettono nello stack di chiamate.
  • Il numero di percorsi di esecuzione nel sistema puรฒ essere estremamente elevato, poichรฉ i processi in un sistema concorrente interagiscono tra loro durante l'esecuzione.
  • I programmi concorrenti presentano un tasso di fallimento piรน elevato rispetto a quelli sequenziali.
  • Eseguire il debug di programmi concorrenti รจ difficile, perchรฉ collegare un debugger modifica la tempistica che ha causato l'errore.

DOMANDE FREQUENTI

No. Test di carico Misura il comportamento in condizioni di volume previsto nel tempo. Il test di concorrenza si concentra sullo stesso istante, quindi un difetto puรฒ manifestarsi anche con soli due utenti se entrambi accedono a un record condiviso.

La metร  multi-thread di test dei thread si sovrappone ad esso. Il test dei thread chiede se un percorso aziendale sopravvive all'integrazione; il test di concorrenza chiede cosa fa l'accesso simultaneo una volta che quel percorso funziona giร .

Ricava il numero dal picco di utilizzo osservato, non da una cifra tonda. Inizia con due sessioni per dimostrare la validitร  del ragionamento, quindi aumenta gradualmente la velocitร  fino a raggiungere il picco misurato e un margine superiore.

I modelli di apprendimento automatico classificano i moduli in base alla cronologia dei difetti e alla complessitร  dello stato condiviso, indirizzando i tester verso i flussi con maggiori probabilitร  di interrompersi in caso di sovrapposizione. Il clustering dei log su esecuzioni ripetute isola quindi l'interleaving che ha preceduto ciascun errore.

Copilota GitHub Genera rapidamente script per utenti virtuali, barriere e helper per le asserzioni. Il tester definisce comunque quale risorsa รจ condivisa e qual รจ lo stato finale corretto, poichรฉ i test generati raramente impongono una sovrapposizione reale.

Il livello di isolamento, il timeout del blocco, la dimensione del pool di connessioni e l'indicizzazione influenzano tutti il โ€‹โ€‹modo in cui si manifesta la contesa. Registrali a ogni esecuzione, perchรฉ un risultato ottenuto con un livello di isolamento non dice nulla su un altro.

Ripeti lo stesso scenario piรน volte partendo da dati puliti, conserva i log con timestamp e restringi l'intervallo tra le due azioni in competizione. L'utilizzo di un debugger spesso nasconde l'errore modificando la temporizzazione.

Sรฌ, per la contesa sensibile al volume. Le tabelle di piccole dimensioni consentono al database di mantenere tutto in memoria e di bloccarsi brevemente, in modo che i blocchi che si verificano in produzione rimangano invisibili. Fai in modo che il numero di righe e le dimensioni degli indici corrispondano il piรน possibile, compatibilmente con le possibilitร  dell'ambiente.

Riassumi questo post con: