Cos'รจ il Test Maturity Model (TMM) nei test del software?

โšก Riepilogo intelligente

Il Testing Maturity Model (TMM) misura il livello di maturitร  del processo di test del software di un'organizzazione attraverso cinque livelli cumulativi, da Iniziale a Ottimizzato. รˆ stato derivato dal CMM per fornire al testing una propria roadmap di miglioramento e un metodo di valutazione.

  • ๐Ÿ“ Due componenti: Cinque livelli di competenza, oltre a un modello di valutazione che colloca un'organizzazione in uno di essi.
  • ๐Ÿชœ Livelli cumulativi: Ogni livello richiede il raggiungimento degli obiettivi del livello inferiore, pertanto non รจ possibile saltarne alcuno.
  • ๐Ÿ” Livello da 1 a 2: Il processo di test si separa da quello di debug e acquisisce politiche, obiettivi e tecniche di base propri.
  • ๐Ÿ”„ Livello da 3 a 4: Il test si integra nell'intero ciclo di vita, quindi viene misurato, quantificato e il difetto-tracre.
  • ๐Ÿš€ Livello 5: Il processo stesso รจ ottimizzato, con prevenzione dei difetti, supporto degli strumenti e miglioramento continuo.
  • ๐Ÿ“œ Standard attuale: TMMi, gestito da TMMi Foundation, รจ il successore utilizzato oggi per la certificazione formale.

Cos'รจ il Test Maturity Model (TMM)?

Che cos'รจ il Testing Maturity Model (TMM)?

Modello di maturitร  dei test (TMM) TMM รจ un framework per valutare il livello di maturitร  del processo di test del software di un'organizzazione. Identifica il livello di maturitร  attuale e definisce obiettivi per migliorare il processo passo dopo passo. TMM puรฒ essere utilizzato insieme a qualsiasi altro modello di miglioramento dei processi o in modo completamente autonomo.

Il TMM si basa sul Capability Maturity Model (CMM) ed รจ stato sviluppato da Ilene Burnstein e colleghi presso l'Illinois Institute of Technology negli anni '1990. Mentre il CMM misura l'intero processo di sviluppo, il TMM restringe il campo d'azione alla sola fase di test.

Il modello รจ composto da due componenti principali:

  1. Un insieme di cinque livelli che definiscono la capacitร  di test
  2. Un modello di valutazione utilizzato per collocare un'organizzazione su uno di questi livelli

Test del modello di maturitร 

I cinque livelli del modello di maturitร  dei test

I cinque livelli permettono a un'organizzazione di individuare il proprio processo di test attuale e di capire esattamente quali miglioramenti sono necessari per raggiungere il livello successivo. Ogni livello si basa su quello sottostante, quindi non รจ possibile saltarli.

Nota sulla denominazione: Il modello originale di Burnstein etichetta i livelli come Iniziale, Definizione della fase, Integrazione, Gestione e misurazione, e Ottimizzazione/Prevenzione dei difetti e Controllo qualitร . I โ€‹โ€‹nomi abbreviati utilizzati di seguito sono quelli comunemente usati nel settore.

Livelli TMM Obiettivi Un obiettivo dei livelli TMM
Livello 1: iniziale Il software dovrebbe essere eseguito correttamente
  • A questo livello non vengono identificate aree di processo
  • Uno degli obiettivi del test รจ garantire che il software funzioni correttamente
  • A questo livello mancano risorse, strumenti e personale qualificato
  • Nodo Quality Assurance controlli prima della consegna del software
Livello 2: definito Sviluppare obiettivi e politiche di test e debug
  • Il test รจ separato dal debug e i due vengono trattati come attivitร  distinte.
  • La fase di test viene dopo la codifica
  • Uno degli obiettivi principali del test รจ dimostrare che il software soddisfa le specifiche
  • Sono in atto metodi e tecniche di test di base
Livello 3: Integrato Integrazione dei test nel ciclo di vita del software
  • I test vengono integrati in un intero ciclo di vita
  • Gli obiettivi del test derivano dai requisiti
  • L'organizzazione di test esiste
  • Test riconosciuto come attivitร  professionale
Livello 4: Gestione e Misurazione Stabilire un programma di misurazione dei test
  • Il testing รจ un processo misurato e quantificato
  • RevLe osservazioni in ogni fase di sviluppo sono riconosciute come attivitร  di test
  • Per il riutilizzo e Test di regressione, i casi di test vengono raccolti e registrati in un database di test
  • I difetti vengono registrati e vengono assegnati livelli di gravitร 
Livello 5: ottimizzato Ottimizzazione del processo di test
  • Il testing รจ gestito e definito
  • L'efficacia e i costi dei test possono essere monitorati
  • I test possono essere perfezionati e migliorati continuamente
  • Controllo qualitร  e Difetto si pratica la prevenzione
  • Viene praticato il riutilizzo del processo
  • Anche le metriche relative ai test dispongono del supporto degli strumenti
  • Gli strumenti forniscono supporto per Test Case progettazione e raccolta dei difetti

TMM contro TMMi: cosa รจ cambiato?

Il modello descritto sopra รจ il TMM originale dell'Illinois Institute of Technology. Nel 2005 il TMMi Foundation รจ stata fondata come organizzazione indipendente senza scopo di lucro e pubblicata TMMi, l'integrazione del Test Maturity Model, che รจ la versione in base alla quale le organizzazioni vengono valutate e certificate oggi.

Criteri TMM TMMi
Origin Istituto di Tecnologia dell'Illinois, anni '1990 TMMi Foundation, dal 2005
Allineato con CMM CMMI
Structure Cinque livelli con obiettivi di maturitร  Cinque livelli con aree di processo formali, obiettivi e pratiche
Nome di livello 2 Definizione di fase Gestito
Nome di livello 5 Ottimizzazione, prevenzione dei difetti e controllo qualitร  OTTIMIZZAZIONE
Certificazione formale Non disponibile Disponibile tramite valutatori accreditati

I cinque livelli del TMMi sono Iniziale, Gestito, Definito, Misurato e Ottimizzato. Il concetto di base รจ lo stesso, ma il TMMi specifica le aree di processo e le pratiche richieste in modo molto piรน dettagliato, il che rende possibile una valutazione indipendente. Se state scegliendo un modello per un nuovo programma di miglioramento, iniziate con il TMMi; il TMM rimane comunque utile come fondamento concettuale.

Differenza tra CMM e TMM

CMM TMM
Valuta la maturitร  dell'intero processo di sviluppo del software. Valuta la maturitร  del processo di test soltanto
Copre i requisiti, la progettazione, la programmazione e la gestione del progetto. Comprende la pianificazione dei test, la progettazione dei test, l'esecuzione dei test e la prevenzione dei difetti.
Di proprietร  della SEI della Carnegie Mellon, ora sostituita dalla CMMI Sviluppato presso l'Illinois Institute of Technology, ora sostituito da TMMi
Il collaudo รจ una delle tante aree di pratica La verifica รจ l'intero oggetto del modello
Utilizzato per certificare un'organizzazione come fornitore Utilizzato per individuare e sequenziare test del software miglioramenti

Come condurre una valutazione TMM

Una valutazione stabilisce la posizione reale di un'organizzazione, anzichรฉ quella che essa ritiene di occupare. Si articola in cinque fasi.

  1. Definire l'ambito. Decidete quali prodotti, team o unitร  aziendali includere nell'analisi. Valutare un'intera azienda in una sola volta raramente produce risultati concreti e utilizzabili.
  2. Raccogli prove. Raccogli piani di test, casi di test, segnalazioni di difetti e metriche, quindi intervista separatamente tester, sviluppatori e manager. I documenti mostrano ciรฒ che รจ scritto; le interviste mostrano ciรฒ che accade realmente.
  3. Valuta ciascun obiettivo. Valuta ciascun obiettivo di maturitร  al livello target come pienamente raggiunto, parzialmente raggiunto o non raggiunto. Un livello รจ raggiunto solo quando tutti i suoi obiettivi sono pienamente raggiunti.
  4. Individuare le lacune. Elenca gli obiettivi non raggiunti nell'ordine in cui ostacolano il progresso. Poichรฉ i livelli sono cumulativi, un divario al livello 2 deve essere colmato prima di poter iniziare qualsiasi lavoro di livello 3.
  5. Elabora il piano di miglioramento. Assegna a ciascuna lacuna un responsabile, una data obiettivo e un risultato misurabile, quindi rivaluta la situazione dopo un intervallo concordato.

Due avvertimenti pratici. Innanzitutto, un'autovalutazione tende ad essere troppo ottimistica; se il risultato ha un impatto commerciale, รจ consigliabile affidarsi a un valutatore esterno accreditato. In secondo luogo, bisogna resistere alla tentazione di inseguire a tutti i costi un punteggio numerico. Il valore risiede nei miglioramenti che emergono colmando le lacune, non nel badge da ottenere.

Vantaggi e limiti del modello di maturitร  dei test

Benefici

  • Un punto di riferimento oggettivo: Il modello sostituisce le opinioni sulla qualitร  dei test con un livello definito e un elenco documentato delle lacune.
  • Una tabella di marcia sequenziale: Poichรฉ i livelli sono cumulativi, l'ordine dei miglioramenti viene deciso automaticamente.
  • Rilevamento precoce dei difetti: I livelli superiori spingono i test avanti fino ai requisiti e alla progettazione, dove le correzioni sono piรน economiche.
  • Un vocabolario condiviso: Tester, sviluppatori e management discutono di maturitร  utilizzando gli stessi termini.
  • Documentazione del fornitore: un livello TMMi formale รจ riconosciuto negli appalti e nella contracnegoziati.

limitazioni

  • Lento e costoso: In genere, per passare al livello successivo sono necessari molti mesi di impegno costante.
  • Richiede molta documentazione: I requisiti relativi alle prove possono entrare in conflitto con una pratica agile e flessibile se applicati in modo rigido.
  • Inseguimento del livello: I team possono ottimizzare la valutazione anzichรฉ la qualitร  del prodotto.
  • Non sostituisce l'abilitร : Un processo consolidato, ma gestito da tester inesperti, produce comunque test di scarsa qualitร .

Modello di maturitร  dei test: punti chiave

  • TMM valuta la maturitร  di un processo di test su cinque livelli, da Iniziale a Ottimizzato.
  • Deriva dal CMM, ma restringe l'ambito dall'intero processo di sviluppo alla sola fase di test.
  • I livelli sono cumulativi: un'organizzazione non puรฒ raggiungere il livello Integrato senza prima aver raggiunto gli obiettivi del livello Definito.
  • I difetti riscontrati dopo la consegna sono i piรน costosi da riparare, il che giustifica, dal punto di vista economico, l'innalzamento del livello di maturitร  dei test.
  • TMMi, gestito da TMMi Foundation, รจ l'attuale successore e quello utilizzato per la certificazione formale.

DOMANDE FREQUENTI

TMM รจ il modello accademico originale dell'Illinois Institute of Technology. TMMi รจ il suo successore, mantenuto dal TMMi Foundationallineato con CMMI e sufficientemente dettagliato da supportare una certificazione formale e accreditata.

No. I livelli sono cumulativi, quindi ogni obiettivo del livello inferiore deve essere raggiunto completamente prima. Un team che automatizza molto ma non ha una politica di test รจ ancora al livello 1.

Sรฌ, anche se va applicato con discernimento. Gli obiettivi riguardano i risultati dei test piuttosto che i documenti, quindi un team agile puรฒ soddisfarli con suite automatizzate e criteri di definizione di fatto invece che con piani formali.

La generazione di test assistita dall'IA e l'automazione con capacitร  di auto-riparazione supportano principalmente i livelli superiori, dove la misurazione e la prevenzione dei difetti sono giร  presenti. Applicate al livello 1, aumentano la velocitร  senza introdurre la disciplina che il modello sta misurando.

Sรฌ. L'intelligenza artificiale puรฒ analizzare i dati sui difetti, la copertura dei test e la documentazione per indicare un livello probabile ed evidenziare le lacune. Una valutazione formale certificata richiede comunque un valutatore umano accreditato.

Riassumi questo post con: