Maturità ISO 29119 · Gestione dei test software e qualità
Le vostre pratiche di test posizionate su ISO 29119, tradotte in piano d’azione quantificato.
10 ambiti, una scala a 5 livelli. E l'azione che fa passare da un livello al successivo.
Gli 10 ambiti del quadro di riferimento, già redatti da N1 a N5. Un'azienda, una business unit, o 300 alla volta.
Maturità ISO 29119 · Gestione dei test software e qualità
10 ambiti, scala a 5 livelli.
Nordhavn Industries
53 / 100
Misurano la loro maturità con Datamensio
Un esempio
Questa situazione potrebbe essere la vostra.
Prendiamo l’esempio di un’azienda: tre sedi, tre fogli di calcolo, nessuna risposta comune.
Nessuno sa consolidare.
Nordhavn Industries, 2 400 persone ad Amburgo, Lione e Porto. Un committente chiede a che punto è il gruppo. Ogni sede risponde con il proprio foglio di calcolo, con le proprie scale.
Tre settimane, un’unica base.
Una diagnosi ISO/IEC/IEEE 29119 (parti 1 a 5) avviata sulle tre sedi contemporaneamente, a partire dalle note del colloquio dei responsabili. Il quadro di riferimento era già scritto, così come gli 10 ambiti e i livelli da N1 a N5.
Due spese evitate prima di essere impegnate.
Un punteggio di 53 su 100, uno scostamento concentrato su tre ambiti. Il compagno IA ha individuato che due azioni del piano duplicavano quelle di un'altra diagnosi. La restituzione dei risultati al comitato è stata richiesta in una frase.
Cosa gli ha permesso di evitare
- 3sedi misurate sulla stessa base, invece di tre questionari da rielaborare
- 2azioni duplicate individuate prima della spesa
- 1restituzione dei risultati al comitato, senza rielaborazione manuale
Questi dati sono quelli di un esempio. Potrebbero essere i vostri.
La norma impone dei processi. Datamensio dice a che punto siete.
01
Il quadro di riferimento è già scritto
Ambiti, domande e livelli da N1 a N5 redatti. Non partite da un foglio vuoto.
02
Il punteggio arriva lo stesso giorno
Online, tramite link di autovalutazione o in un colloquio. Ambito per ambito, confrontabile nel tempo.
03
Lo scostamento diventa un piano quantificato
Ogni passaggio di livello porta la sua azione. L'IA dà priorità in base all'effetto atteso, non all'ordine della norma.
04
Il progresso si dimostra
Campagna dopo campagna, rispetto al vostro obiettivo e al vostro passato. È ciò che chiede il vostro COMEX.
La scala di maturità
Un livello, il successivo, e l’azione che collega i due.
È questo meccanismo (un livello, un livello superiore, e l’azione che li collega) che trasforma una constatazione in una traiettoria.
I criteri di ingresso e di uscita delle fasi di test sono definiti e applicati?
- N1
Nessun criterio formalizzato. Il passaggio da una fase all’altra dipende dalla disponibilità dei team e dalla data di rilascio annunciata.
- N2
Alcuni criteri figurano in certi piani di test. La loro applicazione varia secondo i progetti e cedono di fronte alla pressione delle scadenze.
- N3
I criteri sono definiti in un modello comune, applicati sulla maggior parte dei progetti e verificati prima del passaggio alla fase successiva. Le deroghe restano occasionali.
- N4
I criteri sono applicati sistematicamente, le deroghe tracciate e validate al livello gerarchico appropriato, con giustificazione documentata.
- N5
I criteri sono adattati in base al livello di rischio del prodotto e rivisti a partire dall’analisi degli incidenti in produzione, con un monitoraggio documentato delle revisioni.
Azione per passare da L2 a L3
Integrare i criteri di ingresso e di uscita nel modello di piano di test utilizzato da tutti i team, e farne un punto di passaggio esplicito della revisione di fine sprint o del comitato di messa in produzione.
« Grazie a Datamensio, raggiungiamo i nostri obiettivi con molta più efficacia. I servizi di ispezione del FEDER e del nostro ministero di riferimento hanno particolarmente apprezzato questo approccio che offre loro dati affidabili. »
Direttrice della CCI 94CCI Île-de-France
« Riteniamo che questa sia la soluzione più adatta per portare il nostro progetto di trasformazione su scala e misurare l’impatto secondo le nostre esigenze. »
Maja SucekChief Operating Officer, Interreg Danube
Raramente da solo
Un quadro di riferimento si combina. Associatene più di uno per coprire la vostra attività, oppure fate scrivere il vostro dall’IA.
Effettuate la vostra prima misurazionesu ISO 29119.
Di cosa parla questo quadro di riferimento
ISO/IEC/IEEE 29119 è la serie di norme internazionali dedicata al test software. Si compone di cinque parti: concetti e vocabolario, processi di test organizzati in tre livelli (organizzativo, gestione del test, test dinamico), la documentazione associata a ciascuno di questi processi, le tecniche di progettazione dei casi di test, e il test guidato da parole chiave. È indipendente dal ciclo di sviluppo adottato: si applica sia a un progetto sequenziale sia a un team in flusso continuo. Descrive cosa fare, non gli strumenti da implementare.
In pratica, la difficoltà non è conoscere la norma, ma capire dove si situa realmente l’organizzazione. La politica di test esiste al di là di un documento redatto durante un audit precedente? I criteri di ingresso e di uscita sono vincolanti al momento della messa in produzione, o negoziati a ogni rilascio sotto la pressione delle scadenze? La copertura di test viene misurata, o dedotta dal numero di incidenti segnalati a posteriori? Su un portafoglio applicativo di decine di prodotti, le risposte variano da un team all’altro, e nessuno dispone di una visione consolidata.
Un equivoco ricorre spesso: ISO 29119 sarebbe stata rendere obsoleta dall’agilità. La norma è stata oggetto di un dibattito pubblico nella comunità del testing, incentrato sul rischio di un formalismo eccessivo. Le revisioni successive hanno chiarito il punto: i processi vanno adattati al contesto e al livello di rischio, e la documentazione può essere gestita tramite gli strumenti piuttosto che tramite deliverable autonomi. Un altro equivoco riguarda il perimetro: ISO 29119 tratta il test, non la gestione della qualità nel senso di ISO 9001, né la gestione dei servizi nel senso di ISO 20000. I tre si intersecano, non si sostituiscono.
L’audit di conformità si conclude con un sì o un no: il processo è in atto, o non lo è. La diagnosi di maturità pone un’altra domanda. A quale livello di padronanza si situa ciascuna pratica, e quale azione concreta consente di passare al livello successivo. Su un tema come il test, dove quasi tutte le organizzazioni fanno qualcosa, questa gradazione è la sola che produca una traiettoria utilizzabile. Lo scostamento tra il punteggio rilevato e l’obiettivo genera il piano d’azione, che l’IA raggruppa in una roadmap con priorità.
Il quadro di riferimento è pronto all’uso in Datamensio. Si adatta al vostro contesto: l’IA modula gli ambiti, le domande e i livelli secondo il metodo CMMI, oppure costruisce una variante a partire dalla vostra politica di test, dai vostri piani di test e dai vostri standard interni.
Norma di riferimento: ISO/IEC/IEEE 29119 (parti 1 a 5)
Gli ambiti valutati
Politica e strategia di test organizzative
Esistenza di una politica di test formalizzata, declinazione in strategia organizzativa, allineamento con gli obiettivi di business, revisione periodica, adozione da parte dei team.
Gestione e pianificazione dei test
Piano di test, perimetro e obiettivi, stima del carico di lavoro, allocazione delle risorse e delle competenze, milestone, criteri di ingresso e di uscita.
Approccio basato sui rischi
Identificazione dei rischi di prodotto e di progetto, ponderazione dello sforzo di test in base al rischio, tracciabilità tra rischi e casi di test, riesame in corso di progetto.
Progettazione e tecniche di test
Tecniche adottate (partizioni di equivalenza, valori limite, tabelle decisionali, transizioni di stato, test basati sull’esperienza), giustificazione delle scelte, misurazione della copertura.
Esecuzione e ambienti
Preparazione e disponibilità degli ambienti, gestione dei set di dati, condizioni di riesecuzione, gestione delle configurazioni, isolamento degli ambienti di test.
Gestione delle anomalie
Ciclo di vita del defect, criticità e priorizzazione, tempi di trattamento, analisi delle cause radice, ciclo di retroazione verso la progettazione.
Documentazione e tracciabilità
Documenti di test prodotti secondo la parte 3, adattamento del livello di formalismo al rischio, tracciabilità tra requisiti, casi di test e risultati, conservazione delle evidenze.
Automazione e strumenti
Perimetro automatizzato e criteri di selezione, integrazione nella catena di build e deployment, mantenimento del patrimonio automatizzato, test di non regressione.
Indicatori e governance
Indicatori di copertura, di avanzamento e di qualità, restituzione dei risultati alle parti interessate, decisione di messa in produzione, affidabilità dei dati di misura.
Competenze e miglioramento continuo
Mappatura delle competenze di test, formazione e certificazione dei team, lezioni apprese dopo incidenti rilevanti, evoluzione delle pratiche nel tempo.
È disponibile una versione breve del quadro di riferimento per l’autovalutazione online.
Domande frequenti
ISO 29119 è certificabile?
La serie ISO/IEC/IEEE 29119 è un insieme di norme di processo, senza uno schema di certificazione aziendale associato comparabile a quello di ISO 9001. Le certificazioni esistenti nel campo del test riguardano le persone. Datamensio misura la maturità delle vostre pratiche e prepara i vostri audit, non rilascia alcun certificato.
Quale differenza tra questa diagnosi e un audit di conformità?
L’audit verifica la presenza di un processo e si conclude con uno scostamento o una conformità. La diagnosi posiziona ciascuna pratica su una scala di maturità e indica l’azione che consente di passare al livello successivo. La diagnosi prepara l’audit, l’audit valida.
La norma è compatibile con team agili?
Sì. I processi descritti vanno adattati al contesto e al livello di rischio, e il formalismo documentale può essere gestito tramite gli strumenti piuttosto che tramite deliverable separati. Il quadro di riferimento valuta la padronanza della pratica, non il volume di documenti prodotti.
Quanto tempo richiede la valutazione?
La versione breve si compila in circa trenta minuti. In modalità collaborativa, con un test manager, un responsabile ambienti e un referente automazione, la raccolta dati si estende generalmente su una o due settimane.
Si può adattare il quadro di riferimento alla nostra organizzazione?
Sì. Potete modificare le domande, i livelli e gli ambiti, oppure partire da una base vuota. L’IA costruisce anche una variante a partire dalla vostra politica di test e dai vostri standard interni. Il controllo del quadro di riferimento resta vostro.
Si possono confrontare più team o business unit?
Sì. Lo stesso quadro di riferimento viene distribuito a più entità, i punteggi si confrontano per ambito e nel tempo. Una roadmap trasversale consolida i piani d’azione derivanti dalle diverse diagnosi, senza duplicare le azioni comuni.
Come viene quantificato il piano d’azione?
Ogni scostamento tra il punteggio rilevato e l’obiettivo genera un’azione. Il catalogo di prestazioni associa una soluzione a ciascuna azione, con il suo costo, i suoi tempi e il suo impatto atteso sul punteggio. Decidete su ordini di grandezza, non su intenzioni.
Dove sono conservati i dati?
In Francia, presso OVH, con backup presso Scaleway. Nessun trasferimento fuori dall’Unione Europea. I modelli di IA utilizzati possono essere selezionati, anche tra soluzioni europee.