Vyspělost ISO 29119 · Řízení testování softwaru a kvalita
Vaše praktiky testování zasazené do normy ISO 29119, převedené do vyčísleného akčního plánu.
10 tematických oblastí, škála o 5 úrovních. A akce, díky které postoupíte na další úroveň.
10 tematických oblastí referenčního rámce, již zpracovaných od N1 do N5. Jedna firma, jedna obchodní jednotka, nebo 300 najednou.
Vyspělost ISO 29119 · Řízení testování softwaru a kvalita
10 tematických oblastí, škála o 5 úrovních.
Nordhavn Industries
53 / 100
Svou vyspělost měří s Datamensio
Příklad
Tato situace by mohla být i vaše.
Vezměme si příklad jedné firmy: tři pobočky, tři excelové tabulky, žádná společná odpověď.
Nikdo neumí konsolidovat.
Nordhavn Industries, 2 400 lidí v Hamburku, Lyonu a Portu. Zadavatel se ptá, jak na tom skupina je. Každá pobočka odpovídá ve své tabulce, s vlastními škálami.
Tři týdny, jedna jediná databáze.
Diagnostika podle ISO/IEC/IEEE 29119 (části 1 až 5) spuštěná na všech třech pobočkách současně, na základě poznámek z rozhovorů s odpovědnými osobami. Referenční rámec už byl napsaný, stejně jako 10 tematických oblastí a úrovně N1 až N5.
Dva výdaje, kterým se předešlo dřív, než vznikly.
Skóre 53 ze 100, mezera soustředěná do tří témat. AI asistent odhalil, že dvě akce plánu se zdvojují s plánem z jiného auditu. Prezentace výsledků pro výbor se připravila jednou větou.
Čemu se tím vyhnuli
- 3pobočky měřené na stejném základě, místo tří dotazníků k přepracování
- 2zdvojené akce odhalené před vznikem výdaje
- 1prezentace výsledků pro výbor, bez ručního dopracování
Tato čísla pocházejí z příkladu. Mohla by být i vaše.
Norma ukládá procesy. Datamensio řekne, kde se nacházíte.
01
Referenční rámec je už napsaný
Tematické oblasti, otázky i úrovně N1 až N5 jsou zpracované. Nezačínáte od prázdné tabulky.
02
Skóre máte ještě tentýž den
Online, přes odkaz na sebehodnocení nebo při rozhovoru. Téma po tématu, srovnatelné v čase.
03
Mezera se stává vyčísleným plánem
Každý přechod na vyšší úroveň má svou akci. Umělá inteligence určuje priority podle očekávaného efektu, ne podle pořadí v normě.
04
Pokrok se dá doložit
Kampaň po kampani, vůči vašemu cíli i vaší minulosti. Přesně to po vás chce vaše představenstvo.
Škála vyspělosti
Jedna úroveň, další úroveň, a akce, která je spojuje.
Právě tento mechanismus (úroveň, vyšší úroveň a opatření, které je spojuje) mění zjištění v trajektorii.
Jsou definována a uplatňována vstupní a výstupní kritéria jednotlivých fází testování?
- N1
Žádná formalizovaná kritéria. Přechod z jedné fáze do druhé závisí na dostupnosti týmů a na oznámeném datu dodání.
- N2
Kritéria se objevují v některých testovacích plánech. Jejich uplatňování se liší projekt od projektu a ustupují tlaku termínu.
- N3
Kritéria jsou definována ve společném šabloně, uplatňována u většiny projektů a ověřována před přechodem do další fáze. Výjimky zůstávají ojedinělé.
- N4
Kritéria jsou soustavně uplatňována, výjimky jsou zaznamenány a schvalovány na příslušné hierarchické úrovni, s uvedeným zdůvodněním.
- N5
Kritéria se upravují podle úrovně rizika produktu a revidují se na základě analýzy incidentů v produkci, s dokumentovaným sledováním revizí.
Opatření pro přechod z úrovně 2 na úroveň 3
Zařadit vstupní a výstupní kritéria do šablony testovacího plánu používané všemi týmy a učinit z nich výslovný kontrolní bod na přehledu konce sprintu nebo na komisi pro nasazení do produkce.
« Díky Datamensio plníme naše cíle mnohem efektivněji. Inspekční služby fondu FEDER i našeho nadřízeného ministerstva tento přístup zvlášť ocenily, protože jim poskytuje spolehlivá data. »
Ředitelka CCI 94CCI Île-de-France
« Považujeme toto řešení za nejvhodnější pro rozšíření našeho transformačního projektu a měření dopadu podle našich potřeb. »
Maja SucekChief Operating Officer, Interreg Danube
Zřídka sám
Referenční rámec se dá kombinovat. Spojte jich víc a pokryjte celou svou činnost, nebo nechte svůj vlastní napsat umělou inteligencí.
Získejte své první měřenína ISO 29119.
O čem tento referenční rámec je
ISO/IEC/IEEE 29119 je série mezinárodních norem věnovaná testování softwaru. Skládá se z pěti částí: koncepty a terminologie, procesy testování uspořádané do tří vrstev (organizační, řízení testování, dynamické testování), dokumentace přiřazená ke každému z těchto procesů, techniky návrhu testovacích případů a testování řízené klíčovými slovy. Je nezávislá na zvoleném vývojovém cyklu: uplatní se stejně dobře u sekvenčního projektu jako u týmu pracujícího v kontinuálním toku. Popisuje, co je třeba dělat, nikoli jaké nástroje nasadit.
V praxi problém nespočívá ve znalosti normy, ale v tom, vědět, kde se organizace reálně nachází. Existuje politika testování jinde než v dokumentu sepsaném při předchozím auditu? Jsou vstupní a výstupní kritéria vymahatelná ve chvíli nasazení do produkce, nebo se vyjednávají při každém dodání pod tlakem termínu? Je pokrytí testy měřeno, nebo odvozováno z počtu incidentů nahlášených dodatečně? Na portfoliu několika desítek aplikací se odpovědi liší tým od týmu a nikdo nemá k dispozici konsolidovaný pohled.
Často se vrací jedno nedorozumění: ISO 29119 měla být agilitou překonána. Norma byla předmětem veřejné debaty v komunitě testování ohledně rizika nadměrného formalismu. Následné revize tento bod objasnily: procesy se mají přizpůsobit kontextu a úrovni rizika a dokumentaci lze zajistit nástroji spíše než samostatnými výstupy. Další nedorozumění se týká rozsahu: ISO 29119 se zabývá testováním, nikoli řízením kvality ve smyslu ISO 9001 ani řízením služeb ve smyslu ISO 20000. Tyto tři se prolínají, nenahrazují se navzájem.
Audit souladu končí ano nebo ne: proces buď existuje, nebo neexistuje. Diagnostika vyspělosti klade jinou otázku. Na jaké úrovni zvládnutí se každá praktika nachází a jaké konkrétní opatření posune na další úroveň. U tématu, jako je testování, kde téměř každá organizace něco dělá, je toto odstupňování jediné, které vytváří využitelnou trajektorii. Mezera mezi zjištěným skóre a cílem generuje akční plán, který umělá inteligence seskupuje do prioritizované roadmapy.
Referenční rámec je v platformě Datamensio připraven k okamžitému použití. Přizpůsobuje se vašemu kontextu: umělá inteligence upravuje tematické oblasti, otázky a úrovně podle metody CMMI, nebo vytváří variantu vycházející z vaší politiky testování, vašich testovacích plánů a vašich interních standardů.
Referenční norma: ISO/IEC/IEEE 29119 (části 1 až 5)
Hodnocené tematické oblasti
Organizační politika a strategie testování
Existence formalizované politiky testování, její rozpracování do organizační strategie, soulad s obchodními cíli, pravidelná revize, osvojení týmy.
Řízení a plánování testování
Testovací plán, rozsah a cíle, odhad pracnosti, přidělení zdrojů a kompetencí, milníky, vstupní a výstupní kritéria.
Přístup založený na riziku
Identifikace rizik produktu a projektu, vážení úsilí na testování podle rizika, dohledatelnost mezi riziky a testovacími případy, přehodnocování v průběhu projektu.
Návrh a techniky testování
Zvolené techniky (ekvivalenční třídy, hraniční hodnoty, rozhodovací tabulky, přechody stavů, testování založené na zkušenostech), zdůvodnění volby, měření pokrytí.
Provádění testů a prostředí
Příprava a dostupnost prostředí, správa testovacích dat, podmínky opakovaného spuštění, řízení konfigurací, izolace testovacích prostředí.
Řízení vad
Životní cyklus vady, kritičnost a prioritizace, lhůty pro vyřízení, analýza kořenových příčin, zpětná vazba do návrhu.
Dokumentace a dohledatelnost
Testovací dokumenty vytvořené podle části 3, přizpůsobení úrovně formalismu riziku, dohledatelnost mezi požadavky, testovacími případy a výsledky, uchovávání důkazů.
Automatizace a nástroje
Automatizovaný rozsah a kritéria výběru, integrace do buildovacího a nasazovacího řetězce, údržba automatizovaného portfolia, regresní testy.
Ukazatele a řízení
Ukazatele pokrytí, pokroku a kvality, prezentace výsledků zainteresovaným stranám, rozhodnutí o nasazení do produkce, spolehlivost měřených dat.
Kompetence a neustálé zlepšování
Mapa kompetencí v testování, školení a certifikace týmů, poučení po závažném incidentu, vývoj praktik v čase.
Zkrácená verze referenčního rámce je k dispozici pro online sebehodnocení.
Často kladené otázky
Je ISO 29119 certifikovatelná?
Série ISO/IEC/IEEE 29119 je soubor procesních norem bez schématu podnikové certifikace srovnatelného s ISO 9001. Existující certifikace v oblasti testování se vztahují na osoby. Datamensio měří vyspělost vašich praktik a připravuje vaše audity, nevydává žádný certifikát.
Jaký je rozdíl mezi touto diagnostikou a auditem souladu?
Audit ověřuje existenci procesu a končí konstatováním mezery nebo souladu. Diagnostika zařazuje každou praktiku na škálu vyspělosti a uvádí opatření, které posune na další úroveň. Diagnostika připravuje audit, audit potvrzuje.
Je norma slučitelná s agilními týmy?
Ano. Popsané procesy se přizpůsobují kontextu a úrovni rizika a formalismus dokumentace lze zajistit nástroji spíše než samostatnými výstupy. Referenční rámec hodnotí zvládnutí praktiky, nikoli objem vytvořených dokumentů.
Jak dlouho hodnocení trvá?
Krátká verze se vyplní za přibližně třicet minut. V kolaborativním režimu, s test manažerem, odpovědným za prostředí a referentem automatizace, se sběr obvykle rozloží na jeden až dva týdny.
Lze referenční rámec přizpůsobit naší organizaci?
Ano. Můžete upravit otázky, úrovně a tematické oblasti, nebo začít od prázdného základu. Umělá inteligence také vytváří variantu vycházející z vaší politiky testování a vašich interních standardů. Kontrola nad referenčním rámcem zůstává na vás.
Lze porovnat více týmů nebo obchodních jednotek?
Ano. Stejný referenční rámec se rozešle více entitám, skóre se porovnávají podle tematické oblasti i v čase. Průřezová roadmapa konsoliduje akční plány z jednotlivých diagnostik, aniž by se duplikovala společná opatření.
Jak je akční plán vyčíslen?
Každá mezera mezi zjištěným skóre a cílem generuje opatření. Katalog služeb nabízí ke každému opatření řešení s jeho nákladem, lhůtou a očekávaným dopadem na skóre. Rozhodujete se na základě řádových odhadů, nikoli záměrů.
Kde jsou data uložena?
Ve Francii, u OVH, se zálohou u Scaleway. Žádný přenos mimo Evropskou unii. Použité modely umělé inteligence lze vybírat, včetně evropských řešení.