Dojrzałość ISO 29119 · Zarządzanie testami oprogramowania i jakością

ISO/IEC/IEEE 29119 to seria norm międzynarodowych poświęconych testowaniu oprogramowania. Składa się z pięciu części: pojęcia i słownictwo, procesy testowe zorganizowane w trzech warstwach (organizacyjnej, zarządzania testami, testowania dynamicznego), dokumentacja przypisana do każdego z tych procesów, techniki projektowania przypadków testowych oraz testowanie sterowane słowami kluczowymi. Norma jest niezależna od przyjętego cyklu wytwarzania: ma zastosowanie zarówno w projekcie sekwencyjnym, jak i w zespole pracującym w sposób ciągły. Opisuje, co należy zrobić, a nie jakie narzędzia wdrożyć.

W praktyce trudność nie polega na znajomości normy, lecz na ustaleniu, gdzie organizacja faktycznie się znajduje. Czy polityka testów istnieje gdziekolwiek poza dokumentem spisanym przy okazji poprzedniego audytu? Czy kryteria wejścia i wyjścia są wiążące w momencie wdrożenia produkcyjnego, czy negocjowane przy każdym wydaniu pod presją terminu? Czy pokrycie testami jest mierzone, czy wnioskowane z liczby incydentów zgłoszonych po fakcie? Przy portfelu aplikacji liczącym kilkadziesiąt produktów odpowiedzi różnią się między zespołami i nikt nie dysponuje spójnym obrazem całości.

Powraca częste nieporozumienie: ISO 29119 miała zostać zdezaktualizowana przez podejście zwinne. Norma była przedmiotem publicznej dyskusji w środowisku testerskim, dotyczącej ryzyka nadmiernego formalizmu. Kolejne rewizje doprecyzowały tę kwestię: procesy należy dostosować do kontekstu i poziomu ryzyka, a dokumentacja może być prowadzona przez narzędzia zamiast przez odrębne dokumenty. Inne nieporozumienie dotyczy zakresu: ISO 29119 traktuje o testowaniu, nie o zarządzaniu jakością w rozumieniu ISO 9001 ani o zarządzaniu usługami w rozumieniu ISO 20000. Te trzy obszary się przenikają, lecz się nie zastępują.

Audyt zgodności kończy się odpowiedzią tak lub nie: proces jest wdrożony albo nie jest. Diagnoza dojrzałości stawia inne pytanie. Na jakim poziomie opanowania znajduje się każda praktyka i jakie konkretne działanie pozwala przejść na poziom wyższy. W obszarze takim jak testowanie, gdzie niemal każda organizacja coś robi, taka gradacja jest jedyną, która daje się przełożyć na ścieżkę rozwoju. Luka między stwierdzonym wynikiem a celem generuje plan działania, który sztuczna inteligencja grupuje w uporządkowaną mapę drogową.

Model referencyjny jest gotowy do użycia w Datamensio. Dostosowuje się do Państwa kontekstu: sztuczna inteligencja dopasowuje obszary tematyczne, pytania i poziomy według metody CMMI, albo buduje odrębną wersję na podstawie Państwa polityki testów, planów testów i wewnętrznych standardów.