Metryki QA, które biznes chce słyszeć

Seria: QA Leadership · Artykuł 1 z 9

Śledzisz defekty, pokrycie testami, wyniki wykonania - i masz poczucie, że poza własnym zespołem QA nikogo to nie obchodzi. Masz rację. I to nie jest Twoja wina.

Przez lata obserwowałem ten sam schemat: pieczołowicie przygotowane dashboardy, szczegółowe tabele z bugami - i kompletna cisza po stronie biznesu. Sprint review zakończony „ok, dzięki”, decyzje podejmowane intuicyjnie, bez oparcia o dane QA.

Problem nie polega na braku danych. Mamy danych za dużo. Problem polega na tym, że raportujemy aktywność zamiast wyników. To nie jest problem techniczny - to jest problem komunikacji.

Metryka aktywności mówi, ile wysiłku włożono w pracę. Metryka wynikowa mówi, jaki był efekt. Biznes płaci za wyniki - i o wynikach chce słyszeć.

Ten artykuł jest pierwszym w serii dziewięciu. Dowiesz się, jakie metryki zbierać, jak je interpretować i - co najważniejsze - jak opowiadać nimi historię, którą stakeholderzy rozumieją i na której mogą działać.

Co biznes naprawdę słyszy

Wyobraź sobie sprint review. QA prezentuje liczby. Stakeholderzy kiwają głowami. Decyzja zapada na czuja. Poniżej zestawione są dokładnie te same informacje o tym samym sprincie - w dwóch różnych językach.

Lewa strona mówi, jak bardzo QA jest zajęte. Prawa odpowiada na pytanie, które biznes faktycznie zadaje: czy możemy releasować i jak zmienia się jakość? Ta zmiana nie wymaga nowych narzędzi - wymaga nowego podejścia do pytania, które chcesz swoimi danymi odpowiedzieć.

Czego biznes naprawdę chce - trzy filary

Stakeholderzy zadają trzy pytania - i to na nie powinny odpowiadać Twoje metryki QA. Nic więcej, nic mniej.

Filar 1 - Pewność releasu

Jedno pytanie, jedna odpowiedź: czy możemy wypuścić? Release Confidence Score agreguje blokery, wyniki regresji i krytyczne ścieżki w jeden wskaźnik. Jeden numer - jedna decyzja na steering committee.

Filar 2 - Koszt defektów

Jeden escaped bug to nie „+1 do licznika”. To konkretna liczba godzin i złotówek. Kiedy zaczniesz to przeliczać - masz argument finansowy, który rozumie każdy CFO i każdy Engineering Manager.

Filar 3 - Trendy jakości

Jeden sprint to nic. Cztery kwartały to historia - i bezpośredni dowód, że inwestycja w QA przynosi efekty. Trend escaped defect rate to jeden z najsilniejszych argumentów w rozmowie z zarządem, bo mówi o zwrocie z inwestycji.

Pięć metryk, które razem opowiadają historię

Każda z poniższych metryk odpowiada na jedno konkretne pytanie biznesowe. Ich połączenie tworzy narrację, którą stakeholderzy rozumieją i na której mogą działać. Osobno informują - razem opowiadają historię.

Trzy releasey z rzędu poniżej 10 issues to moment, w którym możesz powiedzieć Engineering Managerowi: „patrz, co zrobiliśmy razem przez ostatnie pół roku.” To jest rozmowa, którą data umożliwia - ale której bez danych nie ma.

Trzy antywzorce raportowania

Nawet dobre dane można zaprezentować źle. Oto błędy, które najczęściej niszczą wiarygodność QA w oczach biznesu - i których wystarczy być świadomym, żeby ich unikać.

Co dalej - 9 artykułów, jeden temat