Dwa zdania o tej samej pracy

Wyobraź sobie dwa zdania w kwartalnym raporcie zespołu technicznego.

Pierwsze: „Wdrożyliśmy monitoring aplikacji, skonfigurowaliśmy alerty i dashboard dla zespołu dyżurnego”.

Drugie: „Awarię wykrywamy dziś po półtorej minuty, a nie po dwudziestu, i w większości przypadków zanim zauważy ją klient”.

Oba zdania mogą opisywać dokładnie tę samą pracę. Te same narzędzia, te same godziny spędzone na konfiguracji, ten sam zespół. A jednak tylko drugie zdanie zostanie zapamiętane przez kogoś spoza działu IT. Pierwsze brzmi jak zadanie odhaczone z listy. Drugie brzmi jak coś, co realnie zmieniło działanie firmy.

To nie jest kosmetyka

Inżynierowie często traktują tę różnicę jako kosmetykę, coś w rodzaju marketingowego opakowania dla prawdziwej pracy. Moim zdaniem to błąd. Sposób, w jaki opisujesz swoją pracę, decyduje o tym, jak organizacja ocenia jej wartość, ile pieniędzy dostaniesz na kolejny krok i czy przy następnej rozmowie o priorytetach ktoś w ogóle zapyta Cię o zdanie.

W tym artykule pokażę, jak przełożyć typową pracę techniczną, na przykładzie monitoringu, na język efektów. Bez wymyślania sukcesów, bez korporacyjnej nowomowy i bez dokładania sobie pracy.

Dlaczego „wdrożyliśmy” zaprasza pytanie „i co z tego?”

Opis pracy przez działania jest dla inżyniera naturalny. Tak myślimy o zadaniach: jest ticket, jest wdrożenie, jest zamknięcie. „Wdrożyliśmy monitoring” to zdanie precyzyjne i prawdziwe.

Czytelnik sam dopowie sobie resztę

Problem polega na tym, że to zdanie nie mówi nic o skutkach. Osoba, która je czyta, a nie zna szczegółów technicznych, musi sama dopowiedzieć sobie, co z niego wynika. I zwykle dopowiada coś znacznie mniej korzystnego, niż mógłby powiedzieć sam zespół. W najlepszym razie: „zespół IT kupił sobie nowe narzędzie”. W najgorszym: „zespół IT zajmował się sobą, zamiast dowozić funkcje”.

Nikt poza inżynierami nie oceni, czy wdrożenie monitoringu było sukcesem, bo samo działanie nie niesie informacji o efekcie. To trochę tak, jakby lekarz powiedział pacjentowi „zrobiliśmy badania” i na tym skończył. Pacjenta nie interesuje, że badania się odbyły. Interesuje go, co z nich wynika.

Prośba o zabawkę czy propozycja inwestycyjna?

Najmocniej widać to przy rozmowach o budżecie. Zdanie „potrzebujemy więcej czasu na rozbudowę monitoringu” brzmi jak prośba o kolejną zabawkę. Zdanie „chcemy skrócić czas wykrywania awarii z pięciu minut do trzydziestu sekund, bo przy obecnej skali każda minuta przestoju kosztuje nas określoną kwotę” jest propozycją inwestycyjną. Można ją ocenić, porównać z innymi i zaakceptować. Ta pierwsza wymaga od decydenta zaufania. Ta druga daje mu argumenty.

Zespół, który konsekwentnie mówi językiem działań, zaczyna być postrzegany jako koszt. Zespół, który mówi językiem efektów, jako inwestycja. Praca może być identyczna.

Co właściwie zmienił monitoring?

Żeby przełożyć działanie na efekt, trzeba odpowiedzieć sobie na jedno pytanie: co się zmieniło dla organizacji dzięki tej pracy?

W przypadku monitoringu odpowiedź prawie zawsze dotyczy czasu. Dobrze to widać, gdy rozpiszemy przebieg typowej awarii.

Anatomia jednej awarii

Najpierw coś się psuje. Powiedzmy, że baza danych przestaje przyjmować połączenia o 2:13 w nocy. Potem ktoś musi się o tym dowiedzieć. Bez monitoringu tym kimś często jest klient, który dzwoni rano na infolinię, albo programista, który przypadkiem zauważy błędy w logach. Dalej ktoś musi zareagować: odebrać powiadomienie, zalogować się, zacząć szukać przyczyny. Na końcu usługa wraca do działania.

Każdy z tych odcinków można zmierzyć. I każdy z nich monitoring może skrócić.

MTTD i MTTR, czyli dwie liczby, które warto znać

Czas od wystąpienia problemu do momentu, w którym zespół się o nim dowiaduje, nazywa się w branży MTTD, od angielskiego Mean Time to Detect, czyli średni czas wykrycia. Czas od wystąpienia problemu do przywrócenia działania usługi to MTTR, czyli Mean Time to Resolve lub Mean Time to Recover. Tu mała, ale ważna uwaga: skrót MTTR bywa rozwijany na kilka sposobów i różne zespoły liczą go od różnych momentów. Zanim zaczniesz go raportować, ustal w zespole jedną definicję i trzymaj się jej. Inaczej za pół roku porównasz dwie różne wielkości i wyciągniesz z tego zupełnie fałszywe wnioski.

Od narzędzia do skutku

Gdy masz już taki obraz, przełożenie poszczególnych elementów monitoringu na efekty staje się prostsze.

System alertów to nie „skonfigurowaliśmy alerty”. To „zespół dowiaduje się o awarii po dziewięćdziesięciu sekundach, a nie po kwadransie” albo „dyżurny reaguje na incydent, zanim zgłosi go klient”.

Dashboard operacyjny to nie „stworzyliśmy dashboard”. To „kierownik operacji widzi stan kluczowych usług bez dzwonienia do inżynierów” albo „dyżurny widzi problem, zanim ten dotknie użytkowników”.

Automatyczny restart usług to nie „dodaliśmy automatyczny restart”. To „część awarii, które wcześniej wymagały nocnej interwencji, rozwiązuje się sama w ciągu minuty”.

W każdym z tych przykładów działanie techniczne jest to samo. Zmienia się tylko to, czy zdanie kończy się na narzędziu, czy na skutku.

Metryki, które zrozumie ktoś spoza zespołu

Nie każda liczba, którą zna inżynier, ma sens w rozmowie z zarządem. Warto więc świadomie wybierać te, które same tłumaczą swoją wartość.

Czas wykrycia i czas przywrócenia działania

To najlepszy punkt startu. Każdy decydent rozumie, że krótszy przestój oznacza mniejszą stratę, i nie trzeba mu tłumaczyć, czym jest Prometheus czy Zabbix.

Dostępność przełożona na godziny przestoju

Dostępność usługi zwykle podaje się w procentach, na przykład 99,9%. Problem w tym, że dla większości ludzi różnica między 99,9% a 99,99% wygląda na drobiazg. Dlatego warto przełożyć ją na czas. Rok ma około 8760 godzin, więc 99,9% dostępności oznacza, że usługa może nie działać łącznie przez niecałe dziewięć godzin w roku. Przy 99,99% zostaje już tylko około 53 minut. Nagle „jedna dziewiątka więcej” przestaje być abstrakcją i staje się różnicą między jednym długim wieczorem przestoju a krótką przerwą.

Incydenty, których klient nigdy nie zobaczył

Liczba incydentów wykrytych, zanim zauważyli je użytkownicy, świetnie pokazuje, co tak naprawdę daje monitoring. Klient, który nigdy nie zobaczył awarii, nie dzwoni na infolinię, nie pisze negatywnej opinii i nie zaczyna rozglądać się za konkurencją.

Koszt przestoju, ale zawsze z założeniami

Szacowany koszt uniknięty dzięki szybszej reakcji to metryka najbardziej przekonująca, ale też najbardziej podatna na nadużycia. Jeśli Twoja firma zarabia na sprzedaży online, możesz z grubsza oszacować, ile przychodu przypada na godzinę działania sklepu, i pokazać, ile godzin przestoju udało się zaoszczędzić. Rób to jednak ostrożnie i zawsze podawaj założenia. Szacunek „przyjęliśmy średni przychód godzinowy z ostatniego kwartału” można zweryfikować. Kwotę wziętą z powietrza ktoś w końcu zakwestionuje, a wtedy straci wiarygodność cały raport, nie tylko ta jedna liczba.

Liczby, które nic nie mówią poza zespołem

Są też liczby, których lepiej nie pokazywać bez kontekstu: liczba skonfigurowanych alertów, liczba monitorowanych endpointów, liczba paneli na dashboardzie. Dla inżyniera to wskaźnik włożonej pracy. Dla kogoś z zewnątrz to liczby bez znaczenia. Co więcej, sto alertów może być gorsze niż dziesięć, jeżeli dziewięćdziesiąt z nich to szum, który uczy dyżurnych ignorować powiadomienia.

Najpierw zmierz „przed”

Całe przełożenie na język efektów opiera się na porównaniu. „MTTR wynosi teraz dziesięć minut” nic nie znaczy, dopóki odbiorca nie wie, ile wynosił wcześniej. Może wcześniej było to pięć minut i właśnie się pogorszyło?

Dlatego najprostszy nawyk, jaki możesz wprowadzić w zespole, brzmi: zanim zaczniesz wdrażać narzędzie lub proces, zapisz, jak wygląda sytuacja dziś.

Gdy nie masz danych historycznych

Nie zawsze da się to zrobić precyzyjnie. Jeżeli nie masz monitoringu, to z definicji nie masz dokładnych danych o tym, jak szybko wykrywasz awarie. Zwykle da się jednak odtworzyć przybliżony obraz z historii incydentów, zgłoszeń klientów, wiadomości na komunikatorze czy wpisów w systemie ticketowym. Jeśli ostatnie pięć poważnych awarii zgłosili klienci, a pierwsze zgłoszenie przychodziło średnio po kilkudziesięciu minutach, to jest Twój punkt odniesienia. Wystarczy uczciwie napisać, skąd go wziąłeś.

Pytanie, które zmienia priorytety

Ten nawyk ma jeszcze jeden, mniej oczywisty skutek. Samo zadanie pytania „jak to wpłynie na czas reakcji albo dostępność usługi?” przed rozpoczęciem pracy zmienia sposób myślenia o priorytetach. Czasem okazuje się, że zadanie, które wydawało się pilne, niewiele zmieni. A inne, odkładane od miesięcy, może skrócić przestoje o połowę.

Gdzie łatwo się pomylić

Przejście na język efektów ma swoje pułapki. Niektóre są niewinne, inne mogą poważnie zaszkodzić wiarygodności zespołu.

Liczba bez punktu odniesienia

O tym była już mowa: bez „przed” nie ma „po”, jest tylko liczba.

Ogólnik zamiast faktu

„Poprawiliśmy stabilność systemu” brzmi jak opinia. Łatwo się z nią zgodzić i równie łatwo ją zignorować, gdy przychodzi czas na decyzje budżetowe. Jedna konkretna liczba waży więcej niż akapit przymiotników.

Średnia, która ukrywa problem

Ta pułapka jest bardziej techniczna. Jeśli w kwartale było dziewięć awarii trwających po pięć minut i jedna, która trwała sześć godzin, średni czas przywrócenia działania wyniesie ponad czterdzieści minut. To nie opisuje dobrze ani dziewięciu drobnych incydentów, ani tego jednego, który naprawdę zabolał. Przy małej liczbie zdarzeń warto pokazać także najgorszy przypadek albo po prostu krótko opisać każdy poważny incydent.

Metryka, która staje się celem

Ta pułapka jest najgroźniejsza. Ekonomiści nazywają to prawem Goodharta. Gdy wskaźnik zaczyna być rozliczany, ludzie zaczynają optymalizować wskaźnik zamiast rzeczywistości. Jeśli zespół jest oceniany za MTTR, pojawia się pokusa, żeby zamykać incydenty szybciej, niż naprawdę zostały rozwiązane, albo nie rejestrować drobnych awarii wcale. Liczby będą wyglądały świetnie, a system nie będzie działał ani trochę lepiej.

Uczciwe liczby są ważniejsze niż ładne

Choć ten artykuł namawia do mówienia o efektach, jedna zasada jest ważniejsza od wszystkich pozostałych: pokazuj liczby, które są prawdziwe, także wtedy, gdy są niewygodne. Raport, w którym metryka się pogorszyła i zespół wyjaśnia dlaczego, buduje więcej zaufania niż dziesięć raportów z samymi wzrostami. Zarząd, który raz przyłapie zespół na upiększaniu danych, przestanie wierzyć wszystkim kolejnym liczbom.

Co, jeśli efektu nie da się policzyć?

Nie każda zmiana daje się łatwo zmierzyć, szczególnie na początku. To nie powód, żeby wracać do języka działań.

Opisz zmianę w działaniu organizacji

Jeśli nie masz liczby, opisz efekt jakościowo, ale w kategoriach zrozumiałych dla biznesu. „Zespół dyżurny nie musi już ręcznie sprawdzać stanu systemów w nocy” mówi znacznie więcej niż „wdrożyliśmy automatyczne sprawdzanie stanu usług”. Nawet samo określenie kierunku, „skróciliśmy czas reakcji”, jest lepsze niż nazwa narzędzia.

Z czasem dopisz liczby

Z czasem, gdy proces dojrzewa i zbierasz dane, warto uzupełniać takie stwierdzenia o konkretne liczby. Opis jakościowy jest dobrym startem, ale liczby sprawiają, że raport staje się wiarygodny.

Raport, który pracuje na zespół

Zmiana języka nie wymaga dodatkowej pracy technicznej. Wymaga jedynie innego sposobu jej opisywania i odrobiny regularności.

Co powinno się w nim znaleźć

Dobrze sprawdza się krótkie podsumowanie miesięczne lub kwartalne. Nie lista wdrożonych narzędzi, tylko kilka zdań o tym, co się zmieniło: jak wygląda czas wykrycia i przywrócenia działania w porównaniu z poprzednim okresem, ile incydentów udało się złapać, zanim dotknęły klientów, jakie ryzyko udało się ograniczyć. Bez żargonu tam, gdzie liczy się tylko efekt. Z jednym zdaniem wyjaśnienia tam, gdzie liczba się pogorszyła.

Regularność wygrywa z objętością

Regularność jest tu ważniejsza niż objętość. Pojedynczy, nawet bardzo dobry raport łatwo zapomnieć. Ten sam krótki format powtarzany co miesiąc pokazuje trend, a trend buduje reputację zespołu jako tego, który realnie wpływa na działanie firmy, a nie tylko od czasu do czasu „wdraża narzędzia”. Regularne raportowanie ma też czysto praktyczną zaletę: pozwala zauważyć pogarszające się wskaźniki, zanim staną się problemem widocznym dla klientów.

To nie dotyczy tylko monitoringu

Monitoring jest wygodnym przykładem, bo jego efekty łatwo zmierzyć w minutach. Ta sama zasada działa jednak w każdym obszarze pracy inżynierskiej.

Refaktoryzacja

Refaktoryzacja to nie „przepisaliśmy moduł zamówień”. To „nowe funkcje w module zamówień wdrażamy w trzy dni zamiast w dwa tygodnie” albo „liczba błędów zgłaszanych w tym module spadła o połowę”.

Migracja infrastruktury

Migracja infrastruktury to nie „przenieśliśmy aplikację na nowe serwery”. To „koszt utrzymania spadł o określoną kwotę miesięcznie” albo „aplikacja wytrzymuje dwukrotnie większy ruch bez spowolnienia”.

Bezpieczeństwo, czyli sukces, którego nie widać

Najtrudniej jest z bezpieczeństwem, bo jego największym sukcesem jest to, że nic się nie wydarzyło. A trudno raportować brak zdarzenia. Tu też da się jednak mówić językiem efektów: „krytyczne poprawki bezpieczeństwa instalujemy dziś w ciągu dwóch dni od publikacji, a nie po miesiącu”, „dostęp administracyjny do serwerów wymaga sprzętowego klucza, więc wyciek samego hasła nie wystarczy do przejęcia systemu”. Takie zdania pokazują, jak zmieniło się ryzyko, nawet jeśli żaden atak jeszcze się nie wydarzył.

W każdym przypadku pytanie jest to samo: jaki mierzalny skutek dla organizacji przyniosło to działanie?

Na koniec

Zmiana języka z działań na efekty nie zmienia ani jednej linijki konfiguracji. Monitoring działa tak samo, alerty przychodzą tak samo, dyżurny reaguje tak samo. Zmienia się tylko to, czy ktoś poza zespołem technicznym rozumie, po co to wszystko było.

To umiejętność, która rzadko pojawia się w ogłoszeniach o pracę dla inżynierów, a w praktyce decyduje o bardzo wielu rzeczach: o budżecie na kolejne inwestycje, o tym, czy zespół jest zapraszany do rozmów o priorytetach, i o tym, czy osoba techniczna jest traktowana jak wykonawca zadań, czy jak partner w podejmowaniu decyzji.

Najprostszy test, jaki możesz zastosować od jutra: przeczytaj swój ostatni raport i przy każdym zdaniu zadaj sobie pytanie „i co z tego?”. Jeśli zdanie nie ma odpowiedzi, dopisz ją. Jeśli odpowiedź jest niewygodna, napisz ją uczciwie. Na dłuższą metę to właśnie uczciwe liczby, a nie efektowne sformułowania, sprawiają, że biznes zaczyna słuchać inżynierów.