Drzewa, średnie i upadek

Wartość oczekiwana: domyślna metoda, nie odpowiedź

Wartość oczekiwana (EV) ważona jest przez prawdopodobieństwo każdego wyniku i sumowana: EV = suma (prawdopodobieństwo razy zysk). Drzewo decyzyjne rysuje gałęzie, dzięki czemu możesz obliczyć EV w każdym węźle i „zwinąć” drzewo z powrotem do wyboru w węźle korzeniowym.

Przykład z rozwiązanym zadaniem. Możesz przyjąć ofertę: 70% szans na zysk 100, 30% szans na stratę 50.

- EV = 0,70 razy 100 plus 0,30 razy (minus 50) = 70 minus 15 = +55. Wynik dodatni, więc przy wielu powtórzeniach ta oferta się opłaca.

Kiedy EV jest błędnym kryterium

EV to średnia z wielu prób. Cicho zakłada, że masz możliwość powtórzenia zakładu i że żadna pojedyncza strata nie wyklucza Cię z gry. Dwie sytuacje łamią to założenie.

- Ryzyko bankructwa: jeśli gałąź przegrana kończy Twoją grę (bankructwo, śmierć, utrata licencji, zniszczenie reputacji), średnia jest bezsensowna. Nigdy nie zbierzesz długoterminowego zysku, ponieważ jedna nieudana próba wyłącza Cię z gry. Nigdy nie ryzykuj tego, na co nie możesz sobie pozwolić, niezależnie od tego, jak dobra jest EV.

- Zakłady niepowtarzalne: w przypadku jednorazowej decyzji średni wynik może być wynikiem, którego nigdy nie doświadczysz. Zakład, który ma dodatnią EV, ale 90% szans na przegraną, może nadal być błędny dla wyboru dokonywanego dokładnie raz.

Dlatego właśnie loteria małych, powtarzalnych i przetrwalnych zakładów jest rozgrywana na podstawie EV, podczas gdy pojedynczy zakład niosący ryzyko upadku jest rozgrywany z priorytetem przetrwania, a EV dopiero na drugim miejscu. Automatyczny system chętnie zgłosi dodatnią wartość oczekiwaną; to Twój obowiązek zapytać, czy gałąź przegrana jest przetrwalna.

Złóż drzewo

Firma subskrypcyjna rozważa wysłanie ryzykownej funkcji teraz. Jeśli się uda (60% szans), retencja wzrośnie, co jest warte 2 miliony dolarów. Jeśli się nie uda (40% szans), wada spowoduje zwroty i utratę klientów, co kosztuje 500 tysięcy dolarów. Jest tu haczyk: założyciel osobiście zagwarantował kapitał obrotowy, więc strata w wysokości 500 tysięcy dolarów w tym kwartale wymuszałaby niewypłacalność. Istnieje trzecia opcja: najpierw przeprowadzić 4-tygodniową wersję beta, kosztującą 150 tysięcy dolarów, która ujawni, czy funkcja działa, zanim nastąpi pełne wdrożenie.

Czy Twoje 90% to naprawdę 90%?

Prawdopodobieństwo, które można ocenić

Zkalibrowanym prognozistą jest ten, którego podawane prawdopodobieństwa zgadzają się z rzeczywistością. Jeśli przy wielu prognozach mówisz „90% pewności”, to około 90% z nich powinno się sprawdzić. Kalibracja nie polega na byciu częściej w błędzie; chodzi o to, aby Twoja pewność oznaczała dokładnie to, co mówi.

Śledź, a potem poprawiaj

Jedynym sposobem na poznanie swojej kalibracji jest zapisywanie prognoz z jawnym prawdopodobieństwem, a następnie ocenianie ich w oparciu o wyniki. Wynik Briera (Brier score) czyni to konkretnym: dla każdej prognozy weź prawdopodobieństwo, które przypisałeś temu, co faktycznie się wydarzyło, i zmierz błąd kwadratowy w stosunku do wyniku zakodowanego jako 1 (wystąpiło) lub 0 (nie wystąpiło).

- Przewidujesz 0,90, wydarzenie następuje (wynik 1): błąd to (0,90 minus 1) do kwadratu = 0,01. Mały: dobrze.

- Przewidywanie 0,90, wydarzenie nie następuje (wynik 0): błąd wynosi (0,90 minus 0) w kwadracie = 0,81. Duży: byłeś pewny, ale się myliłeś.

Uśrednij te wartości na wielu prognozach. Niski wynik Briera jest lepszy. Ten wskaźnik najmocniej karze pewne błędy, co jest dokładnie tym nawykiem, który najbardziej szkodzi profesjonalistom.

Dyscyplina: podaj liczbę, zapisz ją, zweryfikuj, skoryguj. Systematyczne przekraczanie progu oznacza, że jesteś nadmiernie pewny siebie i powinieneś poszerzać swoje szacunki; systematyczne pozostawanie poniżej progu oznacza, że jesteś zbyt ostrożny i możesz stawiać większe stawki. Automatyczne prognozy można oceniać w ten sam sposób, co pozwala nauczyć się, kiedy im ufać, a kiedy je nadpisywać.

Oceń prognostyka

Analityk wielokrotnie mówi zespołowi: „Jestem pewien w 90%, że to zakończy się na czas”. W ciągu kwartału dokonała 40 takich prognoz przy zadeklarowanym 90% poziomie pewności. 26 z nich się sprawdziło.

Drzwi jednokierunkowe i dwukierunkowe

Nie wszystkie błędy kosztują tyle samo

Decyzja ma asymetryczne ryzyko, gdy strona ujemna i strona dodatnia nie są lustrzanym odbiciem. Ograniczenie straty przy jednoczesnym pozostawieniu otwartym zysku to cała gra. Pozycja z ograniczoną stratą i nieograniczonym zyskiem może być błędna w większości przypadków, a mimo to wygrywać ogólnie.

Opcjonalność to prawo, bez obowiązku, do podjęcia działania później, gdy już wiemy więcej. Czterotygodniowa wersja beta z dwóch sekcji wcześniej była opcjonalnością: mały, znany koszt, który utrzymuje otwarte duże, nieodwracalne zobowiązanie do momentu, aż niepewność zostanie rozwiana.

Odwracalne-szybko, Nieodwracalne-wolno

Przydatna ramka oddziela decyzje według tego, jak trudno je cofnąć:

- Drzwi dwustronne są odwracalne. Wejdź przez nie, a jeśli nie podoba Ci się to, co znajdujesz, możesz wyjść z powrotem za niewielki koszt. Podejmuj te decyzje szybko i deleguj je. Rozważanie przez tygodnie wyboru, który można odwrócić w jedno popołudnie, jest samym w sobie rodzajem marnotrawstwa.

- Drzwi jednokierunkowe są nieodwracalne lub kosztowne w odwróceniu. Zasługują na dogłębne rozważenia, odpowiedzialność osób z wyższego szczebla oraz zabezpieczenia.

Wykres powyżej krzyżuje odwracalność ze stawkami. Dopasuj głębokość rozważań do kwadratu, w którym się znajdujesz. Najkosztowniejsze błędy zawodowe wynikają z traktowania drzwi jednokierunkowych jak dwustronnych, czyli pochopnego podejmowania decyzji nieodwracalnych.

Najsilniejszym ruchem jest często konwersja drzwi jednokierunkowych w dwustronne: pilotaż na jednej usłudze, podwójne zapisy do starego i nowego systemu, zachowanie starej ścieżki jako awaryjnej, stopniowe wdrażanie. Kupujesz sobie z powrotem odwracalność, dzięki czemu błędna decyzja pozostaje do przeżycia.

Klasyfikuj i Konwertuj

Dyrektor ds. inżynierii stoi przed dwoma wyborami w tym kwartale. Opcja 1: migracja bazy danych głównej do nowego silnika, projekt trwający miesiące, dotykający każdej usługi i bolesny w odwróceniu po wdrożeniu. Opcja 2: wdrożenie nowego wewnętrznego narzędzia do przeglądania kodu, które zespół mógłby porzucić w ciągu tygodnia, jeśli nie spełni oczekiwań.

Narzędzia przeciwko Twojemu własnemu umysłowi

Pokój często myli się wspólnie

Indywidualnie i w grupach, profesjonale dzielą przewidywalne uprzedzenia: optymizm co do harmonogramów, nadmierne ważenie żywej historii przed nimi oraz dryf w stronę tego, co grupa już preferuje. Techniki dezbiasingu to tanie procedury, które kontrują te uprzedzenia, zanim zaczną Cię kosztować.

- Pre-mortem: wyobraź sobie, że jest później i decyzja się nie udała. Idąc wstecz, wypisz każdy powód, dla którego poszło źle. To ujawnia ryzyka, które entuzjazm ukrywa, i kontruje błąd planowania oraz myślenie stadne.

- Stawki bazowe i perspektywa zewnętrzna: zamiast rozumować tylko z perspektywy wewnątrz tego przypadku, zapytaj, jak w rzeczywistości poszło podobnym wysiłkom. Jeśli większość porównywalnych projektów przekroczyła harmonogram o 50%, Twój projekt prawdopodobnie też, niezależnie od tego, co mówi wewnętrzna narracja. Kontruje optymizm perspektywy wewnętrznej.

- Red-teaming: wyznacz kogoś, kto z pełnym zaangażowaniem argumentuje przeciwne stanowisko i atakuje plan. Kontruje błąd potwierdzenia i komfort zgody.

- Decydowanie z góry: ustal regułę i kryteria rezygnacji, zanim zostaniesz emocjonalnie zaangażowany i zanim urosną koszty utopione. „Jeśli do 3. miesiąca nie osiągniemy X, przerywamy”. Kontruje eskalację zaangażowania.

Każda technika to mały rytuał o nieproporcjonalnie dużym zysku, właśnie dlatego, że walczy z uprzedzeniem, którego nie da się odczuć z perspektywy wewnętrznej.

Odbiasuj decyzję w trakcie jej podejmowania

Twoja drużyna jest na etapie zatwierdzania 9-miesięcznej przebudowy platformy. W sali panuje jednogłośna zgoda i entuzjazm, a kierownictwo chce podjąć zobowiązanie dzisiaj.

Uruchom cały zestaw narzędzi

Jeden protokół, każda doniosła decyzja

Masz teraz w rękach kompletny zestaw. Protokół łączy jego elementy w powtarzalną kolejność, którą możesz zastosować przed każdą doniosłą, w dużej mierze nieodwracalną decyzją zawodową:

1. Sformułuj jawną, własną ocenę prawdopodobieństwa. Nie liczbę wyliczoną przez maszynę, lecz Twoją: w jakie prawdopodobieństwo wierz i dlaczego?

2. Oszacuj wartość oczekiwaną, a następnie sprawdź ryzyko ruiny. Zważ możliwe wyniki, ale zanim podejmiesz działanie, zapytaj, czy scenariusz przegrany jest do przeżycia i czy jest to jednorazowa stawka.

3. Skategoryzuj odwracalność. To drzwi jednokierunkowe czy dwukierunkowe? Dostosuj głębokość rozważań do odpowiedzi i staraj się przekształcać drzwi jednokierunkowe w dwukierunkowe.

4. Zminimalizuj błędy poznawcze. Przeprowadź co najmniej jedną analizę pre-mortem, analizę na podstawie stóp bazowych lub test czerwonej drużyny, aby zweryfikować własny entuzjazm.

5. Zaplanuj z wyprzedzeniem regułę decyzyjną oraz kryteria rezygnacji. Określ teraz, jakie dowody skłoniłyby Cię do zaprzestania działań lub zmiany kierunku, zanim koszty poniesione (sunk costs) zaczną Cię ograniczać.

Gdy system automatyczny dostarcza rekomendację lub prognozę, stanowi on wejście dla kroku 1 i kroku 2. Nadal jesteś odpowiedzialny za kroki 3–5 oraz za prawo do nadpisania (override) decyzji systemu.

Napisz swój protokół

Wybierz konkretną, istotną i w dużej mierze nieodwracalną decyzję, z którą mierzy się profesjonalista w Twojej branży: przyjęcie stanowiska, podpisanie wieloletniej umowy z dostawcą, wprowadzenie produktu na rynek, przyjęcie dużej pozycji finansowej. Załóż, że system automatyczny przekazał Ci rekomendację oraz prognozę dotyczącą tej decyzji.

Co zabierasz ze sobą

Umiejętności, które zostają z Tobą

Stworzyłeś zestaw narzędzi do podejmowania decyzji w warunkach niepewności:

- Wartość oczekiwana i drzewa decyzyjne, oraz dyscyplina do nadpisywania wartości oczekiwanej, gdy jedna z gałęzi przegranych niesie ryzyko bankructwa lub zakład ma charakter jednorazowy.

- Kalibracja: formułowanie jawnych prawdopodobieństw, ich ocenianie (wskaźnik Briera, im niższy, tym lepiej) oraz trenowanie pewności siebie tak, by oznaczała to, co mówi.

- Asymetryczne ryzyko i opcjonalność: ograniczanie strat, rozróżnianie drzwi jednokierunkowych od dwukierunkowych oraz przekształcanie decyzji nieodwracalnych w procesy etapowe.

- Debiasing: pre-mortemy, stopy bazowe, red-teaming oraz decydowanie z wyprzedzeniem.

- Protokół, który uruchamia wszystkie te mechanizmy przed podjęciem kluczowej decyzji.

Systemy automatyczne będą nieustannie poprawiać jakość rekomendacji i prognoz. Żadna z tych rzeczy nie eliminuje jednak potrzeby posiadania kogoś, kto dostarczy skalirowany osąd, uwzględni asymetryczne ryzyko i weźmie na siebie odpowiedzialność za nieodwracalną decyzję. Tą osobą jest profesjonalista. Teraz dysponujesz zestawem narzędzi, który czyni tę odpowiedzialność realną.