Залишкове перевага професіонала
Робота, яку неможливо автоматизувати
Автоматизовані системи тепер генерують рекомендації та прогнози в усіх сферах економіки. Вони встановлюють ціни на страхування, позначають транзакції, ранжують кандидатів, прогнозують попит і пропонують наступну дію майже на кожному екрані, з яким працює професіонал.
Чого вони не роблять — це не беруть на себе відповідальність за рішення. Рекомендація — це число; рішення — це зобов'язання в умовах невизначеності, прийняте особою, яка відповідає за його наслідки. Саме в цьому зобов'язанні і полягає ваша перевага.
Цей урок тренує п'ять навичок, які залишаються вашими, незалежно від того, наскільки досконалими стануть машини:
1. Математичне сподівання та дерева рішень, а також розуміння того, коли математичне сподівання є невірним критерієм.
2. Калібрування та прогнозування: створення явних оцінок ймовірності, їх відстеження та вдосконалення.
3. Асиметричний ризик та опціональність: обмеження нижнього рівня втрат, розрізнення між односторонніми та двосторонніми дверима.
4. Прибирання когнітивних спотворень: пре-мортеми, базові частоти, червона команда, заздалегідь прийняті рішення.
5. Протокол прийняття рішень, який можна застосувати перед важливим, переважно незворотним професійним вибором.
Професіонал надає каліброване судження, оцінює асиметричний ризик та бере на себе відповідальність за незворотні рішення. Прогноз інформує цю роботу. Він не замінює її.
Рішення, за яке ви відповідаєте
Перш ніж ми створимо інструментарій, визначте проблему у вашій власній роботі.
Дерева, середні значення та банкрутство
Очікувана вартість: це за замовчуванням, а не відповідь
Очікувана вартість (ОВ) вагує кожний результат відповідно до його ймовірності та сумує їх: ОВ = сума (ймовірність помножена на виграш). Дерево рішень малює гілки, щоб ви могли обчислити ОВ у кожному вузлі та «згорнути» дерево назад до вибору в корені.
Приклад із розрахунком. Ви можете прийняти угоду: 70% ймовірності, що ви виграєте 100, і 30% ймовірності, що ви втратите 50.
- ОВ = 0,70 помножене на 100 плюс 0,30 помножене на (мінус 50) = 70 мінус 15 = +55. Це додатне значення, тому при багаторазових повтореннях ця угода приносить прибуток.
Коли ОВ є неправильним критерієм
ОВ — це середнє значення за багатьох випробувань. Воно мовчки припускає, що ви маєте можливість повторювати ставку і що жодна окрема втрата не виводить вас із гри. Дві ситуації порушують це припущення.
- Ризик банкрутства: якщо гілка програшу припиняє вашу участь (банкрутство, смерть, втрата ліцензії, зруйнована репутація), середнє значення є безглуздим. Ви ніколи не отримаєте довгостроковий виграш, оскільки одна невдалий результат виводить вас із гри. Ніколи не ризикуйте тим, що ви не можете дозволити собі втратити, наскільки б хорошою не була ОВ.
- Неповторювані ставки: для одноразового рішення середній результат може бути тим самим результатом, якого ви ніколи фактично не досвідчите. Ставка, яка є +ОВ, але має 90% ймовірності програшу, може все одно бути помилковою для вибору, який ви робите рівно один раз.
Саме тому лотерею з невеликими, повторюваними та переживаними ставками грають на основі EV, тоді як єдину ставку, яка ризикує банкрутством, грають спочатку з огляду на виживання, а вже потім на EV. Автоматизована система з радістю доповість про позитивний EV; ваша ж задача — запитати, чи є гілка програшу переживаною.
Згортавання дерева
Підписна компанія розглядає можливість негайного запуску ризикованої функції. Якщо вона спрацює (ймовірність 60%), утримання зросте, що оцінюється у 2 мільйони доларів. Якщо вона не спрацює (ймовірність 40%), дефект спричинить повернення коштів та відтік клієнтів, що коштуватиме 500 тисяч доларів. Є нюанс: засновник особисто гарантував фінансовий запас ходу, тому втрата в 500 тисяч доларів у цьому кварталі призведе до банкрутства. Існує третій варіант: спочатку провести 4-тижневий бета-тест, що коштуватиме 150 тисяч доларів, який виявить, чи працює функція, до повного запуску.
Чи є ваші 90% справжні 90%?
Ймовірність, яку можна оцінити
Калібрований прогнозист — це той, чиї зазначені ймовірності відповідають реальності. Якщо ви багато разів кажете «90% впевненості», то приблизно 90% цих прогнозів мають збутися. Калібрування — це не про те, щоб бути правим частіше; це про те, щоб ваша впевненість означала саме те, що вона заявляє.
Відстежуйте, а потім покращуйте
Єдиний спосіб дізнатися про ваше калібрування — це записати прогнози з явною ймовірністю, а потім оцінити їх за результатами. Оцінка Брієра робить це конкретним: для кожного прогнозу візьміть ймовірність, яку ви призначили тому, що насправді сталося, і виміряйте квадратичну помилку відносно результату, закодованого як 1 (сталося) або 0 (не сталося).
- Прогноз 0,90, подія відбулася (результат 1): помилка дорівнює (0,90 мінус 1) у квадраті = 0,01. Мала: добре.
- Прогноз 0,90, подія не відбувається (результат 0): помилка дорівнює (0,90 мінус 0) у квадраті = 0,81. Це велика помилка: ви були впевнено неправі.
Обчисліть середнє значення для багатьох прогнозів. Чим нижчий бал Брієра, тим краще. Цей показник найсуворіше карає за впевнені помилки, що є саме тією звичкою, яка найбільше шкодить професіоналам.
Дисципліна: назвіть число, запишіть його, перевірте та коригуйте. Систематичне перевищення фактичного результату означає, що ви надмірно впевнені і маєте розширювати свої оцінки; систематичне заниження означає, що ви недостатньо впевнені і можете бути більш рішучими. Автоматизовані прогнози можна оцінювати таким самим способом, і саме так ви зрозумієте, коли їм можна довіряти, а коли їх слід ігнорувати.
Оцініть прогнозиста
Аналітик постійно каже команді: «Я на 90% впевнений, що це буде виконано вчасно». За квартал вона зробила 40 таких прогнозів із зазначеною впевненістю 90%. 26 з них збулися.
Однобічні та двосторонні двері
Не всі помилки коштують однаково
Рішення має асиметричний ризик, коли негативні та позитивні наслідки не є дзеркальними відображеннями одне одного. Обмеження негативних наслідків при збереженні можливості отримати вигоду — це вся гра. Позиція з обмеженими втратами та необмеженими виграшами може бути хибною більшість часу, але все одно виграє загалом.
Опціональність — це право, без обов’язку, діяти пізніше, коли ви вже знаєте більше. Чотиритижневий бета-період, згаданий у двох розділах вище, був опціональністю: невелика, відома ціна, яка зберігає велике незворотне зобов’язання відкритим, доки невизначеність не зникне.
Зворотні — швидко, незворотні — повільно
Корисна рамка розділяє рішення за тим, наскільки складно їх скасувати:
- Двері з двох сторін є зворотними. Пройдіть крізь них, і якщо вам не сподобається те, що ви знайдете, ви можете повернутися назад за невелику ціну. Приймайте такі рішення швидко та делегуйте їх. Тривалий роздум над вибором, який можна змінити за один день, сам по собі є видом марно витраченого часу.
- Двері з одного боку є незворотними або дорогими для скасування. Цим рішенням варто приділяти глибоке обмірковування, відповідальність старших менеджерів та захисні заходи.
Четирьохкутник вище поєднує зворотність із ставками. Дотримуйтесь глибини обміркувань, що відповідає вашому квадрату. Найдорожчі професійні помилки виникають, коли двері з одного боку сприймають як двері з двох сторін, поспішаючи з незворотним рішенням.
Найсильніший хід — це часто перетворення дверей з одного боку на двері з двох сторін: пілотний запуск на одному сервісі, подвійне записування в старі та нові системи, збереження старого шляху як резервного, поступове впровадження. Ви відкуповуєте зворотність, щоб хибне рішення залишалося життєздатним.
Класифікуйте та перетворюйте
Директор з інженерних питань стикається з двома варіантами цього кварталу. Варіант 1: мігрувати основну базу даних на новий рушій — це проєкт на кілька місяців, який торкнеться кожного сервісу і буде болісним у відкаті після виведення в продакшн. Варіант 2: впровадити новий внутрішній інструмент рецензування коду, який команда може відкинути протягом тижня, якщо він не виправдає очікувань.
Інструменти проти вашого власного розуму
Комната часто помиляється разом
І окремо, і в групах професіонали демонструють передбачувані когнітивні спотворення: оптимізм щодо строків, надмірна вага яскравої історії, що стоїть перед ними, та дрейф до того, що група вже схильна підтримувати. Техніки дебіайсингу (усунення когнітивних спотворень) — це нескладні процедури, які протидіють цим спотворенням, перш ніж вони завдадуть шкоди.
- Премортем: уявіть, що зараз пізніше, і рішення провалилося. Рухаючись назад, перелічіть усі причини, чому воно не спрацювало. Це виявляє ризики, які приховує ентузіазм, і протидіє помилці планування та груповому мисленню.
- Базові показники та зовнішній погляд: замість того, щоб міркувати лише з точки зору цього конкретного випадку, запитайте, як насправді склалися події в подібних проєктах. Якщо більшість аналогічних проєктів перевищили графік на 50%, ваш, імовірно, теж, незалежно від того, що каже внутрішня логіка. Це протидіє оптимізму внутрішнього погляду.
- Червона команда (Red-teaming): призначте когось, хто серйозно аргументуватиме протилежну позицію та атакуватиме план. Це протидіє когнітивному спотворенню підтвердження та комфорту, який дає згода.
- Попереднє прийняття рішень: встановіть правила та критерії припинення роботи до того, як ви емоційно залучитеся та до того, як накопичаться «неповернені витрати» (sunk costs). «Якщо до кінця 3-го місяця ми не досягнемо X, ми зупиняємось». Це протидіє ескалації зобов’язань.
Кожна техніка — це невеликий ритуал із непропорційно великим ефектом, саме тому, що він протидіє когнітивному спотворенню, яке ви не можете відчути зсередини.
Демізування живого рішення
Ваша команда збирається затвердити 9-місячну перебудову платформи. У залі єдиність і хвилювання, а керівництво хоче прийняти зобов’язання сьогодні.
Запустіть увесь інструментарій
Один протокол для кожного принципового рішення
Тепер у вас є повний набір інструментів. Протокол з’єднує ці елементи в повторюваний порядок дій, який можна застосувати перед будь-яким принциповим, переважно незворотним професійним рішенням:
1. Сформулюйте явну ймовірність, за яку ви відповідаєте. Не цифру машини, а вашу: які, на вашу думку, шанси, і чому?
2. Оцініть очікувану вартість, а потім перевірте ризик банкрутства. Зважте результати, але перед дією запитайте себе, чи є гілка програшу виживальною та чи є ця ставка одноразовою.
3. Класифікуйте зворотність. Двері в один бік чи в два боки? Доза ваших роздумів має відповідати відповіді, і намагайтеся перетворити двері в один бік на двері в два боки.
4. Приберіть когнітивні упередження. Проведіть принаймні один аналіз «премортему», перевірку базових частот або «червону команду» проти власного ентузіазму.
5. Заздалегідь зафіксуйте правило прийняття рішення та критерії зупинки. Визначте зараз, які докази змусили б вас зупинитися або змінити рішення, до того, як витрати, які вже понесені, захоплять вас.
Якщо автоматизована система надає рекомендацію або прогноз, вона живить кроки 1 і 2. Ви все ще відповідаєте за кроки 3–5 та за право на втручання (override).
Напишіть ваш протокол
Оберіть конкретний, важливий, переважно незворотний вибір, з яким стикається професіонал у вашій сфері: прийняття посади, підписання багаторічного договору з постачальником, запуск продукту, відкриття великої фінансової позиції. Припустіть, що автоматизована система передала вам рекомендацію та прогноз щодо цього.
Що ви забираєте з собою
Навички, які залишаються вашими
Ви створили набір інструментів для прийняття рішень в умовах невизначеності:
- Очікуване значення та дерева рішень, а також дисципліна, яка дозволяє ігнорувати очікуване значення, якщо гілка програшу несе ризик банкрутства або ставка робиться лише один раз.
- Калібрування: формулювання явних ймовірностей, їх оцінювання (показник Брієра, чим нижче, тим краще) та тренування вашої впевненості, щоб вона відповідала реальності.
- Асиметричний ризик та опціональність: обмеження нижнього ризику, розрізнення «дверей у один бік» та «дверей у два боки», а також перетворення незворотних рішень на поетапні.
- Зниження упередженості: премортеми, базові частоти, червоні команди та заздалегідь прийняті рішення.
- Протокол, який запускає всі ці процедури перед прийняттям важливого рішення.
Автоматизовані системи продовжуватиме покращувати свої рекомендації та прогнози. Жоден із цих факторів не знімає необхідності в тому, щоб хтось надавав каліброване судження, оцінював асиметричні ризики та брав на себе відповідальність за незворотне рішення. Ця людина — професіонал. Тепер у вас є набір інструментів, який робить цю відповідальність реальною.