Деревья, средние значения и банкротство

Математическое ожидание: это дефолт, а не ответ

Математическое ожидание (МО) взвешивает каждый исход по его вероятности и суммирует результаты: МО = сумма (вероятность умножить на выигрыш). Дерево решений рисует ветви, чтобы вы могли вычислить МО в каждом узле и «свернуть» дерево обратно к выбору в корне.

Пример с решением. Вам предлагают сделку: с вероятностью 70% вы выиграете 100, с вероятностью 30% проиграете 50.

- МО = 0,70 умножить на 100 плюс 0,30 умножить на (минус 50) = 70 минус 15 = +55. Значение положительное, поэтому при большом количестве повторений эта сделка приносит прибыль.

Когда МО — неверный критерий

МО — это среднее значение по множеству испытаний. Оно молча предполагает, что вы можете повторять ставку и что ни одно единичное поражение не выведет вас из игры. Два сценария нарушают это допущение.

- Риск разорения: если проигрышная ветвь означает для вас конец (банкротство, смерть, утрата лицензии, разрушенная репутация), среднее значение бессмысленно. Вы никогда не получите долгосрочный выигрыш, потому что одна неудачная случайность выводит вас из игры. Никогда не рискуйте тем, что вы не можете позволить себе потерять, каким бы ни было хорошее МО.

- Однократные ставки: для решения, принимаемого один раз, средний исход может быть результатом, который вы никогда фактически не испытаете. Ставка с положительным МО, но с вероятностью проигрыша 90%, может оказаться ошибочной для выбора, который вы делаете ровно один раз.

Именно поэтому лотерея из множества небольших, повторяющихся и выживаемых ставок играется на основе математического ожидания (EV), тогда как единичная ставка, несущая риск разорения, играется с приоритетом на выживаемость, а уже затем — на EV. Автоматизированная система с удовольствием сообщит о положительном EV; ваша задача — спросить, является ли проигрышная ветвь выживаемой.

Свернуть дерево

Компания по подписке рассматривает возможность немедленного запуска рискованной функции. Если она сработает (вероятность 60%), удержание возрастет, что оценивается в 2 миллиона долларов. Если она провалится (вероятность 40%), дефект вызовет возвраты средств и отток клиентов, что обойдется в 500 тысяч долларов. Есть нюанс: основатель лично гарантировал финансовую устойчивость компании, поэтому убыток в 500 тысяч долларов в этом квартале приведет к несостоятельности. Существует и третий вариант: сначала провести 4-недельный бета-тест, который обойдется в 150 тысяч долларов и покажет, работает ли функция, до полного запуска.

Ваши 90% — это действительно 90%?

Вероятность, которую можно оценить

Калиброванный прогнозист — это тот, чьи заявленные вероятности соответствуют реальности. Если вы во многих прогнозах говорите «уверен на 90%», то примерно 90% из них должны сбываться. Калибровка — это не о том, чтобы чаще быть правым; это о том, чтобы ваша уверенность означала ровно то, что вы заявляете.

Сначала отслеживайте, затем улучшайте

Единственный способ узнать о своей калибровке — записывать прогнозы с явной вероятностью, а затем оценивать их по фактическим результатам. Показатель Бриера делает это наглядным: для каждого прогноза берите вероятность, которую вы присвоили реально произошедшему событию, и измеряйте квадратичную ошибку относительно исхода, закодированного как 1 (случилось) или 0 (не случилось).

- Прогноз 0,90, событие произошло (исход 1): ошибка равна (0,90 минус 1) в квадрате = 0,01. Мала: хорошо.

- Прогноз 0,90, событие не происходит (исход 0): ошибка равна (0,90 минус 0) в квадрате = 0,81. Это большое значение: вы ошиблись с высокой уверенностью.

Возьмите среднее значение по множеству прогнозов. Чем ниже показатель Бриера, тем лучше. Эта метрика наиболее строго наказывает за уверенные ошибки, что является именно той привычкой, которая наносит профессионам наибольший ущерб.

Дисциплина: назовите число, запишите его, проверьте, скорректируйте. Систематическое превышение фактического результата означает, что вы излишне уверены в себе и должны расширять свои оценки; систематическое занижение означает, что вы недооцениваете свои шансы и можете быть более решительны. Автоматические прогнозы можно оценивать тем же способом, и именно так вы учитесь, когда им можно доверять, а когда их следует переопределять.

Оцените прогнозиста

Аналитик неоднократно говорит команде: «Я на 90% уверен, что это будет сделано вовремя». За квартал она сделала 40 таких прогнозов с заявленной уверенностью 90%. 26 из них сбылись.

Односторонние и двусторонние двери

Не все ошибки стоят одинаково

Решение имеет асимметричный риск, когда downside (потери) и upside (выгоды) не являются зеркальным отражением друг друга. Ограничение downside при сохранении открытого upside — вот в чем вся суть. Позиция с ограниченным убытком и неограниченной прибылью может быть неверной в большинстве случаев, но всё равно оказаться прибыльной в целом.

Опционность — это право, но не обязанность, действовать позже, когда вы узнаете больше. Четырехнедельный бета-тест, описанный два раздела назад, был примером опционности: небольшая, известная стоимость, которая сохраняет возможность крупного необратимого решения до тех пор, пока неясность не разрешится.

Обратимое — быстро, необратимое — медленно

Полезная рамка разделяет решения по тому, насколько сложно их отменить:

- Дверь с двух сторон (двунаправленная) — обратимое решение. Пройдите через неё, и если вам не понравится то, что вы обнаружите, вы можете вернуться назад с небольшими затратами. Принимайте такие решения быстро и делегируйте их. Недельные размышления над выбором, который можно отменить за один день, сами по себе являются видом расточительности.

- Дверь с одной стороны (однонаправленная) — необратимое или дорогое в отмене решение. Им стоит уделить глубокое размышление, ответственность старших руководителей и меры предосторожности.

Квадрат выше пересекает обратимость со ставкой. Подберите глубину размышлений к тому квадрату, в котором вы находитесь. Самые дорогие профессиональные ошибки возникают, когда однонаправленную дверь принимают за двунаправленную, торопясь с необратимым решением.

Самый сильный ход — часто превратить однонаправленную дверь в двунаправленную: провести пилотный запуск на одном сервисе, использовать двойное написание в старые и новые системы, сохранить старый путь как запасной вариант, внедрять поэтапно. Вы восстанавливаете обратимость, чтобы ошибочное решение оставалось выживаемым.

Классифицируйте и преобразуйте

Директор по инженерным вопросам сталкивается с двумя вариантами в этом квартале. Вариант 1: миграция основной базы данных на новый движок — проект, занимающий несколько месяцев, затрагивающий все сервисы и крайне сложный в откате после запуска. Вариант 2: внедрение нового внутреннего инструмента ревью кода, от которого команда может отказаться в течение недели, если он не оправдает ожиданий.

Инструменты против собственного разума

Комната часто ошибается коллективно

Как индивидуально, так и в группах, профессионалы демонстрируют предсказуемые когнитивные искажения: оптимизм в отношении сроков, чрезмерное внимание к яркой истории, лежащей перед глазами, и склонность к тому, что группа уже поддерживает. Методы дебайасинга (снижения влияния искажений) — это недорогие процедуры, которые противодействуют этим искажениям до того, как они обернутся для вас убытками.

- Предварительный анализ провала (Pre-mortem): представьте, что сейчас время в будущем, и решение провалилось. Двигаясь от обратного, перечислите все причины, по которым оно не удалось. Это выявляет риски, которые скрывает энтузиазм, и противодействует ошибке планирования и группомыслию.

- Базовые вероятности и внешний взгляд: вместо того чтобы рассуждать только изнутри конкретной ситуации, спросите себя, как на самом деле складывались аналогичные проекты. Если большинство сопоставимых проектов превысили сроки на 50%, скорее всего, и ваш проект тоже, независимо от того, что говорит «внутренняя» логика. Противодействует оптимизму «внутреннего взгляда».

- Красные команды (Red-teaming): назначьте человека, который всерьез будет аргументировать противоположную позицию и атаковать план. Противодействует предвзятости подтверждения и комфорту, который дает согласие.

- Заранее установленное решение: определите правила и критерии прекращения до того, как вы эмоционально привяжетесь к проекту и до того, как накопятся невозвратные затраты. «Если к третьему месяцу мы не достигнем X, мы останавливаемся». Противодействует эскалации обязательств.

Каждая из этих техник — это небольшой ритуал с непропорционально большой выгодой, именно потому, что он борется с искажением, которое невозможно ощутить изнутри.

Снятие искажений с живого решения

Ваша команда вот-вот даст «зелёный свет» на перестройку платформы, которая займёт 9 месяцев. В комнате царит единодушие и воодушевление, а руководство хочет принять обязательства уже сегодня.

Запустите весь инструментарий

Один протокол для любого значимого решения

Теперь у вас есть полный набор инструментов. Протокол связывает эти элементы в повторяемый порядок, который можно применять перед любым значимым, в основном необратимым профессиональным выбором:

1. Сформулируйте явную вероятность, за которую вы несёте ответственность. Не число, выданное машиной, а ваше собственное: каковы, по-вашему, шансы, и почему?

2. Оцените ожидаемую ценность, затем проверьте на риск банкротства. Взвесьте исходы, но перед тем как действовать, спросите себя, выживаем ли вы в случае проигрыша и является ли это разовой ставкой.

3. Классифицируйте обратимость. Это «дверь в один конец» или «дверь в два конца»? Подберите глубину ваших размышлений в соответствии с ответом и постарайтесь превратить «двери в один конец» в «двери в два конца».

4. Устраните предвзятость. Проведите хотя бы один анализ «предварительного вскрытия» (pre-mortem), проверку по базовым частотам или «красной команды» (red-team) в отношении вашего собственного энтузиазма.

5. Заранее зафиксируйте правило принятия решения и критерии прекращения. Определите сейчас, какие доказательства заставят вас остановиться или изменить курс, прежде чем эффект вложенных затрат вас захватит.

Если автоматизированная система предоставляет рекомендацию или прогноз, она питает шаги 1 и 2. Шаги 3–5 и право на отмену решения остаются полностью в вашей зоне ответственности.

Составьте свой протокол

Выберите конкретное, значимое и в основном необратимое решение, с которым сталкивается профессионал в вашей области: принятие должности, подписание многолетнего договора с поставщиком, запуск продукта, принятие крупной финансовой позиции. Предположим, что автоматизированная система уже предоставила вам рекомендацию и прогноз по этому решению.

Что вы уносите с собой

Навыки, которые остаются вашими

Вы создали набор инструментов для принятия решений в условиях неопределенности:

- Ожидаемое значение и деревья решений, а также дисциплина, позволяющая игнорировать ожидаемое значение, если проигрышная ветвь несет риск банкротства или ставка делается лишь один раз.

- Калибровка: формулирование явных вероятностей, их оценка (по шкале Бриера, чем ниже, тем лучше) и тренировка вашей уверенности, чтобы она соответствовала реальности.

- Асимметричный риск и опционность: ограничение негативных последствий, различение «дверей в один конец» и «дверей в два конца», а также превращение необратимого в поэтапное.

- Снятие предвзятости: предварительный анализ причин неудач (pre-mortems), базовые вероятности, метод «красной команды» и принятие решений заранее.

- Протокол, который выполняет все перечисленные шаги перед принятием значимого решения.

Автоматизированные системы будут продолжать улучшать качество рекомендаций и прогнозов. Однако ни одно из этих улучшений не отменяет необходимости в том, чтобы кто-то обладал калиброванным суждением, учитывал асимметричные риски и брал на себя ответственность за необратимое решение. Этим кем-то является профессионал. Теперь у вас есть набор инструментов, который делает эту ответственность реальной.