木構造、平均、そして破産

期待値：デフォルトであり、答えではない

期待値（EV） は、各結果をその確率で重み付けして合計します。EV = （確率 × 報酬）の総和。意思決定ツリーは枝を描き、各ノードでEVを計算し、ツリーを根本の選択まで逆算（フォールバック）できるようにします。

具体例。ある取引に参加できます：70%の確率で100得、30%の確率で50失う。

- EV = 0.70 × 100 + 0.30 × (−50) = 70 − 15 = +55。正の値なので、この取引を繰り返せば長期的には利益になります。

EVが誤った基準となる場合

EVは多数の試行にわたる平均です。これは、賭けを繰り返すことができ、かつ一度の損失でゲームから脱落しないことを暗黙に前提としています。この前提が崩れる状況が2つあります。

- 破産リスク：敗北の枝があなたを終わらせる場合（破産、死亡、資格喪失、評判の毀損など）、平均値は無意味です。一度の悪い抽選で盤上から退場するため、長期的な報酬は回収できません。EVがどれほど良くても、失うことのできないものをリスクにさらさないでください。

- 非反復の賭け：一度きりの決定では、平均的な結果は実際に経験することのない結果かもしれません。+EVだが90%の確率で負ける賭けは、まさに一度だけ行う選択としては誤りである可能性があります。

だからこそ、小さなリスクを繰り返して生き残れるような賭けは期待値（EV）に基づいて行い、破産のリスクを伴う単一の賭けはまず生存を優先し、次に期待値を考慮する。自動システムは喜んで正の期待値を報告するが、損失の分岐が生存可能かどうかを問うのはあなたの役目である。

ツリーを折りたたむ

あるサブスクリプション企業が、リスクの高い機能を今すぐリリースするかどうかを検討している。成功すれば（60%の確率）リテンションが向上し、200万ドルの価値がある。失敗すれば（40%の確率）欠陥により払い戻しと顧客離脱が発生し、50万ドルのコストがかかる。ただし、複雑な点がある。創業者がランウェイ（資金の持続期間）を個人的に保証しているため、今四半期に50万ドルの損失が生じると、会社は破産に追い込まれる。第3の選択肢もある。まず4週間のベータテストを行い、15万ドルのコストをかけて、フルローンチ前に機能が機能するかどうかを明らかにすることである。

あなたの「90%」は本当に90%か？

採点できる確率

キャリブレーションされた予測者とは、述べた確率が現実と一致する人のことである。多くの予測に対して「90%の確信がある」と言った場合、その予測の約90%が実現するはずである。キャリブレーションとは、より頻繁に正しく当たることではなく、あなたの確信度がその言葉通りの意味を持つことである。

記録し、その後改善する

自分のキャリブレーションを知る唯一の方法は、明示的な確率を付けて予測を書き留め、その後結果と照らしてスコアを付けることである。ブライアースコアはこれを具体的にする：各予測について、実際に起きた事象に割り当てた確率を取り、結果を1（起きた）または0（起きなかった）としてコード化し、その二乗誤差を測定する。

- 0.90と予測し、事象が起きた（結果1）：誤差は（0.90 減 1）の二乗 = 0.01。小さい：良い。

- 予測値 0.90、事象は発生しなかった（結果 0）：誤差は (0.90 減 0) の二乗 = 0.81。大きい：自信を持って間違っていた。

多くの予測にわたってこれらを平均化する。Brierスコアが低いほど良い。 このスコアは、自信満々な誤りを最も厳しく罰する。これはまさに、プロにとって最も害になる習慣である。

規律とは：数値を明示し、記録し、検証し、調整すること。一貫してラインを上回っている場合、あなたは過信しており、推定幅を広げるべきである。一貫して下回っている場合、あなたは過小評価しており、より強くコミットできる。自動予測も同じ方法でスコアリングできる。これにより、いつ信頼し、いつ上書きすべきかを学ぶことができる。

予測者の評価

あるアナリストは、チームに繰り返し「これは90%の確率で期限内に完了する」と言っている。四半期を通じて、彼女は90%の確信度で40件のそのような予測を行った。そのうち26件が実現した。

片道ドアと両道ドア

すべてのミスが同じコストを負うわけではない

非対称リスクとは、 downside（損失）と upside（利益）が鏡像関係にない場合の決定を指します。downsideを制限しつつ upside を開いた状態にすることが、ゲームのすべてです。損失が上限付きで利益が無制限のポジションは、大半のケースで間違えていても、全体としては勝つ可能性があります。

オプション性とは、より多くの情報を知った後に行動する権利であり、義務ではありません。2セクション前に述べた4週間のベータ版はオプション性でした。不確実性が解消されるまで、大きな不可逆的なコミットメントをオープンに保つための、小さく既知のコストです。

可逆的なものは速く、不可逆的なものは遅く

決定を元に戻す難易度によって分類する、有用なフレームワークがあります：

- 両方向のドアは可逆的です。通り抜けて、中が気に入らなければ、低いコストで引き返せます。これらの決定は迅速に行い、委任すべきです。午後1時間で元に戻せる選択について数週間も熟考することは、それ自体が一種の無駄です。

- 一方通行のドアは不可逆的、または元に戻すコストが高いものです。これらは深い熟考、上位者による所有権、そして安全策に値します。

上記の四象限は、可逆性と利害関係を交差させています。自分がいる四角に合わせて、熟考の深さを調整してください。最も高価なプロフェッショナルな誤りは、一方通行のドアを両方向のドアのように扱い、不可逆的な決定を急いでしまうことから生じます。

最強の動きは、しばしば一方通行のドアを両方向のドアに変換することです：1つのサービスでパイロットを実施する、新旧両方のシステムにデュアルライトする、旧経路をフォールバックとして保持する、段階的にロールアウトする。これにより可逆性を取り戻し、誤った決定でも生存可能に保てます。

分類と変換

エンジニアリングディレクターは、今四半期に2つの選択肢に直面しています。選択肢1：プライマリデータベースを新しいエンジンへ移行する。これは数ヶ月に及ぶプロジェクトであり、すべてのサービスに影響を与え、本番環境での運用開始後は巻き戻しが困難です。選択肢2：新しい社内コードレビューツールを導入する。チームはこのツールが期待外れであれば、1週間以内に導入を中止できます。

自らの思考に対する対抗ツール

集団で誤りを共有する部屋

個人でも集団でも、専門家は予測可能なバイアスを共有しています。スケジュールに対する楽観視、目の前にある鮮やかな物語への過剰な重み付け、そしてグループがすでに支持している方向への傾斜です。デバイアシング（バイアス除去）テクニックは、これらのバイアスがコストをかける前にそれを打ち消すための安価な手順です。

- プレモーテム（事前の死因分析）: 時が経ち、その決定が失敗したと想像してください。そこから逆算して、失敗したすべての理由をリストアップします。これにより、熱意が隠蔽しているリスクが表面化し、計画の誤謬やグループシンク（集団思考）に対抗できます。

- ベースレイト（基礎比率）と外からの視点: このケースの内側からの推論だけでなく、類似の取り組みが実際にどうなったかを問いましょう。もし比較可能なプロジェクトの大多数がスケジュールを50%超過したのであれば、あなたのプロジェクトも、内側の物語が何を言おうと、おそらく同じでしょう。内側からの視点による楽観視に対抗します。

- レッドチーミング（敵対的視点の導入）: 誰かに反対の立場を真面目に主張し、計画を攻撃する役割を割り当てます。確認バイアス（確証バイアス）や、同意による安心感に対抗します。

- 事前の決定: 感情的にコミットする前に、そして沈没コストが積み重なる前に、ルールと中止基準（キル・クリテリア）を設定します。「3ヶ月時点でXに到達しなければ、中止する」。コミットメントのエスカレーション（決断の継続的エスカレーション）に対抗します。

各テクニックは小さな儀式ですが、内側から感じ取ることのできないバイアスと戦うため、その効果は非常に大きいです。

ライブ意思決定のバイアス除去

あなたのチームは、9ヶ月にわたるプラットフォーム再構築プロジェクトのゴーサインを出そうとしています。会議室は一致団結し、興奮状態にあり、経営陣は本日中にコミットメントを求めています。

ツールキット全体を実行する

1つのプロトコルで、すべての重大な意思決定に対応

これであなたは完全なツールキットを手にしました。プロトコルは、これらの要素を、重大でほぼ取り返しのつかない専門的な選択を行う前に実行できる、再現可能な順序に組み上げます：

1. 自分が所有する明示的な確率を提示する。 マシンの数字ではなく、あなたのものです：勝率はどれくらいだと信じ、なぜそうなのか？

2. 期待値を概算し、破産リスクを確認する。 結果に重み付けを行いますが、行動する前に、敗北の分岐が生存可能か、そしてこれが一度限りの賭けかどうかを問いましょう。

3. 可逆性を分類する。 片道ドアか、両道ドアか？ 答えに合わせて熟考の深さを調整し、片道ドアを両道ドアに変換しようと試みましょう。

4. バイアスを除去する。 自分自身の熱狂に対して、少なくとも1回のプレモートーム、ベースレートの検討、またはレッドチーム分析を実行してください。

5. 意思決定ルールと中止基準を事前にコミットする。 沈没コストに縛られる前に、今この時点で、どのような証拠が出れば中止や方向転換を行うかを決定しておくこと。

自動化されたシステムが推奨事項や予測を提供する場合、それはステップ1とステップ2にフィードバックされる。しかし、ステップ3から5、そしてオーバーライド（上書き）の権限は依然としてあなた自身にある。

あなたのプロトコルを作成する

あなたの専門分野のプロフェッショナルが直面する、具体的かつ重大で、ほぼ不可逆的な選択（例：役職の受諾、複数年契約ベンダーとの契約締結、製品のローンチ、大規模な金融ポジションの取得など）を選定してください。自動化されたシステムがその選択に関する推奨事項と予測をあなたに渡したと仮定してください。

あなたが持ち帰るもの

永遠にあなたのものとなるスキル

不確実性下での意思決定のためのツールキットを構築しました：

- 期待値と意思決定ツリー、そして破産のリスクがある損失の分岐がある場合、または賭けが一度しか行われない場合にEVを無視する規律。

- キャリブレーション（較正）：明示的な確率を述べ、それらをスコアリングする（Brierスコア、低いほど良い）、そしてあなたの自信がその意味通りのものになるよう訓練すること。

- 非対称リスクとオプション性： downside（損失）を上限設定し、片道ドアと両道ドアを見分け、不可逆的なものを段階的なものに変換すること。

- バイアス除去: 事前の死因分析（プレモーテム）、ベースレートの考慮、レッドチーミング、そして事前の意思決定。

- 重大な判断を下す前に、これらすべてを実行するプロトコル。

自動化されたシステムは、推奨事項や予測においてますます精度を高めていくでしょう。しかし、それらの進歩は、キャリブレーションされた判断を提供し、非対称的なリスクを重み付けし、不可逆的な決定の責任を引き受ける誰かの必要性を排除するものではありません。その誰かこそが、プロフェッショナルです。今、あなたは、その責任を現実的なものにするためのツールキットを手にしています。