Cây, Trung bình, và Sự Phá Sản

Kỳ vọng: Giá trị mặc định, không phải câu trả lời

Giá trị kỳ vọng (EV) gán trọng số cho từng kết quả theo xác suất của nó và cộng lại: EV = tổng của (xác suất nhân với phần thưởng). Một cây quyết định vẽ ra các nhánh để bạn có thể tính EV tại mỗi nút và gập cây ngược lại về lựa chọn ở gốc.

Ví dụ minh họa. Bạn có thể chấp nhận một thỏa thuận: 70% khả năng bạn được 100, 30% khả năng bạn mất 50.

- EV = 0,70 nhân 100 cộng 0,30 nhân (âm 50) = 70 trừ 15 = +55. Vì là số dương, nên qua nhiều lần lặp lại, thỏa thuận này có lợi.

Khi EV Là Tiêu Chí Sai Lầm

EV là giá trị trung bình qua nhiều lần thử. Nó ngầm giả định rằng bạn được phép lặp lại cuộc cá cược và rằng không có bất kỳ tổn thất đơn lẻ nào loại bạn khỏi cuộc chơi. Hai tình huống sau phá vỡ giả định đó.

- Rủi ro phá sản: nếu một nhánh thua khiến bạn bị loại (phá sản, tử vong, mất giấy phép, uy tín bị hủy hoại), thì giá trị trung bình trở nên vô nghĩa. Bạn sẽ không bao giờ thu được phần thưởng dài hạn vì chỉ một lần rút thăm xui xẻo là bạn đã bị loại khỏi cuộc chơi. Đừng bao giờ đánh cược những thứ bạn không thể chấp nhận mất, dù EV có tốt đến đâu.

- Các cuộc cá cược không lặp lại: đối với một quyết định chỉ diễn ra một lần, kết quả trung bình có thể là kết quả mà bạn sẽ không bao giờ thực sự trải qua. Một cuộc cá cược có EV dương nhưng 90% khả năng thua vẫn có thể là lựa chọn sai cho một quyết định bạn chỉ thực hiện đúng một lần.

Đây là lý do tại sao một cuộc xổ số gồm các cược nhỏ, lặp lại và có thể sống sót được chơi dựa trên giá trị kỳ vọng (EV), trong khi một cược đơn lẻ có nguy cơ phá sản lại được chơi dựa trên sự sống sót trước tiên, và EV sau đó. Một hệ thống tự động sẽ vui vẻ báo cáo một EV dương; nhiệm vụ của bạn là đặt câu hỏi xem nhánh thua có thể sống sót hay không.

Gấp lại Cây

Một công ty đăng ký đang cân nhắc việc vận chuyển một tính năng rủi ro ngay bây giờ. Nếu nó hoạt động (xác suất 60%), tỷ lệ giữ chân sẽ tăng lên, đáng giá 2 triệu đô la. Nếu nó thất bại (xác suất 40%), một khiếm khuyết sẽ kích hoạt hoàn tiền và sự rời bỏ, gây thiệt hại 500 nghìn đô la. Có một điểm khó xử: người sáng lập đã cá nhân bảo lãnh cho quỹ dự phòng, vì vậy một khoản lỗ 500 nghìn đô la trong quý này sẽ buộc công ty phải phá sản. Một lựa chọn thứ ba tồn tại: chạy một beta 4 tuần trước, chi phí 150 nghìn đô la, điều này sẽ tiết lộ xem tính năng có hoạt động hay không trước bất kỳ lần ra mắt đầy đủ nào.

Các mức 90% của bạn có thực sự là 90% không?

Một xác suất có thể chấm điểm được

Một người dự báo được hiệu chuẩn là người mà các xác suất họ nêu ra khớp với thực tế. Khi bạn nói "tự tin 90%" qua nhiều dự đoán, gần 90% trong số đó nên thành hiện thực. Hiệu chuẩn không phải là việc đúng nhiều hơn; nó là việc độ tự tin của bạn mang đúng ý nghĩa như đã nói.

Theo dõi, rồi cải thiện

Cách duy nhất để biết hiệu chuẩn của bạn là viết các dự đoán xuống với một xác suất rõ ràng, sau đó chấm điểm chúng dựa trên kết quả. Điểm Brier cụ thể hóa điều này: đối với mỗi dự báo, lấy xác suất bạn đã gán cho điều thực sự xảy ra, và đo sai số bình phương so với kết quả được mã hóa là 1 (xảy ra) hoặc 0 (không xảy ra).

- Dự đoán 0,90, sự kiện xảy ra (kết quả 1): sai số là (0,90 trừ 1) bình phương = 0,01. Nhỏ: tốt.

- Dự đoán 0,90, sự kiện không xảy ra (kết quả 0): sai số là (0,90 trừ 0) bình phương = 0,81. Lớn: bạn đã sai một cách tự tin.

Lấy trung bình các giá trị này trên nhiều dự báo. Brier thấp hơn là tốt hơn. Điểm số trừng phạt những sai lầm tự tin nhất, đúng là thói quen gây hại nhất cho các chuyên gia.

Kỷ luật: nêu một con số, ghi lại, kiểm tra, điều chỉnh. Hệ thống vượt quá mức thực tế có nghĩa là bạn quá tự tin và nên mở rộng ước tính của mình; hệ thống dưới mức thực tế có nghĩa là bạn thiếu tự tin và có thể cam kết mạnh mẽ hơn. Các dự báo tự động cũng có thể được chấm điểm theo cách tương tự, đây là cách bạn học được khi nào nên tin tưởng chúng và khi nào nên can thiệp.

Chấm điểm Người Dự Báo

Một nhà phân tích liên tục nói với nhóm rằng 'Tôi chắc chắn 90% điều này sẽ hoàn thành đúng hạn.' Trong một quý, cô ấy đã đưa ra 40 dự báo như vậy ở mức độ tin cậy 90% đã nêu. 26 trong số đó đã thành hiện thực.

Cửa một chiều và Cửa hai chiều

Không phải mọi sai lầm đều có chi phí như nhau

Một quyết định có rủi ro bất đối xứng khi mặt tiêu cực và mặt tích cực không phải là hình ảnh phản chiếu của nhau. Việc giới hạn mặt tiêu cực trong khi giữ cho mặt tích cực mở rộng là toàn bộ trò chơi. Một vị thế có tổn thất bị giới hạn và lợi nhuận không bị giới hạn có thể sai phần lớn thời gian nhưng vẫn thắng chung cuộc.

Tính tùy chọn (Optionality) là quyền, mà không kèm nghĩa vụ, để hành động sau khi bạn đã có thêm thông tin. Phiên bản beta kéo dài 4 tuần được đề cập ở hai phần trước chính là tính tùy chọn: một chi phí nhỏ, đã biết trước, giúp giữ nguyên khả năng thực hiện cam kết lớn và không thể đảo ngược cho đến khi sự không chắc chắn được giải quyết.

Việc có thể đảo ngược thì làm nhanh, việc không thể đảo ngược thì làm chậm

Một khung tư duy hữu ích phân loại các quyết định dựa trên mức độ khó khăn khi muốn đảo ngược chúng:

- Cánh cửa hai chiều là những quyết định có thể đảo ngược. Bạn bước qua, và nếu không hài lòng với những gì tìm thấy, có thể quay lại với chi phí thấp. Hãy ra quyết định nhanh và giao quyền cho người khác cho những lựa chọn này. Suy nghĩ hàng tuần về một lựa chọn mà bạn có thể đảo ngược trong một buổi chiều chính là một dạng lãng phí.

- Cánh cửa một chiều là những quyết định không thể đảo ngược hoặc tốn kém để hoàn tác. Những quyết định này xứng đáng được suy xét kỹ lưỡng, do cấp cao chịu trách nhiệm chính và cần các biện pháp bảo vệ.

Bảng phân loại phía trên kết hợp tính khả thi đảo ngược với mức độ rủi ro. Hãy điều chỉnh độ sâu của quá trình suy xét phù hợp với ô bạn đang ở. Những sai lầm chuyên nghiệp tốn kém nhất thường đến từ việc đối xử với cánh cửa một chiều như cánh cửa hai chiều, tức là vội vàng đưa ra một quyết định không thể đảo ngược.

Nước đi mạnh mẽ nhất thường là chuyển cánh cửa một chiều thành cánh cửa hai chiều: thử nghiệm trên một dịch vụ, ghi dữ liệu song song vào cả hệ thống cũ và mới, giữ lại con đường cũ làm phương án dự phòng, triển khai theo từng giai đoạn. Bạn mua lại tính khả thi đảo ngược để đảm bảo rằng một quyết định sai vẫn có thể kiểm soát được.

Phân loại và Chuyển đổi

Một giám đốc kỹ thuật phải đối mặt với hai lựa chọn trong quý này. Lựa chọn 1: di chuyển cơ sở dữ liệu chính sang một engine mới, một dự án kéo dài nhiều tháng, ảnh hưởng đến mọi dịch vụ và rất khó để đảo ngược sau khi đã triển khai. Lựa chọn 2: áp dụng một công cụ đánh giá mã nguồn (code-review) nội bộ mới mà nhóm có thể loại bỏ trong vòng một tuần nếu nó không đáp ứng kỳ vọng.

Công cụ chống lại chính tâm trí của bạn

Phòng họp thường sai cùng một lúc

Cả cá nhân lẫn nhóm, các chuyên gia đều chia sẻ những thiên kiến có thể dự đoán được: lạc quan về thời hạn, đánh giá quá cao câu chuyện sống động ngay trước mắt, và xu hướng trôi dạt về phía điều mà nhóm đã ủng hộ. Các kỹ thuật giảm thiên kiến là những quy trình rẻ tiền để đối phó với những điều này trước khi chúng gây thiệt hại cho bạn.

- Pre-mortem (Tưởng tượng thất bại): hãy tưởng tượng rằng thời điểm hiện tại là sau này và quyết định đã thất bại. Làm ngược lại, hãy liệt kê mọi lý do khiến nó đi sai hướng. Điều này làm nổi bật những rủi ro mà sự nhiệt tình che giấu và chống lại sai lệch lập kế hoạch cũng như tư duy nhóm.

- Tỷ lệ cơ bản và góc nhìn bên ngoài: thay vì chỉ lập luận từ bên trong của trường hợp này, hãy hỏi xem các nỗ lực tương tự thực sự đã diễn ra như thế nào. Nếu hầu hết các dự án tương tự đều vượt quá 50% thời hạn, dự án của bạn có khả năng cũng sẽ như vậy, bất kể câu chuyện bên trong nói gì. Chống lại sự lạc quan từ góc nhìn bên trong.

- Đội đỏ (Red-teaming): chỉ định một người để lập luận nghiêm túc cho trường hợp ngược lại và tấn công vào kế hoạch. Chống lại thiên kiến xác nhận và sự thoải mái của sự đồng thuận.

- Quyết định trước: đặt ra quy tắc và tiêu chí dừng lại trước khi bạn cam kết về mặt cảm xúc và trước khi các chi phí chìm (sunk costs) chất đống. 'Nếu đến tháng thứ 3 chúng ta chưa đạt được X, chúng ta sẽ dừng lại.' Chống lại sự leo thang cam kết.

Mỗi kỹ thuật là một nghi thức nhỏ với lợi ích vượt trội, chính xác là vì nó chống lại một thiên kiến mà bạn không thể cảm nhận được từ bên trong.

Khử thiên kiến cho một quyết định trực tiếp

Đội ngũ của bạn sắp phê duyệt dự án tái cấu trúc nền tảng kéo dài 9 tháng. Cả phòng họp đều nhất trí và hào hứng, và ban lãnh đạo muốn cam kết ngay hôm nay.

Chạy Toàn bộ Bộ công cụ

Một Giao thức, Mọi Quyết định Quan trọng

Bạn giờ đã sở hữu toàn bộ bộ công cụ. Một giao thức xâu chuỗi các thành phần thành một trình tự lặp lại được mà bạn có thể thực hiện trước bất kỳ lựa chọn nghề nghiệp quan trọng, phần lớn không thể đảo ngược nào:

1. Trình bày một xác suất rõ ràng mà bạn tự chịu trách nhiệm. Không phải con số của máy móc, mà là của bạn: bạn tin rằng xác suất là bao nhiêu, và tại sao?

2. Phác thảo giá trị kỳ vọng, sau đó kiểm tra rủi ro phá sản. Gán trọng số cho các kết quả, nhưng trước khi hành động, hãy hỏi xem nhánh thua có thể sống sót hay không và đây có phải là một canh cược một lần duy nhất không.

3. Phân loại tính khả đảo ngược. Cửa một chiều hay cửa hai chiều? Hãy điều chỉnh mức độ suy ngẫm của bạn phù hợp với câu trả lời, và cố gắng chuyển các cửa một chiều thành cửa hai chiều.

4. Loại bỏ thiên kiến. Thực hiện ít nhất một vòng tiền tử (pre-mortem), tỷ lệ cơ sở (base-rate), hoặc đội phản biện (red-team) đối với sự nhiệt tình của chính bạn.

5. Cam kết trước một quy tắc ra quyết định và tiêu chí dừng. Hãy quyết định ngay bây giờ bằng chứng nào sẽ khiến bạn dừng lại hoặc đảo ngược, trước khi các chi phí chìm (sunk costs) cuốn bạn vào.

Khi một hệ thống tự động cung cấp một khuyến nghị hoặc dự báo, nó sẽ cung cấp dữ liệu cho bước 1 và bước 2. Bạn vẫn là người chịu trách nhiệm cho các bước 3 đến 5, và bạn là người nắm quyền phủ quyết (override).

Viết Quy Trình Của Bạn

Hãy chọn một quyết định cụ thể, có hệ quả lớn và phần lớn là không thể đảo ngược mà một chuyên gia trong lĩnh vực của bạn phải đối mặt: chấp nhận một vị trí, ký hợp đồng nhà cung cấp nhiều năm, ra mắt một sản phẩm, hoặc thực hiện một vị thế tài chính lớn. Giả sử một hệ thống tự động đã đưa cho bạn một khuyến nghị và một dự báo về điều đó.

Những gì bạn mang theo

Những kỹ năng thuộc về bạn

Bạn đã xây dựng một bộ công cụ để ra quyết định trong điều kiện bất định:

- Giá trị kỳ vọng và cây quyết định, cùng với kỷ luật để phủ quyết giá trị kỳ vọng khi một nhánh thua có nguy cơ phá sản hoặc cuộc cá cược chỉ diễn ra một lần.

- Hiệu chuẩn: phát biểu các xác suất rõ ràng, chấm điểm chúng (Brier, thấp hơn là tốt hơn), và rèn luyện sự tự tin của bạn để nó mang đúng ý nghĩa như đã nói.

- Rủi ro bất đối xứng và tính tùy chọn: giới hạn rủi ro giảm, phân biệt cửa một chiều và cửa hai chiều, và chuyển đổi điều không thể đảo ngược thành các giai đoạn.

- Khử thiên kiến: các buổi họp giả định sự thất bại (pre-mortems), tỷ lệ nền (base rates), kiểm tra đối kháng (red-teaming), và việc đưa ra quyết định trước.

- Một quy trình thực hiện tất cả các bước trên trước khi đưa ra một quyết định quan trọng.

Các hệ thống tự động sẽ ngày càng trở nên tốt hơn trong việc đưa ra các khuyến nghị và dự báo. Tuy nhiên, điều đó không loại bỏ nhu cầu về một người có khả năng cung cấp sự phán đoán được hiệu chỉnh, cân nhắc rủi ro bất đối xứng và chịu trách nhiệm cho quyết định không thể đảo ngược. Người đó chính là chuyên gia. Giờ đây, bạn đã có bộ công cụ giúp việc chịu trách nhiệm đó trở nên thực chất.