English· Español· Deutsch· Nederlands· Français· 日本語· ქართული· 繁體中文· 简体中文· Português· Русский· العربية· हिन्दी· Italiano· 한국어· Polski· Svenska· Türkçe· Українська· Tiếng Việt· Bahasa Indonesia

un

konuk
1 / ?
derslere geri dön

Profesyonelin Kalan Avantajı

Otomatikleşerek Kaybolmayan İş

Otomatik sistemler artık tüm ekonomide öneriler ve tahminler üretiyor. Sigortaları fiyatlıyor, işlemleri işaretliyor, adayları sıralıyor, talebi öngörüyor ve bir profesyonelin dokunduğu neredeyse her ekranda bir sonraki aksiyonu öneriyor.

Yapmadıkları şey ise kararı sahiplenmek. Bir öneri bir sayıdır; bir karar ise, sonucundan sorumlu olan birinin belirsizlik altında yaptığı bir taahhüttür. Sizin avantajınız tam da bu taahhütte yatıyor.

Bu ders, makine ne kadar iyi olursa olsun size ait kalan becerileri eğitir:

1. Beklenen değer ve karar ağaçları, ve beklenen değerin yanlış ölçüt olduğu zamanları bilmek.

2. Kalibrasyon ve tahminleme: açık olasılık tahminleri yapmak, bunları izlemek, iyileştirmek.

3. Asimetrik risk ve opsiyonellik: aşağı yönlü riski sınırlamak, tek yönlü kapıları çift yönlü kapılardan ayırt etmek.

4. Önyargı giderme: ön otopsi (pre-mortem), baz oranlar, kırmızı takım (red-teaming), önceden karar verme.

5. Sonuçları büyük ölçüde geri alınamayan profesyonel bir seçimden önce uygulayabileceğiniz bir karar protokolü.

Profesyonel, kalibre edilmiş yargı sağlar, asimetrik riski tartar ve geri alınamayan kararların sorumluluğunu üstlenir. Bir tahmin bu çalışmayı bilgilendirir. Onun yerini almaz.

Sorumluluğunu Üstlendiğiniz Bir Karar

Araç setini oluşturmamızdan önce, sorunu kendi işinizde konumlandırın.

Gerçek belirsizlik altında verdiğiniz (veya alanınızdaki birinin verdiği) bir sonuç doğuran kararı tanımlayın: Sonucun garanti edilmediği ve yanlış çıkmasının bir maliyeti olan bir karar. Belirsizliği adlandırın ve bu kararı neden sadece bir formüle devretmenin zor olduğunu belirtin.

Ağaçlar, Ortalamalar ve İflâs

Beklenen Değer: Varsayılan, Cevap Değil

Beklenen değer (EV), her sonucu olasılığıyla ağırlıklandırır ve toplar: EV = (olasılık çarpı kazanç) toplamı. Bir karar ağacı, kökteki seçime geri katlayabilmek için her düğümde EV'yi hesaplayabileceğiniz dalları çizer.

Çözülmüş örnek. Bir anlaşmayı kabul edebilirsiniz: %70 olasılıkla 100 kazanırsınız, %30 olasılıkla 50 kaybedersiniz.

- EV = 0,70 çarpı 100 artı 0,30 çarpı (eksi 50) = 70 eksi 15 = +55. Pozitif olduğundan, bu anlaşma birçok tekrarda ödeme yapar.

EV Yanlış Kriter Olduğunda

EV, birçok deneme üzerinden bir ortalamadır. Bahislerin tekrarlanabileceğini ve tek bir kaybın sizi oyundan çıkarmayacağını sessizce varsayar. İki durum bu varsayımı bozar.

- İflas riski: Kaybeden bir dal sizi sonlandırıyorsa (iflas, ölüm, kaybedilen bir lisans, yok edilen bir itibar), ortalama anlamsızdır. Tek bir kötü çekiliş sizi tahtadan aldığı için uzun vadeli kazancı asla tahsil edemezsiniz. EV ne kadar iyi olursa olsun, kaybetmeyi göze alamayacağınız hiçbir şeyi riske atmayın.

- Tekrarlanmayan bahisler: Tek seferlik bir karar için, ortalama sonuç aslında asla deneyimlemeyeceğiniz bir sonuç olabilir. +EV olan ancak %90 olasılıkla kaybeden bir bahis, tam olarak bir kez yaptığınız bir seçim için hâlâ yanlış olabilir.

İşte bu yüzden küçük, tekrarlanan ve hayatta kalınabilir bahisler beklenen değer (EV) üzerinden oynanırken, iflas riski taşıyan tek bir bahis önce hayatta kalmaya, sonra EV'ye göre oynanır. Otomatik bir sistem memnuniyetle pozitif bir EV raporu verecektir; kaybetme dalının hayatta kalınabilir olup olmadığını sormak sizin işinizdir.

Ağacı Geri Katla

Bir abonelik şirketi, riskli bir özelliği şimdi göndermeyi tartıyor. İşe yararsa (%60 olasılık) tutundurma oranı artar ve bu 2 milyon dolarlık bir değere sahip olur. Başarısız olursa (%40 olasılık) bir kusur, iadeleri ve 500 bin dolarlık bir maliyete yol açan müşteri kaybını tetikler. Bir pürüz var: kurucu, sermaye ömrünü (runway) kişisel olarak garanti altına almış, bu nedenle bu çeyrekteki 500 bin dolarlık kayıp iflasa zorlar. Üçüncü bir seçenek mevcut: 150 bin dolarlık bir maliyetle önce 4 haftalık bir beta sürümü çalıştırılır; bu, tam lansman öncesinde özelliğin işe yarayıp yaramadığını ortaya çıkarır.

(1) Şimdi göndermenin beklenen değerini (EV) hesaplayın. Aritmetik işlemleri gösterin. (2) İflas pürüzüne atıfta bulunarak, neden yalnızca EV'nin burada yanlış ölçüt olabileceğini açıklayın. (3) Karar ağacı terimleriyle, 4 haftalık beta sürümünün ne satın aldığını söyleyin.

%90'larınız Gerçekten %90 mı?

Puanlanabilecek Bir Olasılık

Kalibre edilmiş bir tahminci, belirttiği olasılıkların gerçeği yansıttığı kişidir. Birçok tahminde '%90 güveniyorum' dediğinizde, bunların yaklaşık %90'ı gerçekleşmelidir. Kalibrasyon daha sık haklı çıkmakla ilgili değildir; güveninizin ne söylediğini gerçekten ifade etmesiyle ilgilidir.

Takip Et, Sonra İyileştir

Kalibrasyonunuzu bilmenin tek yolu, tahminlerinizi açık bir olasılıkla yazıp sonuçlara göre puanlamaktır. Brier skoru bunu somutlaştırır: her tahmin için, gerçekleşen olaya atadığınız olasılığı alın ve sonucun 1 (gerçekleşti) veya 0 (gerçekleşmedi) olarak kodlandığı duruma göre karesel hatayı ölçün.

- 0.90 tahmin edin, olay gerçekleşsin (sonuç 1): hata (0.90 eksi 1) karesi = 0.01. Küçük: iyi.

- 0,90 tahmin ediliyor, olay gerçekleşmiyor (sonuç 0): hata (0,90 eksi 0) karesi = 0,81. Büyük: Kendinden emin bir şekilde yanıldınız.

Bunları birçok tahmin üzerinden ortalayın. Düşük Brier skoru daha iyidir. Skor, en ağır cezayı kendinden emin hatalara verir; bu da profesyonelleri en çok olumsuz etkileyen alışkanlıktır.

Disiplin: Bir sayı belirtin, kaydedin, kontrol edin, ayarlayın. Sistematik olarak üstte olmak, aşırı özgüvenli olduğunuzu ve tahminlerinizi genişletmeniz gerektiğini gösterir; sistematik olarak altta olmak ise aşırı temkinli olduğunuzu ve tahminlere daha kararlı bağlanabileceğinizi gösterir. Otomatik tahminler de aynı şekilde puanlanabilir; bu da ne zaman güvenip ne zaman müdahale edeceğinizi öğrenme yolunu gösterir.

Tahmincileri Değerlendir

Bir analist, ekibe tekrar tekrar "Bunun zamanında tamamlanacağından %90 eminim" diyor. Bir çeyrek boyunca bu %90 güven seviyesinde 40 böyle tahmin yaptı. Bunların 26'sı gerçekleşti.

(1) %90 seviyesinde iyi kalibre edilmiş mi? Karşılaştırmayı gösterin. (2) Hangi yönde kalibrasyon hatası yapıyor ve bu, olasılık tahminlerinde ne yapması gerektiğini ima ediyor? (3) Somut olarak, bir performans geçmişi ve Brier skoru düşüncesinin onu nasıl iyileştirmeye yardımcı olacağını açıklayın.

Tek Yönlü Kapılar ve İki Yönlü Kapılar

Risk seviyesine göre geri dönüşümlülük çeyreği: Bir kararın ne kadar geri dönüşümlü ve ne kadar sonuçsal olduğuna göre derinlemesine düşünme düzeyini eşleştirin

Tüm Hataların Maliyeti Aynı Değildir

Bir kararın asimetrik riski olduğunda, aşağı yönlü risk (zarar) ve yukarı yönlü getiri (kazanç) birbirinin aynası değildir. Aşağı yönlü riski sınırlarken yukarı yönlü getiriyi açık tutmak oyunun tamamıdır. Sınırlı kayıp, sınırsız kazanç pozisyonu çoğu zaman yanlış olabilir ve yine de genel olarak kazanabilir.

Seçimlik (Optionality), daha fazla bilgi edindikten sonra daha sonra harekete geçme hakkıdır, ancak bu bir yükümlülük değildir. İki bölüm önceki 4 haftalık beta sürümü bir seçimlikti: Belirsizlik çözülene kadar büyük ve geri alınamaz taahhüdü açık tutan küçük, bilinen bir maliyet.

Geri Alınabilir-Hızlı, Geri Alınamaz-Yavaş

Kullanışlı bir çerçeve, kararları geri alınma zorluğuna göre ayırır:

- İki yönlü kapılar geri alınabilir niteliktedir. Geçin ve eğer bulduklarınızdan hoşlanmıyorsanız, düşük bir maliyetle geri dönebilirsiniz. Bu tür kararları hızlı alın ve devredin. Bir öğleden sonra içinde geri alabileceğiniz bir seçim için haftalarca düşünmek, kendi başına bir tür israftır.

- Tek yönlü kapılar geri alınamaz veya geri almak için pahalıdır. Bunlar derin bir düşünce, üst düzey sahiplenme ve güvenlik önlemleri gerektirir.

Yukarıdaki dörtlü bölge, geri alınabilirliği risklerle çaprazlar. Düşünce derinliğini içinde olduğunuz kareye göre ayarlayın. En pahalı profesyonel hatalar, tek yönlü bir kapıyı iki yönlü kapı gibi görüp geri alınamaz bir kararı aceleye getirmekten kaynaklanır.

En güçlü hamle genellikle tek yönlü bir kapıyı iki yönlü kapıya dönüştürmektir: Tek bir serviste pilot uygulama yapmak, eski ve yeni sistemlere çift yazım yapmak, eski yolu yedek olarak tutmak, dağıtımı aşamalı yapmak. Yanlış bir kararın yönetilebilir kalması için geri alınabilirliği geri satın alırsınız.

Sınıflandır ve Dönüştür

Bir mühendislik direktörü bu çeyrekte iki seçenekle karşı karşıya. Seçim 1: Ana veritabanını yeni bir motoruna geçirmek; bu, aylar süren, her servise dokunan ve canlıya alındıktan sonra geri alınması acı verici olan bir proje. Seçim 2: Takımın, beklentileri karşılamaması durumunda bir hafta içinde vazgeçebileceği yeni bir dahili kod inceleme aracını benimsemek.

(1) Her seçimi gerekçeleriyle birlikte tek yönlü veya çift yönlü kapı olarak sınıflandırın. (2) Her birinin ne kadar düşünme süresi ve hangi güvenlik önlemlerini hak ettiğini belirtin. (3) Genel "geri dönüşümlü-hızlı / geri dönüşümsüz-yavaş" ilkesini ifade edin ve veritabanı geçişini daha geri dönüşümlü bir karara dönüştürmenin somut bir yolunu verin.

Kendi Zihninize Karşı Araçlar

Oda Genellikle Birlikte Yanılır

Bireysel olarak ve grup halinde, profesyoneller öngörülebilir önyargıları paylaşır: zaman çizelgeleri hakkında iyimserlik, önlerindeki canlı hikâyeye aşırı ağırlık verme ve grubun zaten lehine olduğu yöne doğru bir kayma. Önyargı giderme teknikleri, bunların size maliyetine karşı koymak için kullanılan ucuz prosedürlerdir.

- Ön-otopsi (Pre-mortem): Daha ileri bir zaman olduğunuzu ve kararın başarısız olduğunu hayal edin. Geriye doğru çalışarak, yanlış giden her nedeni listeleyin. Bu, coşkunun gizlediği riskleri gün yüzüne çıkarır ve planlama yanılgısı ile grup düşüncesine karşı koyar.

- Taban oranlar ve dış bakış: Sadece bu durumun içinden akıl yürütmek yerine, benzer çabaların aslında nasıl sonuçlandığını sorun. Eğer benzer projelerin çoğu zaman çizelgesinin %50 üzerinde kaldıysa, iç hikâye ne derse desin, projeniz de muhtemelen öyle olacaktır. İç bakış iyimserliğine karşı koyar.

- Kırmızı takım (Red-teaming): Birini ciddi bir şekilde karşı argümanı savunmak ve plana saldırmak için görevlendirin. Doğrulama yanlılığına ve anlaşmanın konforuna karşı koyar.

- Önceden karar verme: Duygusal olarak bağlı olmadan ve batık maliyetler birikmeden önce kuralı ve iptal kriterlerini belirleyin. 'Eğer 3. ayda X hedefine ulaşamazsak, dururuz.' Kararlılığın artmasına karşı koyar.

Her teknik, içten hissedemediğiniz bir önyargıyla savaştığı için, orantısız bir getiriye sahip küçük bir ritüeldir.

Canlı Bir Kararı Yanlılıktan Arındırın

Ekibiniz 9 aylık bir platform yeniden inşasını onaylamak üzere. Oda birleşik ve heyecanlı, üst yönetim ise bugün taahhüt vermek istiyor.

Bu tam karara en az ÜÇ yanlılık giderme tekniğini adlandırın ve uygulayın. Her biri için: (1) adını belirtin, (2) bu toplantıda somut olarak ne yapacağınızı söyleyin ve (3) hangi yanlılığı ortadan kaldırdığını belirtin. Üçünüz arasında en az bir **ölümsüz ön analiz (pre-mortem)** VE bir **taban oranı / dış bakış** hamlesi bulunmalıdır.

Tüm Araç Setini Çalıştırın

Tek Protokol, Her Sonuç Taşıyan Karar

Artık elinizde tam bir araç seti var. Bir protokol, parçaları, her türlü sonuç taşıyan ve çoğunlukla geri alınamayan profesyonel seçimden önce çalıştırabileceğiniz tekrarlanabilir bir sıraya bağlar:

1. Sahiplendiğiniz açık bir olasılık belirtin. Makinenin sayısı değil, sizin sayınız: olasılığın ne olduğuna ve nedenine ne inanıyorsunuz?

2. Beklenen değeri taslaklayın, ardından iflası kontrol edin. Sonuçları ağırlıklandırın, ancak eyleme geçmeden önce kaybeden senaryonun hayatta kalınabilir olup olmadığını ve bunun tek seferlik bir bahis olup olmadığını sorun.

3. Geri döndürülebilirliği sınıflandırın. Tek yönlü kapı mı yoksa çift yönlü kapı mı? Düşünce derinliğinizi bu cevaba göre ayarlayın ve tek yönlü kapıları çift yönlü kapılara dönüştürmeye çalışın.

4. Önyargıları giderin. Kendi coşkunuza karşı en az bir ön otopsi, baz oranı veya kırmızı takım (red-team) geçişi yapın.

5. Bir karar kuralı ve iptal kriterleri belirleyin. Batık maliyetler sizi ele geçirmeden önce, sizi durduracak veya yönünüzü değiştirecek kanıtın ne olacağını şimdi belirleyin.

Otomatik bir sistem bir öneri veya tahmin sağladığında, bu 1. ve 2. adımlara girdi olarak beslenir. 3. ila 5. adımlar hâlâ sizin sorumluluğunuzdadır ve geçersiz kılma yetkisi de sizdedir.

Protokolünüzü Yazın

Alanınızdaki bir profesyonelin karşılaştığı somut, sonuçları olan ve büyük ölçüde geri alınamaz bir seçimi seçin: bir rolü kabul etmek, çok yıllı bir tedarikçi sözleşmesi imzalamak, bir ürünü piyasaya sürmek veya büyük bir finansal pozisyon almak. Otomatik bir sistemin size bu durum için bir öneri ve tahmin sunduğunu varsayın.

Bağlanmadan önce gerçekten uygulayacağınız karar protokolünü, seçtiğiniz vaka üzerinden yazın. Sırasıyla şunları dahil edin: (1) sahip olduğunuz açık bir olasılık tahmini; (2) bir beklenen değer veya beklenen sonuç taslağı VE iflas / tekrarlanamazlık kontrolü; (3) bir geri dönüşlülük sınıflandırması (tek yönlü veya çift yönlü kapı); (4) en az bir yanlılığı giderme adımı (önceden ölüm analizi, baz oranı veya kırmızı takım); ve (5) önceden taahhüt edilmiş bir karar kuralı veya iptal kriterleri. Otomatik önerinin sizi nerede bilgilendirdiğini ve nerede onu geçersiz kılacağınızı açıkça belirtin.

İlerle Götürdükleriniz

Sizinle Kalan Beceriler

Belirsizlik altında karar vermek için bir araç setisi oluşturdunuz:

- Beklenen değer ve karar ağaçları, ve kayıp dalı iflas riski taşıdığında veya bahis yalnızca bir kez gerçekleştiğinde EV'yi (beklenen değeri) geçersiz kılmak için gereken disiplin.

- Kalibrasyon: açık olasılıklar belirtmek, bunları puanlamak (Brier, daha düşük daha iyi) ve güveninizin söylediği şeyi gerçekten ifade etmesi için eğitmek.

- Asimetrik risk ve opsiyonellik: aşağı yönlü riski sınırlamak, tek yönlü kapıları çift yönlü kapılardan ayırt etmek ve geri dönüşü olmayanı aşamalı hale getirmek.

- Önyargı Giderme: Ön otopsiler, taban oranlar, kırmızı takımlama ve önceden karar verme.

- Sonuçları önemli bir karar vermeden önce tüm bunları yürüten bir protokol.

Otomatize sistemler önerilerde ve tahminlerde giderek daha iyi hale gelecek. Bunların hiçbiri, kalibre edilmiş bir yargı sunma, asimetrik riskleri tartma ve geri alınamaz kararı üstlenme ihtiyacını ortadan kaldırmaz. Bu kişi, profesyoneldir. Artık bu sahipliği gerçek kılan araç setine sahipsiniz.