Tahminleriniz Ne Kadar Doğru? Kalibrasyon Rehberi

Doğru Tahmin Nedir?

Çoğu insan tahmin yapmayı "ya tutturursun ya tutturmazsın" olarak görüyor. Ama profesyonel tahminciler farklı düşünüyor. Onlar için önemli olan tek bir tahminin sonucu değil, yüzlerce tahmin boyunca ne kadar tutarlı olduğun.

Buna "kalibrasyon" deniyor.

Kalibrasyon Ne Demek?

Basitçe şu: "%70 olasılık veririm" dediğin şeyler, gerçekten %70 ihtimalle doğru çıkıyor mu?

Mükemmel kalibre edilmiş bir tahminci şöyle görünür:

"%90 eminim" dediği şeylerin %90'ı doğru çıkar
"%60 eminim" dediği şeylerin %60'ı doğru çıkar
"%30 eminim" dediği şeylerin %30'u doğru çıkar

Çoğu insanın sorunu aşırı güven. "%90 eminim" dediği şeylerin aslında sadece %70'i doğru çıkıyor. Bu, kötü kalibrasyon demek.

Neden Önemli?

İyi kalibre edilmiş bir tahminci, belirsizliği doğru ölçüyor. Bu yetenek iş hayatından kişisel kararlara kadar her yerde işe yarıyor.

Bir yönetici "bu projeyi %90 ihtimalle zamanında bitiririz" diyorsa ve gerçekten %90 ihtimalle bitirebiliyorsa, kaynakları doğru planlayabilir. Ama aşırı güvenli ise, sürekli geciken projeler ve krizlerle karşılaşır.

Philip Tetlock'un "Superforecasting" kitabında anlattığı araştırma bunu net gösteriyor: en iyi tahminciler en zeki olanlar değil, en iyi kalibre edilmiş olanlar.

Pusulam'da Kalibrasyonunuzu Nasıl Görürsünüz?

Premium üyelerin profil sayfasında "İstatistikler" sekmesi var. Orada kalibrasyon grafiği gösterilir. Grafikteki kesikli çizgi "mükemmel kalibrasyon"u temsil eder. Noktalarınız bu çizgiye ne kadar yakınsa, o kadar iyi kalibre edilmişsinizdir.

Ayrıca Brier skoru gösterilir. Bu skor 0 ile 1 arasında bir sayıdır. 0'a ne kadar yakınsa o kadar iyi. Genel olarak 0.1-0.2 arası "çok iyi", 0.2-0.3 arası "iyi" kabul edilir.

Daha İyi Kalibre Olmak İçin 5 İpucu

1. Temel oranları öğren. Bir şeyin olma ihtimalini tahmin etmeden önce, benzer olayların geçmişte ne sıklıkta gerçekleştiğini araştır. "Bir ülkede iç savaş çıkar mı?" sorusu için, son 50 yılda kaç ülkede iç savaş çıktığına bak.

2. Aşırı güvenden kaçın. "%95 eminim" demeden önce dur ve düşün: gerçekten 20'de 19 mu? Çoğu insan %95 derken aslında %75 civarındadır.

3. Tersini düşün. Bir şeyin olacağına inanıyorsan, olmaması için hangi koşullar gerekir diye sor. Bu egzersiz perspektif kazandırır.

4. Güncelle. Yeni bilgi geldikçe tahminini güncelle. İlk fikrine yapışıp kalma. Bayesyen düşünce bunu gerektirir: her yeni kanıt, olasılığı günceller.

5. Kayıt tut. Pusulam'da zaten her tahminin kaydediliyor. Ama günlük hayatta da "şu ihtimalle şu olacak" diye tahminler yap ve sonucu kontrol et. Zamanla kalibrasyon refleksi gelişir.

Topluluk Etkisi

Pusulam'da tek başına tahmin yapmıyorsun. Topluluğun tahminiyle kendini kıyaslıyorsun. Bu çok değerli bir geri bildirim mekanizması.

Eğer topluluk %30 diyor ve sen %80 diyorsan, ya sen bir şey biliyorsun ki topluluk bilmiyor (harika, erken girmenin avantajı), ya da kendi önyargına kapılmışsın. Bu farkındalık, kalibrasyonu geliştirir.

Kalibrasyonunu kontrol et