Kolektif Zeka vs Uzman Paneli: Kim Daha Doğru?

Uzmanların İtibarı

Televizyon ekranlarında, gazete köşelerinde, konferans sahneslerinde uzmanlar konuşuyor. Ekonomistler dolar tahminleri yapıyor, siyaset bilimciler seçim sonuçlarını öngörüyor, teknoloji analistleri bir sonraki büyük trendi açıklıyor.

Onlara güveniyoruz. Sonuçta yıllarca eğitim almışlar, alanlarında deneyimliler. Ama bir soru sormak lazım: gerçekten ne kadar doğru tahmin ediyorlar?

Tetlock'un Bulgusu

Philip Tetlock, Pennsylvania Üniversitesi'nde profesör. 20 yıl boyunca 284 uzmanın 28.000'den fazla tahminini takip etti. Sonuç, akademik dünyada bomba etkisi yarattı.

Uzmanların tahmin doğruluğu, rastgele tahmin yapan bir şempanzeden sadece marjinal olarak daha iyiydi.

Evet, doğru okudunuz. Dartboard'a dart atan bir maymun, ortalama bir uzmana yakın performans gösteriyordu.

Ama Tetlock durmadı. Bir sonraki projesi olan Good Judgment Project'te, "superforecaster" dediği bir grup sıradan insanı keşfetti. Bu insanlar uzman değildi. Ev hanımları, emekli mühendisler, öğrenciler vardı aralarında. Ama tahmin yetenekleri istihbarat analistlerini bile geçiyordu.

Sırları Ne?

Superforecaster'ların ortak özellikleri şunlardı:

Birincisi, entelektüel alçakgönüllülük. "Yanılıyor olabilirim" diyebiliyorlardı. Bu basit gibi görünüyor ama çoğu uzman bunu yapamıyor. Kamusal bir platformda görüş belirtmiş bir uzman, yanıldığını kabul etmekte zorlanıyor.

İkincisi, sürekli güncelleme. Yeni bilgi geldikçe tahminlerini değiştiriyorlardı. Bir fikre yapışıp kalmıyorlardı. İlk tahminleri %60 ise ve yeni bir veri gelirse %55'e veya %65'e güncelliyorlardı.

Üçüncüsü, farklı perspektiflerden bakma. Bir konuyu sadece kendi uzmanlık alanından değil, birden fazla açıdan değerlendiriyorlardı.

Tahmin Piyasalarının Gücü

İşte tam bu noktada tahmin piyasaları devreye giriyor. Tahmin piyasası, superforecaster'ların yaptığını ölçeklendirilmiş bir şekilde yapıyor.

Bireyler farklı bilgi ve perspektiflerle geliyor. Piyasa mekanizması bu farklı görüşleri bir fiyata (olasılığa) dönüştürüyor. Ve bu fiyat, sürekli güncelleniyor.

Sonuçlar etkileyici. 2024 ABD başkanlık seçimlerinde Polymarket, anketlerden ve uzman panellerinden daha doğru tahmin üretti. 2020'de de benzer bir tablo vardı. Manifold Markets'ın Brier skoru 0.17, ki bu "çok iyi" kategorisinde.

Ama Kalabalık Her Zaman Haklı mı?

Hayır. Kalabalıkların bilgeliğinin çalışması için bazı koşullar gerekiyor:

Birincisi, çeşitlilik. Aynı düşünen insanlardan oluşan bir kalabalık, bilge değil, tehlikeli. Echo chamber etkisi devreye girer.

İkincisi, bağımsızlık. İnsanlar birbirinden etkilenmeden karar vermeli. Bu yüzden tahmin piyasalarında herkes kendi oyunu veriyor, başkalarının oylarını görmeden önce karar vermek daha sağlıklı.

Üçüncüsü, kaynak koyma. Sadece "bence şu olur" demek yetmez. Arkasında bir şey koymak lazım. Pusulam'da bu Oy Hakkı. Az da olsa sınırlı bir kaynak harcamak, insanları daha dikkatli düşünmeye teşvik ediyor.

Uzmanları Dinlemeyelim mi?

Hayır, kesinlikle dinleyelim. Uzmanlar önemli. Ama onları tek bilgi kaynağı olarak görmek yerine, birçok bilgi kaynağından biri olarak görmek daha doğru.

En iyi sonuç, uzman görüşünü topluluk tahminiyle birleştirdiğinizde çıkıyor. Uzman size derinlik veriyor, topluluk size genişlik veriyor. İkisi birlikte, tek başlarına olduklarından daha güçlü.

Pusulam'da her marketin altında AI asistan var. Bu asistan uzman görüşlerini, güncel verileri ve farklı perspektifleri sunuyor. Ama son kararı sen veriyorsun. Ve senin kararın, topluluğun kolektif tahmininin bir parçası oluyor.

Topluluğa katıl