Bir yatırım komitesi oturumunda, bir geliştirme portföyünün son beş yıllık performansı sunulurken, sunumun omurgasını tamamlanmış projelerin gerçekleşen getirileri ile bütçe sapmaları oluşturur; iptal edilmiş, izin aşamasında düşmüş ya da finansal kapanışa hiç ulaşamamış projeler ise çoğu zaman tek bir satırda, adet olarak geçer. Aynı oturumda bir sonraki yatırım kararı tartışıldığında, komitenin zihninde canlı duran referans kümesi bu tamamlanmış projelerdir; nadir ama pahalı sonuçlar ise ne bir dağılım ne de bir örüntü olarak masada bulunur. Benzer bir asimetri kredi komitelerinde, tedarikçi ön yeterlilik süreçlerinde ve işe alım panellerinde de gözlenir: karar verici, sık gördüğü sonucun mekaniğini ayrıntısıyla bilirken, nadir gördüğü sonucun yalnızca adını bilir. Bu, dikkatsizlikten değil, örneklem yapısından doğar; ve tam da bu nedenle dikkatle düzeltilemez.
Aynı asimetri, kararı otomatikleştirmeye çalışan sistemlerde daha ölçülebilir biçimde ortaya çıkar. Bir tedarikçi temerrüt tahmin modeli, geçmişte binlerce sipariş içinde birkaç düzine temerrüt görmüşse, hiçbir zaman temerrüt öngörmeyerek yüzde doksan dokuzun üzerinde bir genel isabet oranı üretebilir; rapor edilen tek gösterge toplam doğruluk olduğunda, bu model başarılı görünür. Model başarılı değildir; yalnızca çoğunluk sınıfını ezberlemiştir ve tam olarak kendisinden beklenen işi — nadir olanı işaret etmeyi — hiç yapmamaktadır. İnsan yargısı ile istatistiksel model burada aynı hatayı aynı sebeple üretir, ve bu ortaklık meselenin bir yazılım sorunu değil, bir kanıt rejimi sorunu olduğunu gösterir.
Bu örüntünün adı class-imbalance bias — sınıf dengesizliği yanlılığı — yani sonuç kategorilerinden birinin gözlem havuzunda ezici çoğunluğu oluşturması nedeniyle, azınlıkta kalan kategorinin ne öğrenilebilir ne de sınanabilir hâle gelmesidir. Mekanizma iki katmanda çalışır. Birinci katmanda, öğrenme süreci — ister bir algoritmanın parametre kalibrasyonu ister bir yöneticinin yıllar içinde biriktirdiği sezgi olsun — hata toplamını küçültmeye yönelir, ve nadir sınıfı tamamen ihmal etmek hata toplamını küçültmenin en ucuz yoludur. İkinci katmanda, geri bildirim döngüsü kapanır: nadir sonuç öngörülmediği için ona karşı önlem alınmaz, önlem alınmadığı için gerçekleştiğinde nedeni tek seferlik bir talihsizlik olarak kodlanır, ve tek seferlik olarak kodlandığı için gelecekteki örneklem havuzuna bir örüntü olarak girmez.
Bu eğilimin işlevsel olduğu bir koşul aralığı vardır ve bunu görmeden müdahale tasarlamak yanlış yerden başlamak olur. Sonuç dağılımının gerçekten durağan olduğu, nadir olayın maliyetinin sık olayın maliyetiyle aynı büyüklük mertebesinde kaldığı ve karar sıklığının yüksek olduğu ortamlarda, çoğunluk sınıfına göre kalibre edilmiş bir kural son derece verimlidir; her nadir ihtimali ayrı ayrı incelemek, kazandırdığından fazlasını inceleme maliyeti olarak yakar. Sorun, kısayolun kendisinde değil, kısayolun geçerlilik koşulu ortadan kalktığında sabit kalmasındadır. Sermaye-yoğun bir projede nadir sonucun maliyeti tipik sonucun maliyetinden bir büyüklük mertebesi büyükse, sıklıkla ağırlıklandırılmış bir karar kuralı artık verimli değil, yalnızca kalibre edilmemiştir.
Kurumsal bedel ilk olarak bütçe ve takvim varsayımlarında görünür. Bir inşaat programının süre tahmini, tamamlanmış işlerin ortalama süresinden türetildiğinde, kuyruğu oluşturan olaylar — bir izin itirazının yargıya taşınması, tek kaynaklı bir ana ekipmanın teslim tarihinin kayması, bir bağlantı çalışmasının yeniden çalıştırılması — tahmin dağılımına hiç girmez; program riski taşıyan bir contingency kalemi, hiç gözlenmemiş bir dağılımın kuyruğuna göre değil, gözlenmiş gövdesine göre boyutlandırılır. Bu boyutlandırma sapması bilançoda ayrı bir satır olarak durmaz; işletme sermayesi ihtiyacında, ek çekiş taleplerinde ve gecikme cezası maruziyetinde parça parça belirir. Nakit akışı modeli hiçbir kalemi yanlış yazmadan bütünüyle yanlış bir dağılım varsayabilir.
İkinci bedel, sözleşme ve finansman katmanında ortaya çıkar. DSCR testleri, rezerv hesabı büyüklükleri ve covenant eşikleri tarihsel varyansa dayanarak kalibre edildiğinde, tarihsel varyansın kendisi nadir sınıfı içermediği ölçüde eşikler sistematik olarak gevşek çıkar; kredi verenin gördüğü tampon, hiç gerçekleşmemiş bir senaryo sınıfına karşı test edilmemiş bir tampondur. Aynı mantık temsil ve tekeffül müzakerelerinde de işler: veri odasında yalnızca gerçekleşmiş uyuşmazlıklar dosyalanmış, gerçekleşmemiş fakat yapısal olarak mümkün olan maruziyetler hiçbir belgede karşılık bulmamışsa, garanti kapsamı gözlenen olay kümesine göre daraltılır ve kapanış sonrası ortaya çıkan kuyruk olayı hiçbir tarafın taahhüdüne düşmez. Escrow oranı, gözlenmiş talep tarihçesine endekslendiği ölçüde, aynı körlüğü taşır.
Üçüncü bedel, kurumsal öğrenmenin kendisindedir ve en sinsi olanıdır. Bir organizasyon yalnızca hayatta kalan projelerinin kayıtlarını tuttuğunda, arşivi zaman içinde giderek daha az bilgilendirici hâle gelir; çünkü arşivde biriken her yeni başarılı dosya, çoğunluk sınıfının ağırlığını artırarak nadir sınıfın göreli görünürlüğünü daha da düşürür. On yıllık kurumsal hafızası olan bir şirket, bu hafıza yalnızca tamamlanmış işlerden oluşuyorsa, kuyruk riski konusunda üç yıllık bir şirketten daha bilgili değildir; yalnızca daha kendinden emindir. Değerleme masasında bu fark, kurumsal olgunluk lehine değil aleyhine okunabilir, zira gösterilmesi gereken şey deneyim hacmi değil, deneyimin risk sınıflarına göre ayrışabilir olmasıdır.
Yapısal müdahalenin ilk bileşeni, nadir sınıfı ayrı bir kanıt rejimine almaktır: kuyruk olayları gövde olaylarıyla aynı istatistiğe sokulmaz, ayrı bir kayıtta ve ayrı bir sınıflandırmayla tutulur. İkinci bileşen, karar eşiğinin asimetrik kurulmasıdır — yanlış negatifin maliyeti yanlış pozitifin maliyetinden bir büyüklük mertebesi büyükse, kural bu oranı açıkça yansıtacak biçimde kaydırılır ve kaydırma gerekçesi yazılı hâle getirilir. Üçüncü bileşen, gerçekleşmemiş olayların da kaydedilmesidir: teklif verilip alınmamış işler, incelenip reddedilmiş projeler, imzalanmadan düşmüş sözleşmeler kendi başlarına bir örneklem oluşturur ve bu örneklem olmadan nadir sınıf hakkında hiçbir şey öğrenilemez. Dördüncü bileşen, ölçüm göstergesinin toplam isabet oranından çıkarılıp nadir sınıf üzerindeki yakalama oranına taşınmasıdır.
BEIREK bu müdahaleyi proje yönetimi hattının içine gömer, ayrı bir analitik ürün olarak değil. Yürüttüğümüz programlarda karar kaydı onay anında değil öneri anında açılır; bir varsayımın hangi gerekçeyle, hangi örneklem üzerinden ve hangi alternatif reddedilerek seçildiği, sonucu bilinmeden önce yazıya geçer, böylece sonradan gelen sonuç kaydı yeniden yorumlayamaz. Bunun yanında reddedilen ve düşen işlerin kaydı, tamamlanan işlerin kaydıyla aynı disiplinde tutulur; bir portföyün gerçek risk dağılımı, ancak kapanmamış dosyalar da sayıldığında görünür hâle gelir.
İkinci müdahale hattımız, kuyruk senaryolarının olasılıkla değil koşulla tanımlanmasıdır. Bir olayın gerçekleşme sıklığını tahmin etmek yerine, hangi koşullar bir arada sağlandığında o olayın mümkün hâle geldiğini yazarız; sonra bu koşulların her birine gözlemlenebilir bir gösterge bağlarız — bir izin dosyasında itiraz süresinin dolması, tek kaynaklı bir ekipmanda tedarikçinin teyit tarihini ikinci kez ötelemesi, bir bağlantı çalışmasında kapsam revizyonu talebi. Gösterge tetiklendiğinde devreye giren şey bir uyarı değil, önceden tanımlanmış bir inceleme hattı ve farklı bir onay eşiğidir. Pre-mortem oturumları bu hattın parçasıdır ve gündem maddesi projenin başarısı değil, başarısızlığın hangi mekanizmayla gerçekleşmiş olacağıdır; bu oturumun çıktısı bir risk listesi değil, izlenecek göstergelerin ve tetiklendiğinde işleyecek prosedürün tarifidir.
Sınıf dengesizliğinin yönetimi, nihayetinde bir veri meselesi değil bir yetki meselesidir. Nadir sınıfı işaret eden sinyal, tanım gereği çoğunluğun deneyimine aykırı düşer; bu sinyali taşıyan kişi ya da fonksiyon, çoğunluk deneyimini temsil eden karar mercii karşısında yapısal olarak zayıf konumdadır ve sinyalin sönümlenmesi bireysel cesaret eksikliğinden değil, otorite dağılımından kaynaklanır. Bu nedenle karşı-argüman rolünün kim tarafından, hangi yetkiyle ve hangi aşamada oynanacağı önceden tanımlanmadıkça, hiçbir ölçüm düzeltmesi tek başına yeterli olmaz. Sorulması gereken soru, bir kurumun nadir olaya ne kadar hazırlıklı olduğu değil, nadir olayı gündeme getiren kişinin toplantı sonunda haklı çıkmadan da ciddiye alınıp alınmadığıdır.
