Eksik Verinin Kendi Mantığı: Raporlanmayanın Sistematik Olduğu Durumlar

Bir müşteri memnuniyeti panosunun aylık ortalaması altı çeyrek boyunca dar bir bantta seyrederken, aynı dönemde yanıt oranının belirgin biçimde gerilediği bir tabloyla karşılaşmak, kurumsal raporlamada sık rastlanan bir konfigürasyondur. Panonun kendisi bir sorun bildirmez; ortalama sabittir, hatta hafif yükselmiştir. Yanıt oranı ise ayrı bir satırda, çoğu zaman dipnotta durur ve yönetim kurulu sunumunun özet sayfasına hiç taşınmaz. Aynı örüntü, tedarikçi performans değerlendirmelerinde, saha güvenlik gözlem formlarında, proje sonrası öğrenilen dersler oturumlarının katılım kayıtlarında ve çıkış mülakatı tamamlanma oranlarında tekrarlanır. Ortak nokta şudur: ölçümün kendisi çalışmaya devam eder, ölçümü besleyen akış incelirken.

İkinci bir gözlem bu tabloyu keskinleştirir. Bir inşaat programında haftalık ilerleme raporlarının teslim gecikmesi, programın kendi gecikmesiyle yakın hareket eder; işler planın gerisine düştüğünde rapor da geç gelir, bazı haftalarda hiç gelmez. Raporun geldiği haftalar, tipik olarak işlerin yolunda gittiği haftalardır. Dönem sonunda eldeki rapor setinden hesaplanan ortalama ilerleme sapması, sahada yaşanan gerçek sapmadan düşük çıkar — ve bu düşüklük hesap hatasından değil, hangi haftaların kayda geçtiğinden kaynaklanır.

Bu yapının adı missing-not-at-random bias — eksik verinin oluşma olasılığının, tam da gözlenmeyen o değerin kendisine bağlı olması. Ayrımı görmek için üç eksiklik rejimini yan yana koymak gerekir. Birincisinde eksiklik tümüyle tesadüfidir; sunucu çöker, form kaybolur, kayıp kayıtlar rastgele dağılır ve mevcut veri kümesi küçülmüş ama tarafsız bir örneklem kalır. İkincisinde eksiklik gözlenen başka bir değişkene bağlıdır; belirli bir bölgede internet erişimi zayıf olduğu için o bölgeden az yanıt gelir, ancak bölge bilgisi kayıtlıdır ve düzeltme yapılabilir. Üçüncüsünde ise eksiklik doğrudan ölçülmek istenen büyüklüğe bağlıdır: memnun olmayan müşteri anketi doldurmaz, gecikmiş yüklenici rapor göndermez, ayrılma sebebi hassas olan çalışan çıkış mülakatına gelmez. Üçüncü rejimde eldeki veriden yapılacak hiçbir istatistiksel düzeltme, kaybolan bilgiyi geri getirmez.

Bu eğilimin belirli koşullarda işlevsel olduğunu görmezden gelmek, mekanizmayı yanlış anlamak olur. Raporlamanın maliyeti sıfır değildir; her form, her oturum, her açıklama bir zaman ve dikkat harcaması gerektirir ve kötü haber taşımanın maliyeti iyi haber taşımanınkinden yapısal olarak yüksektir, zira kötü haber ek soru, ek toplantı, ek gerekçelendirme üretir. Bir sistem, kaydın oluşturulmasını kaydı oluşturan kişinin değerlendirilmesiyle aynı hatta bağladığında, kötü sonucu raporlamama tercihi bireysel düzeyde tümüyle rasyonel hâle gelir. Sorun tercihte değil, tercihi rasyonel kılan konfigürasyonun sürmesindedir; çünkü aynı konfigürasyon, kurumun karar aldığı veri tabanını sessizce iyimserleştirir.

Kurumsal bedelin ilk yüzeyi bütçe kalibrasyonudur. Bir organizasyon, geçmiş proje sapmalarının ortalamasını gelecek projelerin beklenmeyen gider payına çevirdiğinde, o ortalama sistematik olarak düşük olduğu için beklenmeyen gider payı da sistematik olarak yetersiz kalır. Bu yetersizlik tek bir projede maliyet aşımı olarak görünür ve proje-spesifik bir açıklamaya bağlanır; portföy genelinde ise tekrarlayan bir örüntü olarak birikir. Beklenmeyen gider payının portföy boyunca ısrarla tükenmesi, tek tek projelerin talihsizliğinden çok, tahminin beslendiği kayıt setinin yapısına işaret eder.

İkinci yüzey, satın alma işlemlerinde değerleme ile temsil ve tekeffül kapsamının kesiştiği noktadır. Bir hedef şirketin veri odasında müşteri kayıp analizi, garanti kapsamındaki onarım kayıtları ya da tedarikçi uyuşmazlık dosyaları görece seyrek olduğunda, bu seyreklik iki farklı şeyin işareti olabilir: ya gerçekten az sorun yaşanmıştır, ya da sorun yaşandığında dosya açılmamıştır. İkisini ayırmanın yolu dosyaları saymak değil, dosya oluşturma sürecinin tetikleyicisini incelemektir. Kaydın açılması müşterinin resmi şikâyetine bağlıysa ve şikâyet kanalı zahmetliyse, düşük şikâyet sayısı yüksek memnuniyetin değil, yüksek eşiğin ölçüsüdür. Bu ayrımın işlem tarafındaki karşılığı, başlık fiyatından çok escrow oranında, earn-out tetiklerinin tanımında ve tekeffül sürelerinin uzunluğunda belirir.

Üçüncü yüzey daha yavaş işler ve daha pahalıdır: kurumsal öğrenmenin yönü. Bir organizasyon yalnızca tamamlanan projelerin, kazanılan ihalelerin ve kalan çalışanların verisiyle beslendiğinde, öğrendiği şey başarının koşulları değil, hayatta kalanların ortak özellikleridir. Kaybedilen ihalelerin fiyat yapısı kayıt altına alınmıyorsa, fiyatlama disiplini yalnızca kazanılan işlerin marjı üzerinden kalibre edilir ve bu kalibrasyon zamanla ya sistematik olarak agresif ya da sistematik olarak muhafazakâr bir noktaya kayar. Bu kaymanın kendisi gözlenemez, çünkü onu gösterecek karşılaştırma verisi hiç oluşmamıştır.

Yapısal müdahalenin çıkış noktası, eksik verinin istatistiksel bir problem değil, bir süreç tasarımı problemi olduğunu kabul etmektir. Dört bileşen bu yapıyı taşır. Birincisi, eksikliğin kendisinin bir veri noktası olarak izlenmesi: her performans göstergesinin yanında kapsama oranının raporlanması ve bu oranın zaman içindeki hareketinin göstergenin kendi hareketiyle birlikte okunması. İkincisi, kayıt oluşturma anının değerlendirme anından ayrılması; sapmanın bildirildiği kanal ile sapmanın hesabının sorulduğu kanal aynı olduğunda, bildirim akışı öngörülebilir biçimde kurur. Üçüncüsü, yanıt vermeyen tarafın örneklenmesi — anketi doldurmayan müşterilerin sınırlı bir alt kümesine doğrudan ulaşmak, eksik kütlenin dağılımı hakkında düzeltmenin dayanabileceği tek gerçek bilgiyi üretir. Dördüncüsü, kaydın varsayılan hâlinin tersine çevrilmesi: bir olayın kaydedilmesi için eylem gerektiren tasarım yerine, kaydedilmemesi için gerekçe gerektiren tasarım.

BEIREK'in yönettiği programlarda bu bileşenler ayrı bir raporlama katmanı olarak değil, mevcut proje kontrol ritminin içine yerleştirilerek işletilir. Haftalık ilerleme setinde her kalemin yanında kaynak kaydın oluşma tarihi ve kim tarafından girildiği tutulur; bir kalemin arka arkaya boş kalması, kalemin kendi değerinden bağımsız olarak gündem maddesi üretir. Yüklenici ve tedarikçi performans dosyalarında, kaydın açılması karşı tarafın resmi bildirimine bırakılmaz; saha ekibinin gözlemi ile karşı tarafın bildirimi iki ayrı hatta tutulur ve ikisi arasındaki fark, tek başına bir gösterge olarak izlenir. Bu farkın açılması, çoğu zaman gecikmenin kendisinden önce görünür hâle gelir.

İkinci müdahale hattı, karar kaydının onay anında değil öneri anında tutulmasıdır. Bir yatırım kararının gerekçesi, varsayımları ve beklenen aralığı karar alınmadan önce yazıya geçtiğinde, sonradan gerçekleşen sonuç ne olursa olsun karşılaştırılabilir bir kayıt kalır; kayıt sonradan tutulduğunda ise, hangi kararların gerekçesinin yazıldığı sonuçla ilişkili hâle gelir ve arşiv kendi kendini iyimserleştirir. Aynı disiplin kaybedilen işler için de işletilir: sonuçlanmayan tekliflerin fiyat yapısı, rakip konumu ve ret gerekçesi, kazanılan işlerle aynı formatta dosyalanır. Bu iki kayıt setinin yan yana durması, fiyatlama ve risk iştahının kalibrasyonunu hayatta kalanların özelliklerinden kurtarır.

Bu mekanizmaların hiçbiri eksik veriyi ortadan kaldırmaz; amaçları eksikliğin yönünü gözlenebilir kılmaktır. Bir yönetim kurulu, önündeki göstergenin hangi kütleden hesaplandığını ve o kütlenin nasıl seçildiğini bilmediği sürece, gördüğü sayının kendisiyle değil, o sayının hayatta kalma sürecinden geçmiş hâliyle karar alır. Ölçüm sistemlerinin olgunluğu, ürettiği rakamların kesinliğinden çok, kendi kör alanını raporlayabilme kapasitesiyle ölçülür.

Bir kurumun veri disiplinini sınayan soru, hangi göstergeleri izlediği değildir; hangi olayın hiç kayda geçmediğini ne kadar sürede fark edebildiğidir.