Veriyi Konuşturmak: Hipotezsiz Analizin Kurumsal Kararda Ürettiği Yanlış Güven

Bir yatırım komitesi oturumunda, sunumun ortalarına doğru gelen bir slaytın etkisi neredeyse öngörülebilirdir: belirli bir müşteri segmentinde, belirli bir coğrafyada, belirli bir dönemde gözlenen bir ilişki, grafikle birlikte masaya konur ve tartışmanın yönünü değiştirir. Slayt teknik olarak kusursuzdur — veri gerçektir, hesap doğrudur, grafik yanıltıcı değildir. Masadaki hiç kimsenin soramadığı soru ise şudur: bu kesit, kaç farklı kesitin arasından seçildi. Analiz ekibinin haftalarca üzerinde çalıştığı veri kümesinden yüzlerce alternatif kesit çıkarılmış, çoğu ilgi çekici bir şey söylemediği için sunuma girmemiş, yalnızca konuşan bir tanesi slayta dönüşmüştür.

Aynı örüntü, bütçe savunmalarında, kampanya değerlendirmelerinde, tedarikçi performans incelemelerinde ve satın alma sonrası entegrasyon raporlarında tekrar eder. Bir pazarlama harcamasının etkisi toplam ciroda görünmediğinde, etkinin görünür olduğu bir alt kırılım aranır ve genellikle bulunur; bir fabrikanın verimlilik programı hedefi tutturmadığında, hedefin tutturulduğu bir vardiya, bir hat ya da bir çeyrek öne çıkarılır. Bu davranışın kurumsal olarak dikkat çekici yanı, kötü niyet gerektirmemesidir. Analizi yapan kişi genellikle veriyi zorlamaz; yalnızca ilgi çekici olanı seçer, ve ilgi çekici olanın hangi süreçle seçildiği kayda geçmez.

Bu mekanizmanın adı data dredging — hipotez önceden tanımlanmadan veri kümesinin tekrar tekrar taranarak, istatistiksel olarak anlamlı görünen ilişkilerin sonradan seçilmesi. Mekanizmanın matematiksel çekirdeği basittir ve tartışmalı değildir: bir veri kümesinde ne kadar çok kesit, alt grup, dönem aralığı ve değişken kombinasyonu denenirse, tesadüfen anlamlı görünen bir ilişkinin ortaya çıkma olasılığı o kadar artar. Tek bir hipotez sınandığında düşük olan yanlış pozitif olasılığı, onlarca kesit denendiğinde artık düşük değildir; yüzlerce kesit denendiğinde ise anlamlı bir bulgu bulunmaması sürpriz olurdu. Sunuma giren rakam yanlış hesaplanmış değildir, yalnızca hesabın kaç kez tekrarlandığı bilgisi rakamla birlikte taşınmamıştır.

Bu eğilimin kurumsal olarak yaygın olmasının nedeni, belirli koşullarda gerçekten işlevsel olmasıdır. Bir şirket yeni bir pazara girdiğinde, yeni bir ürün hattı denediğinde ya da hakkında önceden bir teorisi olmayan bir veri kümesiyle ilk kez karşılaştığında, hipotezsiz tarama doğru araçtır; keşifsel analizin amacı zaten sınanacak hipotezleri üretmektir. Sorun taramanın kendisinde değil, taramanın çıktısının bir sonraki adımda doğrulanmış bir bulgu gibi dolaşıma girmesindedir. Keşif ile doğrulama arasındaki sınır, analiz masasında geçilirken görünür değildir; ancak karar masasına ulaştığında bulgunun hangi taraftan geldiği artık sorulamaz hâle gelmiştir, çünkü aradaki adımlarda taşınan tek şey grafiktir.

Kurumsal bedel, ilk bakışta sanıldığı gibi yanlış analizden doğmaz. Çoğu durumda hipotezsiz taramayla bulunan ilişki tümüyle yanlış da değildir; zayıf, kırılgan ve dar koşullara bağlıdır. Bedel, karar verici bu bulguya, bulgunun taşıyabileceğinden daha dar bir güven aralığı atfettiğinde ortaya çıkar. Aynı yatırım, yüzde altmışlık bir isabet beklentisiyle onaylandığında farklı bir sermaye tahsisi, farklı bir aşamalandırma ve farklı bir çıkış planı gerektirirken, yüzde doksanlık bir beklentiyle onaylandığında tek seferde ve geri dönüşsüz biçimde taahhüt edilir. Yanlış olan karar değil, kararın etrafına kurulan risk mimarisidir.

Bu farkın bilançodaki izi genellikle gecikmeli ve dolaylı görünür. Hipotezsiz taramayla gerekçelendirilmiş bir kapasite yatırımı, ilk yıl amortisman kalemi olarak sorunsuz görünür; ikinci yıl kapasite kullanım oranında, üçüncü yıl ise stok devir hızında kendini gösterir. Bir müşteri segmentine yönelik olduğu varsayılan ticari hamle, satış döngüsünün uzamasıyla ve müşteri edinme maliyetinin sessizce yukarı kaymasıyla ödenir. Bu kalemlerin hiçbiri geriye doğru bir analiz slaytına bağlanmaz, çünkü o slayt artık kurumsal hafızada bir karar gerekçesi olarak değil, tartışılmamış bir varsayım olarak durur.

Bir satış ya da sermaye artırımı sürecinde bu katman, doğrudan değerleme diline tercüme edilir. İnceleme yürüten taraf, sunulan büyüme veya marj analizinin kaç alternatif kesit arasından seçildiğini soramadığında — ki veri odasında bu bilgi neredeyse hiç bulunmaz — güvenilirliği analize değil, sürece göre fiyatlar. Bunun pratik sonucu, iskonto talebinin sayısal bir itirazla değil, yapısal bir şüpheyle gerekçelendirilmesidir: performansın tekrarlanabilirliği gösterilemediği ölçüde, bedelin bir kısmı earn-out yapısına, kapanış öncesi koşula ya da genişletilmiş temsil ve tekeffül kapsamına kaydırılır. Şirketin analitik disiplini burada bir iç kalite meselesi olmaktan çıkıp, nakde çevrilebilir bedelin bir bileşeni hâline gelir.

Bu eğilimi nötrleyen mekanizma bireysel şüphecilik ya da analistin dürüstlüğü değildir; her ikisi de zaten mevcut olabilir ve yine de sonucu değiştirmez. İşleyen müdahale, hipotezin analiz başlamadan önce ve tarihli biçimde kayda geçirilmesidir. Kayıt üç bileşen taşır: sınanacak önermenin açık ifadesi, önermenin doğrulanmış sayılması için gereken eşiğin önceden belirlenmesi, ve önermeyi yanlışlayacak sonucun ne olacağının yazılması. Bu üç satır, sonradan hangi bulgunun doğrulama hangisinin keşif olduğunu ayırt edilebilir kılar, ve ayırt edilebilirlik karar ağırlığının kalibrasyonu için yeterlidir.

İkinci bileşen, taramanın hacmini görünür tutan basit bir kayıttır: aynı veri kümesi üzerinde kaç kesit denendiğinin not edilmesi. Bu, denemeleri kısıtlamaz — keşifsel analizin doğası zaten çok sayıda deneme gerektirir — yalnızca sunuma giren bulgunun arkasındaki arama hacmini birlikte taşır. Üçüncü bileşen ise rol ayrımıdır: analizi üreten ekiple, bulgunun karar ağırlığını değerlendiren ekibin aynı olmaması. Dördüncü bileşen, keşifsel bulguların ayrı bir rafta tutulup ancak bağımsız bir veri dilimiyle ya da sonraki dönem verisiyle sınandıktan sonra doğrulanmış statüsüne geçirilmesidir. Bu dört bileşen birlikte çalıştığında ortaya çıkan şey daha az analiz değil, daha doğru etiketlenmiş analizdir.

BEIREK'in sermaye-yoğun proje ve portföy incelemelerinde işlettiği yöntem bu ayrımı sürecin yapısına gömer. Bir fizibilite, satın alma incelemesi ya da yatırım kararı dosyası açıldığında, modele girecek varsayımlar analiz başlamadan önce tek bir kayıtta toplanır; her varsayımın yanına, o varsayımı geçersiz kılacak gözlem ve varsayımın kaynağı — ölçülmüş veri, sektör kalıbı ya da yönetim beyanı — yazılır. Model çalıştıktan sonra bulunan hiçbir ilişki, bu kayıtta karşılığı olmadan karar gerekçesi olarak dosyaya girmez; girerse keşifsel olarak etiketlenir ve duyarlılık analizinde ayrı bir senaryo olarak taşınır, ana senaryonun içinde erimez.

İkinci katman, karar öncesi işletilen bir ritmdir: FID veya teklif öncesi oturumda, dosyayı hazırlayan ekipten bağımsız bir okuyucu, ana senaryonun dayandığı üç ila beş kritik ilişkiyi tek tek açar ve her biri için tek bir soru sorar — bu ilişki, karar verilmeden önce mi yazıldı, yoksa veri incelendikten sonra mı bulundu. Cevap ikinci ise ilişki dosyadan çıkarılmaz, ancak taşıdığı karar ağırlığı düşürülür ve genellikle bir aşamalandırma koşuluna, bir doğrulama kilometre taşına ya da bir sözleşme koşuluna bağlanır. Bu ritmin ürettiği şey daha temkinli bir yatırım politikası değil, kararın gerçek belirsizlik düzeyiyle uyumlu bir taahhüt yapısıdır.

Analitik disiplinin ölçüsü, bir kurumun ne kadar veri ürettiği ya da ne kadar sofistike yöntem kullandığı değil; hangi bulgunun ne zaman ve hangi soruya cevaben ortaya çıktığını altı ay sonra hâlâ söyleyebilmesidir. Bu bilgiyi tutmayan bir organizasyon, kendi analizinin ne kadarının doğrulama ne kadarının arama olduğunu bilmez, ve bu ayrımı bilmeyen bir karar masasında güven düzeyi bulgunun gücünden değil, sunumun netliğinden gelir.