Bir pilot uygulamanın kapanış toplantısında, sunumun ikinci sayfasında duran "pilotun amacı" ifadesi, altı ay önce aynı pilotu onaylayan karar metninde yazan amaçla çoğu zaman birebir örtüşmez. Pilot, yeni bir satış kanalının müşteri edinme maliyetini düşürüp düşürmeyeceğini sınamak üzere başlatılmıştır; gelen veri edinme maliyetinde kayda değer bir hareket göstermez, buna karşılık ortalama sepet büyüklüğünde belirgin bir artış görülür, ve kapanış sunumu pilotu "sepet büyüklüğü tezinin doğrulanması" olarak kayda geçirir. Toplantıda kimse yanlış bir şey söylemez, hiçbir belge tahrif edilmez; yalnızca orijinal onay metni açılmaz. Geriye dönüp bakıldığında ortaya çıkan tablo, kurumun ardışık on iki denemesinin on ikisini de doğrulamış olduğu, dolayısıyla hiçbirinden ayırt edici bir bilgi çıkarmadığı bir seridir.
Aynı örüntü farklı odalarda farklı kılıklarla tekrarlanır. Bir yatırım komitesi oturumunda, gerçekleşen getiri başlangıçtaki tezle uyuşmadığında, tez sessizce genişletilir ve pozisyon "zaten çeşitlendirme amaçlıydı" başlığı altına taşınır. Bir bütçe görüşmesinde, geçen yıl pazarlama harcamasının artırılmasına gerekçe olan büyüme hedefi tutmadığında, aynı harcama bu yıl "marka bilinirliği yatırımı" olarak yeniden çerçevelenir. Bir tedarikçi değişikliğinin gerekçesi maliyet iken, maliyet düşmediği halde teslim süresi kısaldığında karar "tedarik güvenliği kararı" olarak anılmaya başlar. Ortak işaret her seferinde aynıdır: başarı ölçütünün, verinin masaya geldiği toplantıda tanımlanıyor olması.
Bu davranışın adı HARKing'tir — hypothesizing after the results are known, yani sonuçlar bilindikten sonra hipotez kurup onu baştan kurulmuş gibi sunmak. Mekanizma iki katmanda çalışır. Birinci katman bilişseldir: insan hafızası olayları depolamaz, yeniden inşa eder, ve yeniden inşa her zaman mevcut sonucun ışığında yapılır; sonucu bildikten sonra "aslında bunu bekliyordum" duygusu, bilinçli bir çarpıtma değil, hatırlamanın normal işleyişidir. İkinci katman örgütseldir: kurumlar tutarlı anlatıyı ödüllendirir, çünkü tutarlı anlatı koordinasyon maliyetini düşürür, ve bir yöneticinin "bunu sınadık, tezimiz yanlış çıktı" demesi ile "bunu sınadık, şu tez doğrulandı" demesi arasındaki kariyer farkı çoğu organizasyonda örtük ama gerçektir.
Bu eğilim belirli koşullarda işlevseldir ve bunu görmeden nötrleme tasarlanamaz. Erken keşif aşamasında, hangi değişkenin belirleyici olduğu henüz bilinmezken, veriye bakıp yeni bir açıklama kurmak öğrenmenin kendisidir; olgunlaşmamış bir hattı katı bir ön hipoteze kilitlemek, sinyalin görülmesini engeller. Sorun kısayolun kendisinde değil, koşul değiştikten sonra kısayolun devam etmesindedir: keşif aşamasında üretilen bir açıklama, doğrulama aşamasında üretilmiş gibi raporlandığı anda, kararın dayandığı kanıt zinciri kopar. Keşif ile doğrulama aynı cümlede birleştirildiğinde, kurum elinde ne olduğunu — bir bulgu mu, yoksa yeterince metrik izlendiğinde istatistiksel olarak beklenen bir dalgalanma mı — artık ayırt edemez.
Mekaniğin en az fark edilen yanı seçim etkisidir. Bir pilot tipik olarak tek bir metrik değil, on beş ile otuz arasında gösterge üretir; bunların bir kısmının salt gürültü nedeniyle anlamlı görünecek ölçüde hareket etmesi beklenen bir sonuçtur. Hipotez sonradan seçildiğinde, seçilen şey en güçlü sinyal değil, en güçlü görünen gürültüdür, ve bu gürültü bir sonraki dönemde ortalamaya döndüğünde kurum bunu "uygulama zayıflığı" olarak okur, hipotezin baştan var olmadığı ihtimalini değil. Böylece her program başarılı ilan edilebilir hale gelir; yanlışlanabilirliğini kaybetmiş bir program ise, tanımı gereği, karar için bilgi üretmeyi bırakmıştır.
Kurumsal bedelin ilk göründüğü yer öğrenme hızıdır. Bir organizasyonun iptal ettiği girişim oranı, öğrendiğinin en dolaysız göstergesidir; bu oran sıfıra yaklaşıyorsa portföy iyi çalışmıyor demek değildir, portföyün değerlendirilmediği anlamına gelir. Pratikte bu, aynı denemenin üç yıl boyunca farklı isimlerle yeniden bütçelenmesi olarak görünür — kanal denemesi, ardından kanal optimizasyonu, ardından kanal dönüşüm programı — ve her turda önceki turun "başarılı" sayılmış olması, hattın kapatılmasını gerekçesiz bırakır. Sermayenin tükenmiş bir hatta kilitli kalması, yanlış bir yatırım yapmaktan tipik olarak daha pahalıdır, zira maliyet gider kaleminde değil, yapılmayan tahsiste birikir.
İkinci yüzey inceleme masasıdır. Bir alıcı ya da yatırımcı, büyümenin nereden geldiğini sorduğunda aslında tek bir şeyi sınar: performansın tekrarlanabilir bir mekanizmaya mı, yoksa geriye dönük kurulmuş bir anlatıya mı dayandığını. Due diligence sürecinde bu ayrım, satış artışının hangi kararla ilişkilendirildiğinin belgelenip belgelenmediğine bakılarak yapılır; kararların gerekçesi yalnızca sonuç sonrası sunumlarda mevcutsa, atıf zinciri doğrulanamaz. Bunun değerleme karşılığı çoğu zaman doğrudan bir çarpan indirimi değildir; earn-out yapısının payının büyümesi, escrow oranının yükselmesi, temsil ve tekeffül kapsamının genişlemesi ve kurucunun kapanış sonrası bağlılık süresinin uzatılması biçiminde ortaya çıkar. Fiyatın kendisi korunur, riskin taşıyıcısı değişir.
Sermaye-yoğun projelerde aynı eğilim daha erken ve daha pahalı bir yüzeye çarpar. FID öncesinde yapılan saha testleri, saha ölçümleri ve teknik pilotlar, finansal modelin varsayım setine girdi verir; bu girdilerin hangi soruyu yanıtlamak üzere tasarlandığı kayıt altında değilse, kredi verenin bağımsız teknik danışmanı varsayımın kaynağını doğrulayamaz ve tipik olarak muhafazakâr bir ikame varsayım uygular. Bu ikame, tek başına küçük görünen bir üretim ya da verimlilik farkı üzerinden DSCR'ye yansır, borç kapasitesini daraltır, ve kapanışta sponsor equity ihtiyacını büyütür. Aynı zayıflık sözleşme tarafında da görünür: performans garantisinin hangi test protokolüne bağlandığı belirsizse, LD tavanı müzakerede yükleniciye kayan bir pazarlık alanına dönüşür.
Bu eğilim bireysel farkındalıkla yönetilmez, çünkü sorun dürüstlük eksikliği değil, kaydın zamanlamasıdır. Etkili müdahalenin dört bileşeni vardır: birincisi, öneri anında — veriden önce — tek bir birincil metriğin, bu metrik üzerinde bir eşik değerin ve programın hangi sonuçta durdurulacağının yazıya geçirilmesi; ikincisi, başarı ölçütünü tanımlayan rol ile sonucu raporlayan rolün ayrılması, ki bu ayrım küçük ekiplerde bile bir imza düzeyinde kurulabilir; üçüncüsü, ikincil bulguların "doğrulanmış sonuç" değil "keşif" olarak etiketlenmesi ve ayrı bir sınamaya bağlanmadan karara girdi sayılmaması; dördüncüsü, kapanış oturumunun orijinal onay metninin okunmasıyla başlaması, özet slaytla değil.
BEIREK'in yönettiği projelerde bu, karar kaydının onay anında değil öneri anında tutulmasıyla işletilir. Her sınama — bir teknik pilot, bir tedarikçi denemesi, bir ticari yapı testi — kapsam belgesine tek birincil soru, tek birincil ölçüt ve önceden yazılmış bir durdurma eşiğiyle girer; ikincil gözlemler ayrı bir keşif defterinde toplanır ve bir sonraki döngünün hipotez havuzuna aktarılır, mevcut döngünün sonucuna eklenmez. Gözden geçirme ritmi buna göre kurulur: kapanış oturumu, orijinal kapsam belgesinin okunmasıyla açılır, ve sonucun hipotezle uyuşmadığı durumlar bir yönetim başarısızlığı olarak değil, döngünün en yüksek bilgi değerli çıktısı olarak kayda geçirilir.
Aynı disiplin, işlem tarafında varsayım soy kütüğü olarak uygulanır. Finansal modeldeki her önemli varsayımın yanında, o varsayımın hangi belgeden, hangi tarihte ve hangi soruya cevaben türetildiği taşınır; böylece due diligence sırasında karşı taraf bir rakamı sorguladığında, cevap sonradan kurulmuş bir gerekçe değil, tarihlenmiş bir kanıt zinciri olur. Bu zincirin varlığı müzakere tonunu ölçülebilir biçimde değiştirir, zira alıcının riski fiyatlama refleksi, doğrulanamayan atıfların sayısıyla doğru orantılı çalışır.
Bir kurumun ne kadar öğrendiği, ne kadar çok denediğiyle değil, denemelerinin kaçının kendi hipotezini yanlışlayabilecek biçimde kurulduğuyla ölçülür. Son on iki kararın gerekçesi, o kararların alındığı andaki belgeden okunabiliyor mu, yoksa yalnızca sonucun bilindiği toplantının sunumundan mı — bu tek soru, çoğu organizasyonda kurumsal olgunluğun mevcut eşiğini olduğu gibi gösterir.