Bir ürün yol haritası görüşmesinde, geçen çeyrekte geliştirilen bir özelliğin kaç müşteri tarafından, hangi sıklıkla ve hangi iş akışının içinde kullanıldığı sorulduğunda, cevap çoğu zaman kullanım verisinden değil, satış ekibinden gelen izlenimden ya da birkaç müşteri görüşmesinden türetilir; oysa aynı şirkette bir analitik aracı kurulu, gösterge paneli açık ve günlük aktif kullanıcı sayısı ekranda durmaktadır. Bu iki gerçek yan yana durabilir, çünkü ölçüm ile karar arasındaki bağ kurulmuş değildir. Panel, haftalık toplantının başında bir dakika bakılan bir ritüel nesnesidir; yol haritasını belirleyen şey ise en büyük müşterinin son talebi, kurucunun bir konferansta duyduğu eğilim ya da rakibin geçen ay çıkardığı özelliktir. İnceleme masasında bu ayrımın görünmesi genellikle tek bir soruyla olur: son üç ürün kararının her birinin dayandığı kullanım verisi gösterilebilir mi.
Bu davranışın altında yatan mekanizma, ölçümün maliyetiyle kararın aciliyeti arasındaki asimetridir. Bir olayın doğru tanımlanması, doğru tetiklenmesi, doğru segmentle eşleştirilmesi ve zaman içinde tutarlı kalması, ürün ekibinin haftalarını alan bir altyapı işidir; buna karşılık bir özelliğin geliştirilmesine karar vermek, on beş dakikalık bir toplantıda ve mevcut sezgilerle yapılabilir. Kısa vadede ikinci yol rasyoneldir, çünkü erken aşamada ürün ekibi zaten kullanıcıya yakındır ve sezgi ile veri arasındaki fark küçüktür. Sorun, koşul değiştiğinde tercihin sabit kalmasıdır: müşteri sayısı üç haneye çıktığında, segmentler çeşitlendiğinde ve ekip kullanıcıdan iki kademe uzaklaştığında, sezginin isabet oranı düşer ama ona duyulan güven düşmez.
İkinci bir mekanizma, teyit yanlılığının analitik üzerindeki sessiz etkisidir. Kullanım verisi ekibin beklentisiyle uyumlu çıktığında sorgulanmaz, uyumsuz çıktığında ise ölçümün kendisi sorgulanır — etiketleme hatalı olabilir, örneklem küçüktür, o dönemde bir kampanya vardı. Bu tercih tek tek bakıldığında makuldür, çünkü ölçüm gerçekten de kırılgandır; fakat sistematik uygulandığında analitik, hipotezi test eden bir araç olmaktan çıkıp alınmış kararı gerekçelendiren bir arşive dönüşür. İnceleme tarafının aradığı işaret tam da burada belirir: kullanım verisinin bir ürün kararını iptal ettiği, geri aldığı ya da yönünü değiştirdiği bir örnek var mı. Böyle bir örnek gösterilebiliyorsa analitiğin işlediği kabul edilir; gösterilemiyorsa, panelin varlığı yalnızca bir yazılım aboneliğidir.
Kullanım analitiğinin resmî tanımlılığı, araç seçimiyle değil, olay sözlüğüyle ölçülür. Hangi kullanıcı eyleminin hangi isimle, hangi özelliklerle ve hangi koşulda kaydedildiğini tanımlayan, ürün yönetimi tarafından onaylanmış ve sürüm kontrolünde tutulan bir doküman varsa, yapı kurulmuştur; yoksa, ölçüm mühendislerin geliştirme sırasında serbestçe eklediği log satırlarının toplamıdır ve iki farklı ekranda aynı ismi taşıyan iki farklı olay bulunması olağandır. Bu belgenin yokluğu due diligence sürecinde doğrudan bir bulgu olarak yazılmaz; daha yıkıcı biçimde, sunulan kullanım grafiklerinin tümünü doğrulanamaz kategorisine düşürür. Belgelenmemiş bir metrik, karşı tarafın modelinde sıfır ağırlık taşır — yanlış olduğu için değil, kontrol edilemediği için.
Kurumsal bedelin en somut kanalı gelir tahminidir. Bir SaaS ya da abonelik yapısında yenileme oranı varsayımı, sözleşme yenilemesinin geçmiş verisinden türetilebilir; fakat inceleme tarafı bu varsayımın ileriye dönük geçerliliğini ancak kullanım yoğunluğuyla eşleştirebildiğinde kabul eder. Sözleşmesi yürüyen ama üç aydır ürüne giriş yapmayan bir müşteri kütlesi, gelir tablosunda henüz görünmeyen bir yenileme riskidir ve bu riski görebilen taraf, onu satış fiyatına değil, earn-out yapısına ya da kapanış sonrası tutulan bedele yansıtır. Kullanım verisi müşteri bazında segmentlenemediğinde, bu risk ölçülemediği için ortadan kalkmaz; ölçülemediği için tamamı yatırımcı tarafından muhafazakâr biçimde varsayılır ve değerleme çarpanı bu varsayımın gölgesinde şekillenir.
İkinci bedel kanalı, ürün geliştirme harcamasının verimliliğine dair yargıdır. Yıllık mühendislik bütçesinin ne kadarının, altı ay sonra ölçülebilir kullanım üretmeyen özelliklere gittiği sorusu, kullanım analitiği kurulu bir şirkette cevaplanabilir bir sorudur; kurulu olmayan bir şirkette ise cevap ancak ekibin hafızasıyla verilir. İnceleme tarafı bu soruyu genellikle doğrudan sormaz, fakat yol haritası ile kullanım verisini yan yana koyduğunda cevabı kendi çıkarır. Geliştirilen özelliklerin belirgin bir bölümünün düşük benimsenme oranında kaldığı görülüyorsa, bu bulgu Ar-Ge harcamasının sermaye niteliğini zayıflatır ve harcama, yatırım değil işletme gideri gibi modellenir. Bu modelleme farkı, çarpan üzerinden değil, doğrudan normalize edilmiş kârlılık üzerinden değerlemeye yansır.
Üçüncü kanal, sahiplik boşluğunun ürettiği kurucu bağımlılığıdır. Kullanım analitiği pek çok şirkette resmî olarak veri ekibine ya da tek bir analiste bağlıdır; pratikte ise anlamlı sorguyu yazabilen, hangi tablonun hangi dönemde bozulduğunu bilen ve metriğin tanımını hafızasında taşıyan tek bir kişi vardır. Bu kişi ayrıldığında panel çalışmaya devam eder ama yorumlanabilirliği kaybolur, çünkü verinin anlamı belgede değil, o kişinin bağlam bilgisinde tutulmaktadır. Yatırımcı açısından bu durum, kurucu bağımlılığının teknik kılığa girmiş hâlidir ve tespit edildiğinde tipik olarak anahtar personel kilit maddesi, kapanış öncesi bir dokümantasyon koşulu ya da escrow oranında bir artış olarak karşılık bulur.
Sürekliliğin en sık kırıldığı yer ise sürüm geçişleridir. Ürün arayüzü yenilendiğinde ya da veri altyapısı taşındığında olay tanımları çoğu zaman sessizce değişir; aynı isimli metrik, geçiş öncesi ve sonrası farklı bir davranışı ölçmeye başlar. Bu değişiklik bir karar kaydına bağlanmadığında, şirket tarihsel seriyi kaybettiğini ancak aylar sonra, bir trendin açıklanamadığı anda fark eder. İnceleme sürecinde ise sonuç daha nettir: sunulan üç yıllık kullanım grafiği, tanım değişikliğinin tarihinde ikiye bölünür ve iki parça arasında karşılaştırma yapılamayacağı için serinin tamamı destekleyici kanıt olmaktan çıkar. Ölçümün değeri süresinden değil, tanım tutarlılığının süresinden gelir.
Yapısal müdahale, farkındalıkla değil, dört ayrı bileşenin kurulmasıyla mümkündür. Birincisi, ürün yönetiminin sahiplendiği ve sürüm kontrolünde tutulan bir olay sözlüğüdür; her olayın tanımı, iş gerekçesi ve hangi karara girdiği aynı satırda durur. İkincisi, ürün kararlarının önerildiği anda — onaylandığı anda değil — hangi kullanım hipotezine dayandığını ve hangi eşikte başarısız sayılacağını kayda geçiren bir karar kaydıdır. Üçüncüsü, yayına alınan her özelliğin sabit bir gecikmeyle benimsenme oranı üzerinden gözden geçirildiği bir ritimdir; bu ritim, sonucu kimsenin savunmadığı bir formatta işlediğinde işe yarar. Dördüncüsü, metrik tanımlarında yapılan her değişikliği tarihiyle birlikte kaydeden ve tarihsel seriyi buna göre işaretleyen bir tanım günlüğüdür.
BEIREK bu müdahaleyi genellikle mevcut panellerin üzerine bir katman eklemek yerine, karar ile ölçüm arasındaki bağı geriye doğru kurarak yapar: son on iki ayın ürün kararları tek tek açılır, her birinin dayandığı kanıt aranır, bulunamadığı yerler boşluk olarak işaretlenir ve bu boşlukların hangi metrikle kapatılabileceği tanımlanır. Bu geriye dönük tarama, hangi olayların ölçülmesi gerektiğini teorik bir metrik listesinden çok daha isabetli biçimde belirler, çünkü şirketin fiilen verdiği kararların yapısından türer. Ardından olay sözlüğü, karar kaydı ve gözden geçirme ritmi yazılı hâle getirilir ve sahiplik ürün yönetimine — veri ekibine değil — bağlanır; veri ekibi altyapıyı işletir, metriğin anlamını ise kararı veren taraf taşır.
Bu düzenin inceleme masasındaki karşılığı, grafiklerin daha güzel görünmesi değil, sunulan her sayının arkasında bir tanım, bir sahip ve bir karar izinin bulunmasıdır. Yatırımcı tarafı kullanım analitiğine bakarken aslında iki ayrı şeyi test eder: gelir tahmininin dayandığı davranışsal varsayımların doğrulanabilirliğini ve ürün ekibinin kendi kararlarını denetleyebilme kapasitesini. Birincisi modeli, ikincisi yönetim kalitesine dair yargıyı belirler; ikisinin de kaynağı aynı belgelerdir. Kurulu bir yapıda bu belgeler zaten günlük işin yan ürünüdür ve veri odasına ek bir hazırlık gerektirmeden girer.
Nihayetinde kullanım analitiğinin değerlemedeki işlevi, ürünün ne kadar kullanıldığını göstermek değil, şirketin ürün hakkındaki iddialarını kendi kendine sınayabildiğini göstermektir. Bir şirketin çarpanını belirleyen şey çoğu zaman büyümenin kendisi değil, büyümenin hangi mekanizmadan geldiğinin kurucudan bağımsız biçimde açıklanabilmesidir; kullanım verisi bu açıklamanın tek doğrulanabilir zeminidir. Bu zemin yoksa, geriye anlatı kalır — ve anlatı, inceleme masasında her zaman iskonto edilir.