Bir yönetim kurulu sunumunda, üç çeyrektir aynı grafikle takip edilen bir göstergenin dördüncü çeyrekte biraz farklı bir başlıkla geldiği görülür; başlığın altındaki dipnot, hesaplamaya bu dönemden itibaren belirli bir kalemin dahil edilmediğini ya da ölçüm penceresinin on iki aydan takip eden on iki aya çevrildiğini bildirir. Değişikliğin gerekçesi teknik olarak kusursuzdur ve çoğu zaman gerçekten de daha doğru bir ölçüm önerir. Dikkat çeken şey gerekçenin kendisi değil, zamanlamasıdır: tanım, göstergenin hedefin altında kaldığı ilk dönemde iyileşmiştir, hedefin aşıldığı dönemlerde ise aynı metodolojik kusur üç çeyrek boyunca kimsenin gündemine girmemiştir.
Aynı örüntü, bir satış organizasyonunda müşteri kazanımının tanımına imzalı sözleşmenin yanı sıra niyet mektubunun eklenmesiyle, bir üretim tesisinde fire oranının paydasına yeniden işlenmiş ürünün dahil edilmesiyle, bir hizmet biriminde çözüm süresinin sayacının müşteriden bilgi beklenen günleri durdurmasıyla belirir. Her bir düzenlemenin ayrı ayrı savunusu vardır ve savunuların çoğu ilk bakışta ikna edicidir. Tekrarlayan olan şey, düzenlemelerin yönünün istisnasız aynı tarafa bakmasıdır; bir yıl boyunca yapılan tanım değişikliklerinin tamamı raporlanan performansı iyileştirmişse, bu artık ölçüm metodolojisinin olgunlaşması değil, ölçütün karar vericiden kaçmasıdır.
Bu davranışın adı metric manipulation — performans göstergesinin tanımının, kapsamının veya ölçüm aralığının, ölçülen tarafa avantaj sağlayacak biçimde yeniden düzenlenmesi — olmakla birlikte, terimin taşıdığı ahlaki yük mekanizmayı anlamayı güçleştirir. Mekanizmanın çalışması için kötü niyete ihtiyaç yoktur; ihtiyaç duyduğu tek şey, tanım yetkisi ile performans sorumluluğunun aynı birimde toplanmasıdır. Bir göstergeden sorumlu tutulan yönetici, aynı zamanda o göstergenin nasıl hesaplandığını belirleme yetkisini de taşıyorsa, kötü bir çeyrek sonrasında metodolojiyi gözden geçirmesi ona rasyonel, hatta özenli bir davranış olarak görünür. İnsan, kendi lehine olan argümanı daha hızlı ikna edici bulur ve aleyhine olanı daha uzun süre inceler; bu asimetri, tek tek bakıldığında hiçbir adımı sahtekârlık olmayan bir zincir üretir.
Mekanizmanın ikinci katmanı, göstergenin kendisinin doğası gereği eksik olmasından gelir. Hiçbir gösterge ölçmeye çalıştığı olguyu tam olarak temsil etmez; her tanım bir sadeleştirmedir ve her sadeleştirme, birilerinin haklı olarak itiraz edebileceği bir kenar bırakır. Bu kenarlar, tanımı yeniden açmak isteyen taraf için sürekli hazır bir gerekçe deposu oluşturur, zira gerçekten de daha doğru bir tanım her zaman mümkündür. Sorun, düzeltmenin mümkün olmasında değil, düzeltme talebinin ne zaman gündeme geldiğinde ortaya çıkar: metodolojik kusur, hedefin kaçırıldığı çeyrekte fark ediliyorsa, fark edilen şey kusur değil, kusurun sağladığı hareket alanıdır.
Üçüncü katman örgütseldir ve en az bireysel eğilim kadar belirleyicidir. Gösterge hedefleri prim, terfi, bütçe tahsisi ve kaynak dağıtımına bağlandıkça, göstergeyi iyileştirmenin iki yolu arasındaki maliyet farkı büyür: işi değiştirmek pahalı, yavaş ve belirsizken, tanımı değiştirmek ucuz, hızlı ve sonucu kesindir. Rasyonel bir birim, kısa vadede daha düşük maliyetli olan yolu seçer ve bu tercih, ilk seferinde bir istisna olarak, ikinci seferinde bir emsal olarak, üçüncü seferinde bir norm olarak yerleşir. Bu noktadan sonra ölçüm sistemi hâlâ çalışıyor görünür — grafikler üretilir, hedefler tutar, panolar yeşil kalır — fakat sistemin ürettiği bilgi ile gerçekliğin arasındaki bağ kopmuştur.
Kurumsal bedel önce karar kalitesinde belirir. Tanımı kaymış bir gösterge, yalnızca son dönemin performansını yanlış bildirmekle kalmaz; geçmiş dönemler yeni tanımla yeniden hesaplanmadığı sürece serinin tamamını karşılaştırılamaz hâle getirir. Kaynak tahsisi, kapasite yatırımı ve fiyatlama kararları eğilim üzerinden alındığı için, kırılmış bir seri üzerinde yürütülen her muhakeme, yanlış olduğu bilinmeyen bir zemine oturur. Bu tür bir hata gürültülü biçimde ortaya çıkmaz; genellikle iki yıl sonra, gerçekleşen sonuç ile raporlanan eğilim arasındaki açıklanamayan farkın büyümesiyle kendini gösterir ve o aşamada nedenin izini sürmek, tanım değişikliklerinin kaydı tutulmamışsa fiilen imkânsızdır.
İkinci bedel, işletme sermayesi ve nakit döngüsünde toplanır. Tanımı esnetilmiş bir kazanım göstergesi, henüz sözleşmeye dönüşmemiş bir hacmi kazanılmış saydığında, üretim planlaması ve stok politikası bu hacme göre kurulur; fire oranının paydasına yeniden işlenmiş ürün eklendiğinde, kalite yatırımının geri dönüşü hesaplanamaz hâle gelir ve yatırım kararı ertelenir. Bu tür kaymaların bilançodaki karşılığı çoğu zaman kendi kaleminde değil, komşu kalemde birikir — stok devir hızında, alacak yaşlandırmasında, garanti karşılığında. Göstergenin tanımı değiştiği için değil, tanımın değiştiği kayıt altına alınmadığı için, birikimin kaynağı geriye dönük olarak ayrıştırılamaz.
Üçüncü ve çoğu zaman en pahalı bedel, inceleme masasında ödenir. Bir due diligence sürecinde, alıcı tarafın analisti yönetim raporlarındaki bir göstergenin tanımının dönem içinde değiştiğini tespit ettiğinde, bulgunun etkisi o göstergeyle sınırlı kalmaz; tespit anından itibaren yönetim raporlamasının tamamı ayrı bir güvenilirlik kategorisine taşınır ve sunulan her seri bağımsız doğrulama talebi doğurur. Bunun işlem üzerindeki karşılığı tipik olarak üç yerde görünür: değerleme çarpanında uygulanan iskonto, kapanış sonrasına taşınan bir earn-out yapısı, ve temsil ve tekeffül kapsamının yönetim bilgilerini içerecek biçimde genişletilmesi. Bu üçünün toplamı, yeniden tanımlamayla kazanılmış olan raporlanmış iyileşmenin çok üzerinde bir değer transferi üretir.
Bu eğilimi nötrleyen mekanizma bireysel dürüstlük çağrısı değil, tanım yetkisinin yeniden konumlandırılmasıdır ve dört bileşene ayrılır. Birincisi tanım ayrılığıdır: bir göstergenin hesaplama kuralını yazma yetkisi, o göstergeden sorumlu tutulan birimin dışında durur ve tipik olarak finans ya da kurumsal performans fonksiyonunda toplanır. İkincisi değişiklik kaydıdır: her tanım revizyonu, talebi kimin açtığı, hangi dönemde açıldığı ve revizyonun geçmiş serilere uygulanmış hâlinin eski seriyle yan yana gösterildiği tek bir kayıtta tutulur. Üçüncüsü geriye dönük yeniden üretim zorunluluğudur: yeni tanım kabul edilirse, en az önceki sekiz çeyrek yeni tanımla yeniden hesaplanmadan yayımlanmaz. Dördüncüsü zamanlama disiplinidir: tanım değişikliği talepleri dönem kapanışında değil, dönem başlamadan önce açılan bir pencerede değerlendirilir.
BEIREK'in yürüttüğü projelerde bu mimari, sözleşme ve raporlama hattının birlikte kurulduğu ilk aşamada sabitlenir; gösterge sözlüğü, projenin teknik kapsamı ile aynı belge setinde tanımlanır ve her göstergenin hesaplama kuralı, veri kaynağı, kesim tarihi ve istisna listesi tek bir tanım kaydında dondurulur. Bu kaydın sahibi proje sahibi ya da yüklenici değil, bağımsız yürüttüğümüz kontrol hattıdır; dolayısıyla bir gecikme ya da sapma dönemi geldiğinde tartışma, göstergenin nasıl hesaplandığı üzerine değil, sapmanın nedeni üzerine kurulur. Aylık raporlama ritminde, tanım değişikliği talepleri ayrı bir gündem maddesi olarak açılır ve talep kabul edildiğinde geçmiş dönemler yeni tanımla yeniden üretilerek eski seriyle birlikte sunulur.
Aynı disiplinin ikinci ayağı, işlem tarafına hazırlık yapan portföy ve holding yapılarında işletilir. Bir varlığın satış ya da finansman sürecine girmesinden önce yürüttüğümüz iç incelemede, son üç yılın yönetim raporları tanım tutarlılığı açısından taranır; tanımı dönem içinde değişmiş her gösterge tespit edilir, değişikliğin gerekçesi ve etkisi ayrı bir ekte belgelenir, ve seriler tek bir tanımla yeniden üretilir. Bu çalışmanın amacı geçmişi düzeltmek değil, karşı tarafın kendi analistinin bulacağı şeyi ondan önce bulup açıklanmış hâlde masaya koymaktır; açıklanmış bir tanım değişikliği metodolojik olgunluk olarak okunurken, karşı tarafça keşfedilen aynı değişiklik raporlama güvenilirliği sorunu olarak fiyatlanır.
Ölçüm sisteminin sağlığını gösteren tek işaret, hedeflerin tutup tutmaması değildir; tanımların hangi sıklıkla ve hangi yönde değiştiğidir. Bir kurumda son üç yıl içinde yapılmış tanım revizyonlarının listesi çıkarıldığında, bu listenin ne kadar kısa olduğu değil, revizyonların raporlanan performans üzerindeki etkisinin iki yöne de dağılıp dağılmadığı asıl bilgiyi taşır; hepsi aynı tarafa bakıyorsa, ölçülen şey artık performans değil, ölçütün esnekliğidir.