Yapay zekâ faydasını ölçmek

Kararı yazılmamış bir ölçüm, bitmeyen bir gösterge paneline dönüşür: her ay yeni bir metrik eklenir, hiçbir şey kapanmaz. “Pilotu sürdürelim mi” sorusu ile “bütçeyi iki katına çıkaralım mı” sorusu aynı kanıtı gerektirmez; ikincisi maliyet tarafında eksiksizlik ister, birincisi yön bilgisiyle yetinir.

Tanım kayması, fayda ölçümünün en sessiz hatasıdır. “Çözüm süresi” kuyruk yapısı değiştiğinde farklı bir şeyi saymaya başlar; grafik düzelir, iş değişmemiştir. Tanımın tek cümleye indirilip tarihlenmesi bu kaymayı engellemez ama görünür kılar, çünkü değişiklik artık bilerek yapılmak zorundadır.

metrik: cevap_hazirlama_suresi
tanim: "Talebin uzmana atanmasıyla cevabın gönderilmesi arasındaki süre"
kaynak: "Destek sisteminin olay kaydı"
dahil: ["birinci seviye iade talepleri"]
haric: ["yeniden açılan talepler", "otomatik kapanan talepler"]
donem: "Taban çizgisi ve ölçüm döneminde aynı filtre uygulanır"
sahip: "Destek operasyon yöneticisi"
donduruldu: "2026-09-15"

Taban çizgisi, ölçüm çalışmasında sonradan telafi edilemeyen tek girdidir. Yayılım başladığı anda eski sürecin kaydı karışmaya başlar: bazı işler araçla, bazıları elle yapılır ve ikisini ayıran bir alan çoğu sistemde yoktur. Bu yüzden taban çizgisi, kurulum işinin değil ölçüm işinin ilk adımıdır ve pilottan önce biter.

• Pencere: işin doğal döngüsünü kapsasın — dönem kapanışı, kampanya, ay sonu gibi tepe dönemleri dışarıda bırakmayın.
• Ölçüler: hacim, çevrim süresi, yeniden iş veya düzeltme oranı ve elinizdeki mevcut kalite kaydı.
• Kaynak: sistem kaydı olsun, kişinin beyanı değil; beyan yalnızca öznel yük için kullanılır.
• Dondurma: taban çizgisi sayıları bir yere yazılır ve tarihlenir; sonradan yeniden hesaplanmaz.

Taban çizgisi kaçırıldıysa iki dürüst çıkış yolu vardır: metrik tanımını önce dondurup geçmiş sistem kayıtlarından geriye dönük hesaplamak ya da kalan ekiplere kademeli yayılım yapıp henüz açılmamış ekipleri o dönemin karşılaştırma grubu olarak kullanmak. Hafızadan kurulan taban çizgisi üçüncü bir yol değildir; raporun en kolay çürütülen yeri orasıdır.

Yalnızca önce/sonra karşılaştırması, aynı dönemde değişen her şeyi araca yazar: yeni işe alım, sezon, süreç değişikliği, ekipteki deneyim artışı. Karşılaştırma grubunun işlevi farkı büyütmek değil, farkın araca atfedilip atfedilemeyeceğini söylemektir.

Karşılaştırma grubunu cezalandırmayın: hangi tarihte erişim alacaklarını baştan duyurun. Duyurulmadığında ölçüm tartışması bir adalet tartışmasına dönüşür, grup gönülsüzleşir ve elde ettiğiniz veri de bu gönülsüzlüğü ölçmeye başlar.

Sağlayıcı faturası maliyetin en görünür ve çoğu kurumda en küçük parçasıdır. Eksik maliyet listesi faydayı olduğundan büyük gösterir; asıl sorun da bu abartının pilot ölçeğinde fark edilmemesi, yaygınlaştırma kararında ise doğrudan hataya dönüşmesidir.

En sık görülen abartı şu çarpımdır: kişi başına kazanılan dakika, kişi sayısıyla ve saatlik maliyetle çarpılır. Ortaya büyük bir sayı çıkar ama bordro değişmediği için o para hiçbir hesapta tasarruf olarak görünmez. Bu çarpımı bulan ilk inceleme raporun geri kalanına da güvenmeyi bırakır; tek bir şişirilmiş satır, doğru hesaplanmış her şeyi beraberinde götürür.

1. 01Kapasite: aynı ekip aynı sürede daha fazla iş bitirdi — hacim kaydından okunur.
2. 02Bekleyen iş: kuyruktaki iş eridi — kuyruk uzunluğu ve bekleme süresinden okunur.
3. 03Yeniden tahsis: kazanılan süre adı konmuş başka bir işe gitti — o işin çıktısından okunur.
4. 04Hiçbiri: kazanç, yük azalması olarak raporlanır; gerçek bir faydadır ama parasal değildir.

Dördüncü maddeyi dürüstçe yazmak raporu zayıflatmaz, güçlendirir. Yük azalmasının kendi karşılığı vardır: işe devam, ekipte kalma, hata oranı. Bunları parasal fayda diye sunmak yerine kendi adlarıyla raporlamak, bir sonraki bütçe konuşmasında elinizi sağlamlaştırır.

Hız iyileştirmeleri maliyeti çoğu zaman yok etmez, süreçte bir adım ileri taşır. İlk adımı ölçüp sonraki adımı ölçmeyen bir rapor, kâğıt üzerinde gerçek ama süreçte görünmeyen bir kazanç üretir; operasyon ekibi bunu haftalar içinde fark eder ve rapora olan güven biter.

• Yeniden iş: çıktının geri dönüp yeniden yapıldığı oran.
• Üst kademeye çıkma: ilk temasta çözülmeyip yukarı giden vaka oranı.
• Telafi teması: hatanın düzeltilmesi için yapılan ek görüşme ve yazışma.
• İnceleyicinin yükü: onaylayan kişinin okuma ve düzeltme süresi arttı mı?

Tek bir yüzde, kendisini taşıyan varsayımları gizler ve tartışmayı sayının doğruluğuna çeker. Aralıkla ve adı konmuş varsayımlarla sunulan aynı sonuç ise tartışmayı varsayımlara taşır — asıl sorulması gereken soru da zaten budur: hangi varsayım değişirse karar değişir?

Ölçümün asıl ürünü sayı değil, bir sonraki dönem aynı hesabı tekrarlayabilme yeteneğidir. Sorguyu, filtreyi ve hesabı raporun yanında saklayın; saklanmadığında bir sonraki çeyrekte ölçüm sıfırdan kurulur ve iki dönem birbiriyle karşılaştırılamaz.