Sıfır oran mı, veri yokluğu mu? Dürüst ölçümün beş kuralı

Kısa cevap: bir oranın paydası sıfırsa o oran yoktur — %0 değildir. Panelinizde “%0 memnuniyet” yazması müşterilerinizin memnuniyetsiz olduğu anlamına gelmez; çoğu zaman hiç kimsenin oy vermediği anlamına gelir. İkisini aynı kutuda göstermek, ürün panelinin yapabileceği en sessiz yalandır.

Bu yazı, kendi panelimizi yazarken uyduğumuz beş kuralı anlatıyor. Hepsi ürüne uygulandı; burada söz verilmiyor, olan anlatılıyor.

1. Payda sıfırsa oran yoktur

Klasik hata: olumlu / toplam hesaplanır, toplam sıfırken sonuç 0 olur ve ekrana kırmızı bir %0 düşer. Kullanıcı bunu bir ölçüm sanır. Oysa ölçüm yapılmamıştır.

Doğrusu: payda sıfırken oranı hesaplamamak ve ekranda “henüz veri yok” demek. Bizim uçlarımız bu durumda sayı yerine null döndürür ve her blokta ayrı bir “veri var mı” bayrağı taşır; panel de yüzde yazmak yerine açıkça veri olmadığını söyler. Fark küçük görünür — ta ki ilk haftasındaki bir müşteri kendi asistanı hakkında “%0 memnuniyet” görene kadar.

2. Kapsama, oranın kendisi kadar önemlidir

“Cevapların %88'i olumlu” cümlesi tek başına eksiktir. Kaç cevabın oylandığını bilmeden bu sayı yorumlanamaz: 1.240 cevabın 145'i oylandıysa, %88 aslında cevapların yalnız %12'si hakkında bir şey söylüyor.

Bu yüzden oylanan cevap oranını ayrı bir ölçüm olarak, olumlu oranının yanında gösteriyoruz. İyi bir sayının yanına onun ne kadar temsil ettiğini yazmak, sayıyı zayıflatmaz — kullanılabilir hâle getirir.

3. Her ölçümün kendi zaman penceresi vardır ve ekran bunu söylemelidir

Sayfanın üstünde bir tarih aralığı seçici varsa, kullanıcı haklı olarak bütün sayıların o aralığa ait olduğunu varsayar. Gerçekte çoğu panelde öyle değildir: kimi metrik son 7 günden, kimi tüm zamanlardan gelir.

İki dürüst seçenek var: ya her şeyi gerçekten seçilen aralıkla hesaplayın, ya da her kartın yanına kendi penceresini yazın. Biz ikincisini yaptık ve seçicinin altına neyi etkilediğini açıkça yazdık: aralık yalnız sohbet sayısını ve soru dağılımını değiştiriyor; çözüm ve eskalasyon son 7 gün, memnuniyet tüm zamanlar. Bir seçicinin etkilemediği sayıyı etkiliyormuş gibi göstermek, yanlış sayı göstermekle aynı kapıya çıkar.

4. Ölçmediğiniz şeyi raporlamayın

Panel tasarımının en cazip anı, prototipte harika duran bir satırdır: “3 soruda kaynak bulunamadı”, “kapalı klasör yüzünden 41 doküman kullanılmıyor”. Sorun şu ki bu satırların bir kısmının arkasında veri yoktur — kimse ölçmemiştir.

Biz bu tür satırları ekrandan çıkardık ve yerlerine tahmin koymadık. Bir panel satırı bir vaattir: “bunu biliyorum” der. Bilmiyorsanız, boş bırakmak uydurmaktan iyidir. Aynı ilke widget'ta da geçerli: asistan bilgi bankasında olmayan bir şeyi uydurmaz, “bulamadım” der.

5. Boş liste “hiçbir şey olmadı” demek değildir

Denetim kaydı bunun en net örneği. Liste boşsa iki ihtimal vardır: gerçekten işlem yapılmamıştır, ya da o tarihte henüz kayıt tutulmuyordu. Kullanıcı bu ikisini ayırt edemezse, boş bir ekran “hesabınız güvende” diye okunur.

Çözüm basit: ekranın kaydın ne zaman başladığını söylemesi. Bizim denetim kaydımız listenin üstünde bunu yazar — “daha eski işlemler yapılmadı değil, kaydedilmedi”.

Neden bu kadar önemsiyoruz?

Çünkü bir panelin işi karar verdirmektir. Yanlış bir sayı yalnızca yanlış bilgi değildir; yanlış bir işe yol açar — var olmayan bir sorunu kovalarsınız ya da gerçek bir sorunu görmezsiniz. Bir asistanın uydurmaması ile bir panelin uydurmaması aynı disiplinin iki yüzüdür.

Uygulamada nasıl göründüğüne bakmak isterseniz: Cevap Denetimi (oylar ve kapsama), Raporlar (pencereler) ve Denetim Kaydı (boş listenin anlamı) sayfalarının hepsinde ekranın kendi görüntüsü var.

Kendi paneliniz için kontrol listesi

• Payda sıfırken hangi sayıyı gösteriyorsunuz — %0 mı, “veri yok” mu?
• Bir oranın yanında kaç ölçüme dayandığı yazıyor mu?
• Tarih aralığı seçiciniz sayfadaki her sayıyı gerçekten etkiliyor mu?
• Ekrandaki her satırın arkasında gerçekten tutulan bir veri var mı?
• Boş bir liste, “olmadı” ile “bakılmadı”yı ayırt ediyor mu?