Analytics Yol Raporları: Nerede Karar Verilir, Nerede Gürültü Başlar
Yol raporu sitede hangi sıranın izlendiğini gösterir, o sıranın neden izlendiğini göstermez. Aradaki fark küçük görünür, karar aşamasında büyür. Sankey diyagramının ilk adımları karar verilebilecek kadar sağlam, sonrası çoğunlukla gürültü, ve bunun sebebi aracın kalitesi değil kombinatorik.
Rapor tam olarak neyi sayar
Yol raporu oturumları adım adım sıralar ve aynı sırayı izleyen oturumları toplar. Çıktısı üç parçadan ibaret: düğüm (sayfa ya da ekran), bağlantı (bir düğümden diğerine geçiş), bağlantı kalınlığı (o geçişi yapan oturum sayısı). Bunun ötesindeki her şey sizin yorumunuz.
Rapordan sağlam çıkan bilgi de sınırlı: hangi sayfaların giriş noktası olduğu ve belirli bir adımdan sonra kaç oturumun düştüğü. Bu ikisi ölçülüyor, gerisi tahmin.
Geniş kısım veri, ince kısım gürültü
Elli sayfalık bir sitede üç adımlık yolların teorik sayısı 50 üzeri 3, yani 125.000. Gerçek trafik bunun küçük bir kısmına dağılır ama dağılım hızla incelir. Birinci adımda binlerce oturum taşıyan bağlantılar görürsünüz, dördüncü adımda bağlantıların çoğu tek haneli oturum taşır. Tek haneli bir bağlantıdan çıkarım yapmak, üç kişinin davranışını site geneline mal etmek demek.
Buradan çıkan pratik kural şu: kalınlığı toplam oturum sayısının binde birinin altına inen bağlantıyı hiç okumayın, filtreleyin. Diyagramın okunabilir hale gelmesi de zaten o filtreden sonra oluyor.
Aynı yol, farklı niyet
Arama sonuç sayfasında durup hiçbir sonuca tıklamadan çıkan iki kullanıcı raporda aynı satırdır. Biri aradığını bulamamıştır, diğeri cevabı sonuç başlığında zaten görmüştür. Rapor ikisini ayıramaz, ayırdığını iddia eden bir metrik de yok.
Yol raporunun işi soruyu bulmak, cevabı vermek değil. "Şu adımda oturumların yarısı düşüyor" bir bulgu değil, bir araştırma başlığı. Cevap beş kullanıcıyla yapılan yarım saatlik bir testten çıkar, diyagramdan değil.
Kurulum, raporun kendisidir
Yol raporu tetiklenen olayların sırasından başka bir şey değil. Tek sayfalık uygulamalarda rota değişiminde sayfa görüntüleme olayı gönderilmiyorsa rapor herkesi tek adımda çıkmış gösterir (karşılaştığım "kullanıcılar hiç ilerlemiyor" vakalarının çoğu buradan geliyordu). Ekran adı koddan dinamik üretiliyorsa da tek bir ekran raporda onlarca düğüme bölünür ve yollar yapay biçimde dağılır.
Diyagrama bakmadan önce iki şeyi doğrulayın: olayın hangi kod noktasında tetiklendiği ve düğüm adının sabit olup olmadığı. Bu doğrulanmadan yapılan yol analizi, kullanıcı davranışının değil ölçüm hatasının haritasını çıkarır.
Raporu ne için açmalı
Yol raporunu keşif için açmak vakit kaybı. Elinizde hipotez varken açın.
En verimli kullanımı, dönüşüm noktasından geriye doğru bakmak: hedefe ulaşan oturumların oraya hangi girişten ve kaç adımda geldiğini görürsünüz, huninin zayıf halkası orada görünür hale gelir. İkinci verimli kullanım aynı akışı mobil ve masaüstü segmentlerinde ayrı ayrı çizdirmek, çünkü iki segment arasındaki fark tek başına bir arayüz sorununu işaret eder.
Geri kalanı için rapor yanlış araç. Kullanıcının niyetini merak ediyorsanız kullanıcıya sorun.