Kullanıcı Testlerinde Grup Not Tutma: Kronolojik Kayıt mı, Yapışkan Not mu?

Bir kullanıcı testini üç kişi izlediğinde üç kat bulgu çıkmaz. Çoğunlukla aynı üç gözlemin üç kopyası çıkar. Grup halinde not tutmanın değeri kaç kişinin yazdığında değil, kimin neye baktığında saklı; yöntem seçimi de bundan sonra gelir.

Kalabalık gözlemci kadrosu daha çok bulgu demek değil

Genel kabul şu: farklı disiplinlerden insanlar aynı oturumu izlerse herkes kendi açısından bir şey yakalar, geliştirici teknik takılmayı, tasarımcı arayüz sorununu görür. Pratikte olan bu değil. Kullanıcı bir yerde belirgin biçimde tıkandığında salondaki herkes onu yazar, kimse kimsenin yazmadığı sessiz sorunu yazmaz. Kullanıcının doğru düğmeye bastığı ama önce iki saniye duraksadığı an, üç gözlemcinin de notunda eksiktir.

Bunun çaresi daha çok gözlemci değil, kapsamı bölmek. Biri tıklama yolunu ve görevin tamamlanıp tamamlanmadığını izler, biri katılımcının sesli söylediklerini ve tereddüt ettiği yerleri, biri hataları ve kullanıcının hatadan nasıl çıktığını. Aynı oturumdan çıkan üç not seti birbirinin kopyası olmaz, birbirini tamamlar.

Not tutucuları oturum sırasında canlı ortak bir dokümana bağlamam. Biri "katılımcı fiyat tablosunu bulamadı" yazdığı anda diğerleri kendi gözlemini o cümleye göre ayarlıyor ve bağımsızlık kayboluyor. Notlar ayrı tutulup oturumdan sonra birleştirilirse çakışmanın kendisi bilgi verir: aynı sorunu üç kişi birbirinden habersiz yazmışsa o sorun tartışmasız oradadır.

Kronolojik kayıt

Her gözlem olduğu sırayla, zaman damgasıyla bir tabloya yazılır. Uzaktan yürüyen ve gözlemcilerin farklı şehirlerde olduğu çalışmalarda başka pratik seçenek de yok zaten.

Zaman damgası tek başına işe yaramaz. Damganın değeri, analiz sırasında o saniyeye ekran kaydından geri dönebilmenizden gelir. Notun saati ile kaydın saati aynı referansa bağlı değilse elinizde ölü bir sütun kalır. Oturumu kaydı başlatarak açın ve şablonun ilk satırına kaydın sıfır noktasını işaretleyin; gerisi basit çıkarma işlemi.

Şablonda gerçekten fark yaratan tek düzenleme, gözlem ile yorumu ayrı sütunlara koymak. "Kullanıcı üç kez geri gitti" ile "kullanıcı menüyü anlamamış" aynı şey değil. İkisi tek sütunda karışınca analiz aşamasında hangisinin veri hangisinin tahmin olduğunu ayıramazsınız.

Yapışkan notlar ve gruplama

Aynı odadaki ekipler için hızlı yöntem: her gözlem ayrı bir yapışkan nota, sonra hepsi duvarda konu başlıklarına göre gruplanıyor. Teknik gereksinimi yok, gruplama sırasında ekip tartışarak ortaklaşıyor.

Sık verilen "her katılımcıya bir renk atayın" tavsiyesi belli bir noktadan sonra çalışmıyor. Standart yapışkan not paketlerinde dört ya da beş renk bulunur; sekiz katılımcılı bir çalışmada şema daha ikinci günde çöker. Rengi katılımcıya değil kategoriye ayırın (sorun, beklenti, öneri gibi), katılımcıyı notun köşesine K3 diye yazın. Renk uzaktan bakınca desen gösterir, kod ise sayılabilir bilgi verir.

İkinci sınır hacim. Üç gözlemcinin altı katılımcı için oturum başına on beşer not tuttuğunu varsayın: duvara asılacak 270 kağıt eder. Bunları önce tek tek okuyup gruplamaya kalkarsanız günün yarısı gider. Panoya asmadan önce her gözlemci kendi setindeki tekrarları birleştirsin, ekip 270 notla değil belki 90 ayrı gözlemle başlasın.

Oturum biter bitmez on dakika

Her oturumun hemen ardından kısa bir toplanma, gün sonuna bırakılan uzun değerlendirmeden daha çok iş görür. Herkes en fazla üç gözlem söyler, moderatör bunları panoya ya da dokümanın üst kısmına geçirir. Amaç analiz yapmak değil, hafıza hâlâ tazeyken notta eksik kalan bağlamı yakalamak: katılımcının ses tonu, ekrana bakış süresi, notta "denedi" diye geçen ama aslında iki farklı yol denemiş olması.

Hangisi ne zaman

Kaynaklarda sık geçen iki tavsiye birbirini kesiyor: "her ayrıntıyı kaydedin" ile "notlar kısa ve net olsun". Karar kriteri aslında tek soruya bakıyor. Analiz sırasında ham kayda geri dönebiliyor musunuz? Dönebiliyorsanız not kısa olsun, zaman damgası yeter, ayrıntı kayıtta zaten duruyor. Kayıt yoksa ya da izin alınmadıysa notun kendisi tek veri kaynağınızdır ve ayrıntılı yazmaktan başka yol yok.

Uzaktan yürüyen, görev süresi ve tamamlama oranı gibi ölçüler tuttuğunuz çalışmalarda kronolojik kayıt; aynı odada oturup birkaç saat içinde öncelik listesi çıkarmanız gereken çalışmalarda yapışkan notlar. Hibrit kurulum işe yarar ama sırayla: oturum boyunca kronolojik yazın, sonra öne çıkan bulguları panoya taşıyın. İkisini aynı anda yürütmek, yani hem tabloya yazıp hem kağıt yapıştırmak, gözlemciyi ekrandan koparmaktan başka bir şeye yaramıyor.